WhimRead 需要 JavaScript 才能使用站内搜索。
Whim
Read
随手一翻
发现
全部工具
推荐
惊喜
关于
搜索
English
Agent 基础设施
freetoken
flashml-org/freetoken
面
向
消费
级
硬件
的
边缘
MoE
推理
引擎,
可
在
游戏
电脑
本地
高速
运行
290B级
开源
MoE
大模型
并
提供
兼容API
服务。
去 GitHub 看仓库
复制链接
标签
deepseek-v4
edge
glm
inference
minimax
moe
qwen
transformer
同类项目
whisper.cpp
54.4k
Whisper
模型
的
纯C
/C++
高性
能
推理
实现,
无
依赖
跨
平台,
支持量化
与
多
硬件
加速
及
多
语言
绑定。
sglang
37.1k
面
向
大语言
与
多
模态
模型
的
高性
能
推理
服务
与
部署
框架
系统。
nano-vllm
15.8k
从
零实现
的
轻量
vLLM
推理
引擎,
代码
精简
可读,
推理
速度
可
比肩
原版vLLM。
server
11.1k
英伟
达
开源
的
AI
模型
推理
服务
软件,
支持
多
框
架
模型
的
高性
能
云边
部署。
wechat-bot
2.5k
基于
英伟
达免费模型
为
Claude Code
提供
兼容
代理
的
可
执行
工
具集,
一
键
切换
Kimi、
GLM
等
模型
后端。
faster-whisper
25.9k
基于
CTranslate2
的
Whisper语
音
转写
推理
库,
更
快
更
省
内存,
支持量化
与
词级
时间
戳。
14489
deepseek-v4,edge,glm
面向消费级硬件的边缘MoE推理引擎,可在游戏电脑本地高速运行290B级开源MoE大模型并提供兼容API服务。
←
上一个
carla
下一个
→
litestream