WhimRead 需要 JavaScript 才能使用站内搜索。
Whim
Read
随手一翻
发现
全部工具
推荐
惊喜
关于
搜索
English
库 / 框架
gigatoken
marcelroed/gigatoken
超
高速
语言模型
分词库,
兼容
主流
分词器,
号称
达
GB
每
秒
吞吐。
去 GitHub 看仓库
复制链接
标签
llm
nlp
tokenization
tokenizer
同类项目
toon
25.6k
为
LLM
提示
词
设计
的
紧凑序列化
格式,
附TS SDK
与
CLI,
可
无
损转换JSON
并
节省
token。
Chinese-LLaMA-Alpaca
18.9k
面
向
中文场
景
的
LLaMA
与
Alpaca系列
开源
大模型,
发布
LoRA权
重并
提供
词
表
扩充、
预训
练微调
与
本
地量化
部
署
教程。
nano-vllm
16.2k
从
零实现
的
轻量
vLLM
推理
引擎,
代码
精简
可读,
推理
速度
可
比肩
原版vLLM。
txtai
13k
一
站式
AI
开发
框架,
整合
向量
检索、
RAG
流程
与
智
能
体
编排,
供开发者
构建搜索问答
应用
的
库。
Chinese-LLaMA-Alpaca-2
7.1k
基于
Llama-2
扩展
中文词
表
并
增量
预训练
的
开源
中文
基座
与
指令
大模型
权重系列。
jackrong-llm-finetuning-guide
1.7k
面向
初学者
的
LLM微调
教育
知识库,
整理
SFT
强化
学习、
数据
蒸馏、
量化
部
署
教程
与
数据
集目录。
4119
llm,nlp,tokenization
超高速语言模型分词库,兼容主流分词器,号称达GB每秒吞吐。
←
上一个
stringer
下一个
→
rizin