WhimRead 需要 JavaScript 才能使用站内搜索。
Whim
Read
随手一翻
发现
全部工具
推荐
惊喜
关于
搜索
English
库 / 框架
spider
spider-rs/spider
Rust
编写
的
高并
发网页
爬
虫
引擎,
支持
流式
抓取
无头
渲染
与
分布式,
可
为
RAG
输送
网页
数
据
去 GitHub 看仓库
复制链接
标签
crawler
rust
spider
headless-chrome
scraping
automation
ai-agent
web-crawler
同类项目
crawlee
26.3k
Node.
js
网页
抓取
与
浏览器
自动化库,
支持
HTTP
与
无头
浏览器
爬取
并
提供
代理
与
存储
能力。
crawlee-python
9.6k
Python
网页
抓取
与
浏览器
自动化库,
统
一
HTTP
与
无头
浏览器
抓取,
支持
代理
轮换
与
可靠
数
据持久化。
firecrawl
196.4k
为
AI智
能
体
提供
网页
搜索、
抓取
与
爬取
的
开发者
API
服务,
输出
LLM
友好
的
结构
化数
据
供集成
调用。
Scrapegraph-ai
32.2k
基于
大模型
的
Python
网页
抓取库,
只需
提示
词即
可
抽取
网页
数据,
支持
多
流
水线
与
本
地
模型。
puppeteer
95.8k
用
JavaScript
高层API
控制
无头
Chrome/Firefox
的
浏览器
自动化
开发库。
Scrapling
89k
自适应
现代
网页
的
Python
抓取
框架,
支持
隐身
抓取、
并
发爬
虫
与
代理
轮换,
供开发者
写代码
进行
数
据
采集。
2792
crawler,rust,spider
Rust编写的高并发网页爬虫引擎,支持流式抓取无头渲染与分布式,可为RAG输送网页数据
←
上一个
giu
下一个
→
nodezator