Spider

Spider

Rust编写的低延迟网页数据采集

网络官网

应用介绍

要抓取大量网页做数据或喂给 AI,Python 爬虫速度和并发都不够看。Spider 是一个用 Rust 编写的低延迟网页数据采集引擎。

它支持高并发抓取、无头 Chrome 渲染、定时任务和数据流式输出,也能给 AI 代理提供网页数据。

软件功能



高并发:Rust 性能。

无头 Chrome:动态页面。

流式输出:边抓边用。

AI 友好:代理数据源。

应用截图

标签:爬虫Rust