crawlee

一个网页抓取和搜索API，帮助AI代理和开发者轻松获取网页数据。

一个自适应的网页爬虫框架，能自动抓取单个网页或整个网站的数据，省时省力。

把网页内容自动抓取并整理成 AI 能直接用的格式，方便做数据分析和知识库。

一键爬取小红书、抖音、B站等平台的笔记、视频和评论，帮你快速收集社交媒体数据。

一个Python爬虫框架，帮你快速抓取网站数据，适合做批量采集和数据分析。