嫌爬虫服务收16刀，一哥们气得自己写了个开源的，结果在 GitHub 拿了8万多颗星。 项目叫 Crawl4AI，干的事很直接：把网页抓下来，去掉杂乱内容，… · @taozi0929 · TwKit

@taozi0929

嫌爬虫服务收16刀，一哥们气得自己写了个开源的，结果在 GitHub 拿了8万多颗星。 项目叫 Crawl4AI，干的事很直接：把网页抓下来，去掉杂乱内容，整理成干净的 Markdown，直接喂给大模型。 自己部署，不用注册服务账号，不用申请它的 API Key，也不用按抓取页数交钱。机器和网络自己出，软件免费。 我反手试了一下，速度确实挺猛。平时拿来扒文章、整理资料、给 AI 准备素材，够我折腾了。 以前碰到这类工具，第一反应是看看月费多少。现在会先去 GitHub 翻一圈，很多需求，开源项目早就能解决了。 付费买省事当然可以，但至少先看看，这笔钱有没有必要花。 链接收藏好，下次要用直接翻： https://github.com/unclecode/crawl4ai

曝光 230 · 评论 13 · 点赞 10 · 书签 1