#Agent 抓取

共 10 篇文章

围绕 #Agent 抓取汇总相关文章，适合连续阅读同一主题下的实践与思考。

snscrape 停在 2023 年，twscrape 用一个 SQLite 账号池接住了 X 的爬取

拆解 twscrape 的账号轮换引擎、SQLite 原子锁、x-client-transaction-id 签名逆向，看它怎么在 X 不断加固反爬的两年里保持能用

#Github 解读 #Agent 抓取

发布于 2026年07月24日 11:12
wigolo 给 AI Agent 的不是搜索结果，是 byte 级证据链

一个 1667 star 的本地优先 MCP server，把 18 个公开搜索引擎揉成给 Agent 用的 web 接口，每条结果都带 byte 偏移、打分拆解、失败标签

#Github 解读 #Agent 抓取

发布于 2026年07月20日 00:36
你的爬虫扛不住 JS 渲染，Firecrawl 用 5 个引擎接力跑完了一个 URL

拆解 Firecrawl 的多引擎抓取架构，从 fire-engine 到 Rust 原生模块，看 15 万 Star 的爬虫平台怎么把一个 URL 抓稳

#Agent 抓取 #Github 解读

发布于 2026年07月12日 19:13
当 AI 打开浏览器:一次 LinkedIn 抓取背后的 8 层协议栈

一句「读下 Docker 的 LinkedIn 动态」背后，从 AI 模型到 Blink 渲染，穿越了 8 层协议栈。逐层拆开，看 AI 怎么长出浏览器手脚。

#Agent 抓取 #Claude

发布于 2026年07月10日 00:01
68K Star，一个爬虫框架凭什么统一了 HTTP、浏览器和 AI Agent

拆解 Scrapling 的技术架构，看它如何用一个统一的会话管理层，把 HTTP 请求、无头浏览器和 AI MCP 工具整合到一个框架里，以及它作为单人维护项目的真实风险。

#Agent 抓取 #Github 解读

发布于 2026年07月08日 00:47
Camoufox：把指纹伪装做到 C++ 层，这个反检测浏览器想给 AI Agent 一张「真脸」

拆解 daijro/camoufox，一个 Firefox fork 反检测浏览器。从 C++ 层拦截、Juggler 沙箱到 BrowserForge 市场份额指纹，看它如何避开 JS 注入的老路

#Agent 抓取 #Github 解读

发布于 2026年06月24日 23:42
Codex 控制电脑的三种方式：Computer Use、Chrome 扩展、内置浏览器

拆解 Codex 操控电脑的三种界面——Computer Use、Chrome 扩展、内置浏览器，讲清各自的安装触发、适用场景与信任边界，帮你让 Codex 自动选对工具。

#OpenAI #Agent 抓取

发布于 2026年06月20日 10:39
为什么 AI Agent 都绕不开 Puppeteer

从 Chrome DevTools Protocol 到 Browser Agent，拆解 Puppeteer 的架构设计与工程实践，看它如何从一个测试工具，演变成 AI Agent 时代的事实基础设施。

#Agent 抓取

发布于 2026年06月13日 16:11
Last30Days 开源解读：把社交信号变成 AI 搜索引擎

从 mvanhorn/last30days-skill 出发，拆解它如何用预解析、查询规划、多源抓取、聚类合并和信源治理，把 Reddit、X、YouTube、GitHub 与 Polymarket 上的实时讨论，变成一份可复用的研究工作流。

#Skills #Agent 抓取 #Github 解读

发布于 2026年06月07日 18:00
Firecrawl 深度调研：开源爬虫为什么开始长成 AI 数据入口

拆解 Firecrawl 的产品定位、技术能力与商业化张力，对比 MediaCrawler 和 CloakBrowser

#Agent 抓取 #DevOps

发布于 2026年05月19日 00:41