你好啊,这里是智井。
最近被让OpenClaw跨过权限这事儿搞得头疼,走到哪里都说没有权限,提取不到文章内容。

那我要你有何用?不如今晚给自己加一盘爆炒香辣小龙虾。
不过今天也是走运,摸到了一个能看各种文章类网页的开源小插件,叫 web-content-fetcher。
试用了一下效果很不错,还能直接整理成markdown格式的文件,我挂着ima,直接点一下就能看到内容。

不要API,还全免费能用。
那么今天分享两个点,一个是这东西为啥好用,另一个是如何给小龙虾装上。
它牛在哪里
这个Skill的聪明之处,在于它改变了干活的顺序:先想尽办法把网页正文原原本本地抠出来,让你手里先拿到一份能看能查的底稿,再去让AI做总结和提炼。
它干活的方式就像个接力赛,里面串了三种提取工具,主打一个“这条路走不通就马上换”。
第一棒是 Jina Reader。
这工具能吐出很干净的排版文档,但遇到微信公众号这种防备心很强的平台,它就容易罢工。
这时候第二棒 Scrapling + html2text 就顶上了。
这组工具干活比较硬核,专门对付那些结构复杂或者有反爬机制的页面。
作者还专门给公众号做了适配,连图片懒加载这种坑都考虑到了,这对咱们常看公众号的人来说绝对是刚需。
要是连第二棒也折了,最后还有个 web_fetch 出来兜底。
哪怕硬拽回来点带有杂质的原始代码,也比两手空空强。
如何安装
第一步:下载压缩包
地址:github.com/shirenchuang/web-content-fetcher
点绿色的【code】按钮,然后点击【Download zip】,把压缩包下载下来

第二步:放到云服务器里
因为我用的是云服务器,那就把这个文件扔到我的skill目录里。
单独给他放一个文件里,我的地址是这个👇
~/.openclaw/workspace/skills/web-content-fetcher/
如果这里看不明白,去之前的文章里补课,就把文件传上去让小龙虾看到就行了,成品就像这样👇

第三步:
剩下的工作就让龙虾帮你搞定,让它帮你执行👇
**目标:**稳定提取网页正文(优先 Jina → 失败/公众号切 Scrapling → 最后 web_fetch 兜底),输出干净 Markdown。1) 确认 skill 目录存在路径必须是:~/.openclaw/workspace/skills/web-content-fetcher/目录里应包含:SKILL.md、requirements.txt、scripts/2) 安装 Python 依赖(推荐 venv,最稳)cd ~/.openclaw/workspace/skills/web-content-fetcherpython3 -m venv .venvsource .venv/bin/activatepip install -U pippip install -r requirements.txtpip install curl_cffi playwright browserforgepython -m playwright install chromium如果你坚持 Windows/系统 Python 直装,再用:pip install scrapling html2text curl_cffi playwright browserforge --break-system-packages但云服务器我不推荐这么写。3) 重启 OpenClawopenclaw gateway restart4) 回归测试(必须做)• 公众号(Scrapling):cd ~/.openclaw/workspace/skills/web-content-fetchersource .venv/bin/activatepython3 scripts/fetch.py "<mp.weixin.qq.com链接>" 30000 | head -n 40• 普通网页(Jina / web_fetch 逻辑在 Skill 内自动调度,直接在对话里丢链接测试即可)5) 结论输出稳定通过/可能失败平台 + 推荐触发词。这个流程里包含了最后的测试环节,它最后帮你做个测试,如果成功了就会给你内容。
如果失败了,让它自己去给修上就得了,整个操作没有多么难,交给龙虾就行了。
写在最后
最近圈子里关于“小龙虾”的讨论,真是冰火两重天。
一边是各种受限、卡脖子的消息满天飞,另一边是私下里早就玩得飞起。
连身边平时完全不看AI的朋友,都来问我。
啥是小龙虾啊?
说实话,我自己都觉得挺魔幻的。
放以前,你要让我搞什么网页抓取、做总结,或者写个什么代码,绝对两眼一抹黑。
但现在,一行代码都不用敲,也能天天美滋滋地盘它。
别再说龙虾不好用了,这装上Skill的龙虾简直就是AI界龙傲天。
拥有一个自己的数码宝贝指日可待。
今天就酱八,明天继续聊AI。
欢迎点赞、评论、转发,一键关注点亮星标,每天学点 AI 小技巧👇
我建了个AI的交流裙,欢迎一起来交流学习。
关于我
这里是智井,一名普通90后主副业双修职场女性。
目前专注研究AI+降本增效方案。
往期精选
AI工具
OpenClaw最全指南:4步搞定24小时干活的AI员工(保姆级教程)
AI副业
AI算命春节爆火!实测用DeepSeek算2025年运势(内含教程)
情绪价值副业太香!AI唤醒老照片,4天暴涨粉4k+,含保姆级教程
夜雨聆风