开源神器feedgrab:我用它一键抓7大平台内容,职场笔记+AI副业直接起飞!
最近在GitHub上刷到一个宝藏项目,名字叫feedgrab,看完README我就直接star了158星(现在还在涨),因为它太对味了:
给它一个URL(公众号文章、小红书笔记、YouTube视频、B站、RSS……随便扔),它就自动抓取、转录、结构化,输出干净的Markdown文件,直接丢进Obsidian就行!
我试了几天,感觉这不是工具,这是**AI时代的内容“吸尘器”**。
职场人用来做行业研究、整理竞品分析;副业党用来做工具、知识付费、短视频脚本……效率直接拉满。
今天就把这个万能内容抓取器彻底拆给你看。
看完你大概率会和我一样:立刻去使用。
(AI职场&副业玩家,建议收藏+转发,这波操作能省你每周好几个小时手动复制粘贴)

一、feedgrab到底是什么?一句话说清
Universal content grabber —— 通用内容抓取器。
核心逻辑只有三步:
-
自动识别平台 -
智能抓取(文本用Jina Reader,视频用InnerTube API+yt-dlp,音频Whisper转录) -
输出标准化Markdown(带YAML front matter:标题、作者、点赞、日期……)
不再是“手动保存网页→截图→复制→整理”,而是一条命令搞定。

二、它到底有多强?8大杀手级功能(我实测过)
我直接挑最实用的给你看:
- 公众号&小红书批量抓取
feedgrab <https://mp.weixin.qq.com/s/xxx> → 一篇微信文章秒变MD- 支持按公众号ID批量抓历史文章、按专辑抓、按搜狗搜索抓
- 小红书:
feedgrab xhs-so "AI Agent" --sort popular直接出热门笔记表格,还能自动保存单篇MD
- X/Twitter深度抓取(六层降级策略)
-
支持抓单推文、用户全部推文、书签、列表、搜索( feedgrab x-so "Claude Code") -
带点赞、转发、回复数据,自动去重,超800条还能智能补浏览器抓取 - YouTube/B站视频转录神器
feedgrab ytb-dla [视频链接]
下载音频+Whisper转录(接Groq API,免费额度够用) -
输出带章节的MD,视频内容直接变成可搜索的文字笔记 - RSS/Telegram/飞书/GitHub全支持
-
飞书Wiki递归抓取,企业内部文档一键归档 -
GitHub仓库README自动优先抓中文版 - Obsidian完美适配设置环境变量
OBSIDIAN_VAULT后,输出自动进你的知识库文件夹,按平台分目录,零操作。 - 批量+搜索+合并支持多关键词搜索合并成一张汇总表(MD+CSV),做竞品分析、趋势追踪太香了。
- 三种使用方式,随你挑
-
CLI命令行(最简单) -
Python库(写脚本自动化) -
MCP服务器 + Claude Code技能(直接让AI调用抓内容) - 媒体自动下载图片、视频、字幕一键保存(环境变量一开就行)。

三、0基础安装&上手教程(5分钟搞定)
- 安装:
pip install "feedgrab[stealth] @ git+https://github.com/iBigQiang/feedgrab.git"
patchright install chromium - 一键配置:
feedgrab setup→ 它会引导你设置UA、登录小红书/微信/Twitter等。 - 必备环境变量(如果用不到可以不配置):
GROQ_API_KEY
(Whisper转录,免费申请) X_DOWNLOAD_MEDIA=true
(下载媒体)
完整教程我已经帮你整理成「feedgrab新手5分钟上手卡」,评论区回复“feedgrab”即可领取。
四、真实场景:职场&副业怎么用它赚钱/提效?
职场党:
-
一键抓竞品公众号+小红书笔记 → 自动生成“行业周报” -
抓YouTube教程转录 → Prompt工程学习笔记,效率提升3倍
AI副业党:
-
做saas平台:抓X热搜+小红书爆款 → 整理成每周精选,轻松变现 -
短视频/视频号:抓B站/YouTube热门 → 提取脚本灵感+转录素材 -
卖课程/知识星球:飞书文档+GitHub项目批量归档 → 打包成付费资源包
我自己用它抓了三天AI Agent相关内容,已经整理出47篇结构化笔记,以前手动做要一周,现在3小时搞定。

五、最后想说
feedgrab不是简单的爬虫,它是AI时代的内容基础设施。
在这个信息爆炸的时代,谁能更快地把碎片内容变成自己的知识资产,谁就赢了。
而feedgrab,恰恰给了我们普通职场人和副业玩家这个超级武器。
如果想获取更多AI玩法,可以加入社群后我拉你进群直接学习。
![]() |
![]() |
说一下共学信息群
我建了一个AI共学信息群,助力大家能快速上手AI工具,群内有各种最新的AI玩法教程和前沿信息,Coze工作流空间,自研的各种助力插件免费使用。加入共学群的朋友还可同步被拉入Coze团队空间,获取我过去分享过的各类工作流文件,从初级到高级一应俱全,帮助你更快掌握使用技巧,想了解共学群的友友可以扫码添加上面微信进行详细了解。
夜雨聆风

