乐于分享
好东西不私藏

开源神器feedgrab:我用它一键抓7大平台内容,职场笔记+AI副业直接起飞!

开源神器feedgrab:我用它一键抓7大平台内容,职场笔记+AI副业直接起飞!

最近在GitHub上刷到一个宝藏项目,名字叫feedgrab,看完README我就直接star了158星(现在还在涨),因为它太对味了:

给它一个URL(公众号文章、小红书笔记、YouTube视频、B站、RSS……随便扔),它就自动抓取、转录、结构化,输出干净的Markdown文件,直接丢进Obsidian就行!

我试了几天,感觉这不是工具,这是**AI时代的内容“吸尘器”**。

职场人用来做行业研究、整理竞品分析;副业党用来做工具、知识付费、短视频脚本……效率直接拉满。

今天就把这个万能内容抓取器彻底拆给你看。

看完你大概率会和我一样:立刻去使用

(AI职场&副业玩家,建议收藏+转发,这波操作能省你每周好几个小时手动复制粘贴)

一、feedgrab到底是什么?一句话说清

Universal content grabber —— 通用内容抓取器。

核心逻辑只有三步:

  1. 自动识别平台
  2. 智能抓取(文本用Jina Reader,视频用InnerTube API+yt-dlp,音频Whisper转录)
  3. 输出标准化Markdown(带YAML front matter:标题、作者、点赞、日期……)

不再是“手动保存网页→截图→复制→整理”,而是一条命令搞定

二、它到底有多强?8大杀手级功能(我实测过)

我直接挑最实用的给你看:

  1. 公众号&小红书批量抓取
    • feedgrab <https://mp.weixin.qq.com/s/xxx> → 一篇微信文章秒变MD
    • 支持按公众号ID批量抓历史文章、按专辑抓、按搜狗搜索抓
    • 小红书:feedgrab xhs-so "AI Agent" --sort popular 直接出热门笔记表格,还能自动保存单篇MD
  2. X/Twitter深度抓取(六层降级策略)
    • 支持抓单推文、用户全部推文、书签、列表、搜索(feedgrab x-so "Claude Code"
    • 带点赞、转发、回复数据,自动去重,超800条还能智能补浏览器抓取
  3. YouTube/B站视频转录神器
    • feedgrab ytb-dla [视频链接]
       下载音频+Whisper转录(接Groq API,免费额度够用)
    • 输出带章节的MD,视频内容直接变成可搜索的文字笔记
  4. RSS/Telegram/飞书/GitHub全支持
    • 飞书Wiki递归抓取,企业内部文档一键归档
    • GitHub仓库README自动优先抓中文版
  5. Obsidian完美适配设置环境变量OBSIDIAN_VAULT后,输出自动进你的知识库文件夹,按平台分目录,零操作。
  6. 批量+搜索+合并支持多关键词搜索合并成一张汇总表(MD+CSV),做竞品分析、趋势追踪太香了。
  7. 三种使用方式,随你挑
    • CLI命令行(最简单)
    • Python库(写脚本自动化)
    • MCP服务器 + Claude Code技能(直接让AI调用抓内容)
  8. 媒体自动下载图片、视频、字幕一键保存(环境变量一开就行)。

三、0基础安装&上手教程(5分钟搞定)

  1. 安装:
    pip install "feedgrab[stealth] @ git+https://github.com/iBigQiang/feedgrab.git"
    patchright install chromium
  2. 一键配置:feedgrab setup → 它会引导你设置UA、登录小红书/微信/Twitter等。
  3. 必备环境变量(如果用不到可以不配置):
    • GROQ_API_KEY
      (Whisper转录,免费申请)
    • X_DOWNLOAD_MEDIA=true
      (下载媒体)

完整教程我已经帮你整理成「feedgrab新手5分钟上手卡」,评论区回复“feedgrab”即可领取。

四、真实场景:职场&副业怎么用它赚钱/提效?

职场党:

  • 一键抓竞品公众号+小红书笔记 → 自动生成“行业周报”
  • 抓YouTube教程转录 → Prompt工程学习笔记,效率提升3倍

AI副业党:

  • 做saas平台:抓X热搜+小红书爆款 → 整理成每周精选,轻松变现
  • 短视频/视频号:抓B站/YouTube热门 → 提取脚本灵感+转录素材
  • 卖课程/知识星球:飞书文档+GitHub项目批量归档 → 打包成付费资源包

我自己用它抓了三天AI Agent相关内容,已经整理出47篇结构化笔记,以前手动做要一周,现在3小时搞定。

五、最后想说

feedgrab不是简单的爬虫,它是AI时代的内容基础设施

在这个信息爆炸的时代,谁能更快地把碎片内容变成自己的知识资产,谁就赢了。

而feedgrab,恰恰给了我们普通职场人和副业玩家这个超级武器。

如果想获取更多AI玩法,可以加入社群后我拉你进群直接学习。

说一下共学信息群

我建了一个AI共学信息群,助力大家能快速上手AI工具,群内有各种最新的AI玩法教程和前沿信息,Coze工作流空间,自研的各种助力插件免费使用。加入共学群的朋友还可同步被拉入Coze团队空间,获取我过去分享过的各类工作流文件,从初级到高级一应俱全,帮助你更快掌握使用技巧,想了解共学群的友友可以扫码添加上面微信进行详细了解。