乐于分享
好东西不私藏

不会爬虫?用AI做Chrome插件+影刀RPA,轻松批量抓取B站评论做数据分析

不会爬虫?用AI做Chrome插件+影刀RPA,轻松批量抓取B站评论做数据分析

希望和大家交朋友

关注我,一起成长~

逆向工程太难、爬虫反爬太烦——这篇文章告诉你一条更聪明的路。

源码获取联系我


前言:我为什么不用爬虫?

说实话,我是懂编程的人。

B站的评论接口有签名验证,参数里有 w_rid 和 wts 两个动态字段,每次请求都不一样。想用爬虫直接请求?先得搞清楚签名算法,翻混淆过的JS源码,一顿逆向下来,半天没了——还不一定搞得定。

所以我换了个思路:让浏览器自己去请求,我只负责把数据"顺手拿走"。

这就是今天要分享的方案:

Chrome插件(拦截数据)+ 影刀RPA(批量操作)+ AI(数据分析)

全程不需要研究任何反爬机制,小白也能跑通。


整体思路

B站视频页面
    ↓
Chrome插件(拦截评论API响应,导出CSV)
    ↓
影刀RPA(批量打开多个视频,自动触发导出)
    ↓
AI数据分析(词频统计、词云、用户在讨论什么)
    ↓
公众号文章选题 / 内容创作

每个环节都有工具支撑,不需要手写爬虫,不需要逆向签名算法。


第一步:用AI做一个Chrome插件

这是整个方案的核心。

很多人不知道,Chrome插件可以在浏览器内部拦截网页的网络请求。B站页面自己去请求评论数据,我们的插件在中间"顺手"把响应数据截下来存好——完全不需要自己构造请求,签名问题自然消失。

为什么不用油猴脚本?

油猴脚本可以实现同样的功能,但有几个问题:

  • 需要用户安装油猴扩展,门槛高
  • 不方便打包分发给别人用
  • 不能自定义插件名称和图标

打包成Chrome插件之后,发给任何人,解压加载就能用,更专业。

让AI帮你写插件代码

打开任意AI工具(Claude、ChatGPT等),直接描述你的需求:

帮我写一个Chrome插件,在B站视频页面拦截 /x/v2/reply 接口的响应数据,提取用户名、评论内容、点赞数、发布时间、层级(主评论/子评论),在页面右下角显示一个悬浮面板,支持导出CSV和JSON,CSV里要包含当前视频的网址。

AI会帮你生成完整的插件代码,主要包含三个文件:

  • manifest.json:插件配置文件
  • injector.js:把拦截脚本注入到页面真实环境
  • inject.js:真正的拦截和导出逻辑

这里有个关键细节: Chrome插件的content script和页面运行在隔离的JS环境里,直接在content script里拦截fetch是没用的。正确做法是通过 <script> 标签把代码注入到页面真实环境。这个坑AI会帮你避开,但你要知道背后的原理。

安装插件

  1. 解压插件文件夹,确认根目录有 manifest.json
  2. 打开 chrome://extensions
  3. 右上角开启开发者模式
  4. 点击加载已解压的扩展程序,选择文件夹

安装完成后,打开任意B站视频,右下角会出现悬浮面板。向下滚动到评论区,面板上的数字就会实时增加。


第二步:影刀RPA批量打开视频页面

单个视频手动操作没问题,但如果你有100个视频链接要分析呢?

这时候就需要影刀RPA来做批量操作。

影刀的作用

影刀可以模拟人工操作浏览器:自动打开网页、等待页面加载、滚动页面(触发评论加载)、点击按钮(触发CSV导出)。

基本流程设计

读取Excel中的视频链接列表
    ↓
循环:打开每个链接
    ↓
等待页面加载完成(3-5秒)
    ↓
滚动到评论区(触发评论数据加载)
    ↓
等待评论捕获完成(5-10秒)
    ↓
点击插件面板的"导出CSV"按钮
    ↓
下一个链接

滚动触发评论加载

B站的评论是懒加载的,必须滚动到评论区才会触发请求。在影刀里用"滚动页面"指令,滚动到页面底部,等待几秒即可。

如果想捕获更多评论(B站每次加载20条),可以多次滚动,让页面持续加载新的评论批次。


第三步:AI做数据分析

拿到CSV之后,就是数据分析环节。

方法一:直接让AI分析

把CSV内容粘贴给AI,提问:

这是一个B站视频的评论数据,帮我分析:

  1. 用户主要在讨论哪些话题?
  2. 高频出现的关键词有哪些?
  3. 用户的情感倾向是正面还是负面?
  4. 有哪些值得关注的高赞评论?

AI会直接给你一份分析报告,不需要写任何代码。

方法二:用Python做词频统计和词云

让AI帮你写一段Python脚本:

import pandas as pd
from collections import Counter
import jieba

# 读取评论数据
df = pd.read_csv('bili_comments.csv')
comments = df['评论内容'].dropna().tolist()

# 分词统计
all_words = []
for text in comments:
    words = jieba.cut(text)
    all_words.extend([w for w in words if len(w) > 1])

# 词频统计
word_freq = Counter(all_words).most_common(50)
print(word_freq)

高频词直接反映用户在讨论什么,是内容选题的最好参考。

方法三:在影刀里直接调用AI接口

影刀支持调用AI接口,可以在RPA流程里直接让AI分析每个视频的评论,自动生成分析报告,全程无需人工介入。


实际效果:能发现什么?

通过评论词频分析,你能快速判断:

  • 用户关注点:哪些词反复出现,说明这是用户最关心的
  • 情感倾向:正面词和负面词的比例
  • 潜在选题:高频出现的问题和讨论,就是你下一篇文章的方向
  • 竞品分析:看竞争对手视频的评论,了解用户对他们的评价

这套方案的优势

对比维度

传统爬虫

本方案

技术门槛

需要逆向签名算法

让AI写,零门槛

反爬风险

高,容易被封

无,走正常浏览器请求

维护成本

接口变动就挂

插件跟随浏览器自动适配

批量能力

需要自己写调度

影刀图形化配置

数据分析

需要写分析代码

直接丢给AI


总结

整套流程的核心思想只有一句话:

让浏览器帮你请求数据,你只负责收数据。

不需要研究反爬,不需要逆向签名,AI帮你写插件,影刀帮你批量跑,剩下的交给AI分析。

这套方案不只适合B站评论,只要是需要登录或者有复杂签名的网站,都可以用同样的思路来做。


有需求,找我就对!

  • 想加入影刀赚钱圈?联系我。

  • 影刀 RPA、AIPower、AIWeave 企业版,购买享优惠,推荐拿红包,找我。

  • 云服务器购买有优惠,各大云厂商企业级云服务,找我。

  • powerbi、excel、手机自动化程序、python 爬虫程序问题,找我解决。

  • 扣子、aipower 工作流搭建,找我。

  • 法律咨询、工伤仲裁、借钱不还找我对接律师

  • 股票 “万一免五” 开户,还能拿红包,找我。

  • 百亿补贴撸货做黄牛,找我。

  • 信用卡开户推荐拿红包,找我。

  • 保险咨询,我是专家,找我。

  • 相亲介绍、红娘业务找我

  • 企业内推、招聘,找我。

  • 企业级 RPA 培训,私聊我安排!

  • 帮忙发 boss 招聘,私聊我帮发。

  • 需要写需求,我帮联系人,找我。

  • 想帮人写需求,找我。

  • 有解决方案想出售分享,找我。

  • 可以赚钱不违法的都干、请叫我万事通

  • 顶级牛马打工人

扩展阅读

我的自我介绍:

 我是一个技术支持

| 我是一个RPA老师

我是一个被诈骗者也是一个反诈骗者

我是一个保险经纪人

我是一个什么都喜欢分享的人~~~所以我的文章很杂

RPA技术文章合集

影刀RPA扩展知识学习,我滴学习笔记!更多文章看这~~

扩展阅读

加我

我希望和更多

的小伙伴

一起

一起

交流

交流

学习

学习