Products
GG网络技术分享 2025-03-18 16:05 1
通过百度搜索指令 关键词+空格+inurl:baijiahao.baidu.com 来找到想要采集的网址,然后再将网址导入到火车头进行采集。
进入百家号页面按f12,点击 文章 分类,浏览器自动会抓 到 他百家号的json 的包,
如下图network项目下找到类似webspage?tab=article&number=10....
复制General-Request URL的结果到地址栏,然后就会出来每篇文章的 id,类似于
https://baijiahao.baidu.com/s?id=169********151"
直接放进火车头里面,就可以采集出来他的标题和内容了,内容页直接采集就可以了,没有任何禁止。可以用Xpath规则。
若要采集百家号作者所有文章,还需要一些设置。Demand feedback