利用node爬虫时发现YouTube里面加载更多的内容没有爬取下来,有人用phantom爬取,大家有没有好一点儿的教程
为什么不直接请求接口
刚才那张是移动端的,截了张pc端的接口 前一个接口会把后一个接口的参数返回,第一次的参数从html中加载更多按钮中提取就好了
@without-yy,谢谢,这个可以实现。但是爬的比较多的话我需要一个一个的找接口,我是想爬很多频道,看能不能利用phantomjs
CNode 社区为国内最专业的 Node.js 开源技术社区,致力于 Node.js 的技术研究。
为什么不直接请求接口
刚才那张是移动端的,截了张pc端的接口 前一个接口会把后一个接口的参数返回,第一次的参数从html中加载更多按钮中提取就好了

@without-yy,谢谢,这个可以实现。但是爬的比较多的话我需要一个一个的找接口,我是想爬很多频道,看能不能利用phantomjs