scrapy-selenium-proxyPools-bilibili

• 根据关联词列表爬取视频列表输出json文件

前提

1. 配置好搜索那些关键词 keyWords=[]
2. 配置好chromedriver

执行

1. pip install -r requirements.txt
2. scrapy crawl b --nolog

输出结果

1. 输出json 文件

支持

• scrapy
• selenium
• chromedriver
• proxy-pools

代理池ip 网址

豌豆ip | 快代理

图片