Selenium

本质上是一个前端自动化测试工具，但是越来越多被用到爬虫行业。
其实一开始就用Selenium/Puppeteer去做爬虫不是好的选择，大部分的工作用scrapy就可以完成，除非遇到一下前端加密的网站