越来越多的网页经过异步加载或者加密处理，无法使用scrapy 直接抓取，需要模拟浏览器的渲染、JS引擎甚至鼠标键盘事件来进行，这就需要强大的selenium了。