爬取页面时执行 Javascript

[molingyu]

确认 / Assignments

• [X] 搜索现有issues，不存在相似或相关的issue / No related requests

功能描述 / Features

很多网站防止爬虫，使得直接获取页面而不执行js会导致抓取不到数据。需要在请求页面后执行页面的JavaScript才能获取到相应的数据。

希望能给书源添加个功能，允许爬取后执行页面里的 JavaScript 在执行完毕后再抓取想要的数据

期望实现方式 / How to implement

技术上使用 Appium 来模拟网页执行js

附加信息 / Additions

No response

效果演示 / Demo

No response