learn_python3_spider

learn_python3_spider copied to clipboard

**获取到搜索的input框后需要先.click()然后再.send_keys()**

2

**获取到搜索的input框后需要先.click()然后再.send_keys()** `def search(): try: print('start visit bilibili...') browser.get('https://www.bilibili.com/') search_input = WAIT.until(EC.element_to_be_clickable((By.CSS_SELECTOR, "#nav-searchform > div.nav-search-content > input"))) search_input.click() search_input.send_keys('蔡徐坤篮球') search_submit = WAIT.until(EC.element_to_be_clickable((By.XPATH, '//*[@id="nav-searchform"]/div[2]'))) search_submit.click() print('jump to new window') all_h = browser.window_handles...

Ju0724

爬取bibi的已更新，代码不能使用，请问怎么破解bibi的搜索框，::before

4

AdvancingStone

爬取 20w 表情包

1

无法爬取所有页面的表情包，下载几百个表情包后程序停止。代码用的是博主的源代码，爬取的页码为1-200页。已加请求头

RosieXie

taotaol

本来文章看的好好的，有几个网站打开了下，大家懂的，不过从安全和知名度角度考虑，建议博主还是别在公开场合开车的好

jackli12

写教程就正经点写 没人想看你那些乱七八糟的什么表情包什么的

15

写教程就是把关键的知识点写好 满屏幕都是花里胡哨的东西 果断关了

Zzzz-zz

进程池运行爬取当当网排名前500书出现乱码

2

txt文件中只要是中文的全是乱码，这是个啥情况？

fengyan-cn

第二个爬虫程序报错

7

错误为： Traceback (most recent call last): File "D:/coding/Python/PyCharm/test1/test2.py", line 127, in main(i) File "D:/coding/Python/PyCharm/test1/test2.py", line 119, in main soup = BeautifulSoup(html, 'lxml') File "C:\Programs\Python\Python38-32\lib\site-packages\bs4\__init__.py", line 287, in __init__ elif len(markup)

lovevantt

爬虫14 ThreadPoolExecutor 使用有点错误 `pool.submit(moyu_time('xiaoshuaib'+str(i),1,3))` 应该是 `pool.submit(moyu_time,'xiaoshuaib'+str(i),1,3)` 否则根本就不是多线程了

sidneycao

一直得到418

1

你好， 我根据你的代码， 可以使用request.get. response.status_code == 418, 这怎样修改？ 求教

jackcoolpython