github2611

Results 6 comments of github2611

都出现这问题啦?

> > 都出现这个问题啦? > > 如果还没有解决,建议重启路由器,我重启网关路由器,目前恢复了 我重启完路由器,还是会出现status_code=429

> > > > 都出现这个问题啦? > > > > > > > > > 如果还没有解决,建议重启路由器,我重启网关路由器,目前恢复了 > > > > > > 我重启完路由器,还是会出现status_code=429 > > 我试了几次,发现是偶发的,我是懒得折腾,重试几遍就能下全,实在不行还有重新更新COOKIE这个方法 今天又可以正常下载了,应该是短时间内下载过多才会出现

> 这个问题,我用抖音网页版也出现过,是抖音后台做的api频率限制,碰到429重发请求即可 ![Snipaste_2024-01-10_21-44-29](https://private-user-images.githubusercontent.com/23693606/295585904-49f91a91-d0ae-46f6-a72b-8841a70dece1.png?jwt=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJnaXRodWIuY29tIiwiYXVkIjoicmF3LmdpdGh1YnVzZXJjb250ZW50LmNvbSIsImtleSI6ImtleTUiLCJleHAiOjE3MDQ5MTA0OTksIm5iZiI6MTcwNDkxMDE5OSwicGF0aCI6Ii8yMzY5MzYwNi8yOTU1ODU5MDQtNDlmOTFhOTEtZDBhZS00NmY2LWE3MmItODg0MWE3MGRlY2UxLnBuZz9YLUFtei1BbGdvcml0aG09QVdTNC1ITUFDLVNIQTI1NiZYLUFtei1DcmVkZW50aWFsPUFLSUFWQ09EWUxTQTUzUFFLNFpBJTJGMjAyNDAxMTAlMkZ1cy1lYXN0LTElMkZzMyUyRmF3czRfcmVxdWVzdCZYLUFtei1EYXRlPTIwMjQwMTEwVDE4MDk1OVomWC1BbXotRXhwaXJlcz0zMDAmWC1BbXotU2lnbmF0dXJlPTBkM2E1MzMzNGUxMDljNTJjNTY5MWQ4NDM0ZDE3YzI0NWMyODY0OTQxMGZkYTM4NWI1YjgzYjc4NTQ1NTQwZGYmWC1BbXotU2lnbmVkSGVhZGVycz1ob3N0JmFjdG9yX2lkPTAma2V5X2lkPTAmcmVwb19pZD0wIn0.iarEcKkMId9uUvGtiwTaBtJ6UEtN_9rzg0ZJcFwoJyg) 单纯重试总会出现429,有什么办法可以降低抓取速率减少429的出现呢?

> > 应该是爬页面爬的太快了,但是改参数应该不行,要在源码限制速度吧 > > 经过我简陋的测试,改速度只是一种偏向自我安慰的方法,只是单纯的放慢了下载速度,让人感觉上以为是降低了429出现的频率,但实际上该出还是出,比如上面几楼让改链接次数和同时进行任务数的参数,改了视觉上确实感觉出429慢了,但那其实是把过去一瞬间下完的进程给拉长了的错觉,只要有抓取这个动作,无论间隔多长,都可能触发429。所以我觉得这个429就是限制次数,和间隔时间,抓取快慢关系不大 也就是说无解了?