feapder

feapder copied to clipboard

selenimu 可以支持 有账号密码的代理吗

1

selenimu 可以支持 有账号密码的代理吗

rottengeek

浏览器渲染时能否不打开新页面，而是指定某个浏览器已经打开存在的页面？

lixiao888

**需知** 升级feapder，保证feapder是最新版，若BUG仍然存在，则详细描述问题 > pip install --upgrade feapder **问题** 无意中看到了 redisdb 中的 `getkeys`,`current_status` 方法使用了 `keys` 命令, 这会导致整个redis 被锁住, 影响线上的正常流程. 请使用 SCAN 方法. 参考 [KEYS](https://redis.io/commands/keys/), [SCAN](https://redis.io/commands/scan/) **截图**   **代码** ```python ```

lusi1990

怎么将数据存入csv？可不可以给个demo

2

**Is your feature request related to a problem? Please describe.** A clear and concise description of what the problem is. Ex. I'm always frustrated when [...] **Describe the solution you'd...

Shall-Ven

Request 去重后一直重试, 并且提示加入队列成功,但是其实并没有加入队列

2

**需知** 升级feapder，保证feapder是最新版，若BUG仍然存在，则详细描述问题 > pip install --upgrade feapder **问题** feapder 版本: 1.8.5 添加队列进程的日志如下 ``` 2023-03-23 10:26:49.636 | INFO | feapder.core.spiders.task_spider:get_task:line:234 | 无待做任务，尝试取丢失的任务 2023-03-23 10:26:49.658 | DEBUG | feapder.buffer.request_buffer:is_exist_request:line:46 | request已存在 url...

hijack911

**需知** 当前最新版本为1.8.5,更新至此版本后出错 **问题** 抛出 'str' object has no attribute 'decode **截图** **代码** import feapder class Spider(feapder.AirSpider): __custom_setting__ = dict( LOG_LEVEL='DEBUG' ) def start_requests(self): yield feapder.Request('https://www.gaokao.cn/school/2055', render=True) def parse(self, request, response):...

qazasdsdqaza

**需知** 升级feapder，保证feapder是最新版，若BUG仍然存在，则详细描述问题 > pip install --upgrade feapder **问题** TaskSpider的start_monitor_task(添加任务)函数生成了很多日志内容，start(开始爬虫)函数生成的日志会被覆盖。 **截图**  **代码** ```python ```

yyooovooo

**Is your feature request related to a problem? Please describe.** **Describe the solution you'd like** 不从spider启动，而是只用一部分库时，没法关掉日志

0xxfu

**需知** 版本：^1.8.5 **问题** **截图**

0xxfu

浏览器渲染-Playwright - feapder官方文档|feapder-document

1

https://boris.org.cn/feapder/#/source_code/%E6%B5%8F%E8%A7%88%E5%99%A8%E6%B8%B2%E6%9F%93-Playwright feapder官方文档

Boris-code