线程问题&未配置爬虫模式下的内存占用过大

[maybe-why-not]

线程问题：配置文件是#Custom all request limit,default 30 coroutines conf.request_limit = 5 python3 dirmap.py -iF urls.txt -lcf，urls.txt里面只有一个链接，80秒就显示扫了6000个是什么鬼，|6000 Elapsed Time 0:01:20 错过截图时间，除一下87563/24/60=59.57

未配置爬虫模式下的内存占用过大：配置配置100个target*5个payload之后，出现了占用内存到达4G+的情况，表哥这是什么原因啊？我平时写多线程也有这个问题，有时候是反向dos（一个返回包3G+），但有时候分析不出什么原因。

[H4ckForJob]

@maybe-why-not

1. 貌似统计数量是请求数量。线程数量!=请求数量。
2. 在开启递归模式的情况下，内存确实会占用过大，目前递归异常停止条件还不够完善(只判断url长度过长停止)。