言希

希望加个新功能

1

如果返回的结果超过90%size相同，则这个size的返回判定为相同页面，不然结果实在太多了看得眼花缭乱

当使用-f参数运行一段时间后会报错

2

panic: runtime error: invalid memory address or nil pointer dereference [signal 0xc0000005 code=0x0 addr=0x40 pc=0xd5a1e9] goroutine 1 [running]: github.com/pingc0y/URLFinder/util.GetProtocol({0xc00ae406a8, 0x16}) /home/runner/work/URLFinder/URLFinder/util/utils.go:122 +0xc9 github.com/pingc0y/URLFinder/crawler.Run() /home/runner/work/URLFinder/URLFinder/crawler/run.go:111 +0x6d7 main.main() /home/runner/work/URLFinder/URLFinder/main.go:15 +0x37

批量探测时发现大部分站点做了容错处理，不存在的端口返回200响应码的相同页面。希望集成一个小功能，如果批量扫描出来的页面返回长度相同或相近，则自动过滤。自己也写了一个小脚本用来过滤https://github.com/DouLiYouTang31/SpringBoot-Scan-Sift/