wooyun_public
wooyun_public copied to clipboard
hanc00l
This repo is archived. Thanks for wooyun! 乌云公开漏洞、知识库爬虫和搜索 crawl and search for wooyun.org public bug(vulnerability) and drops
elasticsearch默认的最大分页数是10000条记录（也就是500页），因此超过500页会报错。解决办法： 在命令行下执行 ``` bash curl -XPUT "http://localhost:9200/wooyun/_settings" -d '{ "index" : { "max_result_window" : 500000 } }' ``` 修改默认最大分页记录。 参考链接：[http://stackoverflow.com/questions/35206409/elasticsearch-2-1-result-window-is-too-large-index-max-result-window](http://stackoverflow.com/questions/35206409/elasticsearch-2-1-result-window-is-too-large-index-max-result-window)
另，小问题
我在原来的上面升级，到了导数据那步会卡住，已经修改了超时时间，一次2小时，一次6小时，都没有倒完，然后重新下虚拟机了，不知道是不是我个人的问题，服务器上跑的，8核，8g内存，性能应该不是瓶颈 心下虚拟机，启动es的时候提示有问题，也不让用root跑，把es的文件夹全部重新给hancool以后，可以跑起来了
一点小问题
unzip elasticsearch-analysis-ik-1.9.4.zip 这一步应该是 unzip elasticsearch-analysis-ik-1.9.4.zip -d elasticsearch-analysis-ik 不然会解压到当前目录一堆东西
按照markdown里面的步骤，每一项都配置成功，中间也没有报错。但是搜索时，只显示2015年之前的文章和漏洞。把elasticsearch的进程kill掉后，虽然搜素速度变慢，但是却能搜索出2016年的内容。莫非是在同步elasticsearch数据时出了问题？如何能重新同步呢？
flask作为web server基本能满足一些简单的和小规模的应用需求，如果有更高要求的，可使用tornado/app.py。使用前请先sudo pip install tornado安装依赖包，然后在tornador目录下运行app.py就OK了。
mongodb搜索的确慢得难以忍受了，所以，这几天一直在研究用elasticsearch引擎来快速搜索内容，经过测试已完成了配置和代码的测试，配置文档和虚拟机准备在这个周末会上传到网上。 要使用elasticsearch搜索，可以直接下载即将打包好的虚拟机（包含wooyun网站的数据），或者根据我测试的配置文档自己手动配置。 家里网速实在太慢了，所以争取周末能传完虚拟机吧。 欢迎大家一起探讨和交流。
如题 
图片bug0： http://www.90xss.cn/wp-content/uploads/2016/08/2016080105475716.jpg 图片bug1 ：http://www.90xss.cn/wp-content/uploads/2016/08/2016080105425213.jpg 图片bug2 ：http://www.90xss.cn/wp-content/uploads/2016/08/2016080105433112.jpg
