weibo-crawler icon indicating copy to clipboard operation
weibo-crawler copied to clipboard

微博账号IP属地抓取

Open vicshi94 opened this issue 3 years ago • 3 comments

image

增加微博账号IP属地抓取只需要修改几处即可:

zh_list = ["生日", "所在地", "IP属地", "小学", "初中", "高中", "大学", "公司", "注册时间", "阳光信用"]
            en_list = [
                "birthday",
                "location",
                "ip_location", 
                ...
def user_to_csv(self):
        """将爬取到的用户信息写入csv文件"""
        ...
        result_headers = [
            "用户id",
            "昵称",
            "性别",
            "生日",
            "所在地",
            "ip属地", 
            ...

暂时仅有补充账号IP属地的需求,且只抓取微博账户信息,不抓取微博信息,所以仅供参考。 另外不确定ip属地的值的格式是什么样,所以保留了“(IP属地以运营商信息为准,如有问题可咨询客服)”这句话,这个好修改的。

vicshi94 avatar May 21 '22 04:05 vicshi94

这个的IP属地抓下来是空的吧😂

LuqianSun avatar Jun 15 '22 13:06 LuqianSun

因为字段变了,你现在按原来的代码爬,这些都是空的:生日,所在地,ip属地,学习经历,公司,注册时间,阳光信用

vicshi94 avatar Jul 02 '22 09:07 vicshi94

所以你是改了哪些字段,没有cookie吗

June-915 avatar Oct 08 '22 02:10 June-915