crawl4ai
crawl4ai copied to clipboard
unclecode
[Bug]: crawl4ai爬取pdf网页出现问题│ Error: 'PDFContentScrapingStrategy' object has no attribute 'run'
crawl4ai version
0.6.2
Expected Behavior
[FETCH]... ↓ http://ayacd.yrdcpcn.org.cn/upload/2023/0807/b316d... | Status: False | Time: 0.28s [SCRAPE].. ◆ http://ayacd.yrdcpcn.org.cn/upload/2023/0807/b316d... | Time: 0.0s [ERROR]... × http://ayacd.yrdcpcn.org.cn/upload/2023/0807/b316d... | Error: ┌───────────────────────────────────────────────────────────────────────────────────────────────────────────────────────┐ │ × Unexpected error in _crawl_web at line 610 in aprocess_html │ │ (../../../../home/vipuser/miniconda3/envs/llm_mr_v2/lib/python3.11/site-packages/crawl4ai/async_webcrawler.py): │ │ Error: 'PDFContentScrapingStrategy' object has no attribute 'run' │ │ │ │ Code context: │ │ 605 IdentityChunking() │ │ 606 if content_format in ["html", "cleaned_html"] │ │ 607 else config.chunking_strategy │ │ 608 ) │ │ 609 sections = chunking.chunk(content) │ │ 610 → extracted_content = config.extraction_strategy.run(url, sections) │ │ 611 extracted_content = json.dumps( │ │ 612 extracted_content, indent=4, default=str, ensure_ascii=False │ │ 613 ) │ │ 614 │ │ 615 # Log extraction completion
Current Behavior
无法执行
Is this reproducible?
Yes
Inputs Causing the Bug
Steps to Reproduce
Code snippets
OS
Linux
Python version
3.11
Browser
No response
Browser version
No response
Error logs & Screenshots (if applicable)
No response
客户端终端信息： {"url":"http://www.zcsvillages.com/upload/2023/0808/9fb6376f-7449-4f83-8060-368c808487ca.pdf","success":false,"status_code":200,"markdown":"1宁波商帮的起源与发展 鲍杰 宁波商帮以善于经商而闻名于世 。所谓宁波商帮系指原宁波府属的郸县 、奉化、镇海、慈溪、象山（南田）、定海和以后 划入的余姚七县旅居外地的宁波商人 ，在从事商业活动中逐步形成的群体 。它是以同乡情谊为纽带 ，行业为依托 ，互助互利为 目的，具有地域性的同乡社团组织 。 （一） 宁波濒临东海 ，山海相连 ，由于耕地不足 ，自古以来居民多外出经商 。明末清初 ，商品经济逐渐发达 ，特别是“五口通商 ” 以后，外国资本侵入 ，引起了城市经济的变化 。宁波商帮即以宁波为基地 ，把活动转向 上海，遍及长江流域和天津等商埠 。据 《甬江初集》载：“当沪埠草莱未辟 ，吾甬人以冒险之天性 ，折荆披棘经营所业 ，其间华路槛褛 ，坚苦卓绝 ……泊乎既为商埠 ， 来者愈众 ，吾甬人所经营 ，亦渐次发皇 ，环顾沪上各业 ，青有甬人……”。旅居渔上海的宁波商人和手工业者 ，基于发展的需 要，相继组成了各种行帮小团体 。商业行帮有同善会 （业）、崇德会（海味业）、永兴会（南货业）、敦仁堂（猪业）、喻义 堂（药业）、诚仁堂（肉业）、永济堂（洋货业）；手工业行帮有长寿会 （石作业）、年庆会（木业）、同义会（银匠）；劳 工团体有四明生会 ，水手均安会等等 。送类小团体具有同乡和同业的双重结构 ，它以维护集体利益 、互济互助为目的 ，这是宁 波商帮的雏形 。清嘉庆2年(1797)，宁波人钱随 、费元圭、潘凤召、王忠烈等发起募捐 ，以行业帮会为基础 ，筹建“四明公所 ”， 购地建屋寄枢 ，至嘉庆8年建成。钱、费、潘、王等被推举为最早的公所董事 。道光11年（1831)，又由董事方亨宁 、方亨簧、 谢绍心、庄锦等发起募捐重修 ，扩大家地 ，增建丙舍 ，并设赊材会等 ，这时期公所以办理同乡义家 ，推行善举为主 。咸丰3年 (1853）、公所房屋因战事被毁 ，得镇海大商家方仁照兄弟捐巨款 ，发起重建 ，并设济元堂 ，为同乡集会之所 。1870-1892年间 甬人的行业与地域性的公所 、会馆继有发展 ，如酒业公所 、竹业公所和定海会馆等 ，这些公所 、会馆都是四明公所的团体会员 。 清宣统元年 （1909)，慈溪旅沪商人洪宝斋创议筹组四明旅沪同乡会 ，成为上海最早的地域性同乡会组织 。次年（1910）改 名为“宁波旅沪同乡会 ”。宣统3年（1911）宁波旅沪同乡会在四明公所召开成立大会 ，首任会长是沈仲礼 ，副会长是朱葆三 和虞洽卿 。民国初期 (1916-1920）两次召开征求会员大会 ，扩大宁波同乡会实力 ，此后李征伍 、虞洽卿等先后被推举为会比 ， 同乡会章程儿经修订 ，扩大了原来的同乡互助互济的目的 ，明确“以团结同乡团体 ，发挥自治精神 ”为宗旨。成为联络 甬人旅 沪各种团体 ，举办公益 ，排解纠纷 ，普及教育 ，谋取共同利益为目的的自治社团组织 。它标志着宁波商帮 已正式形成 。宁波旅 沪同乡合成立后 ，致力于普及教育 ，培养旅沪 甬人子弟，至1928年已办有小学 10所，学生多达 三、四千人，并开办了职业介 绍所等新式社会事业 。1920-1925年间，以县为单位的同乡会如定海 、镇海、奉化、象山等县旅沪同乡会亦相继成立 。这种地域 性的小团体 ，更便于维护小同乡的共同利益和密切家乡关系 。 （二） 上海港开埠以来 ，以其地处长江流域的终点 ，腹地深广 ，交通便捷的优势 ，逐渐成为全国内外贸易的中心 。而宁波则相对 衰落，对外贸易额从 1844年的55万元，到1849年减少近百分之九十 。那时，各省商帮云集 上海，宁波商人以 甬沪交通便利 ， 轮船一夜可达 ，故大批转向上海 ，与原在沪的 甬商相结合 ，逐渐渗透到上海商业的各个领域 。在太平天国时期 ，宁波殷实富户 ， 多避难入上海租界 ，后定居在沪从事商业活动 。20世纪初期 ，宁波商人势力大盛 ，在沪甬商约有5万多人。突出在对外贸易方 面，“较早开放的宁波地方商人也来沪经商 ，他们迅速在买办阶级中产生巨大影响 ，并在棉纱 、棉布、鸦片、五金、钱业中占 据重要地位 ”。①上海最早被外商雇佣的买办多数是宁波人 ，如杨防是英商怡和洋行买办 ，虞洽卿是德商鲁麟洋行买办 ，刘鸿 生是英商开平煤矿买办 ，费延芳是英商德丰公和买办 ，周崇良是德商谦和洋行和德孚洋行买办 。19世纪末，外国资本主义从商\n* * \n## 2品输出到资本输出 ，上海外资银行林立 ，宁波商帮中一部份商社买办和具有通晓外语 ，并有熟悉金融业务和一定资产担保的商\n人，能任外资银行买办 ，如华俄银行和荷兰银行买办为虞洽卿 ，英商大英银行买办为徐憋堂 ，法商汇理银行买办为朱云枯 、朱 志麦（云枯弟），法商麦加银行买办为汪清源 ，华义银行买办为厉树雄 ，美商友华 银行买办为傅筱庵等 。金融买办与贸易买办 的结合，推进了宁波商帮在沪经济界的实力地位 ，逐渐压倒了在沪各帮 ，居上海商界的首位 。 宁波商帮在沪占据优势的原因主要是 ：第一、一批代表人物先后成为上海商会的领袖 。清光绪27年（1901)，得到清廷认 可的上海商业会议公所成立 ，慈溪人严信厚首任总理 ，1903年改为上海商务总会 ，严继任会长 ，在长达40余年（1901-1946的） 上海商会中 ，宁波商帮中的朱葆三 （定海）、周晋镰（慈溪）、虞洽卿（镇海）、秦润卿（郸县）、宋汉章（余姚）、李厚佑 （镇海）方积蕃（镇海）、傅筱庵（镇海）、袁履登（郸县）、俞佑庭（郸县）、厉树雄（镇海）、方椒伯（镇海）、金润库 （镇海）等人历任商会会长 （理事长）、副会长（副理事长 ）、理事、执委等要职 ，②当时的上海商会已成为政府管理商业的 自治团体组织 ，它具有裁决会员间纠纷 、管理商界各行业的权力 、并接受政府委办等事项 ，不仪在沪经济界拥有相当权力 ，在 政治上也有一定影响 。第二、宁波商帮掌握了居上海百业之首的金融领域 。1917年上海钱业公会成立 ，秦润卿为第一任副会长 ， 次年继任会长 ，其后连任四 、五。六届总董 ，七、八、九届公会主席 ；1918年上海银行公会成立 ，首任会长为宋汉章 。19世纪 中叶，执上海牛耳的 9家钱业资本家族集团 ，宁波商帮占有 6个（慈溪严氏奉化朱氏 、郸县秦氏 、镇海李氏 、叶氏、方氏）。 他们的实力 ，一是初期依靠山西商帮的长期贷款经营钱庄 ，同时宁波钱庄发行 “庄票”（期票）代替现金流通 ；二是上海外国 银行接受宁波钱庄的 “庄票”，而宁波钱庄接受外国银行发放的名为 “检票”的短期流通资金 ；三是吸收每年由宁波汇沪达 2 一3千万元的汇款 。第三、宁波商帮在沪经营工商企业迅速发展 。据1941年统计：总共有2230家，其中：商业企业 1704家， 分布在沪商业的 98个行业，而在海运 、制糖、粮油、药材、人参、颜料、西药、棉纱、五金机械 、银楼、煤炭、海味、钟表等 行业中独占优势 。第四、在上海的贸易 、金融买办中具有较大影响 ，也是宁波商帮得到壮大发展的重要契机 。 （三） 上海早期的贸易 （金融）和买办所拥有的财力 ，是民族资本主义工商业发展的一个重要条件 。宁波商帮中的朱葆三投资兴 办了中法航运公司 、华商人寿保险公司 、华兴水火保险公司 、中兴面粉厂 、吉邦橡胶公司 、中日合营绢丝公司 ，还在汉口 、广 州办自来水厂等 ；叶澄衷以在沪开设五金杂货店起家 ，先后开设钱庄 、经营房地产 ，并在汉口投资办造布厂 、火柴厂等 ，最具 代表性的是刘鸿生 ，任英商开平煤矿买办后 ，先后投资创办了火柴厂 、水泥厂、毛纺厂、煤矿以及银行 、保险等工商企业 ，集 轻工、重工、商业、运输与金融业于一身 ，成为具有全国性的刘氏企业集团 ；虞洽卿创办三北轮船公司 、宁绍轮船公司等 ，投 资共达450万元，至1935年已拥有大小轮船 65条，载重量共达 9万吨，占当时全国轮船总吨位的 13%,成为全国民办商轮的巨 子。刘、虞两氏，以商业、买办走向发展实业的道路 ，是中国民族资产阶级发展成长的一个缩影 。 宁波商帮还对家乡近代化建设作出了重大的贡献 ，1887年宁波第一家近代工 业-通久源机器轧花厂 ，就是由严信厚投资创办 的。以后戴瑞卿 、顾之深等开办和丰纱厂 、太丰面粉厂 ；周仰山办永跃电力公司 ；厉树雄办四明电话公司 ；徐惠生办火柴厂 ； 赵孝林、张永祥等合办冷藏公司 （为浙江省最早冷藏企业 ），为宁波近代化工业奠定了基础 ，此外还捐资兴建了医院 、教育、 水利等多项社会福利事业 ，造福桑梓 。 （四） 宁波商帮在沪崛起 ，以其雄厚的经济实力 ，伸向汉口 、天津等国内大商埠 ，推动各地宁波商帮势力的扩展 ，主要有三 ：1．以 金融为纽带 ，伸向各大城市 ，如严信厚在沪开设源丰润票号总店 ，经营国内汇兑和商业拆放业务 ，其分号遍设 江南各省及京 、 津等商埠达功余处 ，上海宁波商帮开设的钱庄 ，多与各地分庄 、联号开展汇兑业务 ；2．上海经营的商业总店 （公司）在各地设 置分店或联号 。如五洲大药房 ，其联号分店在汉口 、杭州、天津等城市达 1,1处，亨达利、亨得利全国分店或联号有 80多处； 3．经营进口商品或企业名牌商品 ，其经销网络遍及各地 ，如谦和号天津分店 ，专销德孚洋行进口靛水颜料 。包销华北各省 ，三 友实业社所产的三角牌系列商品 ，分发行所 几乎遍全国各大城市 ，其特约经销和代销店则伸向县城集镇 。\n * \n## 3从上海以外的宁波商帮较集中的汉口 、天津两个商埠看 ，1858年汉口开 埠后，以宁波商人居多 ，其主要经营有棉纱 、棉布、\n石油、海产品、药材、五洋杂货 ，银楼、钱庄等行业 。其中：海产商约 30多家，年贸易额达 300万两左右 ，石油几乎全为宁波 人所输入 。据道光末年统计 ：宁波商帮年贸易总额为 3500-4000万两左右 。③镇海宋炜臣 ，在汉创办燮昌第二火柴厂 、既济水 电公司，被誉为汉口的头号商人 。在天津，清中叶时期 ，宁波商人以经营航运贸易为主 ，在津设有 “商船公所 ”，为宁波北头 船帮集会和同乡联谊之所 。天津开埠后 ，上海宁波商帮的贸易活动趋向天津 ，上海老顺记在津设立分号 ，并附设信裕公司 ，大 庆元票号 。主要经营有银楼 、钱庄、盐号、航运等业 。最盛者为进出口贸易宁波商埠在各地经营较多的行业为药材 、海产品、 草席、银楼、钟表等业 。海产品“明府卷”在国内素负瘾名 ，特产草席曾行销华北各省 （五） 追溯各地宁波同乡会的起源 ，首推明崇祯年间宁波药商在北京的郸商会馆 ，次为清乾隆年间常熟的宁绍会馆和汉口的浙宁 会馆，嘉庆年间 上海四明公所 （浙宁会馆 ），光绪年间苏州的浙宁会馆 。民国以来 ，上海宁波同乡会的崛起 ，推动了各地同乡 会组织的发展 ，据1935年统计：扭个省的 36个城市，如南京、无锡、芜湖、厦门、青岛、烟台、大连、沈阳、南昌、长沙、 重庆等城市都有宁波同乡会组织 。各地同乡会成员 ，以商人为多 ，也有工人 、手工业者和政教界人士 。据1946年宁波旅沪同乡 会统计：共有会员 3649。人，其中商业 20862人，占57.17%，为会员的最多数 。此外是工业 3524人，学界2926人，航海事业 293人，政界214人，军界33人，其他3592人。这种以地缘 、业缘、血缘结合成的群体 ，具有强大的凝聚力和向心力 ，远远超 过了新兴的同业公会组织 。 宁波商帮在香港 、台北、新加坡、日本、冲绳等地均有宁波同乡会组织 ，也有参加了更大范围的侨团组织 ，知名人士如旅 日浙江同乡会会长 张珑堂，新加坡三江会馆会长水章铭 、英国华侨总商会董事长应久行 、香港环球航运集团名誉主席包玉刚 、 新加坡邵氏电影制作公司总裁邵逸夫等 ，均为甬籍华侨。 目前我国继续坚定地贯彻改革开放政策 ，努力搞好沿海对外开放 ，鼓舞了海外宁波籍人士关心宁波建设 。不少华侨和港澳 同胞为宁波捐款兴办社会教育 、福利事业 ，或投资创办合资合作企业 ，或牵线搭桥促成兴办独资合资企业等 。他们正以造福桑 梓的深厚乡情 ，为“振兴中华 ，建设宁波 ”谱写着新的篇章 。 注释： ①上海社科院 《上海经济 》《试论上海近代商业的特 点及其发展原因 》 ②上海工商业联合会档案 ③汉口商业志初稿\n * *\n","extracted_content":null,"error_message":"PDF processing failed (unknown reason)","media":{"images":[],"videos":[],"audios":[]},"links":{"internal":[],"external":[]}} 服务器端终端：/upload/2023/0808/9fb6376f-7449-4f83-8060-368c808487ca.pdf It's a PDF [FETCH]... ↓ http://www.zcsvillages.com/upload/2023/0808/9fb637... | Status: False | Time: 0.04s [SCRAPE].. ◆ http://www.zcsvillages.com/upload/2023/0808/9fb637... | Time: 1.257s [COMPLETE] ● http://www.zcsvillages.com/upload/2023/0808/9fb637... | Status: False | Total: 1.29s INFO: 127.0.0.1:43328 - "POST /api/crawl/pdf HTTP/1.1" 200 OK 为什么爬取到pdf文件的内容了，但是状态为失败？