{
"cells": [
{
"cell_type": "code",
"execution_count": 16,
"id": "948be230",
"metadata": {},
"outputs": [
{
"name": "stdout",
"output_type": "stream",
"text": [
"项目根目录: f:\\Project\\schoolNews\n",
"✓ 已启用自动重载模块功能 - 修改 .py 文件后会自动生效\n"
]
}
],
"source": [
"# 自动重载模块(当文件修改后自动刷新)\n",
"%reload_ext autoreload\n",
"%autoreload 2\n",
"\n",
"import sys\n",
"import os\n",
"\n",
"# 先添加项目根目录到路径(必须在导入之前)\n",
"project_root = os.path.abspath(os.path.join(os.getcwd(), '..'))\n",
"if project_root not in sys.path:\n",
" sys.path.insert(0, project_root)\n",
"\n",
"# 然后再导入模块\n",
"from crawler.xhw.XhwCrawler import XhwCrawler\n",
"from crawler.BaseCrawler import NewsItem\n",
"from loguru import logger\n",
"import json\n",
"from pprint import pprint\n",
"\n",
"print(f\"项目根目录: {project_root}\")\n",
"print(\"✓ 已启用自动重载模块功能 - 修改 .py 文件后会自动生效\")\n"
]
},
{
"cell_type": "code",
"execution_count": 17,
"id": "31a8a0dd",
"metadata": {},
"outputs": [
{
"name": "stderr",
"output_type": "stream",
"text": [
"\u001b[32m2026-01-09 14:32:53.285\u001b[0m | \u001b[1mINFO \u001b[0m | \u001b[36mcrawler.BaseCrawler\u001b[0m:\u001b[36m__init__\u001b[0m:\u001b[36m72\u001b[0m - \u001b[1m初始化爬虫: XhwCrawler\u001b[0m\n",
"\u001b[32m2026-01-09 14:32:53.286\u001b[0m | \u001b[1mINFO \u001b[0m | \u001b[36mcrawler.xhw.XhwCrawler\u001b[0m:\u001b[36m_init_driver\u001b[0m:\u001b[36m147\u001b[0m - \u001b[1m使用Chrome二进制: win/chrome-headless/chrome-headless-shell-win64/chrome-headless-shell.exe\u001b[0m\n",
"\u001b[32m2026-01-09 14:32:54.275\u001b[0m | \u001b[1mINFO \u001b[0m | \u001b[36mcrawler.xhw.XhwCrawler\u001b[0m:\u001b[36m_init_driver\u001b[0m:\u001b[36m154\u001b[0m - \u001b[1mChrome浏览器初始化成功\u001b[0m\n",
"\u001b[32m2026-01-09 14:32:54.276\u001b[0m | \u001b[1mINFO \u001b[0m | \u001b[36mcrawler.xhw.XhwCrawler\u001b[0m:\u001b[36m_init_driver\u001b[0m:\u001b[36m163\u001b[0m - \u001b[1m访问主页获取初始Cookie\u001b[0m\n"
]
}
],
"source": [
"crawler = XhwCrawler()"
]
},
{
"cell_type": "code",
"execution_count": 3,
"id": "e5a6e91c",
"metadata": {},
"outputs": [],
"source": [
"#crawler.search(\"大学\", 1)\n",
"# crawler.search(\"中国\", 10, \"xhsz\")\n",
"# crawler.search(\"中国\", 10, \"news\")\n",
"# crawler.search(\"中国\", 10, \"xhsz\")\n",
"# crawler.search(\"中国\", 10, \"news\")\n",
"# crawler.search(\"中国\", 10, \"news\")"
]
},
{
"cell_type": "code",
"execution_count": 15,
"id": "7e0f56fa",
"metadata": {},
"outputs": [
{
"data": {
"text/plain": [
"NewsItem(title='第一观察|习近平考察冬奥,首次部署这项任务', contentRows=[{'tag': 'img', 'content': \"
\"}, {'tag': 'p', 'content': '
\\u3000\\u3000观察提要:习近平总书记考察冬奥,首次公开提出“加快建设京张体育文化旅游带”,为京津冀协同发展战略注入新的内涵。一项新的发展任务呼之欲出。
'}, {'tag': 'p', 'content': '\\u3000\\u3000“加快建设京张体育文化旅游带”——1月20日,习近平总书记在主持召开北京2022年冬奥会和冬残奥会筹办工作汇报会时如是强调。
'}, {'tag': 'p', 'content': '\\u3000\\u3000这是总书记首次公开提及这一说法。
'}, {'tag': 'p', 'content': '\\u3000\\u3000这意味着,随着冬奥会筹办深入推进,一项新的发展任务呼之欲出。
'}, {'tag': 'p', 'content': '\\u3000\\u3000京津冀协同发展战略的新内涵
'}, {'tag': 'p', 'content': '\\u3000\\u3000总书记始终是从党和国家的战略全局来谋划冬奥筹办工作的。从国家层面上,将其视为“我国‘十四五’初期举办的重大标志性活动”。从区域层面上,多次强调这是“实施京津冀协同发展战略的重要举措”。
'}, {'tag': 'p', 'content': '\\u3000\\u3000此次总书记强调加快建设京张体育文化旅游带,为京津冀协同发展这一国家战略注入了新的内涵,提供了新的抓手。
'}, {'tag': 'img', 'content': \"
\"}, {'tag': 'p', 'content': '▲ 新华社记者 鞠鹏 摄
'}, {'tag': 'p', 'content': '\\u3000\\u3000发展体育文化旅游“带”,最基本的要求是区域内人流物流的快速流动。
'}, {'tag': 'p', 'content': '\\u3000\\u3000这次实地考察冬奥筹办工作,总书记用两天时间考察了北京冬奥的三个赛区。总书记考察的张家口赛区太子城站,是世界上首个直通奥运赛场的高铁站。
'}, {'tag': 'p', 'content': '\\u3000\\u3000这几年,京张高铁、京礼高速等相继建成,大幅提升了京张两地通行能力。冬奥构建的一小时生活圈,使得京张联系更紧密。
'}, {'tag': 'p', 'content': '\\u3000\\u3000打造体育文化旅游带,除了基础设施的快速联通,还要推动体制机制、政策服务、市场监管等方面的创新和协同,对一体化发展提出了更高要求。
'}, {'tag': 'p', 'content': '\\u3000\\u3000冰天雪地也是“金山银山”
'}, {'tag': 'p', 'content': '\\u3000\\u3000绿色、共享、开放、廉洁——总书记一再强调的办奥理念中,共享办奥是重要一方面。
'}, {'tag': 'p', 'content': '\\u3000\\u3000建设体育文化旅游带,“体育”+“文化旅游”,是推动人民群众共享奥运红利的重要渠道,也是促进经济产业转型升级的重要牵引。
'}, {'tag': 'p', 'content': '\\u3000\\u3000在冬奥前景驱动下,京张地区在交通、环境、产业、公共服务等领域务实合作已在不断深入。据相关统计,仅张家口市的崇礼区,直接或间接从事冰雪产业和旅游服务人员已达3万多人,崇礼人捧起家门口的“雪饭碗”。冰雪旅游业的发展让不少农家院生意蒸蒸日上。2019年5月,崇礼退出贫困县序列,2020年2月底,张家口市和河北省实现贫困县全部摘帽。
'}, {'tag': 'img', 'content': \"
\"}, {'tag': 'p', 'content': '\\u3000\\u3000▲ 2020年12月21日,河北省第二届冰雪运动会开幕 “雪如意”初亮相。新华社记者 金皓原 摄
'}, {'tag': 'p', 'content': '\\u3000\\u3000在产业转型方面,张家口通过几年努力,天更蓝了、山更绿了、水更清了,新兴产业发展促进了产业结构优化升级。对外开放的步伐也越来越大,2019年张家口组织赴欧美、港澳等国家和地区开展招商活动,签约了重大项目100多项,冰雪产业合作取得长足进展,冰雪装备制造业落地生根。
'}, {'tag': 'p', 'content': '\\u3000\\u3000根据《中国冰雪旅游发展报告2020》,2018至2019冰雪季我国冰雪旅游人数达2.24亿人次,规模产值达8000亿元,以冰雪休闲旅游为核心的大众冰雪市场正在形成,冰天雪地正成为“金山银山”。
'}, {'tag': 'p', 'content': '\\u3000\\u3000建设体育文化旅游带,将是实现举办重大赛事和推动本地发展双赢的一个生动案例,这对于京张之外其他类似地区也有借鉴参考价值。
'}, {'tag': 'p', 'content': '\\u3000\\u3000体育也有“诗和远方”
'}, {'tag': 'p', 'content': '\\u3000\\u3000总书记多次强调,体育强则国家强,国家强则体育强。
'}, {'tag': 'p', 'content': '\\u3000\\u3000这次考察中总书记再次指出,体育强国的基础在群众体育。要通过举办北京冬奥会、冬残奥会,把我国冰雪运动特别是雪上运动搞上去,在3亿人中更好推广冰雪运动,推动建设体育强国。
'}, {'tag': 'img', 'content': \"
\"}, {'tag': 'p', 'content': '\\u3000\\u3000▲ 1月8日,在甘肃白银国家雪上项目训练基地,一名教练指导滑雪爱好者滑雪。新华社记者 马希平 摄
'}, {'tag': 'p', 'content': '\\u3000\\u3000这是从实现中华民族伟大复兴的战略高度来看待体育事业,看待体育在社会发展中的独特作用。
'}, {'tag': 'p', 'content': '\\u3000\\u3000体育背后不仅是消费,更是一种文化,一种生活方式。
'}, {'tag': 'p', 'content': '\\u3000\\u3000如果说2008年奥运会的举办,让运动健身日益成为许多中国人的生活方式之一,那么北京冬奥会则将促进冰雪运动的普及与推广。冰雪运动不仅可以过山海关,而且还能在大江南北流行起来。
'}, {'tag': 'p', 'content': '\\u3000\\u3000我国进入新发展阶段,人民群众对美好生活的需要日益增长。随着全面建设社会主义现代化国家新征程的开启,在“体育强国”“健康中国”目标指引下,亿万群众的健身需求将得到进一步释放,体育文化理念将得到进一步培育。
'}, {'tag': 'p', 'content': '出品人:赵承、许基仁
'}, {'tag': 'p', 'content': '策划:周杰、霍小光
'}, {'tag': 'p', 'content': '统筹:张晓松、王绚、白洁
'}, {'tag': 'p', 'content': '主笔:朱基钗、马邦杰
'}, {'tag': 'p', 'content': '视觉|编辑:吴晶晶、张惠慧、包昱涵
'}, {'tag': 'p', 'content': '新华社国内部 体育部联合出品
'}, {'tag': 'img', 'content': \"\\u3000\\u3000新华社杭州12月3日电 题:相互尊重、和衷共济、和合共生——习近平主席致首届“良渚论坛”贺信指明人类文明发展的正确道路
'}, {'tag': 'p', 'content': '\\u3000\\u3000新华社记者
'}, {'tag': 'p', 'content': '\\u3000\\u300012月3日,国家主席习近平向首届“良渚论坛”致贺信,深刻阐明了良渚文化的独特价值,揭示了中华文明开放包容、兼收并蓄的鲜明特质,表达了对办好“良渚论坛”的殷切期望。
'}, {'tag': 'p', 'content': '\\u3000\\u3000与会中外嘉宾和社会各界人士表示,习近平主席在贺信中指明了“相互尊重、和衷共济、和合共生”这一人类文明发展的正确道路,大家将充分利用“良渚论坛”这个平台,畅所欲言、深入讨论,深化认识、增进理解,为推动不同文明和谐共处、相互成就贡献力量。
'}, {'tag': 'p', 'content': '\\u3000\\u3000现场聆听了习近平主席的贺信,考古学家王巍心潮澎湃:“良渚遗址是中华五千年文明史的实证,是世界文明的瑰宝。今天,这个凝结了数代考古工作者心血的地方,成为展示中华文明的窗口、世界文明交流互鉴的平台,这是我们的光荣。在这个平台上,我们要讲好良渚的故事,让更多人理解古代中国,从而更好理解现代中国、未来中国。”
'}, {'tag': 'p', 'content': '\\u3000\\u3000在贺信中,习近平主席深刻阐释了良渚遗址在中华五千年文明史和世界文明中的重要地位,这令杭州良渚遗址管理区党工委书记王姝深感使命在肩、任重道远。
'}, {'tag': 'p', 'content': '\\u3000\\u3000她说:“我们将着力推出一批有价值、有分量的研究成果,打造一批富有文化底蕴和中国气派的文化标识,生动展现中华文明独树一帜的创新创造、一脉相承的坚持坚守。”
'}, {'tag': 'p', 'content': '\\u3000\\u3000“中华文明开放包容、兼收并蓄,不断丰富发展、历久弥新,不断吸取世界不同文明的精华,极大丰富了世界文明百花园。”习近平主席在贺信中表达的观点,令各国嘉宾感触颇深。
'}, {'tag': 'p', 'content': '\\u3000\\u3000“1998年我第一次来到中国,学习了中国国画、书法,感受到中国历经几千年积淀而形成的文化和艺术的丰富性。我的拼贴艺术一直和中国的书法艺术联系在一起,这种结合为我的艺术创作打开了另一个维度。”科特迪瓦艺术家莫合·玛蒂尔德说。
'}, {'tag': 'p', 'content': '\\u3000\\u3000在波兰华沙大学汉学系助教孔孝文看来,中国和波兰之间的文化交流活动正变得越来越丰富:“华沙大学的汉学专业已经成为最热门的专业之一。很多中国人也喜欢波兰文化,欣赏肖邦的音乐。我相信在文化和学术研究领域的紧密合作和交流,一定可以让世界文明百花园更加多姿多彩。”
'}, {'tag': 'p', 'content': '\\u3000\\u3000习近平主席在贺信中强调:“推动不同文明和谐共处、相互成就,促进各国人民出入相友、相知相亲。”
'}, {'tag': 'p', 'content': '\\u3000\\u3000今年11月,浙江国际文博交流中心在浙江省博物馆成立。浙江省博物馆馆长陈水华说:“我们将充分依托交流中心的平台,讲好文物背后的中国故事,同时积极引进国外的精品展览,以实际行动推动中华文明与世界不同文明加强对话、增进共识。”
'}, {'tag': 'p', 'content': '\\u3000\\u3000苏州古吴轩出版社目前正深入推进关于古琴、戏曲、园林等古籍资料的整理研究。“我们将以书籍为媒,不断创新表达方式,推动中华优秀传统文化‘走出去’,让不同文明在传承与传播中共进,在交流与互鉴中共荣。”出版社社长王乐飞说。
'}, {'tag': 'p', 'content': '\\u3000\\u3000以艺通心,更易沟通世界。中国美术馆馆长吴为山创作的50余件以老子、孔子等杰出中华历史人物为主题的雕塑作品,在世界近30个国家和地区落成。“未来,我将继续通过雕塑艺术促进中外文明交流互鉴,积极推动中华文化走向世界舞台。”吴为山说。
'}, {'tag': 'p', 'content': '\\u3000\\u3000习近平主席在贺信中强调“深化同共建‘一带一路’国家的文明对话”,这令哈萨克斯坦的艺术家基里巴耶夫·努尔兰深感振奋:“从历史上看,丝绸之路曾促进了不同文明间思想、文化、艺术的交流。我们期待,共建‘一带一路’国家的民众能继续携起手来,谱写文明对话、交流、合作的新篇章。”
'}, {'tag': 'p', 'content': '\\u3000\\u3000文化和旅游部国际交流与合作局局长高政表示:“作为对外文化和旅游工作者,我们将充分发挥文化和旅游国际交流与合作在推动文明互鉴中的独特作用,以文为媒、以旅为桥,更好展示中华文明独特魅力,深化中外文明对话,促进民心相通。”
'}, {'tag': 'p', 'content': '\\u3000\\u3000第一时间学习了习近平主席的贺信,南开大学汉语言文化学院副教授王红厂感到未来教学的方向更加清晰:“我将在接下来的工作中,继续用通俗易懂的语言、生动鲜活的事例,大力弘扬平等、互鉴、对话、包容的文明观,让来自不同文明的学生们相知相亲、同心同行,当好融通中外文明的使者。”
'}, {'tag': 'img', 'content': \"
\"}, {'tag': 'p', 'content': '\\u3000\\u3000观察提要:习近平总书记考察冬奥,首次公开提出“加快建设京张体育文化旅游带”,为京津冀协同发展战略注入新的内涵。一项新的发展任务呼之欲出。
'}, {'tag': 'p', 'content': '\\u3000\\u3000“加快建设京张体育文化旅游带”——1月20日,习近平总书记在主持召开北京2022年冬奥会和冬残奥会筹办工作汇报会时如是强调。
'}, {'tag': 'p', 'content': '\\u3000\\u3000这是总书记首次公开提及这一说法。
'}, {'tag': 'p', 'content': '\\u3000\\u3000这意味着,随着冬奥会筹办深入推进,一项新的发展任务呼之欲出。
'}, {'tag': 'p', 'content': '\\u3000\\u3000京津冀协同发展战略的新内涵
'}, {'tag': 'p', 'content': '\\u3000\\u3000总书记始终是从党和国家的战略全局来谋划冬奥筹办工作的。从国家层面上,将其视为“我国‘十四五’初期举办的重大标志性活动”。从区域层面上,多次强调这是“实施京津冀协同发展战略的重要举措”。
'}, {'tag': 'p', 'content': '\\u3000\\u3000此次总书记强调加快建设京张体育文化旅游带,为京津冀协同发展这一国家战略注入了新的内涵,提供了新的抓手。
'}, {'tag': 'img', 'content': \"
\"}, {'tag': 'p', 'content': '▲ 新华社记者 鞠鹏 摄
'}, {'tag': 'p', 'content': '\\u3000\\u3000发展体育文化旅游“带”,最基本的要求是区域内人流物流的快速流动。
'}, {'tag': 'p', 'content': '\\u3000\\u3000这次实地考察冬奥筹办工作,总书记用两天时间考察了北京冬奥的三个赛区。总书记考察的张家口赛区太子城站,是世界上首个直通奥运赛场的高铁站。
'}, {'tag': 'p', 'content': '\\u3000\\u3000这几年,京张高铁、京礼高速等相继建成,大幅提升了京张两地通行能力。冬奥构建的一小时生活圈,使得京张联系更紧密。
'}, {'tag': 'p', 'content': '\\u3000\\u3000打造体育文化旅游带,除了基础设施的快速联通,还要推动体制机制、政策服务、市场监管等方面的创新和协同,对一体化发展提出了更高要求。
'}, {'tag': 'p', 'content': '\\u3000\\u3000冰天雪地也是“金山银山”
'}, {'tag': 'p', 'content': '\\u3000\\u3000绿色、共享、开放、廉洁——总书记一再强调的办奥理念中,共享办奥是重要一方面。
'}, {'tag': 'p', 'content': '\\u3000\\u3000建设体育文化旅游带,“体育”+“文化旅游”,是推动人民群众共享奥运红利的重要渠道,也是促进经济产业转型升级的重要牵引。
'}, {'tag': 'p', 'content': '\\u3000\\u3000在冬奥前景驱动下,京张地区在交通、环境、产业、公共服务等领域务实合作已在不断深入。据相关统计,仅张家口市的崇礼区,直接或间接从事冰雪产业和旅游服务人员已达3万多人,崇礼人捧起家门口的“雪饭碗”。冰雪旅游业的发展让不少农家院生意蒸蒸日上。2019年5月,崇礼退出贫困县序列,2020年2月底,张家口市和河北省实现贫困县全部摘帽。
'}, {'tag': 'img', 'content': \"
\"}, {'tag': 'p', 'content': '\\u3000\\u3000▲ 2020年12月21日,河北省第二届冰雪运动会开幕 “雪如意”初亮相。新华社记者 金皓原 摄
'}, {'tag': 'p', 'content': '\\u3000\\u3000在产业转型方面,张家口通过几年努力,天更蓝了、山更绿了、水更清了,新兴产业发展促进了产业结构优化升级。对外开放的步伐也越来越大,2019年张家口组织赴欧美、港澳等国家和地区开展招商活动,签约了重大项目100多项,冰雪产业合作取得长足进展,冰雪装备制造业落地生根。
'}, {'tag': 'p', 'content': '\\u3000\\u3000根据《中国冰雪旅游发展报告2020》,2018至2019冰雪季我国冰雪旅游人数达2.24亿人次,规模产值达8000亿元,以冰雪休闲旅游为核心的大众冰雪市场正在形成,冰天雪地正成为“金山银山”。
'}, {'tag': 'p', 'content': '\\u3000\\u3000建设体育文化旅游带,将是实现举办重大赛事和推动本地发展双赢的一个生动案例,这对于京张之外其他类似地区也有借鉴参考价值。
'}, {'tag': 'p', 'content': '\\u3000\\u3000体育也有“诗和远方”
'}, {'tag': 'p', 'content': '\\u3000\\u3000总书记多次强调,体育强则国家强,国家强则体育强。
'}, {'tag': 'p', 'content': '\\u3000\\u3000这次考察中总书记再次指出,体育强国的基础在群众体育。要通过举办北京冬奥会、冬残奥会,把我国冰雪运动特别是雪上运动搞上去,在3亿人中更好推广冰雪运动,推动建设体育强国。
'}, {'tag': 'img', 'content': \"
\"}, {'tag': 'p', 'content': '\\u3000\\u3000▲ 1月8日,在甘肃白银国家雪上项目训练基地,一名教练指导滑雪爱好者滑雪。新华社记者 马希平 摄
'}, {'tag': 'p', 'content': '\\u3000\\u3000这是从实现中华民族伟大复兴的战略高度来看待体育事业,看待体育在社会发展中的独特作用。
'}, {'tag': 'p', 'content': '\\u3000\\u3000体育背后不仅是消费,更是一种文化,一种生活方式。
'}, {'tag': 'p', 'content': '\\u3000\\u3000如果说2008年奥运会的举办,让运动健身日益成为许多中国人的生活方式之一,那么北京冬奥会则将促进冰雪运动的普及与推广。冰雪运动不仅可以过山海关,而且还能在大江南北流行起来。
'}, {'tag': 'p', 'content': '\\u3000\\u3000我国进入新发展阶段,人民群众对美好生活的需要日益增长。随着全面建设社会主义现代化国家新征程的开启,在“体育强国”“健康中国”目标指引下,亿万群众的健身需求将得到进一步释放,体育文化理念将得到进一步培育。
'}, {'tag': 'p', 'content': '出品人:赵承、许基仁
'}, {'tag': 'p', 'content': '策划:周杰、霍小光
'}, {'tag': 'p', 'content': '统筹:张晓松、王绚、白洁
'}, {'tag': 'p', 'content': '主笔:朱基钗、马邦杰
'}, {'tag': 'p', 'content': '视觉|编辑:吴晶晶、张惠慧、包昱涵
'}, {'tag': 'p', 'content': '新华社国内部 体育部联合出品
'}, {'tag': 'img', 'content': \"