核心用法
stock-hot-news 是一款专为财经领域设计的热点新闻爬取与话题归纳系统,采用 Python + Scrapling 技术栈,支持 Playwright 浏览器自动化。用户通过命令行一键执行 python main.py --module3-mode playwright,即可自动完成三大权威财经网站的数据采集、混合评分、话题归纳及 HTML 报告生成。
显著优点
1. 混合评分机制:本地规则评分(55分)+ 大模型评估(45分),兼顾效率与智能
2. 专业可视化输出:自动生成响应式 HTML 报告,自动唤起浏览器展示
3. 实时快讯采集:支持专业财经网站的实时快讯流获取
4. 自动化工作流:一键执行,自动清理旧数据,降低运维成本
5. 定向领域精准:专注财经热点,过滤普通新闻、娱乐资讯等噪音
潜在缺点与局限性
- 依赖外部服务:需配置大模型 API 密钥,存在服务稳定性和成本问题
- 网站适配有限:当前仅支持3个主力财经网站,覆盖度有待扩展
- 技术门槛:需要 Python 3.7+ 环境及 Playwright/Scrapling 依赖安装
- 反爬风险:网页爬取行为可能触发目标站点的反爬虫机制
- 无官方数据源授权:未明确说明是否获得财经网站的官方数据授权
适合人群
- 金融从业者、量化交易员、投资分析师
- 财经自媒体运营者、市场研究人员
- 需要追踪实时财经热点的个人投资者
常规风险
- 合规风险:未经授权爬取财经网站数据可能涉及著作权及数据合规问题
- 数据准确性:依赖源网站数据质量,存在延迟或错误可能
- API 成本:大模型评分模块持续调用产生费用
- 隐私泄露:配置文件中存储 API 密钥,需妥善保管