1. 招标信息商机助手需求
- 客户需要利用爬虫技术抓取全网相关的招标信息
- 招标信息需要聚焦在客户给定的一些关键词中(关键词可以扩展和删减)
- 客户需要将抓取范围限制在内江市,资中县以及其下属乡镇,村
- 将抓取的信息整理后发送到QQ群以及短信中
- 对于一些付费网站,尽量抓取信息,如果效果好,未来会增加模块
2. 技术方案
- 利用python+scrapy搭建爬虫框架对特定范围的特定关键词进行全网抓取并存库
- 利用机器学习算法或调用大模型对抓取的内容进行主题分析,将网页结果解析成特定结构
- 利用AstrBot+NapCat进行QQ群推送
- 结合腾讯云API进行短信推送
3. 工期安排
- 第一周:python+scrapy搭建爬虫框架并存储数据入库,并利用正则等粗粒度算法解析数据
- 第二周:完善算法解析分析入库数据
- 第三周:消息推送
- 第四周:联调测试+部署
- 预计半个月左右可以有可以演示的效果
四川省 内江市 资中县 乡镇 也要包含出来
弱电 电器化
网络化
强弱电施工
综合布线