diff --git a/MindSpider/README.md b/MindSpider/README.md index 5500ce8..b8b4d65 100644 --- a/MindSpider/README.md +++ b/MindSpider/README.md @@ -7,6 +7,8 @@ MindSpider是一个基于Agent技术的智能舆情爬虫系统,通过AI自动识别热点话题,并在多个社交媒体平台进行精准的内容爬取。系统采用模块化设计,能够实现从话题发现到内容收集的全自动化流程。 +该部分学习借鉴github知名爬虫项目[MediaCrawler](https://github.com/NanmiCoder/MediaCrawler) + 两步走爬取: - 模块一:Search Agent从包括微博、知乎、github、酷安等 **13个** 社媒平台、技术论坛识别热点新闻,并维护一个每日话题分析表。