背景人工跨平台寻找市场需求耗时数天,需要自动化方案替代重复检索。
架构把「需求发现 / 信息验证 / 结果整理」拆成独立 Agent,用 CrewAI 编排任务流,降低单 Agent 复杂度;Agent 间传递中间结果,串起 采集 → 需求列表 → 验证 → 机会输出 的完整链路。
实现Playwright 针对公开页面做采集实验;TF-IDF 计算词项权重,提取高频讨论词与需求特征;Agent 调 Serper API 做外部搜索验证,补充结果并降低模型编造风险。
成果将数天的人工检索压缩到数小时级自动执行;Flask 展示 Top 机会列表,定时任务自动跑。