比价系统的数据采集与价格波动存储报警
哪些公司问过
答案要点
- 采集优先用官方或联盟接口,爬虫需遵守站点规则、控制频率,按商品热度分级调度
- 同款匹配:用条码、型号、标题、规格把多平台商品归到标准商品
- 存储只记价格变化,记录生效起止时间,当前价与历史分开,历史按时间分区或用列式库
- 报警走流式处理,新旧价格比较,支持跌幅阈值、目标价、历史新低等规则和用户订阅
- 防误报与防打扰:异常价格复采确认,过滤缺货价,通知去重和限频
易错点
- 只讲爬虫,不考虑官方接口和合规问题
- 每次采集都全量写历史,数据量膨胀
- 价格一变就推送,不做复采确认和通知限频,导致误报和打扰用户
面试官常见追问
- 采到一个异常低价,怎么判断是不是真的降价?
- 几百万用户订阅了降价提醒,怎么高效匹配?
- 为什么只存变化而不是每次采集都存?
完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。