软件开发，百度关键词挖掘，数据采集

重庆用户需要进行橱窗数据挖掘并进行数据分类，同时可支持开启多线程挖掘。研发初期进行了技术选型及数据量增长的评估预测，并制定了多个数据存放方案，由于数据是增量增长，需要考虑的因素比较多，比如1个关键词，可能会分散出30个扩展词，依此类推，数据量会呈现几何倍增长，因此为了满足需求，测试了多种方案及数据过滤算法，并开启多线程进行数据消费，满足用户使用需求。