数据采集发布防重复

indulge3

此节视频概要：
发布：
1.项目管理器读入网址，标记为已发  防止重复发布，循环中同理
采集：
1.项目管理器读入网址采集其中详细内容，采集并update 信息，防止重复采集。还有脚本的循环中读入同理
2.重复采集一个网站时，比如采集其中的网址信息的时候，已经入库的信息不再入库：（两种方式：1.设置列为unique，2.设置从数据库查询数据，如果有这个数据就不再入库）
3.关键词采集，已采集的关键词不再采集。两种情况（1.关键词放在数据库中，标记为已发  2.关键词放在文本中，使用exe中的批量查询。）


功能点：
防重复

视频播放及下载地址：http://pan.baidu.com/s/1gd4LFsJ

如果您对此节视频有任何意见和建议，可以回帖说明，感谢大家对我们软件的支持。

火车浏览器视频教程征集活动，奖励多多~~~ http://bbs.locoyposter.com/post-374-1-1.html

indulge3

开心鬼 发表于 2015-8-29 15:06
好教程，我顶

水的太明显