大冬瓜 发表于 2014-12-28 13:37:14

提取网址到变量后怎么去除重复?

重复提取列表页面，有网址是重复的，采集流程是提取网址，把网址添加到变量里，然后把变量里的网址列表导出到文本；那么问题来了，怎样把重复的网址剔除掉呢？让到导出到文本里的网址列表没有重复。

开心鬼 发表于 2014-12-29 12:34:31

用list 变量保存，然后再用“变量清洗”功能

dubing521 发表于 2015-2-26 16:39:29

开心鬼 发表于 2014-12-29 12:34
用list 变量保存，然后再用“变量清洗”功能

请问如何使用变量清洗功能呐？望告之，，十分感谢

autobuy88 发表于 2015-2-27 11:23:07

學到了
之前不知道有這功能
也想了很久

dubing521 发表于 2015-2-27 20:20:57

我也找到了。变量清洗在变量处理里边，，，，很好找，很好用，，现在又遇到心得问题，，就是抓取的变量如何英汉自动转换？？？

lewell007 发表于 2015-5-20 15:15:01

dubing521 发表于 2015-2-27 20:20
我也找到了。变量清洗在变量处理里边，，，，很好找，很好用，，现在又遇到心得问题，，就是抓取的变量如何 ...

待开发……
页: [1]
查看完整版本: 提取网址到变量后怎么去除重复?