rq204 发表于 2014-11-22 17:43:21

京东搜索商品并采集商品信息和评价

本教程讲了如何在京东搜索商品并采集商品信息和评价
教程下载地址:http://pan.baidu.com/s/1jGFtwfs

本次教程使用到的知识有:
1.如何使用计数器变量
2.如何使用循环点击下一页以及循环遍历list表
3.创建以及插入表的sql语句
4.如何使用模糊查询的contains()函数.

需要用到的sql语句:
1.创建商品信息表:CREATE TABLE 商品信息 (`商品名称` VARCHAR(250) primary key,`价格` VARCHAR(250) ,`图片` text);

2.创建评论信息表:CREATE TABLE 评论信息 (`标签` VARCHAR(250) ,`心得` VARCHAR(250),`手机名称` VARCHAR(230),primary key(手机名称,心得));

3.插入:INSERT INTO 商品信息 (商品名称,价格) VALUES ('{-var.标题-}','{-var.价格-}')

      INSERT INTO 评论信息 (标签,心得,手机名称) VALUES ('{-var.标签-}','{-var.心得-}','{-var.标题-}')



clarck 发表于 2014-12-10 16:34:31

:):):):):):)

ohio 发表于 2015-5-27 08:58:40

好东西,已阅

dodd001 发表于 2016-1-17 19:45:27

本帖最后由 dodd001 于 2016-1-17 19:47 编辑

需要用到的sql语句:
1.创建商品信息表:CREATE TABLE 商品信息 (`商品名称` VARCHAR(250) primary key,`价格` VARCHAR(250) ,`图片` text);

2.创建评论信息表:CREATE TABLE 评论信息 (`标签` VARCHAR(250) ,`心得` VARCHAR(250),`手机名称` VARCHAR(230),primary key(手机名称,心得));

3.插入:INSERT INTO 商品信息 (商品名称,价格) VALUES ('{-var.标题-}','{-var.价格-}')

      INSERT INTO 评论信息 (标签,心得,手机名称) VALUES ('{-var.标签-}','{-var.心得-}','{-var.标题-}')你好,这里我没看明白,我看到例程是这样的
CREATE TABLE Table_Name (`id` INT(10) NOT NULL AUTO_INCREMENT,`title` VARCHAR(250) NULL DEFAULT NULL,`content` VARCHAR(250) NULL DEFAULT NULL,`time` VARCHAR(50) NULL DEFAULT '0',INDEX `id` (`id`)) COLLATE='utf8_general_ci' ENGINE=MyISAM;
什么时候用到primary key,什么时候又要用到VARCHAR,什么时候又用到text
请管理帮忙解答一下,非常感谢

另外,这个例子讲的是mysql的,我看有些例子讲的是sqlite的,工具上的示例是两者通用还是针对其中一种类型的,为什么要用到不同的数据库,哪种好呢,我习惯用mysql,不知道写法是不是和sqlite一样呢

lbjyuer 发表于 2016-1-18 10:44:05

dodd001 发表于 2016-1-17 19:45
你好,这里我没看明白,我看到例程是这样的

什么时候用到primary key,什么时候又要用到VAR ...

这里有讲   http://bbs.locoyposter.com/post-394-1-1.html

primary key是主键,可以设置多个
VARCHAR,text是数据类型,告诉数据库,本字段数据要以什么样的数据类型存储,比如text存储的数字是比大小和int存储的数字结果不一定相同。

dodd001 发表于 2016-1-18 10:58:19

lbjyuer 发表于 2016-1-18 10:44
这里有讲   http://bbs.locoyposter.com/post-394-1-1.html

primary key是主键,可以设置多个


~~~~~~~~~~~~~谢谢:)

君华 发表于 2016-3-7 20:22:54

京东代码都改了啊

fk1985 发表于 2016-7-17 08:59:46

君华 发表于 2016-3-7 20:22
京东代码都改了啊

方法没有改。按照这种方法可以继续采。成功采集了天猫。欧耶。。

dt16521 发表于 2017-3-28 16:36:12

6.4的循环里面没有点击某个元素循环吗?为什么我这里没有?

今日说法 发表于 2017-8-3 12:56:01

视频里用到的火狐里的插件叫什么名字?
搜索下载的不能用.
页: [1]
查看完整版本: 京东搜索商品并采集商品信息和评价