火车浏览器官方论坛

标题: 网络爬虫火车浏览器如何提升脚本稳定性 [打印本页]

作者: yangjielewell    时间: 2016-5-4 12:32
标题: 网络爬虫火车浏览器如何提升脚本稳定性
    我们在使用各种软件时,往往会发现有时软件运行起来很慢,网络爬虫火车浏览器软件的脚本在运行过程中,也像其他软件一样会产生缓存文件,我们可以在脚本中加上清除缓存的步骤,这样可以将缓存文件整个压缩,减少占用的内存。但如果是长时间的运行的话,上述方法就行不通了。下面介绍一种新建内存盘的方法来提升脚本稳定性:
(1)使用火车浏览器安装目录下Tools 文件夹中的ramdisk.exe创建一个新的内存盘
双击ramdisk.exe               
[attach]429[/attach]
   如上图示,使用内存创建一个指定大小的内存盘,注意内存盘大小限制,不要超过限制的大小,然后点击创建建立一个盘名为Z的内存盘。
(2)建立内存盘之后,可指定缓存目录放在该盘中。不同的任务,可以将缓存目录放在不同的文件夹中,这样在加批处理删除文件夹时,可以区分不同的任务来删除文件。否则当多个任务同时运行,而缓存文件放在同一个目录中,一个任务结束便删除缓存,而另一个任务还在运行中,这种命令的运行就会出现冲突。因此不同的任务最好定义不同的文件夹存放缓存。
项目管理器指定缓存目录:
        [attach]430[/attach]      
生成exe指定缓存目录:
              [attach]431[/attach]
(3)批处理.bat:建立一个以.bat后缀名的文件,比如命名为批处理.bat
其中内容为:
ping -n 20  127.0.0.1>nul
rmdir /q /s d:\s
   其中d:\s 是要删除的文件夹路径,可按缓存路径填写。
(4)批处理文件建立后,再用浏览器的调用外部程序功能调用该文件。这个步骤请添加在脚本的最后一步。
[attach]432[/attach]
   按上述步骤操作后,在任务运行结束后,自动清除缓存文件以及缓存文件夹。这样我们在使用网络爬虫工具火车浏览器时,其脚本的稳定性就可以得到大幅提升,提高工作效率。






欢迎光临 火车浏览器官方论坛 (http://bbs.locoyposter.com/) Powered by Discuz! X3.2