火车采集器官方博客

单条记录下载文件名加自增ID

作者：小文 发布于：2013-10-15 10:33 Tuesday 分类：免费插件

有的朋友需要在一条记录中，对所有的图片按_1,_2这样的方式标记所有文件或是图片，这时，使用插件是比较方便的方式。现在我们收集了所有客户的该类需求，编写了一个功能比较完善的插件，供大家使用。

该插件支持按所有文件，按标签，按目录，按扩展名自增命名文件名。使用方法如下：

a.如果只是选中该插件，默认是按所有文件，从1开始命名。

b.如果要选按标签，按目录，按扩展名命名，需要新创建一个标签“命名方式”，然后使用固定值写上数字2或是3或是4，其中

2是按标签命名，即标题中的所有图片是从1开始，内容中的所有图片也是从1开始

3是按目录命名，比如用户设置了按时间生成目录，当前10个文件有三个保存路径，则每个文件夹中的文件名从1开始

4是按扩展名命名。比如有jpg,zip两种格式，每种格式的从1开始命令

标签: 命名

评论(0) 引用(0) 浏览(9227)

"更改数据保存数据库"支持转换旧的数据了

作者：小文 发布于：2013-8-22 14:26 Thursday 分类：功能介绍

以前版本在转化数据库时没有处理网址库和内容库，现在的版本是可选了的。

标签: 转化

评论(1) 引用(0) 浏览(16139)

利用语法表达式生成网址

作者：小文 发布于：2013-8-15 17:31 Thursday 分类：功能介绍

比如有这样的网址要采集，以前的程序是没法自动生成的

http://aa.com/a/1.htm

http://aa.com/a/2.htm

http://aa.com/b/1.htm

http://aa.com/b/2.htm

http://aa.com/c/1.htm

....

http://aa.com/z/2.htm

这样的网址，在V8中可以利用语法表达式来生成，打开 “添加开始采集网址"

我们先获取等差数列的表达式

然后获取字母的生成表达式，注意右键那里有一个右键获取

 

目前表达式中支持等差，等比，字母三种方式，每个的表达式都可以按上面的方法复制得到。现在在表达式生成网址中将两个表达式合并。

最后测试看结果。

 

如果一个表达式中有一个参数是重复了两次，且是同时重复的，加一个{$0}即可以引用，其中0是优先级。

标签: 网址

评论(0) 引用(0) 浏览(16165)

关于Web发布时提交纯文本POST数据的设置方式

作者：小文 发布于：2013-8-15 16:59 Thursday 分类：功能介绍

有的网站的数据提交方式是使用纯TXT或其它方式提交的，所以用v8的表单方式是直接处理不了的，如下

 

POST http://blog.youdao.com/dwr/exec/outfoxAjaxWrapper.getDetailedSummary.dwr HTTP/1.1

Host: blog.youdao.com
User-Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9.2.3) Gecko/20100401 Firefox/3.6.3 QQDownload/1.7
Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8
Accept-Language: zh-cn,zh;q=0.5
Accept-Encoding: gzip,deflate
Accept-Charset: GB2312,utf-8;q=0.7,*;q=0.7
Keep-Alive: 115
Connection: keep-alive
Content-Type: text/plain; charset=UTF-8
Referer: http://blog.youdao.com/search?q=%E5%85%A5%E5%85%9A%E7%94%B3%E8%AF%B7%E4%B9%A6&t=a
Content-Length: 618
Pragma: no-cache
Cache-Control: no-cache

callCount=1
c0-scriptName=outfoxAjaxWrapper
c0-methodName=getDetailedSummary
c0-id=6738_1287908353987
c0-param0=string:%25E5%2585%25A5%25E5%2585%259A%25E7%2594%25B3%25E8%25AF%25B7%25E4%25B9%25A6
c0-param1=string:description%253A%2522%25E5%2585%25A5%25E5%2585%259A%2B%25E7%2594%25B3%25E8%25AF%25B7%25E4%25B9%25A6%2522%257E5%2Btitle%253A%2522%25E5%2585%25A5%25E5%2585%259A%2B%25E7%2594%25B3%25E8%25AF%25B7%25E4%25B9%25A6%2522%257E5
c0-param2=string:%25E5%2585%25A5%25E5%2585%259A%2509%25E7%2594%25B3%25E8%25AF%25B7%25E4%25B9%25A6
c0-param3=string:C8B3583B48911F2C
c0-param4=boolean:false
c0-param5=string:UTF-8

xml=true

 

不过V8也提供了一种变通的实现方式。双击插件设置，可以看到一种发布方式，选择 txt/plain 方式。

然后在内容发布参数中如此设置，结果会如何呢？

可以看到，结果是表单名和表单值直接合并到了一块，然后每个表单之间以换行相连。

标签: post

评论(0) 引用(0) 浏览(19346)

添加或执行SQL语句让批量操作更快捷

作者：小文 发布于：2013-8-13 12:00 Tuesday 分类：功能介绍

如果用户需要对所有的任务数据库进行一个操作，或是在创建任务时添加一些新的字段，可以使用该功能。该功能在 扩展-》火车采集器-》添加或执行SQL语句 。注意，创建表时添加的语句，会在转换数据库类型时也起作用。

标签: SQL

评论(0) 引用(0) 浏览(12849)