火车采集器官方博客

E商统计预览版

作者：小文 发布于：2012-7-3 16:25 Tuesday 分类：开发计划

E商统计是一款用于抓取淘宝，天猫，拍拍，卓越等网店商品信息并进行分析的统计软件。它可以按关键字，按栏目对指定的商品进行抓取，也可以对指定的网店销售情况进行抓取分析。还可以对商品的交易信息，评论信息进行抓取和统计。它支持将抓取的数据导入其它的数据库或是网站，是网店数据分析的良好工具。该软件目前完成的功能有：搜索抓取和导出结果为excel.以下是该软件的操作方法：

1.软件的安装

打开火车头数据采集平台软件，在扩展菜单，扩展管理中安装E商统计即可。

2.软件的使用。

a.在分组上右键新建任务

b.首先设置任务名，然后设置要抓取的关键词，点添加后会出现内置浏览器

c.如图，在淘宝搜索后，点击确定

d.任务中就会添加了一个关键词，一个任务可以添加多个关键词，然后可以选是否采详细交易或评论

e.开始运行任务

f.任务运行过程

g.任务运行完成后，可以导出结果到Excel

 

h.最后导出的结果，该结果在附件中包含。

标签: E商统计 淘宝

评论(2) 引用(0) 浏览(13408)

关于部分服务器Head方法无法探测文件功能的解决办法

作者：小文 发布于：2012-6-1 9:31 Friday 分类：常见问题

火车采集器在探测文件真实地址过程中，会使用head方法请求下载地址，如果对方服务器返回禁止，程序会使用get方法去下载并探测下载地址，如果对方服务器返回200但是结果是错误的，采集器就可能无法获取到真实的下载地址。对于此情况，需要设置一个全局参数来对该网站只使用get探测文件地址方法。处理办法是

1.火车采集器升级到7.4.6.1版本

2.使用fiddler分析一下采集器探测下载的网址，提取网址中的域名。如www.locoy.com

3. 打开Configuration目录下的FileDetect.txt文件，如果没有，请新建一个.在打开的文件中输入域名 www.locoy.com ，如果是多个域名，每行一个。记得在文件的最后边再输入一个换行。保存文件。

4.重启采集器，即可以正常使用。

标签: 探测

评论(2) 引用(0) 浏览(7408)

将自己的数据导入采集数据库让采集器发布数据

作者：小文 发布于：2012-5-31 18:46 Thursday 分类：常见问题

有些朋友并不想通过火车采集器来采集数据，但又想通过火车采集器强大的发布功能来发布数据，这个要求是很容易实现的，请按以下步骤操作

1.新建一个任务，这操作会产生一个任务数据库，你然后通过其它方法将数据导入到这个数据库中。当然，这个任务你要设置发布。

2.在任务数据库中，将已采设置为true或1,mysql,sqlserver是1.

3.开始运行任务，不要选采网址和采内容，只选发内容即可。

标签: 导入

评论(0) 引用(0) 浏览(8708)

本地保存数据库，如mysql,sqlserver修改密码后的处理办法

作者：小文 发布于：2012-5-31 14:36 Thursday 分类：常见问题

如果你的数据库密码修改了，那么采集器会在采集时链接不上数据库。这时，你需要对采集器配置文件进行一些修改，而不必要去转换数据库。修改的文件是 Extensions\LocoySpider\Database.xml .其中的参数请对照原值修改，然后重启采集器即可正常。

标签: 修改密码

评论(0) 引用(0) 浏览(4328)

字体“Comic Sans MS”不支持样式“Regular”的解决办法

作者：小文 发布于：2012-5-16 19:42 Wednesday 分类：常见问题

当出现这个提示时，请下载附件中的字体安装即可。

2012-05-09 15:44:01,086 [1] ERROR System.Object [(null)] - UI Exception:
System.ArgumentException: 字体“Comic Sans MS”不支持样式“Regular”。
   在 System.Drawing.Font.CreateNativeFont()
   在 System.Drawing.Font.Initialize(FontFamily family, Single emSize, FontStyle style, GraphicsUnit unit, Byte gdiCharSet, Boolean gdiVerticalFont)
   在 System.Drawing.Font.Initialize(String familyName, Single emSize, FontStyle style, GraphicsUnit unit, Byte gdiCharSet, Boolean gdiVerticalFont)
   在 System.Drawing.Font..ctor(String familyName, Single emSize)
   在 ImageComboBox.ImageComboBox.O101l001l0lO01011Ol1l0(DrawItemEventArgs O)
   在 ImageComboBox.ImageComboBox.OnDrawItem(DrawItemEventArgs O)
   在 System.Windows.Forms.ComboBox.WmReflectDrawItem(Message& m)
   在 System.Windows.Forms.ComboBox.WndProc(Message& m)
   在 System.Windows.Forms.Control.ControlNativeWindow.OnMessage(Message& m)
   在 System.Windows.Forms.Control.ControlNativeWindow.WndProc(Message& m)
   在 System.Windows.Forms.NativeWindow.Callback(IntPtr hWnd, Int32 msg, IntPtr wparam, IntPtr lparam)

 

标签: 字体

评论(0) 引用(0) 浏览(19174)