作者:dong 发布于:2015-11-6 13:43 Friday 分类:其它资源
大数据热潮铺天盖地的卷来,尤其在今年9月国家发布《促进大数据发展行动纲要》之后,大数据被推向国家战略高度,几乎各行各业都开始了积极布局,抢占数据竞争优势,而此时抓住数据显得尤为迫切。
抓
住数据不仅是指抓住自身长期累积的数据,还包括从外部获取到的数据支持。以电商为例,业务开展不顺利要思考是否是某个环节出了问题?定价、标题,还是服
务?在分析完自身的经营数据后,电商需要获得同类型热销商品在网页中所展示的一些数据,其中包括热销商品的标题数据,用于优化产品的关键词;用户评价数
据,用于分析此类客户的行为和情感;产品价格数据,用于自身产品的精准定价。拥有了这些数据并和自身数据整合分析后,就掌握了清晰的业务方向,可以做精准
的推广,大家常说的“爆款”多由此而来。
不
仅是电商,企业、政府,科研等都是如此,在数据引领下,能够带来更为清晰且正确的思路。我们现在所说的数据,区别于样本,是互联网中海量信息共同带来的佐
证。这些数据通常数量庞大,在网页中以非结构化的复杂形式存在。数据需求群体获取这些数据往往比较困难,传统的复制粘贴则繁琐耗时,效率低下。
火车采集器,作为一款专业的网页数据采集软件,一直致力于帮助用户进行数据挖掘,网页中能看到的信息,无论是文字,图片还是文件都可以快速地采集,同时支持对数据进行需求处理,让数据更加符合要求。除此之外还可以将数据发布到网站或数据库中,真正将数据利用起来。
在官方发布了新版本火车采集器V9之后,火车采集器的易用性和速度大幅提升,并提供了大量教程,助力广大数据需求群体更加便捷的获取数据。
数据海量和复杂的特性导致我们获取数据变得困难,但如今技术的发展解决了这一难题,未来我们顺应时代趋势,充分掌握可用的数据资源,在信息化竞争中占领高地。聚焦大数据,驾驭大数据,发挥出大数据的思维,抓住全球大数据机遇!
媒体报道:
网易新闻:
http://news.163.com/15/1105/13/B7LN8DF100014AEE.html
搜狐媒体:
http://mt.sohu.com/20151105/n425363007.shtml
赛迪网:
http://www.ccidnet.com/2015/1105/10047718.shtml
比特网:
http://do.chinabyte.com/199/13610699.shtml
科技讯:
http://www.kejixun.com/article/201511/133444.html
中华网:
http://money.china.com/fin/sxy/201511/05/1981435.html
中国软件资讯网:
http://www.cnsoftnews.com/news/201511/32867.html
和讯:
http://tech.hexun.com/2015-11-05/180376581.html
央视广东:
http://yueyu.cntv.cn/2015/11/05/ARTI1446714579474188.shtml

标签: 大数据
评论(1) 引用(0) 浏览(14543)
作者:dong 发布于:2015-10-28 9:39 Wednesday 分类:官方公告
网页抓取工具火车采集器历经十年的更新迭代,在2015年9月推出了V9版本。火车采集器V9经过前期数月的认真筹备和大家的积极公测终于完美的上线了,相对之前的版本,V9的多项优化受到了大家的关注与好评。无论是从性能上还是功能上,V9都是非常值得体验的。也期待广大用户们继续提出宝贵的建议,我们会将火车采集器越做越好!
下载地址:http://qiniu.locoy.com/v9/LocoySpider_V9.0_Build20150917.rar

一起看看V9都有哪些亮点吧~
在UI设计上:
Ø V9一改V8的单一灰色界面,采用了与Office和Windows相匹配的多种可选界面风格,用户可依据个人偏好进行设置;
Ø 常用设置提至菜单界面中直观显示,使用更方便。
系统方面:
Ø V9采用AnyCPU X64位开发,更好兼容32位及64位系统;
Ø 使用了九年的.NET2.0框架在V9中升级到.NET4.0框架;
Ø 支持最新的Win10系统中运行
在功能操作上:
新增:
Ø 二级代理服务器新增Socks代理
Ø 任务运行过程中可修改线程数等参数,实时调节运行速度,添加可查看任务运行当前及总体速度功能
Ø 支持SSH(SFTP文件)上传
Ø 内容提取新增JSON提取方式,提取JSON数据更加简单
Ø 插件编辑器新增C#源码文件插件,类似PHP源码插件一样,编辑后直接生效,但比PHP源码插件支持更多的插件接口
Ø 软件闪退,支持保存未完成的任务进度
Ø 新增消息机制
修改:
Ø V9将采网址和采内容的方式合并,列表采集及内容采集使用不同队列,优化采集流程,更新数据内容的方式由Update改为insert,大幅提升采集及入库速度;
Ø 任务运行合并到统一界面,添加“实时数据”查看和“任务详情”统计;
Ø 修改了原有的无限级列表页网址获取模式,使无限级配置操作更加简单;
Ø 字段重复性对比功能不再使用数据库unique方式,改为内存Md5_16对比,更加精准;
Ø 标签数据的来源更加细致化,可设置从默认页、分页和多页的源码,URL地址及返回头信息中提取。
主要优化部分就是上面这些啦,看完之后是不是觉得V9很炫酷,那就果断更新升级吧,还在服务年限内的用户免费升级到V9哦!
标签: 网页抓取工具 火车采集器V9
评论(8) 引用(0) 浏览(25800)
作者:dong 发布于:2015-10-28 9:34 Wednesday 分类:免费插件
压缩包中有2个文件,"火车伪原创插件.dll"这个文件放到Plugins目录下。“火车伪原创插件配置工具.exe”这个文件放在采集器根目录下,和LocoySpider.exe放在同一目录。
通过使用配置工具来填写账号、密码等信息,配置好之后,新建任务,创建"标题"和"内容"标签,然后在其他设置中->插件->采集结果处理插件,选择"火车伪原创插件.dll"。
火车伪原创插件.zip
标签: 火车采集器伪原创插件
评论(2) 引用(0) 浏览(21541)
作者:dong 发布于:2015-9-22 17:47 Tuesday 分类:官方公告
2015年,火车采集器迎来了十周年庆典,感恩与火车采集器一路相伴的你们,让我们每一天醒来都有不断前行的动力。在此十周年之际我们准备了一系列好玩的活动,还有丰富的奖品,期待这个金秋能与您嗨起来。但我们知道其实对用户最好的回馈是用心做产品,所以,超炫酷的火车采集器V9,也来了!
活动一:优惠码大放送
活动二:网站人气投票
活动三:有奖问答
活动四:论坛有奖盖楼活动
马上参加活动:http://www.locoy.com/activity/v9
标签: 火车采集器软件
评论(0) 引用(0) 浏览(8025)
作者:dong 发布于:2015-9-22 17:42 Tuesday 分类:官方公告

最好用的网页抓取工具火车采集器历经十年的更新迭代,在2015年9月推出了V9版本。火车采集器V9经过前期数月的认真筹备和大家的积极公测终于完美的上线了,相对之前的版本,V9的多项优化受到了大家的关注与好评。无论是从性能上还是功能上,V9都是非常值得体验的。也期待广大用户们继续提出宝贵的建议,我们会将火车采集器越做越好!

一起看看V9都有哪些亮点吧~
在UI设计上:
Ø V9一改V8的单一灰色界面,采用了与Office和Windows相匹配的多种可选界面风格,用户可依据个人偏好进行设置;
Ø 常用设置提至菜单界面中直观显示,使用更方便。
系统方面:
Ø V9采用AnyCPU X64位开发,更好兼容32位及64位系统;
Ø 使用了九年的.NET2.0框架在V9中升级到.NET4.0框架;
Ø 支持最新的Win10系统中运行
在功能操作上:
新增:
Ø 二级代理服务器新增Socks代理
Ø 任务运行过程中可修改线程数等参数,实时调节运行速度,添加可查看任务运行当前及总体速度功能
Ø 支持SSH(SFTP文件)上传
Ø 内容提取新增JSON提取方式,提取JSON数据更加简单
Ø 插件编辑器新增C#源码文件插件,类似PHP源码插件一样,编辑后直接生效,但比PHP源码插件支持更多的插件接口
Ø 软件闪退,支持保存未完成的任务进度
Ø 新增消息机制
修改:
Ø V9将采网址和采内容的方式合并,列表采集及内容采集使用不同队列,优化采集流程,更新数据内容的方式由Update改为insert,大幅提升采集及入库速度;
Ø 任务运行合并到统一界面,添加“实时数据”查看和“任务详情”统计;
Ø 修改了原有的无限级列表页网址获取模式,使无限级配置操作更加简单;
Ø 字段重复性对比功能不再使用数据库unique方式,改为内存Md5_16对比,更加精准;
Ø 标签数据的来源更加细致化,可设置从默认页、分页和多页的源码,URL地址及返回头信息中提取。
主要优化部分就是上面这些啦,看完之后是不是觉得V9很炫酷,那就果断更新升级吧,还在服务年限内的用户免费升级到V9哦!
官方网站:www.locoy.com
下载地址:http://www.locoy.com/download
标签: 网页抓取工具
评论(0) 引用(0) 浏览(8172)
« 30 31 32 33 34 35 ...
»