网络矿工数据采集软件
㈠ 网页采集用什么软件比较好
现在网上的数据采集软件主要有以下几种:
火车头、网络矿工、有讯软件、网络神采、易采、狂人、三人行、gooseeker等
以上都是收费软件,但侧重点都不同。也有免费的,但功能都有限制,基本没什么大的用处。
火车头: 功能全,历史悠久,但配置太过复杂,且功能众多很难掌握,但确实功能很全面,是通用采集软件,简单的页面什么都可以采集。我是个搞技术的,但我也用不来说车头的功能,太复杂。
网络矿工: 推出时间不长,略微不够稳定,但其提供的数据采集和数据加工何为一体的功能很不错。
有讯软件:实际上它并不是提供软件,而是提供采集服务。你只要告诉他们要采集哪里的数据,和要采集的具体内容,其它什么都不需要懂,也不需要做,他们就会把采集到的数据提供给你们,而且还可以满足你的任何数据处理要求。
网络神采,同样也是一款历史悠久的软件,采集方面也很强大,其他方面没有太深的影响。
狂人、三人行,未用过,但据说采集论坛和博客是很强悍的,采集其他类型的数据和稍微复杂点的数据就不行了。
gooseeker:好像是提供在线采集的,没用过,它们的网站看不懂。但据说也还不错。
个人觉得:如果你是采集纯静态页面,且数据结构不是很复杂的那种,也懂点技术的,那就用火车头吧。
但如果你不懂技术或者采集的网页数据比较复杂,尤其是那种页面源码里面都找不到你要采集的数据,这种就只能去找有讯软件的采集服务才可以做到。
㈡ 有什么采集网页数据的软件
这个还是看你是什么用途
1、假如是要好的,商业用途的话,那肯定是乐思了,国内最早的专门研究数据采集的技术的,准确、适用性强
2、假如是个人的,数量较小的话,火车头、军犬都可以,主要是很适合小规模数据和少量网站的采集用
3、如果是采集论坛、博客、文章的信息,建议可以考虑狂人、三人行、及火车头。
4、如果是采集结构化的表格数据,可考虑网络矿工、火车头、网络神采
5、如果侧重数据加工,则可考虑网络矿工,其对采集数据的加工能力非常强大,非常适合不懂技术的人员来使用。
使用简易型方面而言,基本都差不多,火车头比较复杂一些,但功能也很强,但总觉得功能很多,都不是特别有用。
网络神采使用也算简单,但其价格比较贵。
网络矿工使用比上面都简单一些,功能还实用一些,但由于刚推出不久,稳定性不是特别好。
看你自己选择了