天眼查如何获取到企业工商信息的?天眼查会员账号

天眼查通过网络爬虫抓取了全国企业信用信息公示系统的绝大部分公司工商数据。

它不生产信息,只是一个聚合站,每个省的查询接口和对应的 HTML 结构是不同的,如何高效抓取及解析数据;

这个系统并没有一个展示所有公司的列表,需要传递一个参数查询,如何遍历所有注册公司。

对于解决方案,第一个难点有两个需要解决的问题:1) 各省查询的时候提交请求参数不同; 2) 解析的网页结构不同。第一个无他法,只有硬着头皮手写三十多个不同的提交请求的方式,来模拟各省份不同的查询接口。第二个,其实是可以做到通用,因为虽然网页结构不完全相同,但是最后的呈现形式大同小异,所以是有方式做到非常通用的解析代码的。之所以不说百分之百通用,是因为总有例外需要特殊处理,比如重庆的工商数据,返回的就是一个 JSON 串,不需要再去解析 HTML。

第二个问题才是真正棘手的。无法直接遍历工商信息,那么怎样获取尽可能多的工商数据呢?第一,全国企业信用信息公示系统的访问时很慢的,所以在这里做遍历的话,效率会非常低。但是,每个公司会有唯一的组织机构代码,生成规则可以在网上找到,或者可以直接买一本回去慢慢研究(组织机构代码),通过生成所有的组织机构代码,就可以去这个网站——「全国组织机构代码管理中心 — 诚信体系实名制查询」——查询到对应的基本信息,然后再会到刚才的全国企业信用信息公示系统,就可以查询到对应的工商信息了。

另外,我相信天眼查还会做的一件事就是,当用户查询一家公司,在自己数据库没有找到结果的时候,会立即去全国企业信用信息公示系统查询,并将结果保存下来。

做到上面的内容,还需要一种机制定期更新数据库中的大量公司的信息,当然这是后话。当然,这两步中都面临一个问题——验证码。数以千万计的公司,如果使用人肉打码的话,效率和成本上肯定都是无法承受的,所以,相信天眼查内部还会有一位以上图像识别方面的大牛,毕竟上面出现的网站中有些验证码的识别还是非常困难的。

免费领取七天天眼查会员 企业信息查询工具

活动介绍

天眼查VIP活动会员领取,打开地址直接领取即可,已有会员会在原基本上叠加7天,需要的可以领,这是一款一站式个人与企业信息查询工具!

活动地址

点我进入

 

活动时间有限,如果失效,联系本站小编获取临时账号(V zhiweizhiyuan)。天眼查企查查爱企查VIP会员临时会员数据会员等都有。

天眼查vip会员共享,天眼查会员企查查会员比较孰优孰劣

我因为工作需要,买了个企查查一年会员,一个天眼查一年会员。以下是从我的个人体验,说一下这两家的优劣。功能定位上,两个产品很多信息是一样的,都是抓取来的,可能因为算法的不通,有部分企业的信息不太一样。所以只能说各有优劣,不好说哪个好哪个坏。所以我也是为了扬长避短,有所比较,才同时买了两家会员。但是,从这个产品服务上就看出差距了。我买会员的费用是单位报销的。于是我就按照这个价格申请了费用。结果,购买完会员开发票这一步就不一样了:企查查:开发票是包邮送到我手上的。全程手机操作,没有任何问题;天眼查:手机端操作是没有办法开立增票的,经咨询客服,要求到网页端申请,网页端信息填完以后,还需要打印一份企业的开票信息表,加盖公章,又加了一道用印申请,扫描,上传的复杂流程。这一套走完,发票申请页面早就失效了,又得重新再填一遍开票信息。终于提交了开票申请,还要我支付15元快递费,没有任何商量余地。亲身经历,孰优孰劣各位看官自己评判吧。