|
自己爬取天某查数据--附分布式多线程源代码，爬取天眼查所有的完整数据，并且把数据存储到数据库，再用php一个后台管理系统，可以把这些数据管理起来，可以实现数据按地区搜索、导出excel、可以按公司名称搜索，当时想到是天某查数据量那么大，而且那么多模块的数据，整个网站有主要核心数据有以下19大模块：1基本信息、2法人代表、3主要成员、4股东&出资、5变更记录、6公司年报、7司法风险、8舆情事件、9岗位招聘、10商品信息、11网站备案、12商标数据、13专利数据,、14 作品著作权软件著作权、对外投资关系、税务评级、行政处罚、进出口信用、企业评级信用等十九个维度的企业数据，如果把这些数据爬下来，并且结构化，可以查询可以检索使用，可以导出到excel，可以生成企业报告。
（需要爬虫技术交流的朋友欢迎加我qq：2779571288） | 
转播
