本篇查询的是人工智能前5页相关公司的信息： #主要是异常处理和反爬处理 1.异常处理就是有的公司不是公开的数据没有所以需要判断，不然程序会出错 2.反爬页面浏览多了会需要登录，这边用cookie处理 import requests from lxml import etreegs[…

\xe8\xb0\xa3\xe8\xa8\x80 \ 中文乱码转换： \xe8\xb0\xa3\xe8\xa8\x80.encode(raw_unicode_escape).decode("utf-8")#本文通过新的方式爬取突破 由于公司列表页信息很少反爬，除了公司名称其他信息都没有，所以可以取巧提取注册时间…

天眼查官方网址：https://www.tianyancha.com/ 国家企业信息信息公开系统：http://www.gsxt.gov.cn/corp-query-homepage.html 介绍： 天眼查是一款 “都能用的商业调查工具”，实现了企业信息、企业发展、司法风险、经营风险、经营…

因为部分原因,需要用到天眼查的数据,虽然开了天眼查的会员账号,但是导出Excel数据字段内容太少,部分例如工商注册号,组织机构代码都没用,感觉有些不完整,所以利用数据库里已有的公司名称来进行采集,将信息页的内容采集完整 吐槽下,天眼查的反扒确实蛮多的,最早用软件采集,但是…

写一个天眼查的爬虫，大家有需要的可以直接拿来用,是基于selenium写的。所以使用之前得下载上这个插件。 爬的是上面的那个页面 from selenium import webdriver from selenium.webdriver.support.wait import WebDriverWait from selenium.webdriver.support impor…

续企查查之后，爱企查作为不用登录也能查的网站，还自带json返回，方便了数据的获取，深受我的喜爱。 天眼查只能手机号登录，没有企查查QQ登录的方便，勉强把它拉过来吧，他既没有json返回&#xff0…

天眼查数据采集与分析 1、天眼查是什么 天眼查是由商业查询平台，在基于独有核心技术图数据库的基础上， 构建了完备的集数据采集、数据清洗、数据聚合、数据建模、数据产品化为一体的大数据解决方案。 秉持“让每个人公平地看清这个世界”的使命&#xff…

时隔2年多，偶然看到自己的这篇文章，看到下面好多求数据的同学，实在抱歉，一方面之前数据已经丢失，一方面个人博客许久未关注，故没有及时答复。 现在重新发送数据给各位同学，仅作学习使用&#x…