结果:找到“爬取、”相关内容183个,排序为按回复时间降序,搜索更多相关帖子请点击“高级”
python爬取专利网站数据
14 个回复 - 7251 次查看
关于企业创新的研究基本离不开专利数据,数据来源http://pss-system.cnipa.gov.cn/sipopublicsearch/portal/uiIndex.shtml。但是根据公司名称一个一个单独查询数据工作量较大,于是写出了python程序进行爬取。
爬取 ...
2019-9-5 21:17 - dream1095 - 现金交易版
百度指数代码--可爬取所有年限的数据
13 个回复 - 3645 次查看
这是我自己写的百度指数爬虫代码,可以爬取所有年限的指数,有需要可以给我留言,如需指导也请给我留言呀。
这个代码只需要改变你需要搜索的关键词参数就可以了。欢迎大家的支持!!!!!
2020-1-31 18:40 - 陈果1 - 现金交易版
中商情报网上市公司数据STATA爬取及程序
4 个回复 - 1213 次查看
中商情报网上市公司数据STATA爬取及程序
中商情报网是国内第三方市场研究机构和企业综合咨询服务提供商。 已构建起企业商业情报数据库,致力于为企业中高层管理人员、企事业发展研究部门人员、市场投资人士、投行及 ...
2022-2-21 15:11 - hnq932044 - 现金交易版
批量爬取知网统计年鉴详细介绍附代码
50 个回复 - 16624 次查看
批量爬取知网统计年鉴的方法,需要学校购买过该统计年鉴库
这里以爬取1984年到2017年中国城市统计年鉴的所有年份的excel版数据为例
下载附件就可以拿到方法和详细举例了,资源收集不易,希望对大家有帮助
实在没 ...
2019-6-19 09:12 - hellohappy0 - 经济统计专版
【爬虫数据】爬取的北京市游客轨迹数据分享(GPS数据集)
16 个回复 - 5300 次查看
游客共享的GPS地理坐标共享数据有着极高的研究价值通过利用python爬虫手段对于互联网的共享地理位置信息进行大数据提取也成为科研中必要的技术手段 GPS轨迹数据应用场景极其广泛比如利用徒步旅游者共享的GPS轨迹数据 ...
2020-6-3 11:19 - 小瑞哥 - 数据求助
分地区、年份和关键词爬取百度指数
3 个回复 - 4245 次查看
1. 百度指数介绍随着互联网的普及,特别是微信、微博、抖音等网络社交平台的完善,公众越来越倾向于通过互联网新媒体了解社会信息和实时热点,并且在社交平台表达自己的看法。近年来,国内外的一些学者在研究中开始使 ...
2022-5-17 19:39 - 1114779466 - 数据交流中心
python爬取年报管理层讨论与分析
3 个回复 - 5111 次查看
使用林乐和谢德仁使用的LM词典进行爬取,中文词典来源于有道翻译(有英文词典也有中文词典,)
1、年报来源于巨潮咨询
2、爬取更新后的年报
3、剔除ST
4、摘取管理层讨论与分析,纯文本部分(有该部分的数据)
...
2021-11-30 12:00 - 18004817351 - Stata专版
Python_Python爬虫可以爬取什么
4 个回复 - 2029 次查看
Python_Python爬虫可以爬取什么如果你仔细观察,就不难发现,懂爬虫、学习爬虫的人越来越多,一方面,互联网可以获取的数据越来越多,另一方面,像 Python这样的编程语言提供越来越多的优秀工具,让爬虫变得简单、容 ...
2020-3-25 17:45 - 资料狂人 - 计量经济学与统计软件
【房价】Python爬取房价信息数据及房价预测
1 个回复 - 1483 次查看
Python爬取房价信息数据及房价预测 目前,房价成了全国各地、人人都在讨论的热门话题,也是一个敏感话题。接下来房价会怎么走?趋势怎样?从官方很难获得全面、准确的数据可以参考。只能用Python爬取房价信息并分析、 ...
2019-11-24 14:25 - Mujahida - 现金交易版
利用python爬取和讯网企业社会责任数据(2010-2020)(2021.10.2)
3 个回复 - 1905 次查看
excel,csv数据+python代码,如需其他数据格式可私聊,或者定制python爬虫
样本数据
,name,year,gen_score,rink,Shareholder_liability,Employees_liability,Consumer_rights_liability,environment_liability,soc ...
2021-10-2 15:37 - clh12138 - 现金交易版
金融科技指标python爬取代码资料集
1 个回复 - 4348 次查看
[hr]你好,我是B站UP主鱼同学(B站用户名:你好我是鱼同学吖)本人在B站平台录制了诸多建模视频,小伙伴们可以根据需求进行学习。[hr]【该资料可爬取特定样式的数据】
该资料爬取的数据是“百度新闻”,只要小伙伴的 ...
2022-5-2 10:33 - 鱼同学实证建模 - 现金交易版
有关数据爬取的三大法律案件
0 个回复 - 418 次查看
出品 | CDA数据分析师
在当下大数据时代,数据具有非常大的价值,许多企业都需要使用它,无论是以商用形式还是非商用形式。而Web抓取是最常见的数据获取方式之一,Web抓取使用漫游器自动访问和收集公共可用的数据 ...
2022-6-2 11:00 - AIU人工智能学院 - 数据分析师(CDA)专版
利用Python爬取知网所有期刊,以及爬取期刊最新文献资料
0 个回复 - 1766 次查看
利用Python爬取知网所有期刊,以及爬取期刊最新文献资料
文件1:
利用Python爬取PC端知网所有期刊信息,包括期刊名和影响因子(其他数据可以按照相同方式添加)
文件2:
利用Python爬取PC端期刊最新文献 ...
2022-4-28 00:18 - 修波 - 现金交易版
python爬取欧易okey所有虚拟货币价格
0 个回复 - 2685 次查看
python爬取欧易okey虚拟货币实时价格
import d#自定义设置路径函数
from mysql import *
import mysql#mysql为自定义函数库,在我的csdn博客资源中下载,用户名:sirhzx
from selenium import webdriver
brow ...
2022-3-11 10:03 - sirhzx - 数据分析与数据挖掘
最新·2019+2020年百度迁徙大数据爬取整理版
3 个回复 - 2021 次查看
一、最新·2019+2020年百度迁徙大数据爬取整理版
数据名称:百度迁徙大数据爬取整理版,数据已整理好,可直接用于研究
数据来源:百度地图-迁徙大数据
数据格式:60887条,包括dta和excel格式
数据日期:迁入 ...
2021-9-2 12:33 - 三农硕士 - 现金交易版
利用python在爬取上市公司年报
14 个回复 - 11159 次查看
这些天在学习python,正好要爬上市公司年报,分享给大家网站是巨潮资讯网
基本上上面有的公告都可以爬,时间范围也可以调整,只要改动get_pdf里的data参数,category和seDate
也可以在searchkey里填上自己要的关键 ...
2020-8-2 15:54 - 中午不睡觉98 - python论坛
141万+招聘爬取数据-北京(2018年)
0 个回复 - 641 次查看
一、数据介绍 数据名称:北京招聘数据 数据范围:北京 数据年份:2018年7月 数据样本:1,418,137条 数据来源:58同城、智联招聘 用途:衡量各省人力资本和物质资本的效率 数据指标: 原网址、 ...
2022-1-3 15:58 - hwwhss - 现金交易版
133万+招聘爬取数据-上海(2018年)
0 个回复 - 362 次查看
一、数据介绍 数据名称:上海招聘数据 数据范围:上海 数据年份:2018年7月 数据样本:1,337,547条 数据来源:58同城、智联招聘 用途:衡量各地区、各行业人才缺口的情况 数据指标:原网址、发 ...
2022-1-3 15:52 - hwwhss - 现金交易版
批量爬取安居客房价信息python 程序
1 个回复 - 1145 次查看
在网上找了一大圈,带有界面的爬虫软件都很贵,买不起啊。各种语言写的爬虫程序试过了,都不好用。最后发现其实安居客有反爬虫的设置,一般的 request 对它不管用。有些大牛伪装浏览器操作写了爬虫,确实可行,但是提 ...
2021-2-28 16:39 - ujbbv - 现金交易版
需要爬取微博页面关于医保关键词的内容,已经获得爬虫代码,但是不会替换一些内容
0 个回复 - 651 次查看
from urllib.parse import urlencode
import requests
from pyquery import PyQuery as pq
import os
import re
import xlwt
import pandas as pd
current_Path = os.path.dirname(os.path.abspath(__file_ ...
2021-8-10 20:33 - 志地有深 - 新手入门区
12306爬取车次源代码
0 个回复 - 453 次查看
12306爬取车次源代码1111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111 ...
2021-5-26 21:51 - 有匪123 - 现金交易版
网络视频平台上爬取热门电影(python)
0 个回复 - 632 次查看
热门电影爬取方法,给大家推荐如何在网络视频平台上爬取热门电影,文件以爱奇艺为例进行内容介绍。操作步骤1、获取到url内容2、css选择其选择内容3、保存自己需要数据具体步骤见文件中
2021-5-26 21:33 - 秃头女研究生 - 现金交易版
微博信息爬取Paython代码
1 个回复 - 691 次查看
自己编写的Paython微博ID关注和粉丝信息爬取,可爬取粉丝和关注的昵称、ID和地理位置,具体内容如图,编写代码不易,所以需付费购买,与大家共享。
1.附件列表:
2.爬取信息列表:
3.Paython代码:
2021-5-20 14:55 - zhuming1992 - 现金交易版
网页爬取 如何爬取表格数据
4 个回复 - 1065 次查看
这是我想爬取的网址,一个记录新西兰犯罪信息的网站:https://www.police.govt.nz/crime-snapshot
网站打开后可以看到一个表格,记录着各种犯罪类型以及对应的犯罪人数。我想获得这个表格的数据,但是发现只能选中 ...
2021-3-30 14:54 - derekzzy - R语言论坛
想请教一个R爬取动态网页的弹窗内信息的问题
10 个回复 - 1390 次查看
我需要爬取砂土车这个网页上那些车的信息。网页初始状态下时有很多小黄车车,鼠标点击某一个车时就会出现一个小弹窗,里面有这个车的一些信息(Vehicle、Age Range、source date等等)。请问怎样才能爬取所有小黄车的 ...
2021-1-29 12:33 - derekzzy - R语言论坛
想请教一个R网页爬取的问题
4 个回复 - 512 次查看
如图所示,我想分别获得红圈圈起来的这三个数据,我的逻辑是获取td=Vehicle的兄弟td节点的数据,就得到SN70V0XV0。或者说获取div里第一个tr里的第二个td的数据,也能得到SAN70V0XV0,但是不知道具体该怎么写,有大佬 ...
2021-1-26 11:08 - derekzzy - R语言论坛
爬取中国考研网全套代码
0 个回复 - 710 次查看
这个是国内领先的考研资讯门户网站,致力于服务广大考生,是研究生招生信息的发布平台。包括调剂信息和招生信息利用python的scrapy框架进行数据爬取
代码直接放在scrapy目录下即可使用
2021-1-24 14:03 - 5235228341 - 现金交易版
用python爬取和讯网企业责任数据
6 个回复 - 3587 次查看
最近需要用到和讯网站的企业评分数据因为手动复制数据太麻烦,决定写一个python程序把数据爬下来
数据原始网址:http://stockdata.stock.hexun.com/zrbg/Plate.aspx?date=2016-12-31
因为网站数据以动态网页的 ...
2019-8-28 16:48 - dream1095 - 现金交易版
爬取扇贝单词书
7 个回复 - 3423 次查看
可以爬取任意扇贝单词书(学习使用,勿用于非法用途),网页结构变动可能导致不可用
输入单词书网址回车就可以,在同目录下保存为txt文件,按字母排序
2019-5-15 23:44 - wuliea - python论坛
爬虫大法:空气质量数据的爬取
2 个回复 - 3440 次查看
十八大以来,国家开始了一系列治理环境的举措;2015年柴静《穹顶之下》火爆全网,公众开始密切关注PM2.5问题。自此,环境经济学开始了逆袭之旅,从一个冷门学科一跃成为了热门学科。
空气质量数据学者们经常使用的数 ...
2020-4-20 15:29 - 江河1703 - python论坛
爬虫大法:日度空气质量数据的爬取
0 个回复 - 1742 次查看
之前给大家分享了月度空气质量数据的爬虫程序,详见“爬虫大法:空气质量数据的爬取”一文。事实上,中国空气质量在线监测分析平台(https://www.aqistudy.cn/historydata/)也提供了全国384个城市和地区的日度空气质 ...
2020-5-3 15:11 - 江河1703 - 计量经济学与统计软件
有关数据爬取的三大法律案件——AIU人工智能学院
0 个回复 - 737 次查看
AIU人工智能学院:数据科学、人工智能从业者的在线大学。[/backcolor]数据科学(Python/R/Julia)数据分析、机器学习、深度学习[/backcolor]
[/backcolor]出品 | CDA数据分析师[/backcolor]
在当下大数据时代,数据 ...
2020-4-25 07:48 - AIU人工智能学院 - python论坛
微博数据爬取
1 个回复 - 840 次查看
用python可以完成微博数据爬取吗?大佬求教
2019-10-24 19:39 - 风烟酒 - 爱问频道