结果：找到“网页 抓取”相关内容90个，排序为按回复时间降序，搜索更多相关帖子请点击“高级”
【免费】爬虫暖男冬日里为您免费爬取心仪数据(只能帮你到这里了，写论文还得靠自己）69 个回复 - 12438 次查看 爬虫君身在金融圈，身边的同事朋友都有各种各样或大或小的数据需求，毕竟现在进入大数据时代了嘛，很多时候都需要用数据来支撑说明自己的观点和看法。以前很多时候都是依靠编程来实现数据爬虫，不断地分 ...2017-12-21 14:27 - quandongping - 现金交易版
【原创获奖作品】“人人贷”网络借贷平台 全景调研及评估深度研究报告152 个回复 - 26584 次查看 重磅原创资料来袭~~~ 2013年被称为互联网金融元年，一系列互联网金融产品在此期间蓬勃发展：P2P、众筹、网络小贷、宝宝们！这一切都在标志着时代的开发与进步。正式基于此，我们团队通过人人贷公司的分析一窥 ...2014-11-24 13:59 - 狂热的爱好者 - 现金交易版
TB店信息 网页数据采集抓取0 个回复 - 384 次查看 网页数据采集抓取 采集了1611条taobao店信息 包含店名，距离，电话，地址，详情链接等字段 一次性采集完毕，不用一条一条复制粘贴了2023-2-21 16:35 - 2801959927 - 现金交易版
利用python抓取网上的网页数据
0 个回复 - 775 次查看 以这个网页的数据为例：https://www.onetonline.org/find/descriptor/result/4.C.3.a.2.a?a=1。这是一个关于各个行业的相关特征的打分和分类表。2020-4-15 22:14 - 夜雨花开 - 计量经济学与统计软件
0 个回复 - 775 次查看 以这个网页的数据为例：https://www.onetonline.org/find/descriptor/result/4.C.3.a.2.a?a=1。这是一个关于各个行业的相关特征的打分和分类表。2020-4-15 22:14 - 夜雨花开 - 计量经济学与统计软件
用RSelenium与网页交互，并抓取数据
2 个回复 - 3739 次查看 用R/python写个爬虫的话，网上有很多教程 这里介绍一个和网页交互，并抓取数据的方法 （比如在http://ccpl.psych.ac.cn/textmind/，分析800个文本，并抓取数据，网页提供的软件运行起来会报错，否则我也不至于写这 ...2017-3-25 18:08 - peishenfei - R语言论坛
2 个回复 - 3739 次查看 用R/python写个爬虫的话，网上有很多教程 这里介绍一个和网页交互，并抓取数据的方法 （比如在http://ccpl.psych.ac.cn/textmind/，分析800个文本，并抓取数据，网页提供的软件运行起来会报错，否则我也不至于写这 ...2017-3-25 18:08 - peishenfei - R语言论坛
【带搜索、网页抓取、正则、保存】【源码】python小例子。附源码及知识点讲解
62 个回复 - 10416 次查看 回帖有奖！ 可领3次哦 公司名字在程序同目录下的'公司全名.txt'中，一行一个 这是帮版友写的小程序： 100论坛币求python大神帮忙编一段程序完成从网页中抓取信息 输入：[/backcolor] 只用公司名，公司名 ...2014-8-7 14:18 - 莫小漠 - python论坛
62 个回复 - 10416 次查看 回帖有奖！ 可领3次哦 公司名字在程序同目录下的'公司全名.txt'中，一行一个 这是帮版友写的小程序： 100论坛币求python大神帮忙编一段程序完成从网页中抓取信息 输入：[/backcolor] 只用公司名，公司名 ...2014-8-7 14:18 - 莫小漠 - python论坛
excel抓取网页历史规律性数据
2 个回复 - 3254 次查看 求大神帮忙抓取2016/1/1-2016/12/31期间北京市的历史天气啊~~~ 能够给我VBA的程序也可以呀，感激不尽！！！ 网址：https://www.wunderground.com/history/airport/ZBAA/2016/1/1/DailyHistory.html?req_city=&req_ ...2017-2-28 18:21 - 蓁竺子 - Excel
2 个回复 - 3254 次查看 求大神帮忙抓取2016/1/1-2016/12/31期间北京市的历史天气啊~~~ 能够给我VBA的程序也可以呀，感激不尽！！！ 网址：https://www.wunderground.com/history/airport/ZBAA/2016/1/1/DailyHistory.html?req_city=&req_ ...2017-2-28 18:21 - 蓁竺子 - Excel
200论坛币求助如何用R或者Python抓取同花顺网页数据
10 个回复 - 7945 次查看 我想抓取部分的同花顺网页公开数据做一下数据挖掘方面的编程学习。但无奈同花顺上面的数据处理得很符合商业化要求，但却难以一次性全部获取。 我想请教高人能否用R或者Python来抓取下面这个同花顺网页的数据。这个 ...2014-11-4 11:21 - wqf_cufe - R语言论坛
10 个回复 - 7945 次查看 我想抓取部分的同花顺网页公开数据做一下数据挖掘方面的编程学习。但无奈同花顺上面的数据处理得很符合商业化要求，但却难以一次性全部获取。 我想请教高人能否用R或者Python来抓取下面这个同花顺网页的数据。这个 ...2014-11-4 11:21 - wqf_cufe - R语言论坛
求帮忙编一段程序从网页上抓取信息
4 个回复 - 1557 次查看 出100论坛币求解答[/backcolor] 具体来说，是从中国建设工程招标网的搜索中筛选所需信息，网址为：[/backcolor]http://www.projectbidding.cn/search/zaobiao.jsp?dfrom=2014-03-07&dto=2014-03-10&keyword=&field= ...2014-8-4 10:45 - 786317806 - 求助成功区
4 个回复 - 1557 次查看 出100论坛币求解答[/backcolor] 具体来说，是从中国建设工程招标网的搜索中筛选所需信息，网址为：[/backcolor]http://www.projectbidding.cn/search/zaobiao.jsp?dfrom=2014-03-07&dto=2014-03-10&keyword=&field= ...2014-8-4 10:45 - 786317806 - 求助成功区
100论坛币求python大神帮忙编一段程序完成从网页中抓取信息
6 个回复 - 2815 次查看 出100论坛币求解答 具体来说，是从中国建设工程招标网的搜索中筛选所需信息，网址为：http://www.projectbidding.cn/search/zaobiao.jsp?dfrom=2014-03-07&dto=2014-03-10&keyword=&field=&classid=2%2C6%2C7%2C8%2 ...2014-8-4 10:38 - 786317806 - python论坛
6 个回复 - 2815 次查看 出100论坛币求解答 具体来说，是从中国建设工程招标网的搜索中筛选所需信息，网址为：http://www.projectbidding.cn/search/zaobiao.jsp?dfrom=2014-03-07&dto=2014-03-10&keyword=&field=&classid=2%2C6%2C7%2C8%2 ...2014-8-4 10:38 - 786317806 - python论坛
如何调用Nvivo中的Ncapture抓取网页？
17 个回复 - 12897 次查看 我刚安装了Nvivo,正在摸索它的用法，求教怎么使用Ncapture功能去抓网页，多谢了2016-6-11 14:00 - 晶格点 - 新手入门区
17 个回复 - 12897 次查看 我刚安装了Nvivo,正在摸索它的用法，求教怎么使用Ncapture功能去抓网页，多谢了2016-6-11 14:00 - 晶格点 - 新手入门区
nvivo导入Ncapture的抓取网页，总是不成功。我发现ncapture抓取的网页类型是个小地球
1 个回复 - 1584 次查看 nvivo导入Ncapture的抓取网页，总是不成功。1，我发现ncapture抓取的网页类型是个小地球，不是PDF，如图1所示。不知道是不是这个问题导致后面的失败。 2.那我就不再抓取网页，直接将网页的文章抓下来，存为PDF，就是 ...2020-9-14 20:41 - odybrooksl - 爱问频道
1 个回复 - 1584 次查看 nvivo导入Ncapture的抓取网页，总是不成功。1，我发现ncapture抓取的网页类型是个小地球，不是PDF，如图1所示。不知道是不是这个问题导致后面的失败。 2.那我就不再抓取网页，直接将网页的文章抓下来，存为PDF，就是 ...2020-9-14 20:41 - odybrooksl - 爱问频道
rvest爬虫在节点名为变量的情况下批量抓取网页信息
2 个回复 - 1117 次查看 一般情况下，rvest爬虫在抓取时，先找到节点，然后顺次抓取节点下的所有信息。 在特殊情况下，会出现：一条信息对应一个节点，而这些节点名又是成规律出现的。例如： 信息01 对应节点名：#search_company_0 > ...2021-3-12 12:04 - stevekkk - R语言论坛
2 个回复 - 1117 次查看 一般情况下，rvest爬虫在抓取时，先找到节点，然后顺次抓取节点下的所有信息。 在特殊情况下，会出现：一条信息对应一个节点，而这些节点名又是成规律出现的。例如： 信息01 对应节点名：#search_company_0 > ...2021-3-12 12:04 - stevekkk - R语言论坛
300论坛币求帮写段代码从网页上抓取数据导出到excel表
11 个回复 - 1640 次查看 想用python从中国食药监局网站上导出5项公示信息，每项公示信息都导出其截止目前所有的公示记录，并存放在一个excel文件，最终是形成5个excel文件。 网址： http://app1.nmpa.gov.cn/data_nmpa/face3/dir.html?typ ...2020-10-17 11:30 - 786317806 - 悬赏大厅
11 个回复 - 1640 次查看 想用python从中国食药监局网站上导出5项公示信息，每项公示信息都导出其截止目前所有的公示记录，并存放在一个excel文件，最终是形成5个excel文件。 网址： http://app1.nmpa.gov.cn/data_nmpa/face3/dir.html?typ ...2020-10-17 11:30 - 786317806 - 悬赏大厅
300论坛币求帮写段代码从网页上抓取数据导出到excel表
0 个回复 - 752 次查看 想用python从中国食药监局网站(http://app1.nmpa.gov.cn/data_nmpa/face3/dir.html?type=hzp&CbSlDlH0=qArdqArzpkMcusp8PW9rUaXD68SDmlmeyKJ9sg3O4fEqqxL）上导出5项公示信息（国产特殊用途化妆品、进口化妆品、 ...2020-10-17 18:43 - 786317806 - python论坛
0 个回复 - 752 次查看 想用python从中国食药监局网站(http://app1.nmpa.gov.cn/data_nmpa/face3/dir.html?type=hzp&CbSlDlH0=qArdqArzpkMcusp8PW9rUaXD68SDmlmeyKJ9sg3O4fEqqxL）上导出5项公示信息（国产特殊用途化妆品、进口化妆品、 ...2020-10-17 18:43 - 786317806 - python论坛
教你怎样利用SAS抓取网页数据
1393 个回复 - 80745 次查看 有时我们常常需要保存备份某些网上的数据，如银行利率，股票行情，抑或统计局、各种金融机构或其他类型网站的数据。 有时这些网站会提供历史数据，有的则不会。但是我们可以通过SAS每天跑下程序获取累积历史数据作为 ...2011-10-29 11:40 - numman - SAS专版
1393 个回复 - 80745 次查看 有时我们常常需要保存备份某些网上的数据，如银行利率，股票行情，抑或统计局、各种金融机构或其他类型网站的数据。 有时这些网站会提供历史数据，有的则不会。但是我们可以通过SAS每天跑下程序获取累积历史数据作为 ...2011-10-29 11:40 - numman - SAS专版
用R或者rapidminer怎么抓取下面网页的数据？
3 个回复 - 2328 次查看 下面是国家专利汇编的网站，哪位能指点下怎么才能把网站的数据爬取下来放到excel表格里？最好是用R或者rapidminer来做，急急急。。。。。。哪位大神帮帮我，谢谢啦。 https://patentscope.wipo.int/search/zh/res ...2015-10-9 09:00 - 6417 - R语言论坛
3 个回复 - 2328 次查看 下面是国家专利汇编的网站，哪位能指点下怎么才能把网站的数据爬取下来放到excel表格里？最好是用R或者rapidminer来做，急急急。。。。。。哪位大神帮帮我，谢谢啦。 https://patentscope.wipo.int/search/zh/res ...2015-10-9 09:00 - 6417 - R语言论坛
如何用rvest包实现多网页数据的抓取？
4 个回复 - 1312 次查看 如题。 万方数据库中，下翻页的网址和上一页完全相同，也就是一共有几千个相同网址的页面。那么如何用rvest包实现对这些网页中内容的抓取呢？ 目前我只能抓到第一页的数据...sigh2019-10-25 18:19 - cheshire_ - R语言论坛
4 个回复 - 1312 次查看 如题。 万方数据库中，下翻页的网址和上一页完全相同，也就是一共有几千个相同网址的页面。那么如何用rvest包实现对这些网页中内容的抓取呢？ 目前我只能抓到第一页的数据...sigh2019-10-25 18:19 - cheshire_ - R语言论坛
Rvest 网页数据抓取不了
1 个回复 - 640 次查看 https://www.sciencedirect.com/science/article/pii/S0929664619304139用Rvest抓取作者信息（即“show more”下面的信息后） 抓取不到想要的信息 请问这是为什么？2019-8-26 18:42 - 雨茗jg - R语言论坛
1 个回复 - 640 次查看 https://www.sciencedirect.com/science/article/pii/S0929664619304139用Rvest抓取作者信息（即“show more”下面的信息后） 抓取不到想要的信息 请问这是为什么？2019-8-26 18:42 - 雨茗jg - R语言论坛
filename 抓取网页数据，数据不全
3 个回复 - 1273 次查看 filename url url "" recfm=v lrecl=6000 ; data test; infile url length=len; length content $6000.; input content $varying6000. len ; run; 用上面方法抓取网页数据，只有7条记录，不报错 ...2013-4-17 21:37 - wellsuer - SAS专版
3 个回复 - 1273 次查看 filename url url "" recfm=v lrecl=6000 ; data test; infile url length=len; length content $6000.; input content $varying6000. len ; run; 用上面方法抓取网页数据，只有7条记录，不报错 ...2013-4-17 21:37 - wellsuer - SAS专版
SAS网络爬虫抓取网页数据
20 个回复 - 17357 次查看 本人刚刚完成SAS正则表达式的学习，初学SAS网络爬虫,看到过一些前辈大牛们爬虫程序，感觉很有趣。现在结合实际例子，浅谈一下怎么做一些最基本的网页数据抓取。第一次发帖，不妥之处，还望各位大牛们指正。 本 ...2014-9-23 01:51 - 1989pengwei - SAS专版
20 个回复 - 17357 次查看 本人刚刚完成SAS正则表达式的学习，初学SAS网络爬虫,看到过一些前辈大牛们爬虫程序，感觉很有趣。现在结合实际例子，浅谈一下怎么做一些最基本的网页数据抓取。第一次发帖，不妥之处，还望各位大牛们指正。 本 ...2014-9-23 01:51 - 1989pengwei - SAS专版
Python爬虫抓取网页的通用代码框架（python3.7）
1 个回复 - 1974 次查看 用的是python3.7版本，刚开始学python爬虫，小白求指点 我是通过B站的北理工mooc教程学python爬虫的，老师po出了一段抓取网页的通用代码 然后我就照着老师的代码依样画葫芦，还加了注释 # -*- coding: ut ...2019-2-13 21:57 - ok230168 - python论坛
1 个回复 - 1974 次查看 用的是python3.7版本，刚开始学python爬虫，小白求指点 我是通过B站的北理工mooc教程学python爬虫的，老师po出了一段抓取网页的通用代码 然后我就照着老师的代码依样画葫芦，还加了注释 # -*- coding: ut ...2019-2-13 21:57 - ok230168 - python论坛
求助！stata抓取网页数据
4 个回复 - 2323 次查看 求助！请问已知网页链接，链接后缀为shtml，如何利用stata抓取链接网页中的关键词？或者能否推荐一些资料以供学习！非常感谢！2018-9-17 16:03 - 远行1238 - Stata专版
4 个回复 - 2323 次查看 求助！请问已知网页链接，链接后缀为shtml，如何利用stata抓取链接网页中的关键词？或者能否推荐一些资料以供学习！非常感谢！2018-9-17 16:03 - 远行1238 - Stata专版
有谁会用R抓取这个网页表格么？看起来很简单可是。。。
5 个回复 - 4462 次查看 网址：http://xh.5156edu.com/ciyu/z4998m5241j1770.html 怎样才能如抓取出这个词语表格呢？哪位大神懂得R的网络爬虫，让我们开开眼界，好么？2016-8-29 20:13 - 该用户名不得 - R语言论坛
5 个回复 - 4462 次查看 网址：http://xh.5156edu.com/ciyu/z4998m5241j1770.html 怎样才能如抓取出这个词语表格呢？哪位大神懂得R的网络爬虫，让我们开开眼界，好么？2016-8-29 20:13 - 该用户名不得 - R语言论坛
【求助】R语言抓取动态网页
7 个回复 - 4807 次查看 我的程序如下：（因为刚学习R不久，看了网上各种分析，比葫芦画瓢加载了一堆包） # 到这里就会提示错误：（也不是每次都会提示，10次里面有9次提示，1次成功） Error in matrix(NA_character_, nrow = n, ...2018-3-21 10:13 - ivy_cyh - R语言论坛
7 个回复 - 4807 次查看 我的程序如下：（因为刚学习R不久，看了网上各种分析，比葫芦画瓢加载了一堆包） # 到这里就会提示错误：（也不是每次都会提示，10次里面有9次提示，1次成功） Error in matrix(NA_character_, nrow = n, ...2018-3-21 10:13 - ivy_cyh - R语言论坛
网页抓取数据中，如何用R提取div中的文字？
7 个回复 - 2851 次查看 本人想抓取美团关于某一火锅店的所有评论，但是，关于网络抓取这方面经验不太足，附图是源代码，想要抓取div中的文字，很是头疼，请各位大神帮忙解决~不胜感激~2018-3-13 13:36 - 不朽之守护 - R语言论坛
7 个回复 - 2851 次查看 本人想抓取美团关于某一火锅店的所有评论，但是，关于网络抓取这方面经验不太足，附图是源代码，想要抓取div中的文字，很是头疼，请各位大神帮忙解决~不胜感激~2018-3-13 13:36 - 不朽之守护 - R语言论坛
[21天小白学成大师]NO.3 学会用EXCEL自带的3个函数抓取30万条网页数据
9 个回复 - 3137 次查看 本系列文章作者是我二徒弟，一个80后，学历不高，同时运营着3家1688店铺。全套文章21篇，虽然标题是21天小白学成大师，但还真不是一天一更，平时比较忙，更新就要耐心等候了。 本人是一个小白，学历只有高中。最近才 ...2017-7-3 17:14 - Data-零一 - 数据分析师（CDA）专版
9 个回复 - 3137 次查看 本系列文章作者是我二徒弟，一个80后，学历不高，同时运营着3家1688店铺。全套文章21篇，虽然标题是21天小白学成大师，但还真不是一天一更，平时比较忙，更新就要耐心等候了。 本人是一个小白，学历只有高中。最近才 ...2017-7-3 17:14 - Data-零一 - 数据分析师（CDA）专版
R从网页抓取数据的链接怎么总打不开？
1 个回复 - 1434 次查看 如题，在《R语言实战》的36页中，提到可以在CRAN Task View中的子版块可以获得抓取数据的一个列表 链接如下： 但是总是打不开，请问这是怎么回事？ 是不是浏览器的问题？ 有没有其它的可以全面或者系统介绍R语 ...2017-9-18 00:42 - 拂去尘缘 - R语言论坛
1 个回复 - 1434 次查看 如题，在《R语言实战》的36页中，提到可以在CRAN Task View中的子版块可以获得抓取数据的一个列表 链接如下： 但是总是打不开，请问这是怎么回事？ 是不是浏览器的问题？ 有没有其它的可以全面或者系统介绍R语 ...2017-9-18 00:42 - 拂去尘缘 - R语言论坛
利用SAS抓取网页数据总结及案例
18 个回复 - 9642 次查看 有时我们常常需要保存备份某些网上的数据，如银行利率，股票行情，抑或统计局、各种金融机构或其他类型网站的数据。 有时这些网站会提供历史数据，有的则不会。但是我们可以通过SAS每天跑下程序获取累积历史数据作为 ...2014-2-24 16:31 - Still.. - SAS专版
18 个回复 - 9642 次查看 有时我们常常需要保存备份某些网上的数据，如银行利率，股票行情，抑或统计局、各种金融机构或其他类型网站的数据。 有时这些网站会提供历史数据，有的则不会。但是我们可以通过SAS每天跑下程序获取累积历史数据作为 ...2014-2-24 16:31 - Still.. - SAS专版
网页抓取数据求助！
3 个回复 - 921 次查看 小主想查询香港的ZF财政收入和财政支出的数据。无奈没有现成的数据库。想着从香港库务署的网站上查询。 香港库务署的网站数据是用网页的形式给出来，每个月的数据单独一个网页。 http://www.try.gov.hk/sc/charch_ ...2016-12-27 15:14 - wangqian151 - python论坛
3 个回复 - 921 次查看 小主想查询香港的ZF财政收入和财政支出的数据。无奈没有现成的数据库。想着从香港库务署的网站上查询。 香港库务署的网站数据是用网页的形式给出来，每个月的数据单独一个网页。 http://www.try.gov.hk/sc/charch_ ...2016-12-27 15:14 - wangqian151 - python论坛
怎么用R抓取包含Javascript动态生成的网页数据
1 个回复 - 1050 次查看 我现在想用R抓取京东网页上iphone的价格，但是价格似乎是Js动态生成的数据，所以readLines得到的源代码里没有价格那一数据。在这种情况下要怎么抓取这个数据呢？？求各位大神不吝赐教！！！2017-3-13 10:05 - OdolLayee - R语言论坛
1 个回复 - 1050 次查看 我现在想用R抓取京东网页上iphone的价格，但是价格似乎是Js动态生成的数据，所以readLines得到的源代码里没有价格那一数据。在这种情况下要怎么抓取这个数据呢？？求各位大神不吝赐教！！！2017-3-13 10:05 - OdolLayee - R语言论坛
完整程序教你怎样利用SAS抓取网页内容
468 个回复 - 42865 次查看 背景： 搜索引擎对网站的收录，会影响到网站SEO，而目前没找到什么好的工具来统计被收录的情况，也不会其他程序来写爬出，将就着用sas来写（实在大材小用了）。 提取的主要字段： -URL---页面Title---收录更新时 ...2011-10-30 09:45 - chenjieren - SAS专版
468 个回复 - 42865 次查看 背景： 搜索引擎对网站的收录，会影响到网站SEO，而目前没找到什么好的工具来统计被收录的情况，也不会其他程序来写爬出，将就着用sas来写（实在大材小用了）。 提取的主要字段： -URL---页面Title---收录更新时 ...2011-10-30 09:45 - chenjieren - SAS专版
网页抓取又添利器
22 个回复 - 11024 次查看 RStudio 公司就是给力，即dplyr终结了plyr后，现在又推出rvest，看样子多做爱（XML）也要阳痿了。 下面用抓取豆瓣网电影数据为例，演示一下它的便捷。 library(rvest) url = 'http://movie.douban.com/top250?f ...2014-11-26 13:54 - daishen - R语言论坛
22 个回复 - 11024 次查看 RStudio 公司就是给力，即dplyr终结了plyr后，现在又推出rvest，看样子多做爱（XML）也要阳痿了。 下面用抓取豆瓣网电影数据为例，演示一下它的便捷。 library(rvest) url = 'http://movie.douban.com/top250?f ...2014-11-26 13:54 - daishen - R语言论坛
求教用R语言抓取网页总页数
0 个回复 - 1056 次查看 求教各位大神，我想用R语言抓取网页总页数，网址和代码如下，Tpage应该显示“共53页”的，可是出现乱码，请问是哪里错了该怎么处理？请有空的高人把以下代码放在自己的Rstudio上运行一下，帮我发现以下错误，谢谢了！ ...2016-10-24 22:21 - 潇夏 - R语言论坛
0 个回复 - 1056 次查看 求教各位大神，我想用R语言抓取网页总页数，网址和代码如下，Tpage应该显示“共53页”的，可是出现乱码，请问是哪里错了该怎么处理？请有空的高人把以下代码放在自己的Rstudio上运行一下，帮我发现以下错误，谢谢了！ ...2016-10-24 22:21 - 潇夏 - R语言论坛
R抓取网页数据破解验证码
2 个回复 - 3451 次查看 用Rcurl或者rvest抓取网页数据的时候，需要输入账号密码和验证码。验证码如何破？2015-9-22 21:13 - 路遥的遥 - R语言论坛
2 个回复 - 3451 次查看 用Rcurl或者rvest抓取网页数据的时候，需要输入账号密码和验证码。验证码如何破？2015-9-22 21:13 - 路遥的遥 - R语言论坛
r语言 抓取网页乱码问题求助
2 个回复 - 2351 次查看 程序为：[/backcolor] library(RCurl)[/backcolor] library(XML)[/backcolor] [/backcolor] url2016-8-29 11:28 - Smithereer - R语言论坛
2 个回复 - 2351 次查看 程序为：[/backcolor] library(RCurl)[/backcolor] library(XML)[/backcolor] [/backcolor] url2016-8-29 11:28 - Smithereer - R语言论坛
【独家发布】Stata爬虫技巧：如何用Stata抓取静态网页？
5 个回复 - 7854 次查看 RT， 转载链接：链接 ------------------------2016年7月16日08:54:462016-7-16 08:54 - 日新少年 - Stata专版
5 个回复 - 7854 次查看 RT， 转载链接：链接 ------------------------2016年7月16日08:54:462016-7-16 08:54 - 日新少年 - Stata专版
100银子求助抓取同花顺网页股票数据
10 个回复 - 7891 次查看 最近想研究一下活跃营业部的历史数据，希望从同花顺网页上抓取一下过去一年也就是2014年前十大活跃营业部总共买了哪些股票。希望抓取的10个营业部名称和网页如下： 由于只是网址最后面的代码不同，这里这给了两个 ...2015-2-22 23:05 - wqf_cufe - R语言论坛
10 个回复 - 7891 次查看 最近想研究一下活跃营业部的历史数据，希望从同花顺网页上抓取一下过去一年也就是2014年前十大活跃营业部总共买了哪些股票。希望抓取的10个营业部名称和网页如下： 由于只是网址最后面的代码不同，这里这给了两个 ...2015-2-22 23:05 - wqf_cufe - R语言论坛
如何用R抓取一个网页中在div中的数据且不乱码
4 个回复 - 1797 次查看 想要抓取 http://www.demohour.com/projects?attribute=most_funded 中的数据并制成表格保存成csv输出，但是怎么抓取网页中在div中的数据，想要抓取的内容在图片中浅蓝色背景的区域，代码错在哪里？？可以怎么改？ ...2016-4-21 12:16 - 何武德 - R语言论坛
4 个回复 - 1797 次查看 想要抓取 http://www.demohour.com/projects?attribute=most_funded 中的数据并制成表格保存成csv输出，但是怎么抓取网页中在div中的数据，想要抓取的内容在图片中浅蓝色背景的区域，代码错在哪里？？可以怎么改？ ...2016-4-21 12:16 - 何武德 - R语言论坛
求助：如何做到自动抓取网页数据，同时进行筛选，进一步作图或表进行分析？
3 个回复 - 1819 次查看 如题，需要从网页自动抓取数据，然后自动对数据进行筛选，进一步自动得到预设统计图表（依据筛选得到的数据）。 请问各位大神有什么办法（或软件）可以实现以上功能？2016-4-2 23:16 - libonju - R语言论坛
3 个回复 - 1819 次查看 如题，需要从网页自动抓取数据，然后自动对数据进行筛选，进一步自动得到预设统计图表（依据筛选得到的数据）。 请问各位大神有什么办法（或软件）可以实现以上功能？2016-4-2 23:16 - libonju - R语言论坛
求助！用R如何抓取网页分页表格数据
2 个回复 - 2024 次查看 各位坛友！求教，如何用R抓取网页分页表格的数据？例如抓取以下网站： http://new.gf.com.cn/business/finance/news/guaranteed 求教，哪位坛友能够抓取，麻烦联系~~可以有偿。谢谢。2016-3-29 14:16 - 治感冒 - R语言论坛
2 个回复 - 2024 次查看 各位坛友！求教，如何用R抓取网页分页表格的数据？例如抓取以下网站： http://new.gf.com.cn/business/finance/news/guaranteed 求教，哪位坛友能够抓取，麻烦联系~~可以有偿。谢谢。2016-3-29 14:16 - 治感冒 - R语言论坛
R语言抓取网页数据
0 个回复 - 1702 次查看 想咨询下这个程序哪里出问题了，读取不到99个列表页面内每个商品的URL地址，请高手指教！ # 存储99个分页的URL地址 url2016-3-8 17:13 - enland - R语言论坛
0 个回复 - 1702 次查看 想咨询下这个程序哪里出问题了，读取不到99个列表页面内每个商品的URL地址，请高手指教！ # 存储99个分页的URL地址 url2016-3-8 17:13 - enland - R语言论坛
使用readLines抓取网页数据报错
2 个回复 - 3061 次查看 新手，在试着用readLines从网页上获取数据，结果就提示这个 In readLines("http://www.ncbi.nlm.nih.gov/nuccore") : incomplete final line found on 'http://www.ncbi.nlm.nih.gov/nuccore' 求助啊2016-2-25 19:05 - allraingy - R语言论坛
2 个回复 - 3061 次查看 新手，在试着用readLines从网页上获取数据，结果就提示这个 In readLines("http://www.ncbi.nlm.nih.gov/nuccore") : incomplete final line found on 'http://www.ncbi.nlm.nih.gov/nuccore' 求助啊2016-2-25 19:05 - allraingy - R语言论坛
用R进行网页表格数据抓取问题
9 个回复 - 7600 次查看 在网上找到一个用R进行网页表格数据抓取问题的博客，但用R操作好像得不到结果，哪位大神有经验的帮忙解答一下？ require(XML)[/backcolor] require(RCurl)[/backcolor] webpage2015-9-15 16:32 - 归＠零 - R语言论坛
9 个回复 - 7600 次查看 在网上找到一个用R进行网页表格数据抓取问题的博客，但用R操作好像得不到结果，哪位大神有经验的帮忙解答一下？ require(XML)[/backcolor] require(RCurl)[/backcolor] webpage2015-9-15 16:32 - 归＠零 - R语言论坛
用R进行网页表格数据抓取问题
0 个回复 - 907 次查看 想问一下 url %>% html_session() %>% html_nodes("li .td-1st") %>% html_text(encoding="UTF-8") url %>% html_session() %>% html_nodes("table") %>% .[[2]] %>% html_nodes("td:nth-child(1)") %>% html_t ...2015-9-17 11:34 - 归＠零 - R语言论坛
0 个回复 - 907 次查看 想问一下 url %>% html_session() %>% html_nodes("li .td-1st") %>% html_text(encoding="UTF-8") url %>% html_session() %>% html_nodes("table") %>% .[[2]] %>% html_nodes("td:nth-child(1)") %>% html_t ...2015-9-17 11:34 - 归＠零 - R语言论坛
R抓取网页网格数据咨询
7 个回复 - 1710 次查看 用R中readHTMLTable函数抓取网页网格数据，抓取的中文老是出现乱码，求指点2015-9-14 08:53 - zppn123 - R语言论坛
7 个回复 - 1710 次查看 用R中readHTMLTable函数抓取网页网格数据，抓取的中文老是出现乱码，求指点2015-9-14 08:53 - zppn123 - R语言论坛
请教各位一个关于抓取网页数据的知识
1 个回复 - 1079 次查看 网址：http://www.tianqi.com/air/ 这是全国各城市PM2.5数据，我想提取这些数据做成污染地图，每天在朋友圈里发一下。 library(XML) URL2015-8-27 17:37 - kamaduoluo - R语言论坛
1 个回复 - 1079 次查看 网址：http://www.tianqi.com/air/ 这是全国各城市PM2.5数据，我想提取这些数据做成污染地图，每天在朋友圈里发一下。 library(XML) URL2015-8-27 17:37 - kamaduoluo - R语言论坛
网页抓取数据后，列表导出的问题
4 个回复 - 3091 次查看 各位大侠： 利用别人介绍的方法，抓取网页的数据后，导出总是提示如下问题： > output2015-7-14 17:39 - weberxu - R语言论坛
4 个回复 - 3091 次查看 各位大侠： 利用别人介绍的方法，抓取网页的数据后，导出总是提示如下问题： > output2015-7-14 17:39 - weberxu - R语言论坛
【带搜索、网页抓取、正则、保存】【源码】python小例子。附源码及知识点讲解
3 个回复 - 1468 次查看 源数据输入输出要求+网页抓取知识点+下载链接 公司名字在程序同目录下的'公司全名.txt'中，一行一个 这是帮版友写的小程序： 100论坛币求python大神帮忙编一段程序完成从网页中抓取信息 [/backc ...2015-2-26 15:12 - 莫小漠 - 经管代码库
3 个回复 - 1468 次查看 源数据输入输出要求+网页抓取知识点+下载链接 公司名字在程序同目录下的'公司全名.txt'中，一行一个 这是帮版友写的小程序： 100论坛币求python大神帮忙编一段程序完成从网页中抓取信息 [/backc ...2015-2-26 15:12 - 莫小漠 - 经管代码库
求助用R抓取json网页发生问题
1 个回复 - 2943 次查看 最近在帮朋友用R写一个抓取运彩网站所有赛事赔率的编程，但碰到一个地方卡住。 在单一赛事中的json（如：https://www.sportslottery.com.tw/web/services/rs/betting/games/15102/0.json?eventMethods=1&eventMet ...2015-6-20 09:52 - torrentpien - R语言论坛
1 个回复 - 2943 次查看 最近在帮朋友用R写一个抓取运彩网站所有赛事赔率的编程，但碰到一个地方卡住。 在单一赛事中的json（如：https://www.sportslottery.com.tw/web/services/rs/betting/games/15102/0.json?eventMethods=1&eventMet ...2015-6-20 09:52 - torrentpien - R语言论坛
怎样用excel来抓取网页需要的数据，并自动生...
7 个回复 - 19247 次查看 怎样用excel来抓取网页需要的数据，并自动生成excel表格？2015-5-10 17:42 - 弓长女那 - 爱问频道
7 个回复 - 19247 次查看 怎样用excel来抓取网页需要的数据，并自动生成excel表格？2015-5-10 17:42 - 弓长女那 - 爱问频道
请问如何抓取网页数据啊？！
2 个回复 - 1201 次查看 我想抓取这个http://quote.forex.hexun.com/EURUSD.shtml的30分钟的网页数据，请问要这么弄，可以抓取实现吗？！2015-4-7 23:28 - nihaojay - Excel
2 个回复 - 1201 次查看 我想抓取这个http://quote.forex.hexun.com/EURUSD.shtml的30分钟的网页数据，请问要这么弄，可以抓取实现吗？！2015-4-7 23:28 - nihaojay - Excel
求助从网页上抓取需要翻页的信息
2 个回复 - 1289 次查看 http://shixin.court.gov.cn/personMore.do 从这个地方每天抓取信息，但是需要翻页。我自己抓取了一次 只能抓取到第一页，翻页后URL也不会改变，不知道怎么处理了。求助2014-3-14 23:38 - 18529 - SAS专版
2 个回复 - 1289 次查看 http://shixin.court.gov.cn/personMore.do 从这个地方每天抓取信息，但是需要翻页。我自己抓取了一次 只能抓取到第一页，翻页后URL也不会改变，不知道怎么处理了。求助2014-3-14 23:38 - 18529 - SAS专版
网页源代码中不含要被抓取数据 怎么用sas抓取？
7 个回复 - 3837 次查看 关于如何用sas从网上抓数据，论坛中有很多帖子，感谢各位前辈的分享，从中学到很多。 帖子中提到的方法的思路都是利用filename url语句把要抓取数据的网页的所有的源代码都抓下来放到sas数据集中，在通过data步将 ...2011-11-2 22:24 - changtuiada - SAS专版
7 个回复 - 3837 次查看 关于如何用sas从网上抓数据，论坛中有很多帖子，感谢各位前辈的分享，从中学到很多。 帖子中提到的方法的思路都是利用filename url语句把要抓取数据的网页的所有的源代码都抓下来放到sas数据集中，在通过data步将 ...2011-11-2 22:24 - changtuiada - SAS专版
sas做网页数据抓取爬虫应该如何进行
0 个回复 - 1840 次查看 http://www.sse.com.cn/disclosure/listedinfo/credibility/change/想要爬这网址中的。保存为excel格式或其他都可以，该如何爬呢，求大神指导一二。2015-5-6 09:11 - nannan0120 - SAS专版
0 个回复 - 1840 次查看 http://www.sse.com.cn/disclosure/listedinfo/credibility/change/想要爬这网址中的。保存为excel格式或其他都可以，该如何爬呢，求大神指导一二。2015-5-6 09:11 - nannan0120 - SAS专版
求助pandas网页数据抓取
6 个回复 - 4515 次查看 如何用pandas抓取网页 http://zh.wikipedia.org/wiki/%E7%9C%81%E4%BC%9A 上的中国各省会经济（2010年）这张表 下面的命令为什只能抓取前面的表，而没有中国各省会经济(2010)这张表。 谢谢！2015-2-27 06:58 - sigmund - python论坛
6 个回复 - 4515 次查看 如何用pandas抓取网页 http://zh.wikipedia.org/wiki/%E7%9C%81%E4%BC%9A 上的中国各省会经济（2010年）这张表 下面的命令为什只能抓取前面的表，而没有中国各省会经济(2010)这张表。 谢谢！2015-2-27 06:58 - sigmund - python论坛
求SAS抓取网页数据的官方user‘s guide或者详细资料
10 个回复 - 2578 次查看 我是学习SAS的新手，最近需要在网页上抓取数据，就是在百度上搜新闻，然后统计这些新闻的关注程度。我之前学SAS都是下载它们官方的user’s guide，问下版上大牛网页抓取内容的documentation在什么部分啊?我想详细看一 ...2012-8-18 16:26 - yunzhonghai - SAS专版
10 个回复 - 2578 次查看 我是学习SAS的新手，最近需要在网页上抓取数据，就是在百度上搜新闻，然后统计这些新闻的关注程度。我之前学SAS都是下载它们官方的user’s guide，问下版上大牛网页抓取内容的documentation在什么部分啊?我想详细看一 ...2012-8-18 16:26 - yunzhonghai - SAS专版
求助用R进行融资融券数据的网页抓取
41 个回复 - 11082 次查看 最近想研究一下股票融资融券的数据，但无奈这些数据都是存储在各家网站的网页上的。 设想：用require(XML)和require(RCurl)两个包抓取下面两个网页的数据，一个是个股的每日成交数据（每日成交金额），一个是融资 ...2015-1-7 06:20 - wqf_cufe - R语言论坛
41 个回复 - 11082 次查看 最近想研究一下股票融资融券的数据，但无奈这些数据都是存储在各家网站的网页上的。 设想：用require(XML)和require(RCurl)两个包抓取下面两个网页的数据，一个是个股的每日成交数据（每日成交金额），一个是融资 ...2015-1-7 06:20 - wqf_cufe - R语言论坛
定时自动抓取网页数据
15 个回复 - 11941 次查看 数据来源 http://www.chinaclear.cn/main/03/0303/030305/1330417819770.htm 数据会每周变动一次，能否让SAS在服务器自动运行，每周一上午9点自动读取网页数据到SAS中？2012-3-5 17:06 - air320322 - SAS专版
15 个回复 - 11941 次查看 数据来源 http://www.chinaclear.cn/main/03/0303/030305/1330417819770.htm 数据会每周变动一次，能否让SAS在服务器自动运行，每周一上午9点自动读取网页数据到SAS中？2012-3-5 17:06 - air320322 - SAS专版
为什么抓取的网页数据为乱码
9 个回复 - 6595 次查看 我试着从搜房网上抓点东西，怎么都是乱码呢，请大家帮忙看看，谢谢 filename web_loc url "http://gelingelinjd.soufun.com/" debug; data source; format webpage $1000.; infile web_loc lrecl= ...2013-6-18 11:13 - milos_luna - SAS专版
9 个回复 - 6595 次查看 我试着从搜房网上抓点东西，怎么都是乱码呢，请大家帮忙看看，谢谢 filename web_loc url "http://gelingelinjd.soufun.com/" debug; data source; format webpage $1000.; infile web_loc lrecl= ...2013-6-18 11:13 - milos_luna - SAS专版
抓取xml网页数据
3 个回复 - 2017 次查看 library(rvest) url = "http://www.w3schools.com/xml/simple.xml" 或者把网页下载到本地 url = "c:/temp/w31.xml" id = c("name","price","calories","description") dat = sapply(1:length(id),functio ...2014-12-2 19:41 - daishen - R语言论坛
3 个回复 - 2017 次查看 library(rvest) url = "http://www.w3schools.com/xml/simple.xml" 或者把网页下载到本地 url = "c:/temp/w31.xml" id = c("name","price","calories","description") dat = sapply(1:length(id),functio ...2014-12-2 19:41 - daishen - R语言论坛
R小白，提问从网页批量抓取相似数据的问题
1 个回复 - 1466 次查看 写完这些代码，发现只能用来观察单个数据，请问如何能够实现同时观察多个数据（如100:200）？2014-10-22 12:29 - god_on - R语言论坛
1 个回复 - 1466 次查看 写完这些代码，发现只能用来观察单个数据，请问如何能够实现同时观察多个数据（如100:200）？2014-10-22 12:29 - god_on - R语言论坛
sas抓取网页数据 提示找不到主机名
14 个回复 - 6031 次查看 最近想学如何用sas抓取网页数据，搜索了下论坛里的帖子，感谢很多大神的指导，比如elek.me的博文就详细介绍了怎么做：http://saslist.com/elek/2010/09/15/%E9%80%9A%E8%BF%87-sas-%E8%AF%BB%E5%8F%96%E7%BD%91%E9%A ...2011-10-31 21:24 - 邢不行 - SAS专版
14 个回复 - 6031 次查看 最近想学如何用sas抓取网页数据，搜索了下论坛里的帖子，感谢很多大神的指导，比如elek.me的博文就详细介绍了怎么做：http://saslist.com/elek/2010/09/15/%E9%80%9A%E8%BF%87-sas-%E8%AF%BB%E5%8F%96%E7%BD%91%E9%A ...2011-10-31 21:24 - 邢不行 - SAS专版
关于“ 完整程序教你怎样利用SAS抓取网页内容”的几点建议
7 个回复 - 3354 次查看 本人学习SAS几个月了，对“完整程序教你怎样利用SAS抓取网页内容”这篇很感兴趣，于是就看了下，看看后怎么感觉怪怪的？于是提出几点建议： 1. 首先你提到"pn，rn为百度查询参数，与SAS宏变量无关",那应不应该加个% ...2012-9-1 02:15 - jjtww - SAS专版
7 个回复 - 3354 次查看 本人学习SAS几个月了，对“完整程序教你怎样利用SAS抓取网页内容”这篇很感兴趣，于是就看了下，看看后怎么感觉怪怪的？于是提出几点建议： 1. 首先你提到"pn，rn为百度查询参数，与SAS宏变量无关",那应不应该加个% ...2012-9-1 02:15 - jjtww - SAS专版
教你怎样利用SAS抓取网页数据--原网址已挂
3 个回复 - 1650 次查看 故事来由本人以前有一小站www.daaata.com刊登几篇关于利用SAS抓取网页数据的小文，然后挂了个链接在人大论坛。后因懒惰，此站挂掉，相继有人询问。在从新有此博后打算把其中一篇简单易懂的补上，另外几篇译文已被@统 ...2012-12-30 06:22 - numman - SAS专版
3 个回复 - 1650 次查看 故事来由本人以前有一小站www.daaata.com刊登几篇关于利用SAS抓取网页数据的小文，然后挂了个链接在人大论坛。后因懒惰，此站挂掉，相继有人询问。在从新有此博后打算把其中一篇简单易懂的补上，另外几篇译文已被@统 ...2012-12-30 06:22 - numman - SAS专版
哪个大神会用matlab抓取网页数据，急求救！
2 个回复 - 8759 次查看 我知道matlab用urlread读取网页数据，必须用要用正则表达式之类的。2013-8-1 00:04 - xingzuolin - 数据分析与数据挖掘
2 个回复 - 8759 次查看 我知道matlab用urlread读取网页数据，必须用要用正则表达式之类的。2013-8-1 00:04 - xingzuolin - 数据分析与数据挖掘
求助，SAS抓取.jsp结尾网页数据
3 个回复 - 2771 次查看 我想把http://zhuanti.cbrc.gov.cn/licence/view.jsp 这个网站所有金融机构的信息都下载下来，就是一打开网页看到的表，一共有2万多页，在坛子里看了些方案，主要是用url方法，比如filename etf url 'http://zhuanti ...2012-1-1 22:33 - trslvpeng - SAS专版
3 个回复 - 2771 次查看 我想把http://zhuanti.cbrc.gov.cn/licence/view.jsp 这个网站所有金融机构的信息都下载下来，就是一打开网页看到的表，一共有2万多页，在坛子里看了些方案，主要是用url方法，比如filename etf url 'http://zhuanti ...2012-1-1 22:33 - trslvpeng - SAS专版
200币悬赏，抓取网页中股票数据，网页代码高手来
2 个回复 - 1371 次查看 我需要抓取这三个网页中的“成交量”、“成交额”的数据到excel中。 http://finance.sina.com.cn/realstock/company/sh000001/nc.shtml http://finance.sina.com.cn/realstock/company/sz399001/nc.shtml htt ...2013-1-1 12:40 - cufehao - 求助成功区
2 个回复 - 1371 次查看 我需要抓取这三个网页中的“成交量”、“成交额”的数据到excel中。 http://finance.sina.com.cn/realstock/company/sh000001/nc.shtml http://finance.sina.com.cn/realstock/company/sz399001/nc.shtml htt ...2013-1-1 12:40 - cufehao - 求助成功区
