Excel抓取网页数据,超简单,实时更新,再也不用一个个复制啦!
哈喽,大家好呀!
今天来教大家如何快速从网站上抓取数据并自动更新。
俗称“爬虫”。
很多人是不是第一反应就是Python
啊,那真的好难好难好难。
没关系,今天这个小技巧,只需要你有个Excel就行,不用安装插件,也不用付费。
今天介绍最简单的一种:用“自网站”命令抓取数据。
1. Excel“自网站”命令抓取数据的操作方法
最近比较关心房价的跌幅,所以下面以房价爬取为例介绍“自网站”命令的使用。
版本说明:Excel 2016及以上就有该命令,WPS或低版本可能会存在差异。
Step1:新建一个空白的表格,在数据选项卡中找到“自网站”按钮。如下图所示:
Step2:接着用浏览器打开需要抓取数据的网址,我们复制一下当前网页的网址。
Step3:接着回到Excel中,从数据选项卡中打开自网页按钮,软件会弹出一个“从web”对话框,选择高级,URL部分处粘贴刚刚固执的网址,单击确认后会提示正在连接。随后会出现一个导航器。
Step4:导航器如下图所示,其中抓取的会有两个表格的数据,Table0是房价涨幅数据,Table1是房价跌幅数据。
现在我们选中Table1在表视图中就能预览看到数据,接着选择转换数据即可。
Step5:转换数据后会跳转到Power Query编辑器界面,因为这个网页的数据相对比较规整的,所以不需要我们做额外的操作,只需要选择关闭并上载即可。
Step6:上载到Excel中的数据如下图所示,查询&连接会提示已经加载了10行。此时的表格数据也是默认套用的超级表样式。
Step7:我们可以光标定位在表格数据中,在表设计中找到快速样式进行更改一个我喜欢的表格样式,当需要刷新数据时可以单击一下刷新中的全部刷新按钮,表格的左下角就会提示在后台运行查询数据。
Step8:如果我们想自定义一下刷新的时间,也可以通过查询选项卡中找到查询属性,设置一下刷新控件中的刷新频率,这里我们可以以分钟进行自定义刷新的时间。
2. Excel“自网站”命令无法抓取数据的原因
很多朋友随意打开一个网页,看到网页中好像存在数据,就采用自网站命令进行抓取,但往往不成功,只得到一个名为Document的空表格,如下。
这是“自网站”命令抓取数据的局限性造成的。它只能抓取符合以下两个特征的网页数据:
(1)支持GET请求。
GET请求指客户向服务器申请获取某个资源。通过Excel“自网站”命令爬数据,实际就是你向服务器发出得到资源请求。如果该资源服务接口不支持GET请求,那就无法爬取。
(2)数据位于网页的table(表格)标签
中。
在浏览器中打开网页后按F12打开网页调试器,单击调试器左上角第一个图标“选取页面元素”图标
,然后移动鼠标到网页中的数据上,即可在“查看器”栏目中查看数据所在标签,如下图。如果数据不在
中则无法爬取。
以上就是今日分享的Excel“自网站”命令抓取数据。它只能爬取位于
标签中的数据,最大的优点是操作简单。
对于其他类型的网页数据,则需要采用其他方法来爬取。有兴趣的伙伴可以留言。我们下期再来分享。
好的,以上就是今天的内容,感谢大家的观看。扫码进群学习Excel。
另外,Excel训练营今晚开班,1元报名,课程长期观看学习,有练习课件!
PS教材中,渐变映射的用途?
渐变映射(GradientMapping)是一种将一个图像的颜色映射到另一个颜色渐变的过程。在PS教材中,渐变映射可以用于以下几个方面:调整色调:使用渐变映射可以快速调整图像的色调,使其更加鲜艳或柔和。创建特效:通过使用渐变映射,可以创建各种特效,如黑白摄影、复古效果、霓虹效果等。色彩匹配:将一张图片的颜色映射到另一张图片,使得两张图片的色彩相似,可以用于制作图集、相册等。0003ps透视裁剪工具扶正照片文件视频:黑白对比调整增加清晰效果
ps照片文件扶正视频|ps透视裁剪工具视频|ps黑白对比调整视频|ps增加清晰效果视频本视频教程由部落窝教育分享。站长网2023-07-27 17:21:5300006个音乐下载资源站,高质无损
编辑/排版:卒見音乐可以表达一种心情,可以成为一种慰藉,音乐是相通的,相信没有人不爱音乐。之前给大家分享过很多次无损音乐下载和在线音乐播放工具,本篇又一次整理了一批优质音乐网站,希望大家能喜欢!01MusicEnc一个专业的歌词搜索网络,拥有海量歌词和lrc格式歌词文件,并提供免费下载。你可以直接搜索想要的歌曲,就能够得到该歌曲的歌词内容,站长网2023-07-30 11:20:470003学会这2个新函数,你的水平就能超过90%的同事
VIP学员的问题,拿多少工资,才能超过90%的人?比如现在有10个人的工资,需要超过9个人。这种问题经常看到,不过就是很少在Excel里面计算。如果不懂方法,折腾很久都算不出,如果懂方法不用1分钟就解决。跟卢子来看看。=PERCENTILE(C2:C11,0.9)语法:=PERCENTILE(区域,0~1之间的数字)站长网2023-07-28 16:46:540000数据透视表又一“神操作”,80%的人还不会,赶紧收藏起来
哈喽,大家好呀!今天来教大家一个关于数据透视表的技巧,将一张二维表转成一维表。什么意思呢?现在,我们有如下一张表,有名称、日期和数量三个信息。看上去很清晰,对吧?但这类表格却不利于统计,现需要将这张表转化成如下格式。有的小伙伴可能会说:不就是把日期竖过来登记吗,转置一下就行了。操作一下,好像不得行诶……难道只能一行一行复制粘贴吗?站长网2023-07-29 09:51:540000