如何批量的抓取网页中的数据？学会使用Excel只需几分钟就能轻松搞定！

SEP技术支持 | 2020/5/20 0:00:00

推荐使用：Excel数据采集软件(免费下载，像Excel一样极速上手，可灵活自定义的企业管理软件)

大家好，今天和大家一起分享我们如何批量抓取网页中的数据，来抓取汽车投诉量和大家分享如何批量抓取网页中的数据，这也是一个车迷问的问题，他要去买一辆汽车，看看有多少投诉来自各个厂家。不用多说，让我们开始吧。如果你想知道来自不同制造商的投诉数量和被投诉车型的排名，你可以直接跳到最后。
抓取100页网页数据，你还在使用复制粘贴吗？Excel只需7分钟即可完成
一、网页分析
让我们以汽车质量网络捕获的汽车投诉为例，展示如何批量捕获数据。下图分别显示了第一页到第三页的网址。我们可以看到这三页的网址，只有红色的123，即相应的页码不同，其余的是一样的。

第二，获取数据
然后我们打开excel，点击数据功能组找到网站。我们单击高级选项，并将代表页码的数字单独放入输入框中。我们可以通过点击添加组件来添加输入框。设置完成后，我们直接点击确定

这样，我们可以进入导航导航器的界面。在这个网页中，powerquery总共捕获了两个内容。我们可以点击查看我们需要的数据。这里，表0是我们想要捕获的数据。直接选择选项表0，然后单击转换数据。这样，我们可以进入编辑电源查询界面。

接下来，我们点击高级编辑器在字母前输入(x为数字)为表格=然后将网址中的“1”改为(数字)。ToText(x))并直接单击完成。

这样，我们将把以前的操作封装成一个函数。我们只需要输入相应的号码，然后点击呼叫跳转到相应的页码数据

然后我们单击左边的空白区域，单击鼠标右键选择一个新的查询，在其中找到其他来源并选择一个空查询，然后我们输入={1.100}在编辑字段中，单击enter，我们得到1到100的序列，然后单击表，将查询转换为表，并直接单击ok

接下来，选择添加列，然后找到一个自定义函数，在函数查询中选择表0，然后直接单击确定。然后power query将开始获取数据。这里我们抓取100页网页数据。这个过程可能相对较长。在这里我将花费大约3分钟。抓取完成后，将在每个序列的后面获得一个表格。我们单击左右反向箭头来展开数据。原始列名前面的复选标记将被删除，但单击“确定”将删除我们添加的序列。这样，我们可以通过在开始时选择“关闭”和“上传到”将数据加载到Excel中，因为有更多的数据，这个过程也将花费更多的时间，我将在这里花费大约1分钟的时间。

三、统计分析
当数据加载到Excel中时，我们可以通过透视表快速分析数据。下图基于汽车质量网络投诉记录中的3000条数据，然后通过数据透视表，我们可以得到投诉品牌和投诉汽车系统的排名。这里，3000条数据大约是一个月的投诉量。

这些是我们批量获取100页网页数据的方法，以及各种制造商的投诉排名。整个过程大约需要7分钟才能完成，大部分时间都花在捕获和加载数据上。

119

上一篇：通过一张Excel表格中的数据，介绍各个数据的有效性控制和相关其余数据录入方法技巧（二）下一篇：「伙伴云」伙伴云免费版和标准版功能有哪些区别？

Excel表格共享

如何批量的抓取网页中的数据？学会使用Excel只需几分钟就能轻松搞定！