您的位置 首页 > 数码极客

【没有鼠标怎么拖动东西】非计算机专业学生/上班族/也能学会的“抓取数据”简单教程

——Web Scraper实战

首先,“数据生活”无处不在。

///《我是歌手》,《阿里云索AI》成功预测了决赛歌王。

///在《向往的生活》中,“小度”不仅可以陪主人家娱乐,还可以监督彭昱畅减肥。

///在《一“键”倾心》中,利用大数据和云计算对手机进行全面分析从而为女生匹配男嘉宾。

///每到年末你还会收到来自各大APP的“年度总结报告”,通过大数据分析它会让你回顾这一年的生活,或者是想起特殊的一天,为你纪念了自己不平凡的日子。

“数据”无处不在,无时不有,它已经融入了我们的日常生活并为我们提供了极大的便利。


★为此,也就有越来越多的人对“数据分析”或者“编程”等产生了浓厚的兴趣。

★如果你是一个非专业的学生或者是想要接触这方面的上班族,那就跟我一起学习吧!


二、Web Scraper实战——抓取数据(以豆瓣电影排行榜为例)

(1)第一步:安装Web Scraper

①下载插件(有需要的可以在评论中留言,我会一一回复)

②安装插件:(如下图)

插件下载完毕后,在chrome浏览器中输[chrome://extensions/]进入到插件程序页面。

③把下好的插件文件用鼠标拖拽到chrome浏览器里,会弹出是否要添加,点击添加,浏览器右上角(如上图)出现Web Scraper的图标,即表示安装成功。

(2)第二步:配置Web Scraper

①进入你想要爬取数据的网站并打开操作界面:

windows/linux操作系统同时按下:ctrl+shift+I;

mac操作系统同时按下:cmd+opt+I

②打开Web Scraper:


③开始进行数据抓取:

★取名那里大家可以根据你所要爬取的数据命名噢


★点击进入

★把排行榜这一页的电影的链接都提取出来

★点击进入

★以上所有的步骤就把LINK选择器配置好了

★我们就以爬取”导演“的数据为例,大家以后根据需要可以多设几个爬取的关键词

★”导演“数据就爬取好啦!

★以上两项分别表示请求间隔时间和等待页面加载时间


★等一会儿以后就可以看到爬取的数据啦!

★检查一下没有错误就可以点击上图所示生成表格!


通过上述步骤,我们就可以提取想要的数据了,Web Scraper虽然抓取效率比较低,不能大量级的对数据进行抓取,但是慢慢抓取大几千页的数据还是可以的。所以对于编程小白、非专业自学的同学或者上班族来说利用web scraper抓取数据是一个简单而又便捷的方法。

关于作者: admin

无忧经验小编鲁达,内容侵删请Email至wohenlihai#qq.com(#改为@)

热门推荐