# Web Scraper介绍 Web Scraper是一款免费的Chrome&Chromium(如360浏览器、QQ浏览器等)扩展,通过建立sitemap遍历网站抓取相应的数据。无需写代码,即可抓取95%以上的网站。 能够访问Google的可[通过应用商店安装](https://chrome.google.com/webstore/detail/web-scraper/jnhgnonknehpejjnehehllkliplmbmhn),~~这里也提供了百度网盘的[下载地址](https://pan.baidu.com/s/1lrWq7KwRia5v_obJjM_PNA)~~(跟不上版本更新就不提供了)。除免费插件外,该公司还提供了[付费云端版本](http://www.webscraper.io/service)。 [官方视频介绍(英文)](https://www.bilibili.com/video/av20519382/)已上传至于Bilibili,也可以通过@疏桐v5[数据抓取入门](https://www.bilibili.com/video/av9664397)、[数据抓取II-进阶](https://www.bilibili.com/video/av9708200/)了解Web Scraper。[我的B站投稿](http://space.bilibili.com/4442729/#/video)可能会更新一些相关内容,可以给我私信。 #### 插件优劣势 ##### 优势 - Chrome插件,安装方便; - 在浏览器内运行,简略了模拟登陆、反爬虫等麻烦事; - 操作简单,适合临时爬虫。 ##### 劣势 - 相对于python等爬虫,抓取速度慢,占用高。 ### 以下为官方介绍 #### 从动态网页中提取数据 使用Web Scraper,您可以构建sitemap来导航站点并提取数据。 使用不同的类型选择器,Web Scraper将浏览网站并提取多种类型的数据, 包含文本、表格、图像、链接等。 ![](https://box.kancloud.cn/02b5f055cae4e51e4c70a126dd9f6d59_500x500.png) #### 专为现代网络而打造 与仅从HTML提取数据的其他抓取工具不同,Web Scraper还可以提取使用JavaScript动态加载或生成的数据。 Web Scraper可以: * 等待动态数据加载中的页面 * 点击通过AJAX加载数据的分页按钮 * 点击按钮加载更多数据 * 向下滚动页面以加载更多数据 #### 以CSV格式导出数据或将数据存储至CouchDB Web Scrapper是一个独立的Chrome扩展,构建sitemap、提取数据和导出数据均在浏览器中完成。 抓取完成后,你可以下载抓取的CSV格式数据。进阶用法是你或许需要将数据保存到CouchDB中。 ![](https://box.kancloud.cn/4a621ca3586ecaa6f50d389a259a332b_500x500.png) ### 关于中文翻译 Web Scraper我接触也没几天,没有查到更多相关教程,于是自己翻译了一份。如果您有更加准确专业的翻译,或者有其它建议,请联系我: * 邮 箱:info@fuwenyue.com * 留言板:https://bizhatop.com/board/ * 微 博:@都还没睡醒 此文档发布于:http://webscraper.top/ 接下来的章节翻译自官方文档:http://www.webscraper.io/documentation