导读：如果把互联网比作大蜘蛛网，数据就是存放在蜘蛛网的节点上，爬行动物是小蜘蛛，Python是写蜘蛛的编程语言，沿着互联网抓住自己的猎物（数据）。
目前，许多大型互联网公司使用爬行技术。因为在互联网时代，互联网上有很多必要的信息。如果把互联网比作大蜘蛛网，数据就是存放在蜘蛛网的节点上，爬行动物是小蜘蛛，Python是写蜘蛛的编程语言，沿着互联网抓住自己的猎物（数据）。
从技术层面来说，爬虫类是通过程序模拟浏览器要求站点的行为，将站点返回的HTML代码/JSON数据/二进制数据（图像、视频）爬上当地，提取自己需要的数据，保管使用。
初步理解什么是爬虫类，首先谈谈这项技术能做什么，主要有以下三个方面
1.爬取数据，进行市场调查和商业分析爬取知识、豆瓣等网站的优质话题内容，抓取房地产网站的买卖信息，分析房价变化趋势，分析不同地区的房价分析，爬取招聘网站的职务信息，分析各行业的人才需求状况和工资水平。
2.作为机器学习、数据挖掘的原始数据，如建立推荐系统，可以访问更多维度的数据，建立更好的模型。
3.获取高质量的资源：图像、文本、视频获得游戏内美丽的图像，获得图像资源和评论文本数据。
其实，爬虫类最本质的作用是爬取网络资源，这些资源是我们所需要的，但形式不同，在广阔的网络资源中用人力获得这些资源太显示，Python爬虫类很受欢迎。
免责声明：本文内容来源于公开网络,若涉及侵权联系尽快删除！，【本文标题和网址】[Python培训]Python爬虫功能简介：http://www.csnewer.com/Pythondt/890.html
![[Python培训]Python爬虫功能简介](/uploads/allimg/201012/1-201012105504520.png)
![[Python培训]Python爬虫功能简介](/uploads/allimg/201012/1-20101210551a37.png)
