Python培训
400-996-5531
Python培训 > Python教程知识 > 正文
Python爬虫技术入门了解篇
- 发布：Python培训
- 来源：还是牛
- 时间：2019-08-05 15:06
各位小伙伴大家好，从今天起我们开始Python爬虫技术的讨论，本文我们主要说明以下几个问题：
1.什么是Python爬虫
Python爬虫，即网络Python爬虫，大家可以理解为在网络上爬行的一只蜘蛛，互联网就比作一张大网，而Python爬虫便是在这张网上爬来爬去的蜘蛛，如果它遇到资源，那么它就会抓取下来。想抓取什么？这个由你来控制它,通过特定的逻辑获取你想要的资源。
比如它在抓取一个网页，在这个网中他发现了一条道路，其实就是指向网页的超链接，那么它就可以爬到另一张网上来获取数据。这样，就可以爬取到你想要获取的东西了。
2.浏览网页的过程
用户浏览网页的过程中，我们可能会看到许多好看的图片，比如我们会看到几张的图片以及百度搜索框，这个过程其实就是用户输入网址之后，经过DNS服务器，找到服务器主机，向服务器发出一个请求，服务器经过解析之后，发送给用户的浏览器 HTML、JS、CSS 等文件，浏览器解析出来，用户便可以看到形形色色的图片了。
因此，用户看到的网页实质是基于HTML代码构成的，其余的样式以及各种绚丽的动画都是通过CSS和JS技术加载出来的。Python爬虫爬来的便是这些内容，通过分析和过滤这些 HTML 代码，实现对图片、文字等资源的获取。
3.URL的含义
URL是指统一资源定位符，也就是我们说的网址，统一资源定位符是对可以从互联网上得到的资源的位置和访问方法的一种简洁的表示，是互联网上标准资源的地址。互联网上的每个文件都有一个唯一的URL，它包含的信息指出文件的位置以及浏览器应该怎么处理它。
URL的格式由三部分组成：
①第一部分是协议(或称为服务方式)
②第二部分是存有该资源的主机IP地址（有时也包括端口号）
③第三部分是主机资源的具体地址，如目录和文件名等
Python爬虫爬取数据时必须要有一个目标的URL才可以获取数据，因此，它是Python爬虫获取数据的基本依据，准确理解它的含义对Python爬虫学习有很大帮助
4.对Python爬虫的误解的解释
Python爬虫不是万能的，但是没有Python爬虫是万万不能的，开个玩笑。其实Python爬虫并不是能自动的解决任何事情，而且爬虫也不是Python的专利，有了它能提高生产力那是一定的，但是你想让他向人一样的解决一切问题是不可能的。比如，识别图片，提取一段文字中的意思，这些单纯的靠Python爬虫技术是完不成的，请大家有一个清晰的认识。
免责声明：内容和图片源自网络，版权归原作者所有，如有侵犯您的原创版权请告知，我们将尽快删除相关内容。
预约申请免费试听课
填写下面表单即可预约申请免费试听！ 怕学不会？助教全程陪读，随时解惑！担心就业？一地学习，可全国推荐就业！
上一篇：python扩展包安装
下一篇：Python编程三大数据结构
Copyright © Tedu.cn All Rights Reserved 京ICP备08000853号-56 
京公网安备 11010802029508号 达内时代科技集团有限公司 版权所有
选择城市和中心
北京
黑龙江省
吉林省
内蒙古
河北省
陕西省
江苏省
湖北省
四川省
重庆
湖南省
江西省
贵州省
云南省
广西省
海南省
台湾