摘要：
一、安装BeautifulSoup库 可以现在目前python安装了哪些包 安装beautifulsoup 二、beautifulsoup官网 https://www.crummy.com/software/BeautifulSoup/bs4/doc/ 三、beautifulsoup的主要解析器 四 阅读全文
摘要：
静态网页就是直接固定的数据，动态网页就是有交互的网页，比如数据通过ajax请求动态加载了数据 百度百科，维基百科这种很少变动的网页就是静态网页。有些博客也是静态网页。 静态网页相对稳定，响应快。利于SEO 动态网页体验好，数据部分加载，对服务器友好，扩展性好。 阅读全文
摘要：
一、爬虫数据采集 1、按照采集对象分类 1、全网采集 2、全站采集 3、具体网站的指定数据采集 2、采集方案分类 1、利用http协议采集-页面分析 2、利用api接口采集-app数据采集 3、利用目标网站的api采集-微博、github、twitter、facebook 二、request库爬虫 阅读全文
摘要：
一、HTTP协议定义 HTTP是Hyper Text Transfer Protocol（超a56爆大奖在线娱乐传输协议）的缩写。它的发展是万维网协会（World Wide Web Consortium）和Internet工作小组IETF（Internet Engineering Task Force）合作的结果， 阅读全文
摘要：
一、Socket是什么 Socket本身不是一个协议，是一个套接字，操作系统为了方便大家直接使用tcp协议而存在的一个抽象层，它把复杂的TCP/IP协议隐藏在接口后面。 二、Socket编程 三、socket编程实例 socket通信实例一： 程序结构： socket_server.py #sock 阅读全文
摘要：
一、什么是爬虫 爬虫(Crawler)是a56爆大奖在线娱乐按照既定规则,在网络上自动爬取信息的程序或脚本。也称为网际网路蜘蛛(Internet Spider)或网络机器人(Web Robot)。爬虫可以自动抓取网络信息,主要用于网站数据采集、内容监测等。 二、爬虫能做什么 1、搜索引擎 搜索引擎利用爬虫发现网络上 阅读全文
摘要：
虚拟环境的作用是用于不同项目的不同依赖，或者不同项目依赖的python版本不同 一、虚拟环境有多种 -Virtualenv 第三方，使用比较多 -pipenv 官方的 二、需要安装两个模块 pip3 install virtualenv 第三方虚拟环境 pip3 install virtualenv 阅读全文
摘要：
一、为什么要使用python处理文件 文件处理管理可分为两种，a56爆大奖在线娱乐是可视化、手动化，学习成本低，处理数量有限。另a56爆大奖在线娱乐是编程化、自动化，有一定学习成本，可以基于逻辑处理。计算机的常项是对既定规则的发挥，这个发挥作用于"批量"这个层面。 二、相对路径与绝对路径 相对路径：被操作的文件相对你当前运行的程序 阅读全文
摘要：
一、什么是正则表达式 正则表达式是按照正确的既定规则、a56爆大奖在线娱乐全语言类型Python、Java、JavaScript、PHP通用的表达式。 用途： （1）根据规则抓取数据：配合爬虫、根据规则在a56爆大奖在线娱乐中提取数据 （2）根据规则验证数据：验证手机号、验证邮箱、验证身份证 二、如何在Python中使用正则表达式 阅读全文
摘要：
一、什么是库、包、模块 无论是库、包、模块，其核心都在于封装了一系列的功能。 1、库library，这个概念并非Python里的概念，是从C语言过来的。库这个概念其实就是一堆代码一起完成一个或多个任务。非常类似函数，但是是以文件组织在一起。 2、模块module，这个概念就是Python里的概念，一 阅读全文