Python 爬虫包含两个重要的部分：正则表达式和Scrapy框架的运用， 正则表达式对于所有语言都是通用的，网络上可以找到各种资源。 如下是手绘Scrapy框架原理图，帮助理解   如下是一段运用Scrapy创建的...

一、UserAgent UserAgent中文名为用户代理，它使得服务器能够识别客户使用的操作系统及版本、CPU 类型、浏览器及版本等信息。对于一些网站来说，它会检查我们发送的请求中所携带的UserAgent字段，如果非...

在前一节中，我们了解了requests的基本用法，如基本的GET、POST请求以及Response对象。本节中，我们再来了解下requests的一些高级用法，如文件上传、cookie设置、代理设置等。 1. 文件上传 我...

Selenium Selenium是一个Web的自动化测试工具，最初是为网站自动化测试而开发的，类型像我们玩游戏用的按键精灵，可以按指定的命令自动操作，不同的是Selenium可以直接运行在浏览器上，它支持所有主流的浏览...

Python的类就像命名空间。Python程序默认处于全局命名空间内，类体则处于类命名空间内，Python 允许在全局范围内放置可执行代码，当 Python 执行该程序时，这些代码就会获得执行的机会。类似地，Python...

长期的电脑工作，让人眼睛容易疲劳和模糊，尤其大家在敲击代码更会觉得疲劳，我们在敲击python代码时，可以更改界面及字体减缓劳累，一起来看下吧~ 第一步，换成深色背景，保护视力 PyCharm默认的背景是白色的，比较刺眼...