在 Python 众多原生特性中，描述符可能是最少被自定义实现的特性之一，很多初学者都可能不知道它的存在，但它在底层实现的方法和属性却随处可见，它优雅的实现方式充分体现出 Python 的简洁之美。 定义 描述符（descriptor）：是一个有"绑定行为"的对象属性(object attribute)，它的访问控制会被描述器协议方法重写。 任何定义了 __get__, __set__ 或者 __delete__ 任一方法的类称为描述符类，其实例对象便是一个描述符，这些方法称为描述符协议。 当对一个实例属性进行访问时，Python 会按 obj.__dict__ → type(obj).__dict__ → type(obj)的父类.__dict__ 顺序进行查找，如果查找到目标属性并发现是一个描述符，Python 会调用描述符协议来改变默认的控制行为。 描述符是 @property @classmethod @staticmethod 和 super 的底层实现机制。 特性 同时定义了 __get__ 和 __set__ 的描述符称为 数据描述符(d

美国时间6月27日晚8点，Python 3.7.0 经过多轮测试，终于发布了正式版，增强了多处特性功能，同时 3.6 也更新到 3.6.6 稳定版本。 主要特性 PEP 539，新增 CPython 中用于线程本地存储的 C-API PEP 545，Python 官方文档翻译版本，新增日文、法文、韩文 PEP 552，优化 pyc 文件 PEP 553，新增内置函数 breakpoint() ，该函数在调用时自动进入调试器 PEP 557，新增内置模块dataclasses，可大幅简化类实例属性的初始化定义 PEP 560，新增支持类型模块和泛型 PEP 562，支持在模块定义 getattr 和__dir__ PEP 563，推迟对注释语句的分析从而优化 Python 的类型提示 PEP 564，time 内置函数支持纳秒 PEP 565，重新在 main 中默认显示 DeprecationWarning PEP 567，新增 contextvars模块，可实现上下文变量解决变量线程安全 避免使用 ASCII 作为默认文本编码，强制 UTF-8 编码运行 字典对象的 keys

前言 前几天董大 @董伟明 的爱派森上线了，还发了一套 PPT 和视频，PPT 共有 75 页干货，讲了很多进阶的用法，也包括很多坑，非常适合刚入门的同学，免得再踩到。 PPT 和视频的传送门 这里我提取部分容易忽视的，也就是大部分教程里没有的，加入自己的理解，同时语法改为 Python 3，也争取延伸一些，就当是做笔记了。 设置全局变量 有时候设置全局变量的需求并不是直接赋值，而是想从某个数据结构里引用生成，可以用下面这两种方法，推荐第二种，golbals() 支持字典用法很方便。 >>> d = {'a': 1, 'b':2} >>> # 粗暴的写法 >>> for k, v in d.items(): ... exec "{}={}".format(k, v) ... >>> # 文艺的写法 >>> globals().update(d) >>> a, b (1, 2) >>> 'a', 'b' ('a', 'b') >>>

本爬虫仅供学习交流，请勿将爬取数据进行非法使用。 功能简介 本爬虫可爬取各大互联网行业常用招聘网站(目前包括 拉勾网、BOSS直聘、前程无忧、猎聘网，更多可自定义)，采集职位主要信息输出到 csv 文件； 爬虫和文件写入独立两个进程(其实没必要，为了练习)，进程A对每个网站的爬虫启动多线程，每个爬虫以生成器方式迭代返回数据，通过队列传输给进程B进行写入。 运行环境 Python 3 requests lxml 代码简介 首先定义了爬虫的元类和基类，元类用来自动注册爬虫类到列表，进程只要遍历这个列表就能获得所有爬虫类了 # job_spider/spider.py class SpiderMeta(type): """爬虫类的元类，注册子类到列表，爬虫类指定此元类才能加入进程""" spiders = [] def __new__(mcs, name, bases, attrs): mcs.spiders.append(type.__new__(mcs, name, bases, attrs)) return t

configparser 简介 configparser 是 Pyhton 标准库中用来解析配置文件的模块，并且内置方法和字典非常接近。Python2.x 中名为 ConfigParser，3.x 已更名小写，并加入了一些新功能。 配置文件的格式如下： [DEFAULT] ServerAliveInterval = 45 Compression = yes CompressionLevel = 9 ForwardX11 = yes [bitbucket.org] User = Tom [topsecret.com] Port: 50022 ForwardX11: no “[ ]”包含的为 section，section 下面为类似于 key - value 的配置内容； configparser 默认支持 ‘=’ ‘：’ 两种分隔。 configparser 常用方法 初始化实例 使用 configparser 首先需要初始化实例，并读取配置文件： >>> import configparser >>> config = configpa