- scrapy中有一个参数:DOWNLOAD_DELAY 或者 download_delay 可以设置下载延时,不过Spider类被初始化的时候就固定了,爬虫运行过程中没发改变。 随机延时,可以降低被封ip的风险 代码示例 random_delay_middleware.py # -*- coding:utf-8 -*- import logging impor... scrapy中有一个参数:DOWNLOAD_DELAY 或者 download_delay 可以设置下载延时,不过Spider类被初始化的时候就固定了,爬虫运行过程中没发改变。 随机延时,可以降低被封ip的风险 代码示例 random_delay_middleware.py # -*- coding:utf-8 -*- import logging impor...
- 区别: tuple元组是不可变的列表 frozensets冻结集合是不可变的集合 代码示例 # 可变对象可以进行写操作(增、删、改) l = list([1, 2, 3]) l.append(4) [1, 2, 3, 4] s = set([1, 2, 3]) s.add(4) {1, 2, 3, 4} # 不可变对象不能进行写操作 t = tuple([1,... 区别: tuple元组是不可变的列表 frozensets冻结集合是不可变的集合 代码示例 # 可变对象可以进行写操作(增、删、改) l = list([1, 2, 3]) l.append(4) [1, 2, 3, 4] s = set([1, 2, 3]) s.add(4) {1, 2, 3, 4} # 不可变对象不能进行写操作 t = tuple([1,...
- 用于对特定的配置进行操作,当前模块的名称在 python 3.x 版本中变更为 configparser。 1.读取配置文件 - read(filename) 直接读取ini文件内容 - sections() 得到所有的section,并以列表的形式返回 - options(section) 得到该section的所有option - items(sectio... 用于对特定的配置进行操作,当前模块的名称在 python 3.x 版本中变更为 configparser。 1.读取配置文件 - read(filename) 直接读取ini文件内容 - sections() 得到所有的section,并以列表的形式返回 - options(section) 得到该section的所有option - items(sectio...
- 原理: 中文字符的编码范围是: \u4e00 - \u9fff 1 只要编码在此范围就可判断为中文字符 以下代码Python2下测试有效 1、判断字符串中是否包含中文 def is_contain_chinese(check_str): """ 判断字符串中是否包含中文 :param check_str: {str} 需要检测的字符串 :return: {bo... 原理: 中文字符的编码范围是: \u4e00 - \u9fff 1 只要编码在此范围就可判断为中文字符 以下代码Python2下测试有效 1、判断字符串中是否包含中文 def is_contain_chinese(check_str): """ 判断字符串中是否包含中文 :param check_str: {str} 需要检测的字符串 :return: {bo...
- 以下使用的是py3代码,py2可能引用方式不一样 服务器端 server.py # -*- coding: utf-8 -*- from xmlrpc.server import SimpleXMLRPCServer def file_read(filename): with open(filename, "r") as f: return f.read()... 以下使用的是py3代码,py2可能引用方式不一样 服务器端 server.py # -*- coding: utf-8 -*- from xmlrpc.server import SimpleXMLRPCServer def file_read(filename): with open(filename, "r") as f: return f.read()...
- 测试环境: macpython3 先查看本机支持的字体 # 显示可以用的中文字体 from matplotlib.font_manager import FontManager import subprocess def show_can_use_font(): # all font list get from matplotlib.font_manager... 测试环境: macpython3 先查看本机支持的字体 # 显示可以用的中文字体 from matplotlib.font_manager import FontManager import subprocess def show_can_use_font(): # all font list get from matplotlib.font_manager...
- scrapy辅助功能实用函数: get_response: 获得scrapy.HtmlResponse对象, 在不新建scrapy项目工程的情况下,使用scrapy的一些函数做测试 extract_links: 解析出所有符合条件的链接 代码示例 以拉勾首页为例,获取拉勾首页所有职位链接,进一步可以单独解析这些链接,获取职位的详情信息 import req... scrapy辅助功能实用函数: get_response: 获得scrapy.HtmlResponse对象, 在不新建scrapy项目工程的情况下,使用scrapy的一些函数做测试 extract_links: 解析出所有符合条件的链接 代码示例 以拉勾首页为例,获取拉勾首页所有职位链接,进一步可以单独解析这些链接,获取职位的详情信息 import req...
- 安装 pip install graphviz1 图片保存形式:pdf或png,在初始化时指定 代码示例 # -*- coding: utf-8 -*- # @File : graphviz_demo.py # @Date : 2018-07-03 # @Author : Peng Shiyu from graphviz import Digraph d... 安装 pip install graphviz1 图片保存形式:pdf或png,在初始化时指定 代码示例 # -*- coding: utf-8 -*- # @File : graphviz_demo.py # @Date : 2018-07-03 # @Author : Peng Shiyu from graphviz import Digraph d...
- 插入排序 列表被分为有序区和无序区两个部分,最初有序区只有一个元素 每次从无序区选择一个元素,插入到有序区的位置,直到无需去变空 代码实现 # -*- coding: utf-8 -*- # @File : insert_sort_demo.py # @Date : 2018-06-11 import random # 插入排序 O(n^2) def i... 插入排序 列表被分为有序区和无序区两个部分,最初有序区只有一个元素 每次从无序区选择一个元素,插入到有序区的位置,直到无需去变空 代码实现 # -*- coding: utf-8 -*- # @File : insert_sort_demo.py # @Date : 2018-06-11 import random # 插入排序 O(n^2) def i...
- 以下是python3的代码 from dateutil import parser time_str = "2018 9 03" dtime = parser.parse(time_str) print(dtime, type(dtime)) # 2018-09-03 00:00:00 <class 'datetime.datetime'> time... 以下是python3的代码 from dateutil import parser time_str = "2018 9 03" dtime = parser.parse(time_str) print(dtime, type(dtime)) # 2018-09-03 00:00:00 <class 'datetime.datetime'> time...
- pypi : https://pypi.org/project/zope.interface/ 文档:https://zopeinterface.readthedocs.io/en/latest/index.html 面向对象中接口负责定义规则,具体实现类来实现规则 安装 pip install zope.interface 1 代码示例 from zope... pypi : https://pypi.org/project/zope.interface/ 文档:https://zopeinterface.readthedocs.io/en/latest/index.html 面向对象中接口负责定义规则,具体实现类来实现规则 安装 pip install zope.interface 1 代码示例 from zope...
- python3 pip install pdfminer3k 1 # -*- encoding: utf-8 -*- try: from urllib.request import urlopen except: from urllib import urlopen from io import StringIO from pdfminer.pdfinterp... python3 pip install pdfminer3k 1 # -*- encoding: utf-8 -*- try: from urllib.request import urlopen except: from urllib import urlopen from io import StringIO from pdfminer.pdfinterp...
- 摘要算法模块,hashlib 碰撞:把无限多的数据集合映射到一个有限的集合中 要注意摘要算法不是加密算法,不能用于加密(因为无法通过摘要反推明文),只能用于防篡改,但是它的单向计算特性决定了可以在不存储明文口令的情况下验证用户口令。 对原始口令加一个复杂字符串来实现,俗称“加盐”:加salt算法 通过彩虹表根据哈希值反推原始口令 hashlib模块 imp... 摘要算法模块,hashlib 碰撞:把无限多的数据集合映射到一个有限的集合中 要注意摘要算法不是加密算法,不能用于加密(因为无法通过摘要反推明文),只能用于防篡改,但是它的单向计算特性决定了可以在不存储明文口令的情况下验证用户口令。 对原始口令加一个复杂字符串来实现,俗称“加盐”:加salt算法 通过彩虹表根据哈希值反推原始口令 hashlib模块 imp...
- python3.6 下测试 # -*- coding: utf-8 -*- class Demo(object): name = "demo" def instance_func(self): pass @classmethod def class_func(cls): pass @staticmethod def static_func(): pass def... python3.6 下测试 # -*- coding: utf-8 -*- class Demo(object): name = "demo" def instance_func(self): pass @classmethod def class_func(cls): pass @staticmethod def static_func(): pass def...
- 文档: PyPI: https://pypi.org/project/Flask-SocketIO/Github: https://github.com/miguelgrinberg/Flask-SocketIOdoc: https://flask-socketio.readthedocs.iosocket.io: https://socket.io/ 安装 pi... 文档: PyPI: https://pypi.org/project/Flask-SocketIO/Github: https://github.com/miguelgrinberg/Flask-SocketIOdoc: https://flask-socketio.readthedocs.iosocket.io: https://socket.io/ 安装 pi...
上滑加载中
推荐直播
-
华为云码道 × 仓颉编程:工程化AI编码探索2026/05/27 周三 19:00-21:00
刘俊杰-华为云仓颉语言专家/李炎-华为云码道技术专家/王智鹏-OpenCangjie开源社区发起人
本场直播围绕华为云仓颉语言与华为云码道的深度结合,展示华为云智能编程从零基础到高效落地的完整生态能力。以华为云码道为引擎,仓颉语言为载体,带给大家日常提效、趣味创新到极速量产的开发体验。
回顾中 -
一个AI团队帮你写代码:华为云码道Agent Space实战2026/06/25 周四 19:00-21:00
张翰文-华为云码道工程师/郭英旭-青软创新科技集团股份有限公司 软件架构师
本场直播聚焦华为云码道Agent Space两大模式:研发办公、代码开发,亲身体验从需求到代码的AI自动化能力。实操演示基于华为 CodeArts CLI,依托 OpenSpec 规格体系从零搭建业务项目。
回顾中
热门标签