- 前言 之前我们用了 urllib 库,这个作为入门的工具还是不错的,对了解一些爬虫的基本理念,掌握爬虫爬取的流程有所帮助。入门之后,我们就需要学习一些更加高级的内容和工具来方便我们的爬取。那么这一节来简单介绍一下 requests 库的基本用法。 注:Python 版本依然基于 2.7 官方文档 以下内容大多来自于官方文档,本文进行了一些修改和总结。要了解更多可以参考 官方... 前言 之前我们用了 urllib 库,这个作为入门的工具还是不错的,对了解一些爬虫的基本理念,掌握爬虫爬取的流程有所帮助。入门之后,我们就需要学习一些更加高级的内容和工具来方便我们的爬取。那么这一节来简单介绍一下 requests 库的基本用法。 注:Python 版本依然基于 2.7 官方文档 以下内容大多来自于官方文档,本文进行了一些修改和总结。要了解更多可以参考 官方...
- Crawler:爬虫之基于https+parse库实现爬取国内某知名招聘网上海、北京关于区块链职位的求职信息 目录 输出结果 1、上海区块链职位 2、北京区块链职位 设计思路 核心代码 输出结果 1、上海区块链职位 国内某知名招聘网上海关于区块链职位的求职信息分析图 2、北京区块链职位 国内某知名... Crawler:爬虫之基于https+parse库实现爬取国内某知名招聘网上海、北京关于区块链职位的求职信息 目录 输出结果 1、上海区块链职位 2、北京区块链职位 设计思路 核心代码 输出结果 1、上海区块链职位 国内某知名招聘网上海关于区块链职位的求职信息分析图 2、北京区块链职位 国内某知名...
- 写在前面:博主是一只经过实战开发历练后投身培训事业的“小山猪”,昵称取自动画片《狮子王》中的“彭彭”,总是以乐观、积极的心态对待周边的事物。本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域,如今终有小成,愿将昔日所获与大家交流一二,希望对学习路上的你有所助益。同时,博主也想通过此次尝试打造一个完善的技术图书馆,任何与文章技术点有关的异常、错误、注... 写在前面:博主是一只经过实战开发历练后投身培训事业的“小山猪”,昵称取自动画片《狮子王》中的“彭彭”,总是以乐观、积极的心态对待周边的事物。本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域,如今终有小成,愿将昔日所获与大家交流一二,希望对学习路上的你有所助益。同时,博主也想通过此次尝试打造一个完善的技术图书馆,任何与文章技术点有关的异常、错误、注...
- 前言 安装软件 下载 yum -y install gcc pcre pcre-devel zlib zlib-devel openssl openssl-devel wget http://nginx.org/download/nginx-1.17.5.tar.gz tar -xzvf nginx-1.17.5.tar.gz cd nginx-1.17.5 配置ngi... 前言 安装软件 下载 yum -y install gcc pcre pcre-devel zlib zlib-devel openssl openssl-devel wget http://nginx.org/download/nginx-1.17.5.tar.gz tar -xzvf nginx-1.17.5.tar.gz cd nginx-1.17.5 配置ngi...
- 前言 本文演示如何给NGINX服务器配置HTTPS链接,通过本文的练习,读者应该具备能力在centos上部署一个nginx服务器,并配置https链接;文内使用的操作系统为CENTOS7。 安装软件 下载 yum -y install gcc pcre pcre-devel zlib zlib-devel openssl openssl-devel wget https:/... 前言 本文演示如何给NGINX服务器配置HTTPS链接,通过本文的练习,读者应该具备能力在centos上部署一个nginx服务器,并配置https链接;文内使用的操作系统为CENTOS7。 安装软件 下载 yum -y install gcc pcre pcre-devel zlib zlib-devel openssl openssl-devel wget https:/...
- 文章目录 Question One:请回答一下HTTP和HTTPS的区别,以及HTTPS有什么缺点?Question Two: 请问tcp握手为什么两次不可以?为什么不用四次?Question Three: 请你来说一下TCP拥塞控制? 本篇为计算机网络相关,大部分内容参考本篇: 温故Linux后端编程(四):膜拜《TCP/IP 卷一》 其中缺少... 文章目录 Question One:请回答一下HTTP和HTTPS的区别,以及HTTPS有什么缺点?Question Two: 请问tcp握手为什么两次不可以?为什么不用四次?Question Three: 请你来说一下TCP拥塞控制? 本篇为计算机网络相关,大部分内容参考本篇: 温故Linux后端编程(四):膜拜《TCP/IP 卷一》 其中缺少...
- 文章目录 Servlet配置方式ServletContext如何得到有什么作用可以获取全局配置参数可以获取Web应用中的资源 通过classloader去获取web工程下的资源使用ServletContext存取数据。ServletContext存取值分析 细节:ServletContext 何时创建, 何时销毁? HttpServletRequestHttpS... 文章目录 Servlet配置方式ServletContext如何得到有什么作用可以获取全局配置参数可以获取Web应用中的资源 通过classloader去获取web工程下的资源使用ServletContext存取数据。ServletContext存取值分析 细节:ServletContext 何时创建, 何时销毁? HttpServletRequestHttpS...
- 目录 1、背景 2、环境搭建 2.1、更新MaixPy 固件 2.2、安装MaixPy IDE 2.3、运行MaixPy IDE 2.4、串口工具调试 1、背景 最近学习一款优秀的开源AI开发套件M1 Dock,该模块集成了Micropython,使用专业的AI芯片k210作为核心处理单元,k210带独立FPU的双核处理,64位的CPU位宽,8M的片上SRA... 目录 1、背景 2、环境搭建 2.1、更新MaixPy 固件 2.2、安装MaixPy IDE 2.3、运行MaixPy IDE 2.4、串口工具调试 1、背景 最近学习一款优秀的开源AI开发套件M1 Dock,该模块集成了Micropython,使用专业的AI芯片k210作为核心处理单元,k210带独立FPU的双核处理,64位的CPU位宽,8M的片上SRA...
- 通过一个系统,接触到了Java安全机制,故作一小节,供朋友们参考学习。 1. HTTPS概念 1)简介 HTTPS(全称:Hypertext Transfer Protocol over Secure Socket Layer),是以安全为目标的HTTP通道,简单讲是HTTP的安全版。即HTTP下加入SSL层,HTTP... 通过一个系统,接触到了Java安全机制,故作一小节,供朋友们参考学习。 1. HTTPS概念 1)简介 HTTPS(全称:Hypertext Transfer Protocol over Secure Socket Layer),是以安全为目标的HTTP通道,简单讲是HTTP的安全版。即HTTP下加入SSL层,HTTP...
- 项目中Android https请求地址遇到了这个异常(无终端认证): javax.net.ssl.SSLPeerUnverifiedException: No peer certificate 是SSL协议中没有终端认证。 没有遇到过的问题,于是无奈的去找度娘。。。。。。。,各种问题,各种纠结。。。。。。 看了不少大神的博客后得到的解决方案如下: ... 项目中Android https请求地址遇到了这个异常(无终端认证): javax.net.ssl.SSLPeerUnverifiedException: No peer certificate 是SSL协议中没有终端认证。 没有遇到过的问题,于是无奈的去找度娘。。。。。。。,各种问题,各种纠结。。。。。。 看了不少大神的博客后得到的解决方案如下: ...
- 在做Android客户端通过https协议访问12306,并爬取数据时,出现了如下错误: 其中有一条错误提示是 javax.net.ssl.SSLPeerUnverifiedException: No peer certificate的异常。现给出解决方法。 写了一个自定义类继承SSLSocketFactory: import java.io.IOExcepti... 在做Android客户端通过https协议访问12306,并爬取数据时,出现了如下错误: 其中有一条错误提示是 javax.net.ssl.SSLPeerUnverifiedException: No peer certificate的异常。现给出解决方法。 写了一个自定义类继承SSLSocketFactory: import java.io.IOExcepti...
- WebService系列之Axis Https(SSL)证书校验错误处理方法 最近在用Axis调用https的接口,抛出异常: javax.net.ssl.SSLHandshakeException: sun.security.validator.ValidatorException: PKIX path building failed: sun.securi... WebService系列之Axis Https(SSL)证书校验错误处理方法 最近在用Axis调用https的接口,抛出异常: javax.net.ssl.SSLHandshakeException: sun.security.validator.ValidatorException: PKIX path building failed: sun.securi...
- Nginx系列之使用ssl模块配置支持HTTPS访问 1、博客前言介绍 最近在用nginx代理https的第三方链接,因为不是做运维,所以对nginx并不是特殊熟悉,所以到处询问摸索了挺久 2、查看ssl_module 要使用nginx代理https的链接,先用检查nginx是否已经有安装了ssl module,如图使用命令: cd /usr/local/ngi... Nginx系列之使用ssl模块配置支持HTTPS访问 1、博客前言介绍 最近在用nginx代理https的第三方链接,因为不是做运维,所以对nginx并不是特殊熟悉,所以到处询问摸索了挺久 2、查看ssl_module 要使用nginx代理https的链接,先用检查nginx是否已经有安装了ssl module,如图使用命令: cd /usr/local/ngi...
- Https工作原理&TLS握手机制 @Kyunban Wong 1.HTTPS作用 HTTPS是在HTTP的基础上提供了数据加密的支持,保证了数据: 私密性完整性用来认证客户端和服务端的身份 2.普通HTTP 在普通的HTTP中,数据是明文传输的,很容易出现中间人伪装数据: 面对客户端伪装成服务端,进行窃取数据。面对服务端伪装成客户端,进行窃取数据。 ... Https工作原理&TLS握手机制 @Kyunban Wong 1.HTTPS作用 HTTPS是在HTTP的基础上提供了数据加密的支持,保证了数据: 私密性完整性用来认证客户端和服务端的身份 2.普通HTTP 在普通的HTTP中,数据是明文传输的,很容易出现中间人伪装数据: 面对客户端伪装成服务端,进行窃取数据。面对服务端伪装成客户端,进行窃取数据。 ...
- 一、CAS服务端搭建 1.1 CAS支持Http登录配置 CAS默认是要https的链接才能登录的,不过学习的话是可以先去掉https限制,本博客介绍的是基于Cas4.2.7的,之前改过4.0的,详情见https://blog.csdn.net/u014427391/article/details/82083995 Cas4.2.7和4.0的修改是不一样的,Cas... 一、CAS服务端搭建 1.1 CAS支持Http登录配置 CAS默认是要https的链接才能登录的,不过学习的话是可以先去掉https限制,本博客介绍的是基于Cas4.2.7的,之前改过4.0的,详情见https://blog.csdn.net/u014427391/article/details/82083995 Cas4.2.7和4.0的修改是不一样的,Cas...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新,构建AI应用全新智能中枢
2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间,华为云展示了Serverless与MCP融合创新的解决方案,本期访谈直播,由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持,华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考
2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中,探讨处理器生态的关键要素及其联系,分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源,3步轻松管理企业成本
2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源,3步轻松管理成本,帮助提升日常管理效率!
回顾中
热门标签