- 前言 之前我们用了 urllib 库,这个作为入门的工具还是不错的,对了解一些爬虫的基本理念,掌握爬虫爬取的流程有所帮助。入门之后,我们就需要学习一些更加高级的内容和工具来方便我们的爬取。那么这一节来简单介绍一下 requests 库的基本用法。 注:Python 版本依然基于 2.7 官方文档 以下内容大多来自于官方文档,本文进行了一些修改和总结。要了解更多可以参考 官方... 前言 之前我们用了 urllib 库,这个作为入门的工具还是不错的,对了解一些爬虫的基本理念,掌握爬虫爬取的流程有所帮助。入门之后,我们就需要学习一些更加高级的内容和工具来方便我们的爬取。那么这一节来简单介绍一下 requests 库的基本用法。 注:Python 版本依然基于 2.7 官方文档 以下内容大多来自于官方文档,本文进行了一些修改和总结。要了解更多可以参考 官方...
- Crawler:爬虫之基于https+parse库实现爬取国内某知名招聘网上海、北京关于区块链职位的求职信息 目录 输出结果 1、上海区块链职位 2、北京区块链职位 设计思路 核心代码 输出结果 1、上海区块链职位 国内某知名招聘网上海关于区块链职位的求职信息分析图 2、北京区块链职位 国内某知名... Crawler:爬虫之基于https+parse库实现爬取国内某知名招聘网上海、北京关于区块链职位的求职信息 目录 输出结果 1、上海区块链职位 2、北京区块链职位 设计思路 核心代码 输出结果 1、上海区块链职位 国内某知名招聘网上海关于区块链职位的求职信息分析图 2、北京区块链职位 国内某知名...
- 写在前面:博主是一只经过实战开发历练后投身培训事业的“小山猪”,昵称取自动画片《狮子王》中的“彭彭”,总是以乐观、积极的心态对待周边的事物。本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域,如今终有小成,愿将昔日所获与大家交流一二,希望对学习路上的你有所助益。同时,博主也想通过此次尝试打造一个完善的技术图书馆,任何与文章技术点有关的异常、错误、注... 写在前面:博主是一只经过实战开发历练后投身培训事业的“小山猪”,昵称取自动画片《狮子王》中的“彭彭”,总是以乐观、积极的心态对待周边的事物。本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域,如今终有小成,愿将昔日所获与大家交流一二,希望对学习路上的你有所助益。同时,博主也想通过此次尝试打造一个完善的技术图书馆,任何与文章技术点有关的异常、错误、注...
- 前言 安装软件 下载 yum -y install gcc pcre pcre-devel zlib zlib-devel openssl openssl-devel wget http://nginx.org/download/nginx-1.17.5.tar.gz tar -xzvf nginx-1.17.5.tar.gz cd nginx-1.17.5 配置ngi... 前言 安装软件 下载 yum -y install gcc pcre pcre-devel zlib zlib-devel openssl openssl-devel wget http://nginx.org/download/nginx-1.17.5.tar.gz tar -xzvf nginx-1.17.5.tar.gz cd nginx-1.17.5 配置ngi...
- 前言 本文演示如何给NGINX服务器配置HTTPS链接,通过本文的练习,读者应该具备能力在centos上部署一个nginx服务器,并配置https链接;文内使用的操作系统为CENTOS7。 安装软件 下载 yum -y install gcc pcre pcre-devel zlib zlib-devel openssl openssl-devel wget https:/... 前言 本文演示如何给NGINX服务器配置HTTPS链接,通过本文的练习,读者应该具备能力在centos上部署一个nginx服务器,并配置https链接;文内使用的操作系统为CENTOS7。 安装软件 下载 yum -y install gcc pcre pcre-devel zlib zlib-devel openssl openssl-devel wget https:/...
- 文章目录 Question One:请回答一下HTTP和HTTPS的区别,以及HTTPS有什么缺点?Question Two: 请问tcp握手为什么两次不可以?为什么不用四次?Question Three: 请你来说一下TCP拥塞控制? 本篇为计算机网络相关,大部分内容参考本篇: 温故Linux后端编程(四):膜拜《TCP/IP 卷一》 其中缺少... 文章目录 Question One:请回答一下HTTP和HTTPS的区别,以及HTTPS有什么缺点?Question Two: 请问tcp握手为什么两次不可以?为什么不用四次?Question Three: 请你来说一下TCP拥塞控制? 本篇为计算机网络相关,大部分内容参考本篇: 温故Linux后端编程(四):膜拜《TCP/IP 卷一》 其中缺少...
- 文章目录 Servlet配置方式ServletContext如何得到有什么作用可以获取全局配置参数可以获取Web应用中的资源 通过classloader去获取web工程下的资源使用ServletContext存取数据。ServletContext存取值分析 细节:ServletContext 何时创建, 何时销毁? HttpServletRequestHttpS... 文章目录 Servlet配置方式ServletContext如何得到有什么作用可以获取全局配置参数可以获取Web应用中的资源 通过classloader去获取web工程下的资源使用ServletContext存取数据。ServletContext存取值分析 细节:ServletContext 何时创建, 何时销毁? HttpServletRequestHttpS...
- 目录 1、背景 2、环境搭建 2.1、更新MaixPy 固件 2.2、安装MaixPy IDE 2.3、运行MaixPy IDE 2.4、串口工具调试 1、背景 最近学习一款优秀的开源AI开发套件M1 Dock,该模块集成了Micropython,使用专业的AI芯片k210作为核心处理单元,k210带独立FPU的双核处理,64位的CPU位宽,8M的片上SRA... 目录 1、背景 2、环境搭建 2.1、更新MaixPy 固件 2.2、安装MaixPy IDE 2.3、运行MaixPy IDE 2.4、串口工具调试 1、背景 最近学习一款优秀的开源AI开发套件M1 Dock,该模块集成了Micropython,使用专业的AI芯片k210作为核心处理单元,k210带独立FPU的双核处理,64位的CPU位宽,8M的片上SRA...
- 通过一个系统,接触到了Java安全机制,故作一小节,供朋友们参考学习。 1. HTTPS概念 1)简介 HTTPS(全称:Hypertext Transfer Protocol over Secure Socket Layer),是以安全为目标的HTTP通道,简单讲是HTTP的安全版。即HTTP下加入SSL层,HTTP... 通过一个系统,接触到了Java安全机制,故作一小节,供朋友们参考学习。 1. HTTPS概念 1)简介 HTTPS(全称:Hypertext Transfer Protocol over Secure Socket Layer),是以安全为目标的HTTP通道,简单讲是HTTP的安全版。即HTTP下加入SSL层,HTTP...
- 项目中Android https请求地址遇到了这个异常(无终端认证): javax.net.ssl.SSLPeerUnverifiedException: No peer certificate 是SSL协议中没有终端认证。 没有遇到过的问题,于是无奈的去找度娘。。。。。。。,各种问题,各种纠结。。。。。。 看了不少大神的博客后得到的解决方案如下: ... 项目中Android https请求地址遇到了这个异常(无终端认证): javax.net.ssl.SSLPeerUnverifiedException: No peer certificate 是SSL协议中没有终端认证。 没有遇到过的问题,于是无奈的去找度娘。。。。。。。,各种问题,各种纠结。。。。。。 看了不少大神的博客后得到的解决方案如下: ...
- 在做Android客户端通过https协议访问12306,并爬取数据时,出现了如下错误: 其中有一条错误提示是 javax.net.ssl.SSLPeerUnverifiedException: No peer certificate的异常。现给出解决方法。 写了一个自定义类继承SSLSocketFactory: import java.io.IOExcepti... 在做Android客户端通过https协议访问12306,并爬取数据时,出现了如下错误: 其中有一条错误提示是 javax.net.ssl.SSLPeerUnverifiedException: No peer certificate的异常。现给出解决方法。 写了一个自定义类继承SSLSocketFactory: import java.io.IOExcepti...
- WebService系列之Axis Https(SSL)证书校验错误处理方法 最近在用Axis调用https的接口,抛出异常: javax.net.ssl.SSLHandshakeException: sun.security.validator.ValidatorException: PKIX path building failed: sun.securi... WebService系列之Axis Https(SSL)证书校验错误处理方法 最近在用Axis调用https的接口,抛出异常: javax.net.ssl.SSLHandshakeException: sun.security.validator.ValidatorException: PKIX path building failed: sun.securi...
- Nginx系列之使用ssl模块配置支持HTTPS访问 1、博客前言介绍 最近在用nginx代理https的第三方链接,因为不是做运维,所以对nginx并不是特殊熟悉,所以到处询问摸索了挺久 2、查看ssl_module 要使用nginx代理https的链接,先用检查nginx是否已经有安装了ssl module,如图使用命令: cd /usr/local/ngi... Nginx系列之使用ssl模块配置支持HTTPS访问 1、博客前言介绍 最近在用nginx代理https的第三方链接,因为不是做运维,所以对nginx并不是特殊熟悉,所以到处询问摸索了挺久 2、查看ssl_module 要使用nginx代理https的链接,先用检查nginx是否已经有安装了ssl module,如图使用命令: cd /usr/local/ngi...
- Https工作原理&TLS握手机制 @Kyunban Wong 1.HTTPS作用 HTTPS是在HTTP的基础上提供了数据加密的支持,保证了数据: 私密性完整性用来认证客户端和服务端的身份 2.普通HTTP 在普通的HTTP中,数据是明文传输的,很容易出现中间人伪装数据: 面对客户端伪装成服务端,进行窃取数据。面对服务端伪装成客户端,进行窃取数据。 ... Https工作原理&TLS握手机制 @Kyunban Wong 1.HTTPS作用 HTTPS是在HTTP的基础上提供了数据加密的支持,保证了数据: 私密性完整性用来认证客户端和服务端的身份 2.普通HTTP 在普通的HTTP中,数据是明文传输的,很容易出现中间人伪装数据: 面对客户端伪装成服务端,进行窃取数据。面对服务端伪装成客户端,进行窃取数据。 ...
- 一、CAS服务端搭建 1.1 CAS支持Http登录配置 CAS默认是要https的链接才能登录的,不过学习的话是可以先去掉https限制,本博客介绍的是基于Cas4.2.7的,之前改过4.0的,详情见https://blog.csdn.net/u014427391/article/details/82083995 Cas4.2.7和4.0的修改是不一样的,Cas... 一、CAS服务端搭建 1.1 CAS支持Http登录配置 CAS默认是要https的链接才能登录的,不过学习的话是可以先去掉https限制,本博客介绍的是基于Cas4.2.7的,之前改过4.0的,详情见https://blog.csdn.net/u014427391/article/details/82083995 Cas4.2.7和4.0的修改是不一样的,Cas...
上滑加载中
推荐直播
-
“智见未来”数字文旅创新大赛 线上培训
2025/04/16 周三 19:30-21:00
洪洁/行业算力发展部
4月16日19:30-21:00,大赛组委会将于线上举办培训,汇聚行业专家与技术大牛,从文旅产业的前沿趋势到AI技术的深度应用,全方位为你赋能
回顾中 -
WS63E星闪开发板快速入门指南:开启星闪技术之旅
2025/05/15 周四 19:00-20:30
杨阳 华为开发者布道师
本期直播,深度解析星闪技术核心优势与开发实战技巧,分享从环境搭建到“海思智棒”优秀星闪体验官案例开发的完整路径,覆盖技术原理、场景化案例、备赛避坑指南,助力开发者快速攻克物联网项目开发难题。
回顾中 -
星闪应用开发技术课程(群)建设思路与设想
2025/05/22 周四 19:00-21:00
葛非 华为开发者布道师
华中师范大学计算机学院副教授-葛非老师将深入讲解星闪核心技术及其支撑技术,并讨论如何将这些技术融入到通信工程、计算机科学与技术、软件工程等专业的课程内容中,旨在推动高等教育领域星闪鸿蒙生态的有序发展。
即将直播
热门标签