- 前言本文使用Python第三方库和浏览器实'企鹅'空间的的爬取,利用Matplotlib库实现词云的绘制,对于matplotlib感兴趣的童鞋可以参考《Python绘制精美可视化数据分析图表(一)-Matplotlib》，这里不再赘述。Selenium的介绍Selenium库是一个web的自动化测试工具，最初是为网站自动化测试而开发的，类似我们以前玩游戏用的“按键精灵”软件。他跟按键精灵一样... 前言本文使用Python第三方库和浏览器实'企鹅'空间的的爬取,利用Matplotlib库实现词云的绘制,对于matplotlib感兴趣的童鞋可以参考《Python绘制精美可视化数据分析图表(一)-Matplotlib》，这里不再赘述。Selenium的介绍Selenium库是一个web的自动化测试工具，最初是为网站自动化测试而开发的，类似我们以前玩游戏用的“按键精灵”软件。他跟按键精灵一样...
- 抓取JD商品先说说起因吧,是因为有朋友找我一起合作抓取某东的商品数据,我做为一个刚入爬虫的新手,当然是不可能完整的拿下这个啦.这次爬虫要的是商品的详细数据,我的工作就是筛选所有的商品的url,解析成json文件,传给他,他在继续通过我传入的url进行商品的详细信息需求这次的需求是通过关键字,找出含有关键字信息的产品,并且按照高级筛选的条件,要前100条商品的数据,如下还要根据销量,价格,评论... 抓取JD商品先说说起因吧,是因为有朋友找我一起合作抓取某东的商品数据,我做为一个刚入爬虫的新手,当然是不可能完整的拿下这个啦.这次爬虫要的是商品的详细数据,我的工作就是筛选所有的商品的url,解析成json文件,传给他,他在继续通过我传入的url进行商品的详细信息需求这次的需求是通过关键字,找出含有关键字信息的产品,并且按照高级筛选的条件,要前100条商品的数据,如下还要根据销量,价格,评论...
- 今天我们抓取的是m3u8的视频,视频有长视频和短视频之分.抓取m3u8类型视频对于短视频一般来说一个视频对应的就是一个url长视频 一个视频就几百兆到几十G不等 这种视频往往不会由一个连接进行全部返回 视频是由多个片段组成的每个片段大概是几秒到几分钟所以对于长视频的下载没有办法通过一个url进行获取下载，需要获取每个频段的url 进行下载进行拼接最终变成一个完整的视频然而视频还有加密... 今天我们抓取的是m3u8的视频,视频有长视频和短视频之分.抓取m3u8类型视频对于短视频一般来说一个视频对应的就是一个url长视频 一个视频就几百兆到几十G不等 这种视频往往不会由一个连接进行全部返回 视频是由多个片段组成的每个片段大概是几秒到几分钟所以对于长视频的下载没有办法通过一个url进行获取下载，需要获取每个频段的url 进行下载进行拼接最终变成一个完整的视频然而视频还有加密...
- 第一次发表实战类型的爬虫文章,如果有那里不明白或者出现bug的可以找我私信,欢迎大家在下面评论,可以给出我更好的建议,欢迎大家指正.网站链接放在这里了鬼吹灯主要是以协程为主来爬取小说得章节内容,协程爬取不懂得小伙伴可以先关注我一手,后续会整理理论的知识放在专栏里整体思路得到鬼吹灯页面的源码解析源码得到每一个章节的url得到书名,这个书名通过切片得到通过url得到一个页面的内容使用并发... 第一次发表实战类型的爬虫文章,如果有那里不明白或者出现bug的可以找我私信,欢迎大家在下面评论,可以给出我更好的建议,欢迎大家指正.网站链接放在这里了鬼吹灯主要是以协程为主来爬取小说得章节内容,协程爬取不懂得小伙伴可以先关注我一手,后续会整理理论的知识放在专栏里整体思路得到鬼吹灯页面的源码解析源码得到每一个章节的url得到书名,这个书名通过切片得到通过url得到一个页面的内容使用并发...
- @[TOC](Requests+Etree+BeautifulSoup+Pandas+Path应用 | 获取页面指定区域数据存入html、excel文档) 1 需求来源获取网页指定区域数据，并进行保存；简单说就是pa chong的需求了。 2 需求细节注意：请文明上网，本文仅作为学习用。讲述的是思路和方法，所以对被测试网站关键数据进行隐藏。如有需要，可学习思路后自行找测试对象进行学习。某网站... @[TOC](Requests+Etree+BeautifulSoup+Pandas+Path应用 | 获取页面指定区域数据存入html、excel文档) 1 需求来源获取网页指定区域数据，并进行保存；简单说就是pa chong的需求了。 2 需求细节注意：请文明上网，本文仅作为学习用。讲述的是思路和方法，所以对被测试网站关键数据进行隐藏。如有需要，可学习思路后自行找测试对象进行学习。某网站...
- 文章目录 微信小程序 Spdier - OfferShow 反编译逆向（一） 前言 一、任务说明 1.尝试反编译分析出js_code参数的生成方式，用来获取token 2.将小程序搜索出来的数据保存至本地excel 二、微信小程序抓包 - 分析 三、wxapkg反编译 - 分析 1.在夜神模拟器获取微信程序员的包 1.1 获取wxapkg的地址 1.2 删除wxapkg文件重新生成 1.3 复制w 文章目录 微信小程序 Spdier - OfferShow 反编译逆向（一） 前言 一、任务说明 1.尝试反编译分析出js_code参数的生成方式，用来获取token 2.将小程序搜索出来的数据保存至本地excel 二、微信小程序抓包 - 分析 三、wxapkg反编译 - 分析 1.在夜神模拟器获取微信程序员的包 1.1 获取wxapkg的地址 1.2 删除wxapkg文件重新生成 1.3 复制w
- # 一、任务说明 ## 1.PDF下载 **提示：下载2019年1月1日-至今的"银行间货币市场"PDF文件** # 一、任务说明 ## 1.PDF下载 **提示：下载2019年1月1日-至今的"银行间货币市场"PDF文件**
- 一、 关于壳的介绍 1、壳的功能：壳最本质的功能就是实现加载器，壳是指在一个程序的外面再包裹上另外一段代码，保护里面的代码不被非法修改或反编译的程序。它们一般都是先于程序运行，拿到控制权，然后完成它们保护软件的任务，深入点就是在apk外面再套一层壳，在运行的时候这层壳会把真正的apk的dalvik指令集释放出来，为apk加壳是目前主流的防护方案，真正的源码是隐藏在壳之下的，要想拿到源码研究其逻辑就 一、 关于壳的介绍 1、壳的功能：壳最本质的功能就是实现加载器，壳是指在一个程序的外面再包裹上另外一段代码，保护里面的代码不被非法修改或反编译的程序。它们一般都是先于程序运行，拿到控制权，然后完成它们保护软件的任务，深入点就是在apk外面再套一层壳，在运行的时候这层壳会把真正的apk的dalvik指令集释放出来，为apk加壳是目前主流的防护方案，真正的源码是隐藏在壳之下的，要想拿到源码研究其逻辑就
- 反编译工具有很多种，我推荐JADX，后续有更好的反编译工具我会继续补充 反编译工具有很多种，我推荐JADX，后续有更好的反编译工具我会继续补充
- 抓包概念：抓包是将网络传输发送与接收的数据包进行截获、重发、编辑、转存等操作，也用来检查网络安全等。 抓包概念：抓包是将网络传输发送与接收的数据包进行截获、重发、编辑、转存等操作，也用来检查网络安全等。
- Frida 是一款基于 Python + JavaScript 的 Hook 与调试框架，实现app逆向的强大工具； Frida 是一款基于 Python + JavaScript 的 Hook 与调试框架，实现app逆向的强大工具；
- Spider、App逆向，本案例使用的App是：引力播.apk，涉及到查壳、脱壳、反编译； Spider、App逆向，本案例使用的App是：引力播.apk，涉及到查壳、脱壳、反编译；
- Frida可以通过将JavaScript 脚本插入到APP的内存中来对APP的逻辑进行跟踪和监视乃至修改原程序的逻辑，实现逆向开发和分析人员想要实现的功能称之为HOOK（钩子 即通过钩子机制与钩子函数建立联系）； Frida可以通过将JavaScript 脚本插入到APP的内存中来对APP的逻辑进行跟踪和监视乃至修改原程序的逻辑，实现逆向开发和分析人员想要实现的功能称之为HOOK（钩子 即通过钩子机制与钩子函数建立联系）；
- 微信开发者工具 / 反编译工具CrackMinApp 下载安装 微信开发者工具介绍：微信提供的微信小程序开发工具，可以通过它来使用代码开发，也有小程序开发文档提供，很多程序员都会使用这个微信开发者工具。微信开发者工具属于是代码编程开发工具，除此之外也会有其他的代码编程开发工具，不过前提是需要懂代码才能使用这种开发工具，有一定的上手难度哦。 反编译工具CrackMinApp介绍：(反编译微信小程序) 微信开发者工具 / 反编译工具CrackMinApp 下载安装 微信开发者工具介绍：微信提供的微信小程序开发工具，可以通过它来使用代码开发，也有小程序开发文档提供，很多程序员都会使用这个微信开发者工具。微信开发者工具属于是代码编程开发工具，除此之外也会有其他的代码编程开发工具，不过前提是需要懂代码才能使用这种开发工具，有一定的上手难度哦。 反编译工具CrackMinApp介绍：(反编译微信小程序)
- Scrapy 框架学习 Scrapy 框架学习
上滑加载中
推荐直播
-
华为云开发者日·2024年度创享峰会2024/12/23 周一 14:00-16:00
华为云讲师团
华为云开发者日HDC.Cloud Day是面向全球开发者的旗舰活动，汇聚来自千行百业、高校及科研院所的开发人员。致力于打造开发者专属的技术盛宴，全方位服务与赋能开发者围绕华为云生态“知、学、用、创、商”的成长路径。通过前沿的技术分享、场景化的动手体验、优秀的应用创新推介，为开发者提供沉浸式学习与交流平台。开放创新，与开发者共创、共享、共赢未来。
回顾中 -
GaussDB管理平台TPOPS，DBA高效运维的一站式解决方案2024/12/24 周二 16:30-18:00
Leo 华为云数据库DTSE技术布道师
数据库的复杂运维，是否让你感到头疼不已？今天，华为云GaussDB管理平台将彻底来改观！本期直播，我们将深入探索GaussDB管理平台的TPOPS功能，带你感受一键式部署安装的便捷，和智能化运维管理的高效，让复杂的运维、管理变得简单，让简单变得可靠。
去报名 -
华为云软件开发生产线（CodeArts）11月新特性解读2024/12/24 周二 19:00-20:00
苏柏亚培 华为云高级产品经理
不知道产品的最新特性？没法和产品团队建立直接的沟通？本期直播产品经理将为您解读华为云软件开发生产线10月发布的新特性，并在直播过程中为您答疑解惑。
即将直播
热门标签