- 前言相信爬虫(网络爬虫)是开发者们耳熟能详的数据采集技术。其中基于 Python Twisted 异步框架的 Scrapy,是灵活且强大的爬虫框架。而 Scrapyd 是 Scrapy 默认的爬虫管理服务,能够简单的执行、监控爬虫任务,除此之外,Scrapyd 还支持爬虫版本管理功能。后来基于 Scrapyd 的爬虫平台如雨后春笋般涌现出来,前有 SpiderKeeper,后有 Scrapy... 前言相信爬虫(网络爬虫)是开发者们耳熟能详的数据采集技术。其中基于 Python Twisted 异步框架的 Scrapy,是灵活且强大的爬虫框架。而 Scrapyd 是 Scrapy 默认的爬虫管理服务,能够简单的执行、监控爬虫任务,除此之外,Scrapyd 还支持爬虫版本管理功能。后来基于 Scrapyd 的爬虫平台如雨后春笋般涌现出来,前有 SpiderKeeper,后有 Scrapy...
- 不能显示github很多访问该域名raw.githubusercontent.com的地址都不能显示,为了解决问题可以查询该域名的host,然后再手动修改host文件解决。具体操作到工具站点查询域名真实的ip地址( https://site.ip138.com/raw.githubusercontent.com/ )根据查询结果修改host文件# GitHub Start# 52.74.22... 不能显示github很多访问该域名raw.githubusercontent.com的地址都不能显示,为了解决问题可以查询该域名的host,然后再手动修改host文件解决。具体操作到工具站点查询域名真实的ip地址( https://site.ip138.com/raw.githubusercontent.com/ )根据查询结果修改host文件# GitHub Start# 52.74.22...
- 我看了那么多年代码,也就看了那么多年注释。可以说,好代码不一定有好注释,但烂代码基本和烂注释共存。下面就是我认为的常见的烂注释风格,排名分先后: 1. 注释上带联系方式,TODO事项,问题单需求链接等。这种风格其实体现了工程师没有意识去利用好现代的平台技术,还停留在90年代的编码习惯。2020年了,git类软件已经是软件开发的首选代码托管平台了,问题单需求链接和联系方式的最佳位置... 我看了那么多年代码,也就看了那么多年注释。可以说,好代码不一定有好注释,但烂代码基本和烂注释共存。下面就是我认为的常见的烂注释风格,排名分先后: 1. 注释上带联系方式,TODO事项,问题单需求链接等。这种风格其实体现了工程师没有意识去利用好现代的平台技术,还停留在90年代的编码习惯。2020年了,git类软件已经是软件开发的首选代码托管平台了,问题单需求链接和联系方式的最佳位置...
- 简要介绍Git常用指令及操作步骤 简要介绍Git常用指令及操作步骤
- 除了支持Git本身的功能,CodeHub服务还有什么值得说一说的功能呢? 除了支持Git本身的功能,CodeHub服务还有什么值得说一说的功能呢?
- 生成秘钥文件示例如下,这里给文件取名github, 密码任意输入ssh-keygen -t rsa -C 'nick@xx.com' -f ~/.ssh/githubcat github.pub ssh-rsa AAAAB3NzaC1yc2EAAAADAQABAAABAQC/0cOZeaajHo1gMFU7APUn1QWPGrdtIFAdfFuYCw0xdEIgd8fKaRNanVTm/mr... 生成秘钥文件示例如下,这里给文件取名github, 密码任意输入ssh-keygen -t rsa -C 'nick@xx.com' -f ~/.ssh/githubcat github.pub ssh-rsa AAAAB3NzaC1yc2EAAAADAQABAAABAQC/0cOZeaajHo1gMFU7APUn1QWPGrdtIFAdfFuYCw0xdEIgd8fKaRNanVTm/mr...
- 安装安装docker准备docker-compose.yml文件web: image: 'gitlab/gitlab-ce:11.0.3-ce.0' restart: always hostname: 'gitlab.example.com' environment: GITLAB_OMNIBUS_CONFIG: | external_url 'http://5.25... 安装安装docker准备docker-compose.yml文件web: image: 'gitlab/gitlab-ce:11.0.3-ce.0' restart: always hostname: 'gitlab.example.com' environment: GITLAB_OMNIBUS_CONFIG: | external_url 'http://5.25...
- Git常用命令使用大全 Git常用命令使用大全
- 在git里面经常的一个争论是到底用rebase还是用merge? 在git里面经常的一个争论是到底用rebase还是用merge?
- # 一: ubuntu18.04 server os install```安装的过程中不要指定安装任何其他工具,因为跟正常的安装路径可能有点不太一致。```[参考链接1][11] [参考链接2][12]# 二: 设置虚拟机上网```1:先切换到net网络, 然后安装ifupdown apt install ifupdown2:然后编辑/etc/network/interfaces 这... # 一: ubuntu18.04 server os install```安装的过程中不要指定安装任何其他工具,因为跟正常的安装路径可能有点不太一致。```[参考链接1][11] [参考链接2][12]# 二: 设置虚拟机上网```1:先切换到net网络, 然后安装ifupdown apt install ifupdown2:然后编辑/etc/network/interfaces 这...
- 不久前我发布了Git简易入门,发现自己对Git指令还不是很熟悉,想再写一篇加强印象。便于自己后续查询,在学习git的小伙伴也可以拿来复习呐,入门篇在以下链接贴出:https://bbs.huaweicloud.cn/blogs/193108相关名词Workspace #工作区Index / Stage #暂存区Repository #仓库区(或本地仓库)Remote #远程仓新建代码库# ... 不久前我发布了Git简易入门,发现自己对Git指令还不是很熟悉,想再写一篇加强印象。便于自己后续查询,在学习git的小伙伴也可以拿来复习呐,入门篇在以下链接贴出:https://bbs.huaweicloud.cn/blogs/193108相关名词Workspace #工作区Index / Stage #暂存区Repository #仓库区(或本地仓库)Remote #远程仓新建代码库# ...
- 目前,已有很多文章介绍 Git 操作,也有很多文章介绍分支策略的选择。本文以华为云软件开发平台为例,基于常见的研发场景,介绍分支策略和对应的操作方法,方便开发团队设计和实施适合自己的分支策略。 目前,已有很多文章介绍 Git 操作,也有很多文章介绍分支策略的选择。本文以华为云软件开发平台为例,基于常见的研发场景,介绍分支策略和对应的操作方法,方便开发团队设计和实施适合自己的分支策略。
- 在工作中,常见的情况是多人合作一个项目共同开发代码,这个时候就需要git来做版本的管理,本博客介绍常见的一些git指令及其用法。 在工作中,常见的情况是多人合作一个项目共同开发代码,这个时候就需要git来做版本的管理,本博客介绍常见的一些git指令及其用法。
- GIT实用小技巧 GIT实用小技巧
- 本篇文章介绍下程序猿最经常使用的工具Git与GitHub。大家都知道上GitHub找各种开源项目参考、学习以及..白piao。这篇博客主要解决一个问题:我在本地的项目如何推送到我的GitHub远程仓库上?主要分为以下两部分讲述:完全空白项目关联的流程[适合小白]有文件的项目关联的流程[有相关经验但是不常使用、遗忘过半的人士]我们首先要知道,本地推到github上的主要思路:在git中要从工作... 本篇文章介绍下程序猿最经常使用的工具Git与GitHub。大家都知道上GitHub找各种开源项目参考、学习以及..白piao。这篇博客主要解决一个问题:我在本地的项目如何推送到我的GitHub远程仓库上?主要分为以下两部分讲述:完全空白项目关联的流程[适合小白]有文件的项目关联的流程[有相关经验但是不常使用、遗忘过半的人士]我们首先要知道,本地推到github上的主要思路:在git中要从工作...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新,构建AI应用全新智能中枢
2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间,华为云展示了Serverless与MCP融合创新的解决方案,本期访谈直播,由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持,华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考
2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中,探讨处理器生态的关键要素及其联系,分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源,3步轻松管理企业成本
2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源,3步轻松管理成本,帮助提升日常管理效率!
回顾中
热门标签