- 在项目的数据存储中，结构化数据通常采用关系型数据库，非结构化数据（文件）的存储就有很多种方式，服务器本地存储、Nas挂载、ftp等等，今天就来盘点一下，分布式文件存储系统。 一、分布式存储简介 1、什么是分布式存储 在开始介绍分布式存储之前，先了解一下，非分布式的存储方案。 在单机时代，将文件直接存储在服务部署的服务器上—— 直连存储（DAS）：存储... 在项目的数据存储中，结构化数据通常采用关系型数据库，非结构化数据（文件）的存储就有很多种方式，服务器本地存储、Nas挂载、ftp等等，今天就来盘点一下，分布式文件存储系统。 一、分布式存储简介 1、什么是分布式存储 在开始介绍分布式存储之前，先了解一下，非分布式的存储方案。 在单机时代，将文件直接存储在服务部署的服务器上—— 直连存储（DAS）：存储...
- 目录 目录 1、fork 开源项目 2、Clone 开源项目 3、进行修改项目内容 4、 Pull request(提交一个请求) 5、原作者就会收到一个请求 6、fetch 7、merge 8、Push 1、fork 开源项目 克隆别人好的开源项目在自己的远程仓库。 2、Clone 开源项目 将 fork 的项目 clone 到本... 目录 目录 1、fork 开源项目 2、Clone 开源项目 3、进行修改项目内容 4、 Pull request(提交一个请求) 5、原作者就会收到一个请求 6、fetch 7、merge 8、Push 1、fork 开源项目 克隆别人好的开源项目在自己的远程仓库。 2、Clone 开源项目 将 fork 的项目 clone 到本...
- 大家好，我是不温卜火，是一名计算机学院大数据专业大二的学生，昵称来源于成语—不温不火，本意是希望自己性情温和。作为一名互联网行业的小白，博主写博客一方面是为了记录自己的学习过程，另一方面是总结自己所犯的错误希望能够帮助到很多和自己一样处于起步阶段的萌新。但由于水平有限，博客中难免会有一些错误出现，有纰漏之处恳请各位大佬不吝赐教！暂时只有csdn这一个平台，博客... 大家好，我是不温卜火，是一名计算机学院大数据专业大二的学生，昵称来源于成语—不温不火，本意是希望自己性情温和。作为一名互联网行业的小白，博主写博客一方面是为了记录自己的学习过程，另一方面是总结自己所犯的错误希望能够帮助到很多和自己一样处于起步阶段的萌新。但由于水平有限，博客中难免会有一些错误出现，有纰漏之处恳请各位大佬不吝赐教！暂时只有csdn这一个平台，博客...
- sudo docker run -it -v /usr/lib:/usr/lib/dbdata --name dbcontainer-192.168.1.184 ubuntu:14.04 sudo docker run -it --volumes-from dbcontainer-192.168.1.184 --name mastercontainer-192.16... sudo docker run -it -v /usr/lib:/usr/lib/dbdata --name dbcontainer-192.168.1.184 ubuntu:14.04 sudo docker run -it --volumes-from dbcontainer-192.168.1.184 --name mastercontainer-192.16...
- Zipkin是什么 Zipkin分布式跟踪系统；它可以帮助收集时间数据，解决在microservice架构下的延迟问题；它管理这些数据的收集和查找；Zipkin的设计是基于谷歌的Google Dapper论文。 每个应用程序向Zipkin报告定时数据，Zipkin UI呈现了一个依赖图表来展示多少跟踪请求经过了每个应用程序；如果想解决延迟问题，可以过滤或者排序所... Zipkin是什么 Zipkin分布式跟踪系统；它可以帮助收集时间数据，解决在microservice架构下的延迟问题；它管理这些数据的收集和查找；Zipkin的设计是基于谷歌的Google Dapper论文。 每个应用程序向Zipkin报告定时数据，Zipkin UI呈现了一个依赖图表来展示多少跟踪请求经过了每个应用程序；如果想解决延迟问题，可以过滤或者排序所...
- Ubuntu 10.04 之JDK安装 1.从官网 （http://www.Oracle.com/technetwork/java/javase/downloads/jdk6u35-downloads-1836443.html）下载安装文件(如：jdk-6u45-linux-x64.bin)。复制该文件到/usr/lib/java下，如果没有java文件夹，则创建它。su... Ubuntu 10.04 之JDK安装 1.从官网 （http://www.Oracle.com/technetwork/java/javase/downloads/jdk6u35-downloads-1836443.html）下载安装文件(如：jdk-6u45-linux-x64.bin)。复制该文件到/usr/lib/java下，如果没有java文件夹，则创建它。su...
- Windows 7下硬盘安装Ubuntu 14.04图文教程 本人下载的是ubuntu-14.04.2-desktop-amd64.iso，经本人亲自测试的，折腾了一天的时间。 1）首先还是分区，在计算机上右键--管理--磁盘管理（也可以先格式化，后面再分区） 装Ubuntu分配的硬盘大小最好是(20G以上）不要太小。这里请注意，Ubuntu和Window... Windows 7下硬盘安装Ubuntu 14.04图文教程 本人下载的是ubuntu-14.04.2-desktop-amd64.iso，经本人亲自测试的，折腾了一天的时间。 1）首先还是分区，在计算机上右键--管理--磁盘管理（也可以先格式化，后面再分区） 装Ubuntu分配的硬盘大小最好是(20G以上）不要太小。这里请注意，Ubuntu和Window...
- 使用nsenter进入Docker容器 Docker容器运行后，如何进入容器进行操作呢？起初我是用SSH。如果只启动一个容器，用SSH还能应付，只需要将容器的22端口映射到本机的一个端口即可。当我启动了五个容器后，每个容器默认是没有配置SSH Server的，安装配置SSHD，映射容器SSH端口，实在是麻烦。 我发现很多Docker镜像都是没有安装SSHD服务的，难... 使用nsenter进入Docker容器 Docker容器运行后，如何进入容器进行操作呢？起初我是用SSH。如果只启动一个容器，用SSH还能应付，只需要将容器的22端口映射到本机的一个端口即可。当我启动了五个容器后，每个容器默认是没有配置SSH Server的，安装配置SSHD，映射容器SSH端口，实在是麻烦。 我发现很多Docker镜像都是没有安装SSHD服务的，难...
- 当前，完全硬件虚拟化技术（KVM、Xen、Hyper-V 等）能在一个物理主机上很好地运行多个互相独立的操作系统，但这也带来一些问题：性能不佳，资源浪费，系统反应迟缓等。有时候对用户来说，完全的硬件虚拟化并不是最好的选择。 一种替代方案是使用轻量级虚拟化技术 —— 所谓的 LinuX Container 容器 (LXC)，它提供的是系统级虚拟化。与跑虚拟机相比，... 当前，完全硬件虚拟化技术（KVM、Xen、Hyper-V 等）能在一个物理主机上很好地运行多个互相独立的操作系统，但这也带来一些问题：性能不佳，资源浪费，系统反应迟缓等。有时候对用户来说，完全的硬件虚拟化并不是最好的选择。 一种替代方案是使用轻量级虚拟化技术 —— 所谓的 LinuX Container 容器 (LXC)，它提供的是系统级虚拟化。与跑虚拟机相比，...
- 使用pipework工具。 前提：每个Container所做的工作现在还很少，可以不用save、commit。 为了便于通信，自定义一个网桥(192.168.1.180/24)，使之IP与宿主主机IP在同一网段内。 bridge模式 bridge模式是Docker默认的网络设置，此模式会为每一个容器分配Network Namespace、设置IP等，并将一... 使用pipework工具。 前提：每个Container所做的工作现在还很少，可以不用save、commit。 为了便于通信，自定义一个网桥(192.168.1.180/24)，使之IP与宿主主机IP在同一网段内。 bridge模式 bridge模式是Docker默认的网络设置，此模式会为每一个容器分配Network Namespace、设置IP等，并将一...
- 一、背景 Hadoop业务的整体开发流程： 从Hadoop的业务开发流程图中可以看出，在大数据的业务处理过程中，对于数据的采集是十分重要的一步，也是不可避免的一步. 许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征： （1） 构建应用系统和分析系统的桥梁，并将它... 一、背景 Hadoop业务的整体开发流程： 从Hadoop的业务开发流程图中可以看出，在大数据的业务处理过程中，对于数据的采集是十分重要的一步，也是不可避免的一步. 许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征： （1） 构建应用系统和分析系统的桥梁，并将它...
- Linux提示Unable to locate package该如何处理？ 当你在修改Linux软件源的时候，提示Unable to locate package错误，这是由什么原因导致的呢？又该如何解决，下面就给大家介绍下Linux下遇到Unable to locate package错误的情况该如何解决，一起来学习下吧。 Linux提示Unable to loc... Linux提示Unable to locate package该如何处理？ 当你在修改Linux软件源的时候，提示Unable to locate package错误，这是由什么原因导致的呢？又该如何解决，下面就给大家介绍下Linux下遇到Unable to locate package错误的情况该如何解决，一起来学习下吧。 Linux提示Unable to loc...
- 经过一段时间的分布式学习，自己在此过程中受益匪浅。几点感触总结如下： 1.在做较大或生疏系统的时候，一定先要将系统的架构图设计出来，架构图要力求做到尽可能的详尽（包括其用到的各种技术，数据传输方式等等）。做到这样才能在后期的系统开发中显得游刃有余。软件工程的开发思想其实还是很重要的，自己对这一点也颇有感触。 2.通过与技术大牛徐师兄进行不断的交流，发觉自己对新技术的敏感度... 经过一段时间的分布式学习，自己在此过程中受益匪浅。几点感触总结如下： 1.在做较大或生疏系统的时候，一定先要将系统的架构图设计出来，架构图要力求做到尽可能的详尽（包括其用到的各种技术，数据传输方式等等）。做到这样才能在后期的系统开发中显得游刃有余。软件工程的开发思想其实还是很重要的，自己对这一点也颇有感触。 2.通过与技术大牛徐师兄进行不断的交流，发觉自己对新技术的敏感度...
- 应用场景：在linux系统上进行项目开发，在部署java项目时，常用方法就是写一个shell脚本，但当服务器重启了，经常会忘了启动shell脚本了。所以我们需要把自己的应用变成linux的服务，当服务器启动的时候就自行启动自己的应用。使用JSVC就能够实现上面的功能。 在linux上以服务的方式启动java程序步骤： 注：其实bin目录下并没有jsvc.ta... 应用场景：在linux系统上进行项目开发，在部署java项目时，常用方法就是写一个shell脚本，但当服务器重启了，经常会忘了启动shell脚本了。所以我们需要把自己的应用变成linux的服务，当服务器启动的时候就自行启动自己的应用。使用JSVC就能够实现上面的功能。 在linux上以服务的方式启动java程序步骤： 注：其实bin目录下并没有jsvc.ta...
- 基于集群的动态反馈负载均衡策略 基于动态反馈机制的集群负载均衡算法研究 目前应用最为广泛的集群计算技术主要分为三大类：高可用性集群技术、高性能计算集群技术和负载均衡集群技术。 德国的CarlAdamPetri于1962年在他的博士论文《自动机通信》中提出了Petri网的概念,它是一种适合于描述异步、并发、分布式系统的图形数学工具... 基于集群的动态反馈负载均衡策略 基于动态反馈机制的集群负载均衡算法研究 目前应用最为广泛的集群计算技术主要分为三大类：高可用性集群技术、高性能计算集群技术和负载均衡集群技术。 德国的CarlAdamPetri于1962年在他的博士论文《自动机通信》中提出了Petri网的概念,它是一种适合于描述异步、并发、分布式系统的图形数学工具...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签