- 本篇文章《大数据基础学习五：Hadoop 实验——熟悉常用的 HDFS 操作》是完全针对HDFS文件系统的，目的即理解 HDFS 在 Hadoop 体系结构中的角色，熟练使用 HDFS 操作常用的 Shell 命令，熟悉 HDFS 操作常用的 Java API。大数据系列文章请移步本人大数据专栏查看。 本篇文章《大数据基础学习五：Hadoop 实验——熟悉常用的 HDFS 操作》是完全针对HDFS文件系统的，目的即理解 HDFS 在 Hadoop 体系结构中的角色，熟练使用 HDFS 操作常用的 Shell 命令，熟悉 HDFS 操作常用的 Java API。大数据系列文章请移步本人大数据专栏查看。
- 本次 RC2 主要新增 `GO FROM ... REVERSELY` 和 `GROUP BY` 等语句，Storage Engine 也更灵活，用户可以通过 Console 或 Http 获取配置信息，触发 compaction；客户端目前支持 Python，Java，Go；在工具方面，增强了 CSV Importer 功能 本次 RC2 主要新增 `GO FROM ... REVERSELY` 和 `GROUP BY` 等语句，Storage Engine 也更灵活，用户可以通过 Console 或 Http 获取配置信息，触发 compaction；客户端目前支持 Python，Java，Go；在工具方面，增强了 CSV Importer 功能
- 中间商是非常古老的一个职业，在以集中式计算的背景下，经过几千年的演化，中间商将信息费赚到了极致，大中间商说我们是平台，小中间商说我们是中介。中间商是指在生产者与消费者之间参与商品交易业务，促使买卖行为发生和实现的、具有法人资格的经济组织或个人。而欢脱又硬核的中间商一不小心探入到了哲学领域，发出了灵魂性的拷问：我们存在的意义究竟是什么？硬核的中间商和普通的中间商是不一样的。当普通中间商想着将信... 中间商是非常古老的一个职业，在以集中式计算的背景下，经过几千年的演化，中间商将信息费赚到了极致，大中间商说我们是平台，小中间商说我们是中介。中间商是指在生产者与消费者之间参与商品交易业务，促使买卖行为发生和实现的、具有法人资格的经济组织或个人。而欢脱又硬核的中间商一不小心探入到了哲学领域，发出了灵魂性的拷问：我们存在的意义究竟是什么？硬核的中间商和普通的中间商是不一样的。当普通中间商想着将信...
- 一说到CDN，就感觉心情很复杂，曾经从一个完全不入门的小白，短短的2年内，将运营商的CDN业务从零开始做起，搞得风风火火，在公司云业务发展的初期，CDN业务占据了很大一部分的收入。可不曾想到，短短几年内，国内以网宿为代表的传统CDN厂商（包括运营商CDN业务），被阿里云为代表的互联网公司以低价疯狂掠夺CDN市场，将流媒体业务CDN加速的价格从20多元/M/月，一直打压到现在的几块钱！然而，市... 一说到CDN，就感觉心情很复杂，曾经从一个完全不入门的小白，短短的2年内，将运营商的CDN业务从零开始做起，搞得风风火火，在公司云业务发展的初期，CDN业务占据了很大一部分的收入。可不曾想到，短短几年内，国内以网宿为代表的传统CDN厂商（包括运营商CDN业务），被阿里云为代表的互联网公司以低价疯狂掠夺CDN市场，将流媒体业务CDN加速的价格从20多元/M/月，一直打压到现在的几块钱！然而，市...
- ### 区块链定义 狭义上， 区块链是一种以区块为基本单位的链式数据结构， 区块中利用数字摘要对之前的交易历史进行校验， 适合分布式记账场景下防篡改和可扩展性的需求。 广义上， 区块链还指代基于区块链结构实现的分布式记账技术， 包括分布式共识、 隐私与安全保护、 点对点通信技术、 网络协议、 智能合约等。 区块链并不是凭空出现的新技术、而是多种技术在其商业应用场景推动下衍生的产物... ### 区块链定义 狭义上， 区块链是一种以区块为基本单位的链式数据结构， 区块中利用数字摘要对之前的交易历史进行校验， 适合分布式记账场景下防篡改和可扩展性的需求。 广义上， 区块链还指代基于区块链结构实现的分布式记账技术， 包括分布式共识、 隐私与安全保护、 点对点通信技术、 网络协议、 智能合约等。 区块链并不是凭空出现的新技术、而是多种技术在其商业应用场景推动下衍生的产物...
- 分布式SQL引擎 分布式SQL引擎
- 从Hadoop MR到Spark 从Hadoop MR到Spark
- Kafka是由LinkedIn开发的一个分布式的消息系统，使用Scala编写，它以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如Cloudera、Apache Storm、Spark都支持与Kafka集成。 Kafka是由LinkedIn开发的一个分布式的消息系统，使用Scala编写，它以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如Cloudera、Apache Storm、Spark都支持与Kafka集成。
- Storm分布式集群搭建 Storm分布式集群搭建
- CAP理论概述 一个分布式系统最多只能同时满足一致性（Consistency）、可用性（Availability）和分区容错性（Partition tolerance）这三项中的两项。 CAP理论概述 一个分布式系统最多只能同时满足一致性（Consistency）、可用性（Availability）和分区容错性（Partition tolerance）这三项中的两项。
- Storm集群的架构图 Storm集群的架构图
- HBase 的安装有两种方式：单机安装和分布式安装。HBase的单机安装了解即可，大家重点掌握HBase 分布式集群的安装。 HBase 的安装有两种方式：单机安装和分布式安装。HBase的单机安装了解即可，大家重点掌握HBase 分布式集群的安装。
- 本次使用hadoop2.6.0版本配置Hadoop集群，同时配置NameNode+HA、ResourceManager+HA，并使用zookeeper来管理Hadoop集群。 本次使用hadoop2.6.0版本配置Hadoop集群，同时配置NameNode+HA、ResourceManager+HA，并使用zookeeper来管理Hadoop集群。
- ZooKeeper 安装部署分为三种模式 ZooKeeper 安装部署分为三种模式
- ZooKeeper 是一个针对大型分布式系统的可靠协调系统；它提供的功能包括：配置维护、名字服务、分布式同步、组服务等； 它的目标就是封装好复杂易出错的关键服务，将简单易用的接口和性能高效、功能稳定的系统提供给用户； ZooKeeper 已经成为 Hadoop 生态系统中的基础组件。 ZooKeeper 是一个针对大型分布式系统的可靠协调系统；它提供的功能包括：配置维护、名字服务、分布式同步、组服务等； 它的目标就是封装好复杂易出错的关键服务，将简单易用的接口和性能高效、功能稳定的系统提供给用户； ZooKeeper 已经成为 Hadoop 生态系统中的基础组件。
上滑加载中
推荐直播
-
华为云码道 × 仓颉编程：工程化AI编码探索2026/05/27 周三 19:00-21:00
刘俊杰-华为云仓颉语言专家/李炎-华为云码道技术专家/王智鹏-OpenCangjie开源社区发起人
本场直播围绕华为云仓颉语言与华为云码道的深度结合，展示华为云智能编程从零基础到高效落地的完整生态能力。以华为云码道为引擎，仓颉语言为载体，带给大家日常提效、趣味创新到极速量产的开发体验。
回顾中 -
一个AI团队帮你写代码：华为云码道Agent Space实战2026/06/25 周四 19:00-21:00
张翰文-华为云码道工程师/郭英旭-青软创新科技集团股份有限公司 软件架构师
本场直播聚焦华为云码道Agent Space两大模式：研发办公、代码开发，亲身体验从需求到代码的AI自动化能力。实操演示基于华为 CodeArts CLI，依托 OpenSpec 规格体系从零搭建业务项目。
即将直播
热门标签