- 【Hadoop】【Yarn】Yarn的web 接口实现 【Hadoop】【Yarn】Yarn的web 接口实现
- Hadoop中所有的进程的主线程都会被添加到ShutdownHook中。其作用是当进程的jvm退出可以让进程以一种比较优雅的方式退出。根据注册的shudownhook（线程）的顺序来决定以一种特定的顺序退出。下面是java doc中对shutdown hook官方解释。A shutdown hook is simply an initialized but unstarted thread.... Hadoop中所有的进程的主线程都会被添加到ShutdownHook中。其作用是当进程的jvm退出可以让进程以一种比较优雅的方式退出。根据注册的shudownhook（线程）的顺序来决定以一种特定的顺序退出。下面是java doc中对shutdown hook官方解释。A shutdown hook is simply an initialized but unstarted thread....
- 【Hadoop】【Yarn】NodeManager启动源码分析 【Hadoop】【Yarn】NodeManager启动源码分析
- ContainerManagerImpl作为nodemanger中的一个Service，主要用来管理container的资源隔离。 ContainerManagerImpl作为nodemanger中的一个Service，主要用来管理container的资源隔离。
- 【Hadoop】【Mapreduce】Map数量到底由什么决定 【Hadoop】【Mapreduce】Map数量到底由什么决定
- 【Hadoop】【JHS】5-JHS服务之HistoryClientService源码解析 【Hadoop】【JHS】5-JHS服务之HistoryClientService源码解析
- 【Hadoop】【JHS】4-JHS服务之JHSDelegationTokenSecretManager源码解析 【Hadoop】【JHS】4-JHS服务之JHSDelegationTokenSecretManager源码解析
- 【Hadoop】【JHS】3-JHS服务之HistoryServerStateStoreService源码解析 【Hadoop】【JHS】3-JHS服务之HistoryServerStateStoreService源码解析
- 【Hadoop】【JHS】1-JHS的初始化过程及其服务介绍 【Hadoop】【JHS】1-JHS的初始化过程及其服务介绍
- 在当今的数据驱动世界中，大数据分析平台扮演着至关重要的角色。它们帮助组织处理和分析大规模数据，从中获得有价值的见解和决策支持。本文将对三个主要的大数据分析平台进行比较：Hadoop、Spark和Flink，以帮助开发人员和数据工程师选择最适合他们需求的平台。Hadoop:Hadoop是大数据处理领域的先驱，它基于分布式文件系统（HDFS）和分布式计算框架（MapReduce）。Hadoop的... 在当今的数据驱动世界中，大数据分析平台扮演着至关重要的角色。它们帮助组织处理和分析大规模数据，从中获得有价值的见解和决策支持。本文将对三个主要的大数据分析平台进行比较：Hadoop、Spark和Flink，以帮助开发人员和数据工程师选择最适合他们需求的平台。Hadoop:Hadoop是大数据处理领域的先驱，它基于分布式文件系统（HDFS）和分布式计算框架（MapReduce）。Hadoop的...
- Hadoop开启Yarn的日志监控功能 Hadoop开启Yarn的日志监控功能
- 大规模数据分析已经成为现代软件开发中不可或缺的一部分。在处理海量数据时，选择适当的工具和框架可以对性能产生巨大的影响。本文将重点比较两个最受欢迎的大数据处理框架：Hadoop和Spark。我们将探讨它们的优势、劣势和适用场景，帮助您在大规模数据分析中做出明智的选择。Hadoop:Hadoop是一个开源的分布式数据处理框架，主要由Hadoop分布式文件系统(HDFS)和MapReduce编程模... 大规模数据分析已经成为现代软件开发中不可或缺的一部分。在处理海量数据时，选择适当的工具和框架可以对性能产生巨大的影响。本文将重点比较两个最受欢迎的大数据处理框架：Hadoop和Spark。我们将探讨它们的优势、劣势和适用场景，帮助您在大规模数据分析中做出明智的选择。Hadoop:Hadoop是一个开源的分布式数据处理框架，主要由Hadoop分布式文件系统(HDFS)和MapReduce编程模...
- 大数据时代的到来带来了对大规模数据处理的需求，而Apache Spark和Hadoop是两个备受关注的开源工具，它们在大规模数据处理领域扮演着重要的角色。在本文中，我们将比较Apache Spark和Hadoop，并探讨它们在大规模数据处理中的优势和选择。概述Apache Spark和Hadoop都是用于大规模数据处理的工具，但它们的设计理念和架构有所不同。Hadoop生态系统的核心是Had... 大数据时代的到来带来了对大规模数据处理的需求，而Apache Spark和Hadoop是两个备受关注的开源工具，它们在大规模数据处理领域扮演着重要的角色。在本文中，我们将比较Apache Spark和Hadoop，并探讨它们在大规模数据处理中的优势和选择。概述Apache Spark和Hadoop都是用于大规模数据处理的工具，但它们的设计理念和架构有所不同。Hadoop生态系统的核心是Had...
- IBCS虚拟专线（IBCS Cloud Virtual Line）是一种IP专线技术，它基于二层网络架构实现给本地服务器主机分配一个独享的固定的IP， 支持获取源访问IP，和物理专线一样效果，可用于建设本地数据中心、业务后台。 IBCS虚拟专线（IBCS Cloud Virtual Line）是一种IP专线技术，它基于二层网络架构实现给本地服务器主机分配一个独享的固定的IP， 支持获取源访问IP，和物理专线一样效果，可用于建设本地数据中心、业务后台。
- 1、hadoop的官网下载和各版本下载方法:（推荐下载hadoop-3.2.4版本）https://blog.csdn.net/leileihhxx/article/details/1221812152、在/etc/profile文件添加如下环境变量：JAVA_HOME=/usr/java/jdk1.8.0_171CLASSPATH=$JAVA_HOME/lib/tools.jarPATH=... 1、hadoop的官网下载和各版本下载方法:（推荐下载hadoop-3.2.4版本）https://blog.csdn.net/leileihhxx/article/details/1221812152、在/etc/profile文件添加如下环境变量：JAVA_HOME=/usr/java/jdk1.8.0_171CLASSPATH=$JAVA_HOME/lib/tools.jarPATH=...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签