- 【Hadoop】【Yarn】Yarn的web 接口实现 【Hadoop】【Yarn】Yarn的web 接口实现
- Hadoop中所有的进程的主线程都会被添加到ShutdownHook中。其作用是当进程的jvm退出可以让进程以一种比较优雅的方式退出。根据注册的shudownhook（线程）的顺序来决定以一种特定的顺序退出。下面是java doc中对shutdown hook官方解释。A shutdown hook is simply an initialized but unstarted thread.... Hadoop中所有的进程的主线程都会被添加到ShutdownHook中。其作用是当进程的jvm退出可以让进程以一种比较优雅的方式退出。根据注册的shudownhook（线程）的顺序来决定以一种特定的顺序退出。下面是java doc中对shutdown hook官方解释。A shutdown hook is simply an initialized but unstarted thread....
- 【Hadoop】【Yarn】NodeManager启动源码分析 【Hadoop】【Yarn】NodeManager启动源码分析
- ContainerManagerImpl作为nodemanger中的一个Service，主要用来管理container的资源隔离。 ContainerManagerImpl作为nodemanger中的一个Service，主要用来管理container的资源隔离。
- 【Hadoop】【Mapreduce】Map数量到底由什么决定 【Hadoop】【Mapreduce】Map数量到底由什么决定
- 【Hadoop】【JHS】5-JHS服务之HistoryClientService源码解析 【Hadoop】【JHS】5-JHS服务之HistoryClientService源码解析
- 【Hadoop】【JHS】4-JHS服务之JHSDelegationTokenSecretManager源码解析 【Hadoop】【JHS】4-JHS服务之JHSDelegationTokenSecretManager源码解析
- 【Hadoop】【JHS】3-JHS服务之HistoryServerStateStoreService源码解析 【Hadoop】【JHS】3-JHS服务之HistoryServerStateStoreService源码解析
- 【Hadoop】【JHS】1-JHS的初始化过程及其服务介绍 【Hadoop】【JHS】1-JHS的初始化过程及其服务介绍
- 在当今的数据驱动世界中，大数据分析平台扮演着至关重要的角色。它们帮助组织处理和分析大规模数据，从中获得有价值的见解和决策支持。本文将对三个主要的大数据分析平台进行比较：Hadoop、Spark和Flink，以帮助开发人员和数据工程师选择最适合他们需求的平台。Hadoop:Hadoop是大数据处理领域的先驱，它基于分布式文件系统（HDFS）和分布式计算框架（MapReduce）。Hadoop的... 在当今的数据驱动世界中，大数据分析平台扮演着至关重要的角色。它们帮助组织处理和分析大规模数据，从中获得有价值的见解和决策支持。本文将对三个主要的大数据分析平台进行比较：Hadoop、Spark和Flink，以帮助开发人员和数据工程师选择最适合他们需求的平台。Hadoop:Hadoop是大数据处理领域的先驱，它基于分布式文件系统（HDFS）和分布式计算框架（MapReduce）。Hadoop的...
- Hadoop开启Yarn的日志监控功能 Hadoop开启Yarn的日志监控功能
- 大规模数据分析已经成为现代软件开发中不可或缺的一部分。在处理海量数据时，选择适当的工具和框架可以对性能产生巨大的影响。本文将重点比较两个最受欢迎的大数据处理框架：Hadoop和Spark。我们将探讨它们的优势、劣势和适用场景，帮助您在大规模数据分析中做出明智的选择。Hadoop:Hadoop是一个开源的分布式数据处理框架，主要由Hadoop分布式文件系统(HDFS)和MapReduce编程模... 大规模数据分析已经成为现代软件开发中不可或缺的一部分。在处理海量数据时，选择适当的工具和框架可以对性能产生巨大的影响。本文将重点比较两个最受欢迎的大数据处理框架：Hadoop和Spark。我们将探讨它们的优势、劣势和适用场景，帮助您在大规模数据分析中做出明智的选择。Hadoop:Hadoop是一个开源的分布式数据处理框架，主要由Hadoop分布式文件系统(HDFS)和MapReduce编程模...
- 大数据时代的到来带来了对大规模数据处理的需求，而Apache Spark和Hadoop是两个备受关注的开源工具，它们在大规模数据处理领域扮演着重要的角色。在本文中，我们将比较Apache Spark和Hadoop，并探讨它们在大规模数据处理中的优势和选择。概述Apache Spark和Hadoop都是用于大规模数据处理的工具，但它们的设计理念和架构有所不同。Hadoop生态系统的核心是Had... 大数据时代的到来带来了对大规模数据处理的需求，而Apache Spark和Hadoop是两个备受关注的开源工具，它们在大规模数据处理领域扮演着重要的角色。在本文中，我们将比较Apache Spark和Hadoop，并探讨它们在大规模数据处理中的优势和选择。概述Apache Spark和Hadoop都是用于大规模数据处理的工具，但它们的设计理念和架构有所不同。Hadoop生态系统的核心是Had...
- IBCS虚拟专线（IBCS Cloud Virtual Line）是一种IP专线技术，它基于二层网络架构实现给本地服务器主机分配一个独享的固定的IP， 支持获取源访问IP，和物理专线一样效果，可用于建设本地数据中心、业务后台。 IBCS虚拟专线（IBCS Cloud Virtual Line）是一种IP专线技术，它基于二层网络架构实现给本地服务器主机分配一个独享的固定的IP， 支持获取源访问IP，和物理专线一样效果，可用于建设本地数据中心、业务后台。
- 1、hadoop的官网下载和各版本下载方法:（推荐下载hadoop-3.2.4版本）https://blog.csdn.net/leileihhxx/article/details/1221812152、在/etc/profile文件添加如下环境变量：JAVA_HOME=/usr/java/jdk1.8.0_171CLASSPATH=$JAVA_HOME/lib/tools.jarPATH=... 1、hadoop的官网下载和各版本下载方法:（推荐下载hadoop-3.2.4版本）https://blog.csdn.net/leileihhxx/article/details/1221812152、在/etc/profile文件添加如下环境变量：JAVA_HOME=/usr/java/jdk1.8.0_171CLASSPATH=$JAVA_HOME/lib/tools.jarPATH=...
上滑加载中
推荐直播
-
香橙派AIpro的远程推理框架与实验案例2025/07/04 周五 19:00-20:00
郝家胜 -华为开发者布道师-高校教师
AiR推理框架创新采用将模型推理与模型应用相分离的机制，把香橙派封装为AI推理黑盒服务，构建了分布式远程推理框架，并提供多种输入模态、多种输出方式以及多线程支持的高度复用框架，解决了开发板环境配置复杂上手困难、缺乏可视化体验和资源稀缺课程受限等痛点问题，真正做到开箱即用，并支持多种笔记本电脑环境、多种不同编程语言，10行代码即可体验图像分割迁移案例。
回顾中 -
鸿蒙端云一体化应用开发2025/07/10 周四 19:00-20:00
倪红军 华为开发者布道师-高校教师
基于鸿蒙平台终端设备的应用场景越来越多、使用范围越来越广。本课程以云数据库服务为例，介绍云侧项目应用的创建、新建对象类型、新增存储区及向对象类型中添加数据对象的方法，端侧（HarmonyOS平台）一体化工程项目的创建、云数据资源的关联方法及对云侧数据的增删改查等操作方法，为开发端云一体化应用打下坚实基础。
即将直播
热门标签