- 环境背景： Hadoop伪分布式已经搭建完成 Hadoop2.6.0 Hadoop伪分布搭建见： Hadoop伪分布式的搭建详情https://blog.csdn.net/m0_54925305/article/details/118650350?spm=1001.2014.3001.5502https://blog.csdn.... 环境背景： Hadoop伪分布式已经搭建完成 Hadoop2.6.0 Hadoop伪分布搭建见： Hadoop伪分布式的搭建详情https://blog.csdn.net/m0_54925305/article/details/118650350?spm=1001.2014.3001.5502https://blog.csdn....
- 你的点赞与评论是我最大的创作动力！ hadoop简介： hadoop平台是一个可靠的、可扩展的、可分布式计算的开源软件。 Apache Hadoop平台是一个框架，允许使用简单的编程模型。该平台被... 你的点赞与评论是我最大的创作动力！ hadoop简介： hadoop平台是一个可靠的、可扩展的、可分布式计算的开源软件。 Apache Hadoop平台是一个框架，允许使用简单的编程模型。该平台被...
- 环境准备： Hadoop2.6.0 IDEA maven3.5.4 案例分析： MapReduce是一种编程模型，用于大规模数据集（大于1TB）的并行运算。它极大地方便了编程人员在不会分布式并行编程的情况下，将自己的程序运行在分布式系统上。本项目用到的便是俗称H... 环境准备： Hadoop2.6.0 IDEA maven3.5.4 案例分析： MapReduce是一种编程模型，用于大规模数据集（大于1TB）的并行运算。它极大地方便了编程人员在不会分布式并行编程的情况下，将自己的程序运行在分布式系统上。本项目用到的便是俗称H...
- 1、创建一个名为hadoops的组 groupadd hadoops 查看所有组，新增组默认排在最后 cat /etc/group 2、创建一个名为hadoop的用户，并归到hadoops的组下 useradd -g hadoops hadoop 查看所有用户，新增用户默认排在最后 cat /etc/passwd ... 1、创建一个名为hadoops的组 groupadd hadoops 查看所有组，新增组默认排在最后 cat /etc/group 2、创建一个名为hadoop的用户，并归到hadoops的组下 useradd -g hadoops hadoop 查看所有用户，新增用户默认排在最后 cat /etc/passwd ...
- 文章目录 一、HDFS常用命令 （一）三种shell命令方式 1、hadoop fs 2、hadoop dfs ... 文章目录 一、HDFS常用命令 （一）三种shell命令方式 1、hadoop fs 2、hadoop dfs ...
- 文章目录 一、配置基础环境 （一）三节点集群 （二）关闭与禁用防火墙 1、master节点 2、slave1... 文章目录 一、配置基础环境 （一）三节点集群 （二）关闭与禁用防火墙 1、master节点 2、slave1...
- Hadoop安装文件，可以到Hadoop官网下载，也可以点击这里从百度云盘下载（提取码：99bg），进入该百度云盘链接后，找到Hadoop安装文件hadoop-2.7.1.tar.gz（本教程也可以用于安装Hadoop 2.7.1版本）。 环境 本教程使用 Ubuntu 14.04 64位 作为系统环境（Ubuntu 12... Hadoop安装文件，可以到Hadoop官网下载，也可以点击这里从百度云盘下载（提取码：99bg），进入该百度云盘链接后，找到Hadoop安装文件hadoop-2.7.1.tar.gz（本教程也可以用于安装Hadoop 2.7.1版本）。 环境 本教程使用 Ubuntu 14.04 64位 作为系统环境（Ubuntu 12...
- 最近在整理资料的发现了一套以前讲Hadoop时录制的全套的视频，想着与其让它一直带在云盘里没啥用还不如分享出来给想这方面内容的小伙伴。 云盘链接地址如下: 链接：https://pan.baidu.... 最近在整理资料的发现了一套以前讲Hadoop时录制的全套的视频，想着与其让它一直带在云盘里没啥用还不如分享出来给想这方面内容的小伙伴。 云盘链接地址如下: 链接：https://pan.baidu....
- windows环境搭建 1.安装hadoop 将hadoop在Linux中的安装文件解压缩一份。并将此bin目录中的文件覆盖掉解压缩文件中的bin目录。 链接：https://pan.baidu... windows环境搭建 1.安装hadoop 将hadoop在Linux中的安装文件解压缩一份。并将此bin目录中的文件覆盖掉解压缩文件中的bin目录。 链接：https://pan.baidu...
- HDFS(Hadoop Distributed File System)分布式文件系统。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上... HDFS(Hadoop Distributed File System)分布式文件系统。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上...
- 什么是Hadoop 官网:http://hadoop.apache.org/ HADOOP是apache旗下的一套开源软件平台,HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数... 什么是Hadoop 官网:http://hadoop.apache.org/ HADOOP是apache旗下的一套开源软件平台,HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数...
- 前面项目中我们是创建的java项目来演示的，但是hadoop相关的依赖太多了，不方便，本文通过maven项目来演示HDFS的java API操作 创建maven项目 相关的依赖 <depe... 前面项目中我们是创建的java项目来演示的，但是hadoop相关的依赖太多了，不方便，本文通过maven项目来演示HDFS的java API操作 创建maven项目 相关的依赖 <depe...
- 上篇文件介绍了自定义wordcount案例的实现，本文来介绍下具体的执行流程 流程图 流程说明 1.当客户端提交submit的时候客户端程序会根据我们输入的/wordcount/input地... 上篇文件介绍了自定义wordcount案例的实现，本文来介绍下具体的执行流程 流程图 流程说明 1.当客户端提交submit的时候客户端程序会根据我们输入的/wordcount/input地...
- 创建MapperTask 创建一个java类继承Mapper父类 接口形参说明 参数说明K1默认是一行一行读取的偏移量的类型V1默认读取的一行的类型K2用户处理完成后返回的数据的key的类型V... 创建MapperTask 创建一个java类继承Mapper父类 接口形参说明 参数说明K1默认是一行一行读取的偏移量的类型V1默认读取的一行的类型K2用户处理完成后返回的数据的key的类型V...
- 一、环境准备 1.jdk hadoop安装前必须要安装好jdk环境，版本最好用jdk8。 2.节点准备 准备四个节点 节点描述hadoop-node1(192.168.88.61)N... 一、环境准备 1.jdk hadoop安装前必须要安装好jdk环境，版本最好用jdk8。 2.节点准备 准备四个节点 节点描述hadoop-node1(192.168.88.61)N...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
【仓颉社区】第36期WORKSHOP2025/09/02 周二 15:05-16:00
华为讲师团
本期仓颉编程语言社区技术沙龙即将开启，我们特邀三位资深专家，为大家带来硬核技术分享与实践经验解析！无论你是仓颉语言的初学者，还是资深开发者，本次直播都将为你带来新的启发和收获！
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中
热门标签