- 介绍了 机架感知（通过HDFS网络拓扑图介绍）、副本冗余存储策略及其优点， HDFS文件读取、写入的详细过程（HDFS数据上传 、 下载 过程的分析），FSDataInputStream 类、FSDataOutputStream 类的常用方法，以及 数据容错 的有关知识。 介绍了 机架感知（通过HDFS网络拓扑图介绍）、副本冗余存储策略及其优点， HDFS文件读取、写入的详细过程（HDFS数据上传 、 下载 过程的分析），FSDataInputStream 类、FSDataOutputStream 类的常用方法，以及 数据容错 的有关知识。
- 大数据容器化，大势所趋。头部玩家在进行大数据容器化后，尝到了甜头？ 大数据容器化，大势所趋。头部玩家在进行大数据容器化后，尝到了甜头？
- 前言现在的社会是一个高速发展的社会，科技发达，信息流通，人们之间的交流越来越密切，生活也越来越方便，大数据就是这个高科技时代的产物。随着中国经济的快速发展，汽车行业空前繁荣，私人小汽车拥有量迅速增加，居民出行总量稳步增长，出行距离快速增加。然而，交通拥堵已成为许多大中城市的一种通病，并逐渐成为阻碍、制约城市社会经济发展的负面因素，成为城市管理的热点和难点。为切实提升公安交通管理水平，构建安全... 前言现在的社会是一个高速发展的社会，科技发达，信息流通，人们之间的交流越来越密切，生活也越来越方便，大数据就是这个高科技时代的产物。随着中国经济的快速发展，汽车行业空前繁荣，私人小汽车拥有量迅速增加，居民出行总量稳步增长，出行距离快速增加。然而，交通拥堵已成为许多大中城市的一种通病，并逐渐成为阻碍、制约城市社会经济发展的负面因素，成为城市管理的热点和难点。为切实提升公安交通管理水平，构建安全...
- 前言目前博客Hadoop文章大都停留在Hadoop2.x阶段，本系列对2.x没有的新特性进行补充更新，一键三连加关注，下次不迷路！ 历史文章[hadoop3.x系列]HDFS REST HTTP API的使用(一)WebHDFS[hadoop3.x系列]HDFS REST HTTP API的使用(二)HttpFS 🍑Hadoop常用文件存储格式 传统系统常见文件存储格式在Windows有... 前言目前博客Hadoop文章大都停留在Hadoop2.x阶段，本系列对2.x没有的新特性进行补充更新，一键三连加关注，下次不迷路！ 历史文章[hadoop3.x系列]HDFS REST HTTP API的使用(一)WebHDFS[hadoop3.x系列]HDFS REST HTTP API的使用(二)HttpFS 🍑Hadoop常用文件存储格式 传统系统常见文件存储格式在Windows有...
- linux系列第八课 linux系列第八课
- 在上节云计算行业应用—大数据@音视频（一）中，我们探讨了随着企业业务发展和产生消费数据量级的增加，大数据技术不断打破原有极限，相关技术不断演进，新的大数据架构层出不穷。本节我们将深入大数据行业应用，从上节讨论到的数据湖出发，结合音视频行业相关业务场景和相关大数据架构，更进一步的理解大数据技术和华为云相关服务的应用。1. 数据湖基本架构 数据湖是伴随企业业余和数据... 在上节云计算行业应用—大数据@音视频（一）中，我们探讨了随着企业业务发展和产生消费数据量级的增加，大数据技术不断打破原有极限，相关技术不断演进，新的大数据架构层出不穷。本节我们将深入大数据行业应用，从上节讨论到的数据湖出发，结合音视频行业相关业务场景和相关大数据架构，更进一步的理解大数据技术和华为云相关服务的应用。1. 数据湖基本架构 数据湖是伴随企业业余和数据...
- 随着通信、互联网及物联网等技术的不断发展，企业所提供的互联网服务能够被越来越多的接入方式诸如：网页、手机终端、电视终端、家庭智能终端设备等进行访问。越来越细致多样的数据统计、收集方式的应用，使得越来越大规模的数据被生产出来。据IDC发布《数据时代2025》的报告显示，全球每年产生的数据将从2018年的33ZB增长到175ZB，相当于每天产生491EB的数据。 大规模... 随着通信、互联网及物联网等技术的不断发展，企业所提供的互联网服务能够被越来越多的接入方式诸如：网页、手机终端、电视终端、家庭智能终端设备等进行访问。越来越细致多样的数据统计、收集方式的应用，使得越来越大规模的数据被生产出来。据IDC发布《数据时代2025》的报告显示，全球每年产生的数据将从2018年的33ZB增长到175ZB，相当于每天产生491EB的数据。 大规模...
- MySQL流程控制语句概述 MySQL流程控制语句概述
- 大数据之路顺应人类科技的进步而诞生，一直顺风顺水，不到20年时间，已渗透到社会生产和人们生活的方方面面。然而，伴随着信息量的指数级增长，大数据也开始面临存储资源告急、算力吃紧、数据处理效率无法满足业务增长诉求等一系列问题，导致唱衰之声此起彼伏。而近年来兴起的容器技术，以其轻量化、易迁移、扩容快等优势，结合计算存储分离的分布式架构，可以更好地发挥大数据平台在海量数据集、高并发、实时分析等应用场... 大数据之路顺应人类科技的进步而诞生，一直顺风顺水，不到20年时间，已渗透到社会生产和人们生活的方方面面。然而，伴随着信息量的指数级增长，大数据也开始面临存储资源告急、算力吃紧、数据处理效率无法满足业务增长诉求等一系列问题，导致唱衰之声此起彼伏。而近年来兴起的容器技术，以其轻量化、易迁移、扩容快等优势，结合计算存储分离的分布式架构，可以更好地发挥大数据平台在海量数据集、高并发、实时分析等应用场...
- 今天为大家推荐的故事是新当选的 ASF Member，来自华为 今天为大家推荐的故事是新当选的 ASF Member，来自华为
- 个人练习前端技术使用Bootstrap、JQuery、thymeleaf 个人练习前端技术使用Bootstrap、JQuery、thymeleaf
- 最近在 Win10 系统上配置了ubuntu-18.04.3，在配置集群的 ssh 无秘钥登录时，经常能碰到 ssh: connect to host master port 22: Connection timed out 的问题。 最近在 Win10 系统上配置了ubuntu-18.04.3，在配置集群的 ssh 无秘钥登录时，经常能碰到 ssh: connect to host master port 22: Connection timed out 的问题。
- 费时费力的花钱举办了一场打折优惠促销活动，可是零售商家如何知道活动办得好不好？ 费时费力的花钱举办了一场打折优惠促销活动，可是零售商家如何知道活动办得好不好？
- 七、 Hadoop部署区分依据学习目标 能够了解Hadoop部署的意义 能够了解不同部署模式区分依据1)要求通过部署Hadoop过程了解Hadoop工作方式，进一步了解Hadoop工作原理。2)本地模式、伪分布式、完全分布式区分依据主要的区别依据是NameNode、 DataNode、 ResourceManager、 NodeManager等模块运行在几个JVM进程、几个 机器。如下表所示... 七、 Hadoop部署区分依据学习目标 能够了解Hadoop部署的意义 能够了解不同部署模式区分依据1)要求通过部署Hadoop过程了解Hadoop工作方式，进一步了解Hadoop工作原理。2)本地模式、伪分布式、完全分布式区分依据主要的区别依据是NameNode、 DataNode、 ResourceManager、 NodeManager等模块运行在几个JVM进程、几个 机器。如下表所示...
- 案例一：通过案例，了解编辑的基本操作。1. 新建分析2. 上传数据上传本地excel表格数据：各科成绩表格3. 编辑数据3.1 改变表头类型点击表头中的类型符号，可以改变类型。类型分为：文本，数字，日期 三种类型3.2 改变表中标题名称双击标题名，可以进行重命名操作3.3 更改显示的字段数量点击字段设置。则可以通过勾选，和去除勾选，设置显示的字段内容。3.4 拆分列可根据分隔符，对指定... 案例一：通过案例，了解编辑的基本操作。1. 新建分析2. 上传数据上传本地excel表格数据：各科成绩表格3. 编辑数据3.1 改变表头类型点击表头中的类型符号，可以改变类型。类型分为：文本，数字，日期 三种类型3.2 改变表中标题名称双击标题名，可以进行重命名操作3.3 更改显示的字段数量点击字段设置。则可以通过勾选，和去除勾选，设置显示的字段内容。3.4 拆分列可根据分隔符，对指定...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
苏州工业园区“华为云杯”2025人工智能应用创新大赛赛中直播2025/08/21 周四 16:00-17:00
Vz 华为云AIoT技术布道师
本期直播将与您一起探讨如何基于华为云IoT平台全场景云服务，结合AI、鸿蒙、大数据等技术，打造有创新性，有竞争力的方案和产品。
即将直播
热门标签