- 由于日常运维和使用中，经常需要使用到HDFS的操作命令，因此做一个整理和分享。共由文件系统命令、运维命令、M/R命令、系统检测工具fsck以及运行piepies作业五部分构成。 由于日常运维和使用中，经常需要使用到HDFS的操作命令，因此做一个整理和分享。共由文件系统命令、运维命令、M/R命令、系统检测工具fsck以及运行piepies作业五部分构成。
- YARN调度资源的介绍 YARN调度资源的介绍
- 安全模式安全模式是HDFS所处的一种特殊状态，在这种状态下，文件系统只接受读数据请求，而不接受删除、修改等变更请求。在NameNode主节点启动时，HDFS首先进入安全模式，DataNode在启动的时候会向namenode汇报可用的block等状态，让NameNode得到块的位置信息,并对每一个文件对应的数据块副本进行统计,当最小副本条件满足时HDFS自动离开安全模式。如果HDFS出于安全模... 安全模式安全模式是HDFS所处的一种特殊状态，在这种状态下，文件系统只接受读数据请求，而不接受删除、修改等变更请求。在NameNode主节点启动时，HDFS首先进入安全模式，DataNode在启动的时候会向namenode汇报可用的block等状态，让NameNode得到块的位置信息,并对每一个文件对应的数据块副本进行统计,当最小副本条件满足时HDFS自动离开安全模式。如果HDFS出于安全模...
- 公司介绍 公司介绍
- 1、开通数据接入服务DIS2、表格存储服务获得ZK地址：cloudtable-richblue88-zk1-Op5s31N0.cloudtable.com:2181,cloudtable-richblue88-zk2-NjXOqtVT.cloudtable.com:2181,cloudtable-richblue88-zk3-cToI8pSr.cloudtable.com:21813、开通演... 1、开通数据接入服务DIS2、表格存储服务获得ZK地址：cloudtable-richblue88-zk1-Op5s31N0.cloudtable.com:2181,cloudtable-richblue88-zk2-NjXOqtVT.cloudtable.com:2181,cloudtable-richblue88-zk3-cToI8pSr.cloudtable.com:21813、开通演...
- 在华为云主机上部署HIVE 单用户模式、多用户模式、远程模式及碰到各种坑的解决方法 在华为云主机上部署HIVE 单用户模式、多用户模式、远程模式及碰到各种坑的解决方法
- 在安装hive之前，hadoop 2.8,MySql 8.0已部署完毕，hadoop 安装目录为/opt/hadoop2.8.0一、下载解压到apache hive 官网 下载http://hive.apache.org/本次安装下载是Hive-2.3.3版本到/opt目录下，解压：tar xzvf apache-hive-2.3.3-bin.tar.gz.mv apache-hive-... 在安装hive之前，hadoop 2.8,MySql 8.0已部署完毕，hadoop 安装目录为/opt/hadoop2.8.0一、下载解压到apache hive 官网 下载http://hive.apache.org/本次安装下载是Hive-2.3.3版本到/opt目录下，解压：tar xzvf apache-hive-2.3.3-bin.tar.gz.mv apache-hive-...
- 华为云更简单、更高效地帮助企业获取数字经济红利。 华为云更简单、更高效地帮助企业获取数字经济红利。
- 2018年11月14日，北京佳格天地科技有限公司入驻华为云市场，在华为云市场发布了“耘镜系列”农业农村大数据产品体系，依托卫星遥感、AI技术优势，为农业互联网提供大数据的服务和运营，帮助省级农业政府部门、农业金融、中大型种植企业，解决了资产盘点、风险预警、智能决策三方面的问题。 2018年11月14日，北京佳格天地科技有限公司入驻华为云市场，在华为云市场发布了“耘镜系列”农业农村大数据产品体系，依托卫星遥感、AI技术优势，为农业互联网提供大数据的服务和运营，帮助省级农业政府部门、农业金融、中大型种植企业，解决了资产盘点、风险预警、智能决策三方面的问题。
- pandas是数据分析师分析数据最常用的三方库之一，结合matplotlib，非常强大。 首先我们收集一些数据。 从东方财富客户端导出券商信托板块2018年11月1日的基础行情和财务数据。 pandas是数据分析师分析数据最常用的三方库之一，结合matplotlib，非常强大。 首先我们收集一些数据。 从东方财富客户端导出券商信托板块2018年11月1日的基础行情和财务数据。
- 从抓取、解析、存储、反爬、加速五个方面介绍了利用 Python 进行网络爬虫开发的相关知识点和技巧，介绍了不同场景下如何采取不同措施高效地进行数据抓取的方法。 从抓取、解析、存储、反爬、加速五个方面介绍了利用 Python 进行网络爬虫开发的相关知识点和技巧，介绍了不同场景下如何采取不同措施高效地进行数据抓取的方法。
- 21天大数据企业实战营重磅来袭！！！ 华为云DevCloud & 华为云EI联合出品，第二期大数据活动将为您带来更豪华的课程盛宴！ 本期以大数据为主题，21天的精编课程，引导你高效学习大数据领域前沿知识。 豪华的华为师资团队，带你深度体验八大场景，搭配作业全程指导，晋升为大数据人才！ 21天大数据企业实战营重磅来袭！！！ 华为云DevCloud & 华为云EI联合出品，第二期大数据活动将为您带来更豪华的课程盛宴！ 本期以大数据为主题，21天的精编课程，引导你高效学习大数据领域前沿知识。 豪华的华为师资团队，带你深度体验八大场景，搭配作业全程指导，晋升为大数据人才！
- 大数据（big data）是什么？本课程无特殊预备知识要求，从大数据的产生到大数据的应用，为您揭开大数据神秘的面纱。通过本课程，系统地学习大数据知识，了解大数据的产生及应用等。首先从“大数据是什么”开始，到华为大数据解决方案介绍，接着分享华为大数据的应用案例，大数据技术学习认证指南。 大数据（big data）是什么？本课程无特殊预备知识要求，从大数据的产生到大数据的应用，为您揭开大数据神秘的面纱。通过本课程，系统地学习大数据知识，了解大数据的产生及应用等。首先从“大数据是什么”开始，到华为大数据解决方案介绍，接着分享华为大数据的应用案例，大数据技术学习认证指南。
- 【导语】2018年10月23日，世平信息科技有限公司入驻华为云市场，旗下数据安全管理系列产品也将正式上线。此后，世平信息将能够为华为云用户提供数据安全防护专业解决方案与系列安全服务。世平概况杭州世平信息科技有限公司（简称“世平信息”）成立于2010年，致力于智能化数据管理与应用的深入开拓和持续创新，为用户提供数据安全、数据治理、数据共享和数据利用解决方案，帮助用户切实把握大数据价值与信息安全... 【导语】2018年10月23日，世平信息科技有限公司入驻华为云市场，旗下数据安全管理系列产品也将正式上线。此后，世平信息将能够为华为云用户提供数据安全防护专业解决方案与系列安全服务。世平概况杭州世平信息科技有限公司（简称“世平信息”）成立于2010年，致力于智能化数据管理与应用的深入开拓和持续创新，为用户提供数据安全、数据治理、数据共享和数据利用解决方案，帮助用户切实把握大数据价值与信息安全...
- 大数据学习，大数据发展趋势和Spark介绍 大数据是随着计算机技术、通信技术、互联网技术的发展而产生的一种现象。以前我们没有实现人和人之间的连接，产生的数据没有现在这么多；或者说没有把产生的数据记录下来；即使记录下来，我们也没有很好的工具对这些数据进行处理、分析和挖掘。而随着大数据技术的发展，我们开始逐渐地拥有这种能力，来发掘数据中的价值。大数据技术在2012年之前是以MapReduce为代... 大数据学习，大数据发展趋势和Spark介绍 大数据是随着计算机技术、通信技术、互联网技术的发展而产生的一种现象。以前我们没有实现人和人之间的连接，产生的数据没有现在这么多；或者说没有把产生的数据记录下来；即使记录下来，我们也没有很好的工具对这些数据进行处理、分析和挖掘。而随着大数据技术的发展，我们开始逐渐地拥有这种能力，来发掘数据中的价值。大数据技术在2012年之前是以MapReduce为代...
上滑加载中
推荐直播
-
香橙派AIpro的远程推理框架与实验案例2025/07/04 周五 19:00-20:00
郝家胜 -华为开发者布道师-高校教师
AiR推理框架创新采用将模型推理与模型应用相分离的机制，把香橙派封装为AI推理黑盒服务，构建了分布式远程推理框架，并提供多种输入模态、多种输出方式以及多线程支持的高度复用框架，解决了开发板环境配置复杂上手困难、缺乏可视化体验和资源稀缺课程受限等痛点问题，真正做到开箱即用，并支持多种笔记本电脑环境、多种不同编程语言，10行代码即可体验图像分割迁移案例。
回顾中 -
鸿蒙端云一体化应用开发2025/07/10 周四 19:00-20:00
倪红军 华为开发者布道师-高校教师
基于鸿蒙平台终端设备的应用场景越来越多、使用范围越来越广。本课程以云数据库服务为例，介绍云侧项目应用的创建、新建对象类型、新增存储区及向对象类型中添加数据对象的方法，端侧（HarmonyOS平台）一体化工程项目的创建、云数据资源的关联方法及对云侧数据的增删改查等操作方法，为开发端云一体化应用打下坚实基础。
即将直播
热门标签