- 假设有两个集群A，B，均开启了Kerberos，本文将说明如何配置使用集群B上的Presto查询集群A1. 配置集群互信，参见 配置跨集群互信2. 将集群A上的/opt/Bigdata/MRS_1.9.2/1_XX_Coordinator/etc/core-site.xml和/opt/Bigdata/MRS_1.9.2/1_XX_Coordinator/etc/hdfs-site.xml拷贝... 假设有两个集群A，B，均开启了Kerberos，本文将说明如何配置使用集群B上的Presto查询集群A1. 配置集群互信，参见 配置跨集群互信2. 将集群A上的/opt/Bigdata/MRS_1.9.2/1_XX_Coordinator/etc/core-site.xml和/opt/Bigdata/MRS_1.9.2/1_XX_Coordinator/etc/hdfs-site.xml拷贝...
- 学习大数据，就必须要有一台 Unix 或者 Linux 系统的电脑，苹果电脑首选就是最佳的选择，如果条件不支持，在 Windows 电脑上安装虚拟机 VMWare，再在 VMWare 里面安装 Linux 系统也是一种不错的选择，下面白鹿为大家奉上在 Windows 上安装 VMware 虚拟机安装教程及在 VMware 虚拟机上安装 Ubuntu18.04.3 优麒麟版完整步骤。 学习大数据，就必须要有一台 Unix 或者 Linux 系统的电脑，苹果电脑首选就是最佳的选择，如果条件不支持，在 Windows 电脑上安装虚拟机 VMWare，再在 VMWare 里面安装 Linux 系统也是一种不错的选择，下面白鹿为大家奉上在 Windows 上安装 VMware 虚拟机安装教程及在 VMware 虚拟机上安装 Ubuntu18.04.3 优麒麟版完整步骤。
- openLooKeng可以使用可用的连接器，用于访问不同数据源的数据。 1. 配置HBase连接器连接（1）使用openLooKeng元存储来存储HBase元数据，原本想使用HDFS作为元数据存储的实例，设置hetu.metastore.hetufilesystem.profile-name=hdfs-metastore时，运行报错如下图所示。不知道是不是版本的问题，注销掉he... openLooKeng可以使用可用的连接器，用于访问不同数据源的数据。 1. 配置HBase连接器连接（1）使用openLooKeng元存储来存储HBase元数据，原本想使用HDFS作为元数据存储的实例，设置hetu.metastore.hetufilesystem.profile-name=hdfs-metastore时，运行报错如下图所示。不知道是不是版本的问题，注销掉he...
- 前几天看了《华为云FusionInsight MRS数享会：用HetuEngine打破数据壁垒》的直播，了解到华为自研HetuEngine是高性能分布式SQL查询&数据虚拟化引擎，与大数据生态无缝融合，实现海量数据秒级查询，支持多样异构协同，跨域，跨数据中心，实现数据湖内一站式SQL能融合分析。为了学习HetuEngine，找到它的开源版本为openHetu，在2020年7月1号改名... 前几天看了《华为云FusionInsight MRS数享会：用HetuEngine打破数据壁垒》的直播，了解到华为自研HetuEngine是高性能分布式SQL查询&数据虚拟化引擎，与大数据生态无缝融合，实现海量数据秒级查询，支持多样异构协同，跨域，跨数据中心，实现数据湖内一站式SQL能融合分析。为了学习HetuEngine，找到它的开源版本为openHetu，在2020年7月1号改名...
- 大数据基础学习四：伪分布式 Hadoop 在 Ubuntu 上的安装流程完整步骤、易错点分析及需要注意的问题（以 ubuntu-18.04.3、hadoop-3.2.1-tar.gz 为例），本系列的其他文章可以移步本人大数据专栏进行查看。对于本篇文章，我个人是很有自信的，一篇文章掌握一门课程核心技术点。 大数据基础学习四：伪分布式 Hadoop 在 Ubuntu 上的安装流程完整步骤、易错点分析及需要注意的问题（以 ubuntu-18.04.3、hadoop-3.2.1-tar.gz 为例），本系列的其他文章可以移步本人大数据专栏进行查看。对于本篇文章，我个人是很有自信的，一篇文章掌握一门课程核心技术点。
- 之前在大数据群里有人讨论过关于Click House，没怎么关注。前天看到华为云MRS2.0升级到MRS3.0，增加了ClickHouse。突然我就对ClickHouse感兴趣，它是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。采用Local attached storage作为存储，这样整个IO可能就没有Hadoop那一套的局限。它的系统在生产环境中可以应用到比较... 之前在大数据群里有人讨论过关于Click House，没怎么关注。前天看到华为云MRS2.0升级到MRS3.0，增加了ClickHouse。突然我就对ClickHouse感兴趣，它是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。采用Local attached storage作为存储，这样整个IO可能就没有Hadoop那一套的局限。它的系统在生产环境中可以应用到比较...
- 2020全年技术精华梳理成册，全文700页+，45万字。在这里，你将看到：当下热门技术域的奥秘拆解与实战解读、华为专家的峰会演讲全文、大牛工作成长故事、技术人职场经验。辛丑牛年的年货大餐，赶紧抱回家吧！ 2020全年技术精华梳理成册，全文700页+，45万字。在这里，你将看到：当下热门技术域的奥秘拆解与实战解读、华为专家的峰会演讲全文、大牛工作成长故事、技术人职场经验。辛丑牛年的年货大餐，赶紧抱回家吧！
- 近年来AI热点事件不断，层出不穷的算法、芯片创业公司兴起，产业巨头以主营业务优势延伸新的领域，补齐能力。我们看到，AI已逐渐从理论研究、概念炒作走向场景落地的务实发展阶段。在这个过程中，AI芯片、算法等关键技术突破为各行各业增强了人工智能场景落地的信心。 近年来AI热点事件不断，层出不穷的算法、芯片创业公司兴起，产业巨头以主营业务优势延伸新的领域，补齐能力。我们看到，AI已逐渐从理论研究、概念炒作走向场景落地的务实发展阶段。在这个过程中，AI芯片、算法等关键技术突破为各行各业增强了人工智能场景落地的信心。
- Hadoop入门科普。 Hadoop入门科普。
- 对于很多人来说，当他第一次听到“大数据”这个词，会自然而然从字面上去理解——认为大数据就是大量的数据，大数据技术就是大量数据的存储技术。 但事实上，它并不只是一项存储技术，而是一系列和海量数据相关的抽取、集成、管理、分析、解释技术。大数据系统，是一个庞大的框架系统。 更进一步来说，大数据是一种全新的思维方式和商业模式。 对于很多人来说，当他第一次听到“大数据”这个词，会自然而然从字面上去理解——认为大数据就是大量的数据，大数据技术就是大量数据的存储技术。 但事实上，它并不只是一项存储技术，而是一系列和海量数据相关的抽取、集成、管理、分析、解释技术。大数据系统，是一个庞大的框架系统。 更进一步来说，大数据是一种全新的思维方式和商业模式。
- 一直强调学习一定要竖立自己的知识架构体系，架子搭起来了，你才好添砖加瓦，数通是基础，一般进入网络的IT人员在这块多多少少都有相应的基础，不管是科班出身，还是野路子，总之见的，听的，接触到的，在一步步填充你的知识体系，好了，多话不说，说我们的题，大数据，这个名词太广义了，涵盖的信息量也是巨的,只有当你进入的时候，才深深感受到自己的渺小，学习着手点，概念，基础，框架，应用，要学习大数据很基础的部... 一直强调学习一定要竖立自己的知识架构体系，架子搭起来了，你才好添砖加瓦，数通是基础，一般进入网络的IT人员在这块多多少少都有相应的基础，不管是科班出身，还是野路子，总之见的，听的，接触到的，在一步步填充你的知识体系，好了，多话不说，说我们的题，大数据，这个名词太广义了，涵盖的信息量也是巨的,只有当你进入的时候，才深深感受到自己的渺小，学习着手点，概念，基础，框架，应用，要学习大数据很基础的部...
- 一、集群环境信息本次安装集群共5台主机，其中一台CM管理节点，2台namonode节点，2台datanode节点。具体信息如下： 主机名IP地址集群角色主机配置操作系统版本cm192.168.0.128CM manager4C/16GCentos 6.8namenode1192.168.0.121namonode4C/16GCentos 6.8namenode2192.168.0... 一、集群环境信息本次安装集群共5台主机，其中一台CM管理节点，2台namonode节点，2台datanode节点。具体信息如下： 主机名IP地址集群角色主机配置操作系统版本cm192.168.0.128CM manager4C/16GCentos 6.8namenode1192.168.0.121namonode4C/16GCentos 6.8namenode2192.168.0...
- 针对之前对Delta 1.2.0、Iceberg 0.13.1和Hudi 011.1进行的基准测试，进行了更正测试，对Hudi组件进行深入分析后，进行了一定的调优处理，本次发布进行进过调优的性能测试结果。 针对之前对Delta 1.2.0、Iceberg 0.13.1和Hudi 011.1进行的基准测试，进行了更正测试，对Hudi组件进行深入分析后，进行了一定的调优处理，本次发布进行进过调优的性能测试结果。
- 来源：华为云 时间：2024年7月30日 江西兴国县作为历史悠久的千年古县，现代智慧城市的发展理念也在这片土地上生根发芽、蓬勃兴起。兴国县行政审批局立足数字政府建设发展全局，携手华为合力推进“数治兴国”项目建设，通过大数据、人工智能、物联网等前沿技术，构建了智能化的治理体系，显著提升兴国县县域治理能力和现代化水平。近日，在第十七届中国智慧城市大会上，兴国县行政审批局“数治兴国”建设项目... 来源：华为云 时间：2024年7月30日 江西兴国县作为历史悠久的千年古县，现代智慧城市的发展理念也在这片土地上生根发芽、蓬勃兴起。兴国县行政审批局立足数字政府建设发展全局，携手华为合力推进“数治兴国”项目建设，通过大数据、人工智能、物联网等前沿技术，构建了智能化的治理体系，显著提升兴国县县域治理能力和现代化水平。近日，在第十七届中国智慧城市大会上，兴国县行政审批局“数治兴国”建设项目...
- 来源：湖北日报 时间：2024年9月13日 在全球数字化浪潮的推动下，城市数字化建设正成为促进城市发展的关键动力。2024年9月11-12日，2024 IDC中国年度盛典暨颁奖典礼（简称TNBT峰会）在上海举办，来自全国百余家知名企业的数百位行业领袖及专业分析师围绕“生成式AI、中国企业出海、创新业务新模式、科技可持续发展、数据安全、数字工业、数字金融”等七大前沿科技主题展开深入探讨。... 来源：湖北日报 时间：2024年9月13日 在全球数字化浪潮的推动下，城市数字化建设正成为促进城市发展的关键动力。2024年9月11-12日，2024 IDC中国年度盛典暨颁奖典礼（简称TNBT峰会）在上海举办，来自全国百余家知名企业的数百位行业领袖及专业分析师围绕“生成式AI、中国企业出海、创新业务新模式、科技可持续发展、数据安全、数字工业、数字金融”等七大前沿科技主题展开深入探讨。...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签