- 摘要数据仓库，往往意味着海量的数据，超大的集群，就像一个超大的金刚。一旦数据仓库搭建完成，集群迁移、集群规模扩展、集群架构调整需要花费很大的代价，对上层应用业务的影响周期也比较长。DWS提供了集群resize的功能。支持集群规模的scale out，也支持硬件规格的scale up，同时支持集群拓扑结构的重组。就如同使数仓这个金刚可以变形了。那让我们一起来看看他是如何变形的吧！背景介绍先简单... 摘要数据仓库，往往意味着海量的数据，超大的集群，就像一个超大的金刚。一旦数据仓库搭建完成，集群迁移、集群规模扩展、集群架构调整需要花费很大的代价，对上层应用业务的影响周期也比较长。DWS提供了集群resize的功能。支持集群规模的scale out，也支持硬件规格的scale up，同时支持集群拓扑结构的重组。就如同使数仓这个金刚可以变形了。那让我们一起来看看他是如何变形的吧！背景介绍先简单...
- 介绍了数据重分布的总体流程 介绍了数据重分布的总体流程
- CarbonData中的物化视图的简单介绍及使用方法 CarbonData中的物化视图的简单介绍及使用方法
- 本文主要是通过Spark代码走读来了解spark-submit的流程 本文主要是通过Spark代码走读来了解spark-submit的流程
- 服务功能更新1.【新功能】支持交互式分析能力基于openLooKeng引擎，推出交互式查询能力，兼容业界著名的开源SQL引擎Presto生态，并持续在融合场景查询、跨数据中心/云、数据源扩展、性能、可靠性、安全性等方面发展，让数据治理、使用更简单。2．【新特性】Flink作业支持1.7/1.10多版本新上线Flink多版本能力，用户在提交作业时可以选择使用Flink1.7或者1.10版本，丰... 服务功能更新1.【新功能】支持交互式分析能力基于openLooKeng引擎，推出交互式查询能力，兼容业界著名的开源SQL引擎Presto生态，并持续在融合场景查询、跨数据中心/云、数据源扩展、性能、可靠性、安全性等方面发展，让数据治理、使用更简单。2．【新特性】Flink作业支持1.7/1.10多版本新上线Flink多版本能力，用户在提交作业时可以选择使用Flink1.7或者1.10版本，丰...
- ECS节点添加永久路由方法，亲测有效 ECS节点添加永久路由方法，亲测有效
- 当我们需要同时执行多个任务、并且不会因为其中一个任务的执行时间漫长而陷入阻塞，就需要用到并发，也即多线程。Java中的并发实现主要在java.util.concurrent包中，Future这个概念其实Java里也有。Scala是在Java的基础上实现的函数式编程语言，所以Scala也可以调用Java API。今天会介绍Scala并发中应用比较多的两个概念——Future、ExecutionCon 当我们需要同时执行多个任务、并且不会因为其中一个任务的执行时间漫长而陷入阻塞，就需要用到并发，也即多线程。Java中的并发实现主要在java.util.concurrent包中，Future这个概念其实Java里也有。Scala是在Java的基础上实现的函数式编程语言，所以Scala也可以调用Java API。今天会介绍Scala并发中应用比较多的两个概念——Future、ExecutionCon
- 数据导入导出之copy使用方式，【数仓实践】GaussDB(DWS)导入导出之copy使用详解 数据导入导出之copy使用方式，【数仓实践】GaussDB(DWS)导入导出之copy使用详解
- Metastore client自动解析域名问题 Metastore client自动解析域名问题
- 华为云的 数据湖Catalog（DLCatalog）是基于华为云的 统一身份认证（IAM）进行的用户管理和认证，那么对于非华为云IAM体系的外部用户（例如 Hadoop Kerberos 用户），如何来访问DLCatalog服务并实现DLCatalog服务的访问控制呢？对DLCatalog而言，在内部使用IAM的DLCatalog策略实现DLCatalog资源的细粒度访问控制；那么从外部来看... 华为云的 数据湖Catalog（DLCatalog）是基于华为云的 统一身份认证（IAM）进行的用户管理和认证，那么对于非华为云IAM体系的外部用户（例如 Hadoop Kerberos 用户），如何来访问DLCatalog服务并实现DLCatalog服务的访问控制呢？对DLCatalog而言，在内部使用IAM的DLCatalog策略实现DLCatalog资源的细粒度访问控制；那么从外部来看...
- 实时TopSQL，历史TopSQL 实时TopSQL，历史TopSQL
- 数据湖探索（DLI）服务是一站式的流处理、批处理分析的Serverless融合处理分析服务，对于PySpark是原生支持的，那么在DLI中我们如何更好的运行复杂PySpark程序呢？ 对于数据分析来说Python是很自然的选择，而在大数据分析中PySpark无疑是不二选择。对于JVM语言系的程序我们通常会把程序打成Jar包并依赖其他一些第三方的Jar，同样的Py... 数据湖探索（DLI）服务是一站式的流处理、批处理分析的Serverless融合处理分析服务，对于PySpark是原生支持的，那么在DLI中我们如何更好的运行复杂PySpark程序呢？ 对于数据分析来说Python是很自然的选择，而在大数据分析中PySpark无疑是不二选择。对于JVM语言系的程序我们通常会把程序打成Jar包并依赖其他一些第三方的Jar，同样的Py...
- VACUUM回收表或B-Tree索引中已经删除的行所占据的存储空间。 ANAL用于收集与数据库中普通表内容相关的统计信息，统计结果存储在系统表PG_STATISTIC下。执行计划生成器会使用这些统计数据，以确定最有效的执行计划。 数据倾斜会造成查询表性能下降。 VACUUM回收表或B-Tree索引中已经删除的行所占据的存储空间。 ANAL用于收集与数据库中普通表内容相关的统计信息，统计结果存储在系统表PG_STATISTIC下。执行计划生成器会使用这些统计数据，以确定最有效的执行计划。 数据倾斜会造成查询表性能下降。
- 华为云弹性云服务器的ECS主机有多种flavor可供选择，当用户选择的ECS主机包含两块及以上网卡的时候，如图所示，该机器配有三块网卡，为了与外网通讯，会给某块网卡配置EIP，一般情况下，当配置完EIP后服务即可进行正常的网络访问请求，但有一种情况需要考虑，当服务所监听的网卡和EIP不在一块网卡上时，会出现服务请求失败的情况，此时需要根据实际情况定位问题。首先要看服务进程有没有起来，ps -... 华为云弹性云服务器的ECS主机有多种flavor可供选择，当用户选择的ECS主机包含两块及以上网卡的时候，如图所示，该机器配有三块网卡，为了与外网通讯，会给某块网卡配置EIP，一般情况下，当配置完EIP后服务即可进行正常的网络访问请求，但有一种情况需要考虑，当服务所监听的网卡和EIP不在一块网卡上时，会出现服务请求失败的情况，此时需要根据实际情况定位问题。首先要看服务进程有没有起来，ps -...
- 在规范设计-模型设计功能中，用户除了可以使用我们内置的表属性项以外，也可以按需使用自定义项功能，为表添加属性。表的自定义项也会作为用户的业务资产属性，同步至数据资产模块。目前，支持该项功能的对象有：关系建模-业务表、维度建模-维度(表)、维度建模-事实表以及维度建模-汇总表。如何使用该功能？请参考以下步骤：在规范设计左边导航栏中，选择进入配置中心；在顶部标签中选择模型配置；点击"表自定义项"... 在规范设计-模型设计功能中，用户除了可以使用我们内置的表属性项以外，也可以按需使用自定义项功能，为表添加属性。表的自定义项也会作为用户的业务资产属性，同步至数据资产模块。目前，支持该项功能的对象有：关系建模-业务表、维度建模-维度(表)、维度建模-事实表以及维度建模-汇总表。如何使用该功能？请参考以下步骤：在规范设计左边导航栏中，选择进入配置中心；在顶部标签中选择模型配置；点击"表自定义项"...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
苏州工业园区“华为云杯”2025人工智能应用创新大赛赛中直播2025/08/21 周四 16:00-17:00
Vz 华为云AIoT技术布道师
本期直播将与您一起探讨如何基于华为云IoT平台全场景云服务，结合AI、鸿蒙、大数据等技术，打造有创新性，有竞争力的方案和产品。
回顾中
热门标签