- 当前实时数据的接入和处理在DWS承载的业务中所占的比例越来越大，DWS可以和DLI Flink结合，实现实时数据处理结果的报表展示。同时，DWS可以作为Flink维表引擎，存储维表数据，共Flink关联时使用。下面介绍DWS如何与DLI Flink相结合，实现实时数据的存储和查询。一、创建DLI Flink作业 在DLI管理控制台的左侧导航栏中，单击“作业管理”>“Fli... 当前实时数据的接入和处理在DWS承载的业务中所占的比例越来越大，DWS可以和DLI Flink结合，实现实时数据处理结果的报表展示。同时，DWS可以作为Flink维表引擎，存储维表数据，共Flink关联时使用。下面介绍DWS如何与DLI Flink相结合，实现实时数据的存储和查询。一、创建DLI Flink作业 在DLI管理控制台的左侧导航栏中，单击“作业管理”>“Fli...
- 孙子兵法云：“谋定而后动，知止而有得”，做任何事一定要进行谋划部署，做好准备，这样才能利于这件事的成功，切不可莽撞而行。同样，GaussDB（DWS）执行查询语句也会按照预定的计划来执行，给定硬件环境的情况下，执行的快慢全凭计划的好坏，那么一条查询语句的计划是如何制定的呢，本文将为大家解读计划生成中行数估算和路径生成的奥秘。 孙子兵法云：“谋定而后动，知止而有得”，做任何事一定要进行谋划部署，做好准备，这样才能利于这件事的成功，切不可莽撞而行。同样，GaussDB（DWS）执行查询语句也会按照预定的计划来执行，给定硬件环境的情况下，执行的快慢全凭计划的好坏，那么一条查询语句的计划是如何制定的呢，本文将为大家解读计划生成中行数估算和路径生成的奥秘。
- 4月26日，在华为开发者大会（Cloud）上，华为云数据使能DAYU主力产品GaussDB(DWS)首席架构师解读了GaussDB(DWS)的一站式数据分析能力。 4月26日，在华为开发者大会（Cloud）上，华为云数据使能DAYU主力产品GaussDB(DWS)首席架构师解读了GaussDB(DWS)的一站式数据分析能力。
- upsert单条记录改写 upsert单条记录改写
- 量化入门 量化交易（Quantitative Trading） 引言近年来，量化投资行业得到了迅速的发展，传统多因子模型在A股过去若干年内也获得较为稳健的超额收益。然而，由于市值效应在 A 股市场的影响过于明显，导致传统多因子模型或多或少都受其影响。 尤其是自2016年11月以来，随着A股市场风格的急剧变化，策略稳定性受到了一定冲击。从目前市值因子的收益波动性而言，小市值因子超额收益的黄金... 量化入门 量化交易（Quantitative Trading） 引言近年来，量化投资行业得到了迅速的发展，传统多因子模型在A股过去若干年内也获得较为稳健的超额收益。然而，由于市值效应在 A 股市场的影响过于明显，导致传统多因子模型或多或少都受其影响。 尤其是自2016年11月以来，随着A股市场风格的急剧变化，策略稳定性受到了一定冲击。从目前市值因子的收益波动性而言，小市值因子超额收益的黄金...
- GaussDB(DWS)目前集成了大量运维操作，包括扩容、巡检、备份等，这些运维操作通常会与用户业务需求产生冲突，占用部分用户资源，因此，如何协调运维操作与用户业务，逐渐成为GaussDB(DWS)良性发展的关键议题。本文将针对GaussDB(DWS)内调度器的底层运作原理进行简单说明。 GaussDB(DWS)目前集成了大量运维操作，包括扩容、巡检、备份等，这些运维操作通常会与用户业务需求产生冲突，占用部分用户资源，因此，如何协调运维操作与用户业务，逐渐成为GaussDB(DWS)良性发展的关键议题。本文将针对GaussDB(DWS)内调度器的底层运作原理进行简单说明。
- 华为开发者大会2021（Cloud）期间，华为云FusionInsight MRS云原生数据湖HetuEngine架构师武文博，分享了“跨湖跨仓场景下如何实现海量数据分钟级分析”主题。助力政企客户打通多数据源间数据墙，实现高性能跨湖跨仓跨云数据融合分析，同时，HetuEngine提供统一访问入口，屏蔽了传统复杂的访问接口，并统一使用 SQL 接口，降低大数据使用门槛，简化用数！ 华为开发者大会2021（Cloud）期间，华为云FusionInsight MRS云原生数据湖HetuEngine架构师武文博，分享了“跨湖跨仓场景下如何实现海量数据分钟级分析”主题。助力政企客户打通多数据源间数据墙，实现高性能跨湖跨仓跨云数据融合分析，同时，HetuEngine提供统一访问入口，屏蔽了传统复杂的访问接口，并统一使用 SQL 接口，降低大数据使用门槛，简化用数！
- HDC.Cloud2021期间，华为云FusionInsight解决方案架构师许田立，分享了“千级节点的大数据集群如何无业务中断升级”主题，解决传统大数据平台操作繁琐、业务停机、升级成本高等问题，实现一个架构的平滑演进，业务无中断。 HDC.Cloud2021期间，华为云FusionInsight解决方案架构师许田立，分享了“千级节点的大数据集群如何无业务中断升级”主题，解决传统大数据平台操作繁琐、业务停机、升级成本高等问题，实现一个架构的平滑演进，业务无中断。
- 4月24日-26日，HDC.Cloud2021在深圳大学城成功举办，华为云FusionInsight MRS云原生数据湖带来最懂行的大数据解决方案，为政企客户提供湖仓一体、云原生的大数据解决方案，一个架构可构建3种数据湖：离线数据湖、实时数据湖、逻辑数据湖，更有现场沙箱实验和名师大讲堂，一起来细品。 4月24日-26日，HDC.Cloud2021在深圳大学城成功举办，华为云FusionInsight MRS云原生数据湖带来最懂行的大数据解决方案，为政企客户提供湖仓一体、云原生的大数据解决方案，一个架构可构建3种数据湖：离线数据湖、实时数据湖、逻辑数据湖，更有现场沙箱实验和名师大讲堂，一起来细品。
- 终于开始了这个很感兴趣但是一直觉得困难重重的源码解析工作，也算是一个好的开端。既然开始了，就认真耐心的看下去吧。废话不多说，开始！hdfs源码解析之客户端写数据（一）hdfs源码解析之客户端写数据（二）在我们客户端写数据的代码大致如下：Configuration conf = new Configuration（）； conf.set("fs.defaultFS","hdfs://172.1... 终于开始了这个很感兴趣但是一直觉得困难重重的源码解析工作，也算是一个好的开端。既然开始了，就认真耐心的看下去吧。废话不多说，开始！hdfs源码解析之客户端写数据（一）hdfs源码解析之客户端写数据（二）在我们客户端写数据的代码大致如下：Configuration conf = new Configuration（）； conf.set("fs.defaultFS","hdfs://172.1...
- 并发更新报错处理方案 并发更新报错处理方案
- 一般我们建议GaussDB(DWS)使用UTF8作为字符集。而TD（TERADATA）一般默认是使用latin1的字符集，存放中文的也是GBK字符集，与GaussDB(DWS)推荐使用的UTF8不一致。这样的不一致会导致一些字符串相关的函数，会因为字符集不一致导致结果不一致，本文主要针对这样的变化，给读者提供如何对这样的变化进行函数的开发适配 一般我们建议GaussDB(DWS)使用UTF8作为字符集。而TD（TERADATA）一般默认是使用latin1的字符集，存放中文的也是GBK字符集，与GaussDB(DWS)推荐使用的UTF8不一致。这样的不一致会导致一些字符串相关的函数，会因为字符集不一致导致结果不一致，本文主要针对这样的变化，给读者提供如何对这样的变化进行函数的开发适配
- 本文结合GaussDB(DWS)的实践交付和运维经验，从集群操作类、资源监控类、元数据查询类、权限管理类四大模块分类整理常用命令，希望通过这些常用命令给大家提供一些参考和启发，提升后续交付和运维效率。 本文结合GaussDB(DWS)的实践交付和运维经验，从集群操作类、资源监控类、元数据查询类、权限管理类四大模块分类整理常用命令，希望通过这些常用命令给大家提供一些参考和启发，提升后续交付和运维效率。
- GaussDB(DWS)常见操作的锁冲突矩阵 GaussDB(DWS)常见操作的锁冲突矩阵
- 背景前面的文章，基本实现了从0搭建Hive的运行环境。包括Hadoop、Hive，也包括HiveServer2、Tez。距离在Hive上调试开发，还欠缺一套开发环境，待后续补充。而环境有了后，测试什么、用什么表示这个系统可用？大多时候，我们想额外学习一个软件或者开源项目时候，就容易陷入"安装-部署-安装-部署"的循环中。没有实际使用的场景，或者自己构造的场景不足以触发特性（考虑不周），我们... 背景前面的文章，基本实现了从0搭建Hive的运行环境。包括Hadoop、Hive，也包括HiveServer2、Tez。距离在Hive上调试开发，还欠缺一套开发环境，待后续补充。而环境有了后，测试什么、用什么表示这个系统可用？大多时候，我们想额外学习一个软件或者开源项目时候，就容易陷入"安装-部署-安装-部署"的循环中。没有实际使用的场景，或者自己构造的场景不足以触发特性（考虑不周），我们...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签