- ETL代表“提取、转换和加载”。ETL 过程在数据集成策略中起着关键作用。ETL允许企业从多个来源收集数据并将其整合到一个集中的位置。ETL还使不同类型的数据可以协同工作。 ETL代表“提取、转换和加载”。ETL 过程在数据集成策略中起着关键作用。ETL允许企业从多个来源收集数据并将其整合到一个集中的位置。ETL还使不同类型的数据可以协同工作。
- 在调度和查询混合的数据仓库的使用场景中,常常会有同时对一张表进行ETL写入,和业务进行查询的情况。这种情况下会导致调度和查询互锁,影响调度性能,拖慢整体调度时间;或者是查询语句被锁,只能等待调度完成再能读取。给业务带来很大的不便。这种情况下,如果目标表是分区表,可以使用分区表的交换分区的功能,减少锁等待。语法如下:具体实现方式简单理解为,调度将数据写入与目标表相同表结构的临时表中,数据写完之... 在调度和查询混合的数据仓库的使用场景中,常常会有同时对一张表进行ETL写入,和业务进行查询的情况。这种情况下会导致调度和查询互锁,影响调度性能,拖慢整体调度时间;或者是查询语句被锁,只能等待调度完成再能读取。给业务带来很大的不便。这种情况下,如果目标表是分区表,可以使用分区表的交换分区的功能,减少锁等待。语法如下:具体实现方式简单理解为,调度将数据写入与目标表相同表结构的临时表中,数据写完之...
- 一、DWS表空间介绍 DWS中的表空间实际上就是数据文件系统位置上的一个目录而已,目录中存放了所有的其他对象,例如:表、索引等等; DWS的表空间又分为:默认表空间:pg_default(base)、全局共享系统表表空间pg_global(g... 一、DWS表空间介绍 DWS中的表空间实际上就是数据文件系统位置上的一个目录而已,目录中存放了所有的其他对象,例如:表、索引等等; DWS的表空间又分为:默认表空间:pg_default(base)、全局共享系统表表空间pg_global(g...
- PG的WAL基本原理 PG的WAL基本原理
- 列存文件格式使用1.1 列存文件存储简介目前列存表存储格式支持两种,分别为colversion 1.0和2.0,当指定为1.0格式时,每一列数据存储在一个单独文件之中,文件名以relfilenode.C1、relfilenode.C2、relfilenode.C3等命名,bcm文件也是类似,如果业务中列存表/列存宽表较多时,文件数据会比较多,影响扩容、build、备份等运维操作性... 列存文件格式使用1.1 列存文件存储简介目前列存表存储格式支持两种,分别为colversion 1.0和2.0,当指定为1.0格式时,每一列数据存储在一个单独文件之中,文件名以relfilenode.C1、relfilenode.C2、relfilenode.C3等命名,bcm文件也是类似,如果业务中列存表/列存宽表较多时,文件数据会比较多,影响扩容、build、备份等运维操作性...
- 当开启transaction,执行updata的语句执行成功,不执行commit或rollback;再开启另一个窗口,执行upadate语句,会出现失败(报错:锁等待超时)的情况,但是如果对于上一个窗口执行rollback,此窗口update可以执行成功,该种情况应考虑该表是否为列存表。【问题根因】如果使用的是列存表,在事务中执行update操作时,是以CU为单位进行加锁的,所以在事务未提交... 当开启transaction,执行updata的语句执行成功,不执行commit或rollback;再开启另一个窗口,执行upadate语句,会出现失败(报错:锁等待超时)的情况,但是如果对于上一个窗口执行rollback,此窗口update可以执行成功,该种情况应考虑该表是否为列存表。【问题根因】如果使用的是列存表,在事务中执行update操作时,是以CU为单位进行加锁的,所以在事务未提交...
- GaussDB(DWS)所有内部组件CN、DN、GTM、CM等采用多活或主备设计,通过集群管理进行故障检测和切换。在硬件层面,除了最基本的宕机、断网的直接故障外,GaussDB(DWS)还针对夯死、慢节点、亚健康等僵而不死的复杂场景,做了大量的建模和针对性优化,能够实现故障的准确探测和自愈。并且还提供了双集群容灾能力,通过跨AZ、跨Region的物理复制,实现异构集群容灾。 GaussDB(DWS)所有内部组件CN、DN、GTM、CM等采用多活或主备设计,通过集群管理进行故障检测和切换。在硬件层面,除了最基本的宕机、断网的直接故障外,GaussDB(DWS)还针对夯死、慢节点、亚健康等僵而不死的复杂场景,做了大量的建模和针对性优化,能够实现故障的准确探测和自愈。并且还提供了双集群容灾能力,通过跨AZ、跨Region的物理复制,实现异构集群容灾。
- 从四个核心技术为你解密,GaussDB(DWS)负载管理功能如何做好计算/存储资源的划分,让你的数仓“聪明”起来。 从四个核心技术为你解密,GaussDB(DWS)负载管理功能如何做好计算/存储资源的划分,让你的数仓“聪明”起来。
- 适配Oracle的WEEKOF函数 适配Oracle的WEEKOF函数
- 适配Oralce的dayof函数 适配Oralce的dayof函数
- GaussDB(DWS)是有两个时区的,你知道吗? GaussDB(DWS)是有两个时区的,你知道吗?
- 数据库内存不够用,扩容是必须的,但更要定位准确。 数据库内存不够用,扩容是必须的,但更要定位准确。
- 从理论到升级案例,带你掌握GaussDB(DWS)升级面临的疑难问题。 从理论到升级案例,带你掌握GaussDB(DWS)升级面临的疑难问题。
- 什么是逻辑集群、DWS逻辑集群如何使用,统统都告诉你。 什么是逻辑集群、DWS逻辑集群如何使用,统统都告诉你。
- 数据库未来是云,越来越多企业面临数据库和应用技术转型,云端运维成数据库运维需要掌握的核心。 数据库未来是云,越来越多企业面临数据库和应用技术转型,云端运维成数据库运维需要掌握的核心。
上滑加载中
推荐直播
-
基于开源鸿蒙+海思星闪开发板:嵌入式系统开发实战(Day1)
2025/03/29 周六 09:00-18:00
华为开发者布道师
本次为期两天的课程将深入讲解OpenHarmony操作系统及其与星闪技术的结合应用,涵盖WS63E星闪开发板的详细介绍、“OpenHarmony+星闪”的创新实践、实验环境搭建以及编写首个“Hello World”程序等内容,旨在帮助学员全面掌握相关技术并进行实际操作
回顾中 -
基于开源鸿蒙+海思星闪开发板:嵌入式系统开发实战(Day2)
2025/03/30 周日 09:00-12:00
华为开发者布道师
本次为期两天的课程将深入讲解OpenHarmony操作系统及其与星闪技术的结合应用,涵盖WS63E星闪开发板的详细介绍、“OpenHarmony+星闪”的创新实践、实验环境搭建以及编写首个“Hello World”程序等内容,旨在帮助学员全面掌握相关技术并进行实际操作
回顾中 -
从AI基础到昇腾:大模型初探、DeepSeek解析与昇腾入门
2025/04/02 周三 16:00-17:30
不易 / 华为云学堂技术讲师
昇腾是华为研发的AI芯片,其具有哪些能力?我们如何基于其进行开发?本期直播将从AI以及大模型基础知识开始,介绍人工智能核心概念、昇腾AI基础软硬件平台以及昇腾专区,旨在为零基础或入门级学习者搭建从AI基础知识到昇腾技术的完整学习路径。
回顾中
热门标签