- GaussDB(DWS) TD和Oracle两种兼容模式的差异,以及对每种差异做了举例说明。 GaussDB(DWS) TD和Oracle两种兼容模式的差异,以及对每种差异做了举例说明。
- DWS表膨胀原理1 背景对GaussDB for DWS数据库有一定了解的朋友都知道GaussDB for DWS的UPDATE, DELETE操作是通过新增tuple版本提供高并发处理的. 这样带来一个问题是需要经常vacuum 表, 回收老版本占用的存储空间. 只有回收的空间才能被重复利用, 如果回收不及时将会造成表的膨胀效应。2 表膨胀的原因经常看到有人说表又膨胀了,那么导致对象膨胀的... DWS表膨胀原理1 背景对GaussDB for DWS数据库有一定了解的朋友都知道GaussDB for DWS的UPDATE, DELETE操作是通过新增tuple版本提供高并发处理的. 这样带来一个问题是需要经常vacuum 表, 回收老版本占用的存储空间. 只有回收的空间才能被重复利用, 如果回收不及时将会造成表的膨胀效应。2 表膨胀的原因经常看到有人说表又膨胀了,那么导致对象膨胀的...
- 概述随着云数据库业务规模不断扩大,用户对安全审计、性能智能分析等高级特性的要求越来越高。如何安全审计SQL?如何快速定位性能异常?如何保护数据库安全?是每个云厂商不得不需要思考的问题。华为云DAS服务提供的全量SQL洞察,又称之为全量SQL审计,集合华为云数据库内核的研发能力,做到了对实例性能影响极小(5%以内)的情况下,对全量SQL进行记录,基于这份全量SQL数据进行分析,提供了访问最频繁... 概述随着云数据库业务规模不断扩大,用户对安全审计、性能智能分析等高级特性的要求越来越高。如何安全审计SQL?如何快速定位性能异常?如何保护数据库安全?是每个云厂商不得不需要思考的问题。华为云DAS服务提供的全量SQL洞察,又称之为全量SQL审计,集合华为云数据库内核的研发能力,做到了对实例性能影响极小(5%以内)的情况下,对全量SQL进行记录,基于这份全量SQL数据进行分析,提供了访问最频繁...
- GaussDB for DWS生产应急指导 GaussDB for DWS生产应急指导
- GaussDB(DWS)引入了内存自适应控制的技术,在SQL语句复杂、处理数据量大的AP场景下,能够对运行的作业进行内存级的管控,避免高并发场景下内存不足产生的各种问题。 GaussDB(DWS)引入了内存自适应控制的技术,在SQL语句复杂、处理数据量大的AP场景下,能够对运行的作业进行内存级的管控,避免高并发场景下内存不足产生的各种问题。
- Mysql 索引的原理知识介绍。 Mysql 索引的原理知识介绍。
- 如何花更少的钱,更好地处理业务?这是用户在使用DLI服务之前都会考虑的一个问题。下面介绍一下Data Lake Insight(DLI)服务的计费方式以及规格。DLI计费方式DLI有两种计费方式:按需计费和包周期。按需计费为先使用,后付费的方式,用户先使用资源,每个小时出话单进行扣费。包周期计费分为套餐包和包年包月,订单计费模式为混合模式,用户先根据预期使用量进行预付费,在周期内资源使用量超... 如何花更少的钱,更好地处理业务?这是用户在使用DLI服务之前都会考虑的一个问题。下面介绍一下Data Lake Insight(DLI)服务的计费方式以及规格。DLI计费方式DLI有两种计费方式:按需计费和包周期。按需计费为先使用,后付费的方式,用户先使用资源,每个小时出话单进行扣费。包周期计费分为套餐包和包年包月,订单计费模式为混合模式,用户先根据预期使用量进行预付费,在周期内资源使用量超...
- 本文主要分析了友商的SQL编辑器功能优势,包括一些线下的SQL开发工具。阿里DataWorks1. 编辑器提供用户自定义设置,用户可选择不同主题,设置不同的字体大小,代码提示偏好,是否自动换行等。2. 未保存的代码会进行缓存,如果刷新,会提示用户有代码未保存,让用户选择使用缓存的内容还是后端保存的内容。3. 提供结构视图,将sql语句图形化显示,S代表源表,T代表目标表,tmp代表中间表。... 本文主要分析了友商的SQL编辑器功能优势,包括一些线下的SQL开发工具。阿里DataWorks1. 编辑器提供用户自定义设置,用户可选择不同主题,设置不同的字体大小,代码提示偏好,是否自动换行等。2. 未保存的代码会进行缓存,如果刷新,会提示用户有代码未保存,让用户选择使用缓存的内容还是后端保存的内容。3. 提供结构视图,将sql语句图形化显示,S代表源表,T代表目标表,tmp代表中间表。...
- 目前DAYU数据开发脚本开发支持DWS,DLI,HIVE, SparkSQL,Shell,Flink SQL,RDS SQL等脚本的编辑和调试。针对不同类型的脚本,DAYU提供不同的关键字语法提示和补全,不同类型脚本的关键字类型放在附件中供查阅。下面来详细介绍相关功能的使用方法:1. 按Tab键弹出自动补全提示框: 如下图所示,提示加上了类型,便于用户区分是关键字,还是函数,或是数据类型。 ... 目前DAYU数据开发脚本开发支持DWS,DLI,HIVE, SparkSQL,Shell,Flink SQL,RDS SQL等脚本的编辑和调试。针对不同类型的脚本,DAYU提供不同的关键字语法提示和补全,不同类型脚本的关键字类型放在附件中供查阅。下面来详细介绍相关功能的使用方法:1. 按Tab键弹出自动补全提示框: 如下图所示,提示加上了类型,便于用户区分是关键字,还是函数,或是数据类型。 ...
- 查询sql状态SELECT datname, pid, query, client_addr, query_start, now() - query_start AS query_duration, waiting, state FROM pg_stat_activity WHERE pid <> pg_back... 查询sql状态SELECT datname, pid, query, client_addr, query_start, now() - query_start AS query_duration, waiting, state FROM pg_stat_activity WHERE pid <> pg_back...
- 1 Hang问题基础知识GaussDB 200为分布式数据库,通常由于单节点亚健康、系统资源紧张或查询本身的计划等问题,造成系统疑似发生Hang。Hang问题的产生原因由很多种,比如,死锁等待、日志同步等待、事务超时、通信故障、数据溢出发生死循环等等,更为常见的是由于执行慢、中间结果集倾斜而导致的疑似Hang。掌握Hang问题的基本定位方法对于大集群环境下快速找准疑似阻塞点,修复故障环境或优... 1 Hang问题基础知识GaussDB 200为分布式数据库,通常由于单节点亚健康、系统资源紧张或查询本身的计划等问题,造成系统疑似发生Hang。Hang问题的产生原因由很多种,比如,死锁等待、日志同步等待、事务超时、通信故障、数据溢出发生死循环等等,更为常见的是由于执行慢、中间结果集倾斜而导致的疑似Hang。掌握Hang问题的基本定位方法对于大集群环境下快速找准疑似阻塞点,修复故障环境或优...
- RuntimeFilter 是Impala 2.5及更高版本中可用的优化特性 。当针对分区表进行查询,或join条件仅需要表中的一小部分数据时,Impala会在查询运行时确定适当的条件,并将该信息广播到所有正在读取数据的impalad节点,以便它们可以避免不必要的IO,并仅输出与之匹配的数据子集来避免不必要的网络传输。 RuntimeFilter 是Impala 2.5及更高版本中可用的优化特性 。当针对分区表进行查询,或join条件仅需要表中的一小部分数据时,Impala会在查询运行时确定适当的条件,并将该信息广播到所有正在读取数据的impalad节点,以便它们可以避免不必要的IO,并仅输出与之匹配的数据子集来避免不必要的网络传输。
- 在交互式分析、报表查询等场景中,往往在业务高峰存在较高并发时发现DWS上业务性能优明显下降,观察后台sys CPU占比大于20%,同时IO、内存、网络没有明显资源瓶颈。后台瞬时抓取stream大于1000,SQL执行计划大量耗时开销在STREAM算子。实验室验证stream数在500以内性能基本稳定,超出后在stream线程启停上的开销会明显影响stream算子的执行效率。因此对该场景的优化需要检 在交互式分析、报表查询等场景中,往往在业务高峰存在较高并发时发现DWS上业务性能优明显下降,观察后台sys CPU占比大于20%,同时IO、内存、网络没有明显资源瓶颈。后台瞬时抓取stream大于1000,SQL执行计划大量耗时开销在STREAM算子。实验室验证stream数在500以内性能基本稳定,超出后在stream线程启停上的开销会明显影响stream算子的执行效率。因此对该场景的优化需要检
- 上一期我们有介绍到什么是SQL及SQL标准。SQL有如下的显著特点:SQL只要提出“做什么”,无需了解存取路径,存取路径的选择以及SQL的操作过程由数据库管理系统自动完成。SQL语言以同一种语法结构提供多种实用方式。SQL能够独立地用于联机交互,也可以嵌入到高级语言(例如C、C++、Java)程序中。语言简洁,易学易用。完成核心功能只用了9个动词:数据定义语言DDL(Data Definit... 上一期我们有介绍到什么是SQL及SQL标准。SQL有如下的显著特点:SQL只要提出“做什么”,无需了解存取路径,存取路径的选择以及SQL的操作过程由数据库管理系统自动完成。SQL语言以同一种语法结构提供多种实用方式。SQL能够独立地用于联机交互,也可以嵌入到高级语言(例如C、C++、Java)程序中。语言简洁,易学易用。完成核心功能只用了9个动词:数据定义语言DDL(Data Definit...
- 华为云DAS服务提供的全量SQL洞察,集合了数据库内核研发能力,在对实例性能影响极小(5%以内)的情况下,对全量SQL进行记录,并基于这份全量SQL数据进行分析,而且还提供了多维度的分析、搜索、过滤的能力。 华为云DAS服务提供的全量SQL洞察,集合了数据库内核研发能力,在对实例性能影响极小(5%以内)的情况下,对全量SQL进行记录,并基于这份全量SQL数据进行分析,而且还提供了多维度的分析、搜索、过滤的能力。
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新,构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间,华为云展示了Serverless与MCP融合创新的解决方案,本期访谈直播,由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持,华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中,探讨处理器生态的关键要素及其联系,分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源,3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源,3步轻松管理成本,帮助提升日常管理效率!
回顾中
热门标签