- 1. 前言 随着《数据安全法》《个人信息保护法》的落地,数仓中敏感数据(如薪资、个人信息)的静态加密成为企业合规刚需。本文以 DWS 细粒度透明加密为例,拆解其原理、配置、实践案例及约束,帮你快速落地数仓数据安全防护。适用版本:【9.1.1及以上】 透明数据加密是数据库内核层面的数据保护机制。其“透明性”体现在对上层应用完全无感知——应用程序无需任何改造,即可像操作普通数据一样进行读写... 1. 前言 随着《数据安全法》《个人信息保护法》的落地,数仓中敏感数据(如薪资、个人信息)的静态加密成为企业合规刚需。本文以 DWS 细粒度透明加密为例,拆解其原理、配置、实践案例及约束,帮你快速落地数仓数据安全防护。适用版本:【9.1.1及以上】 透明数据加密是数据库内核层面的数据保护机制。其“透明性”体现在对上层应用完全无感知——应用程序无需任何改造,即可像操作普通数据一样进行读写...
- BigQuery数据迁移至华为DWS数仓 1. 前言 2. 准备工作 3. 将BigQuery的数据导出到Cloud Storage 3.1 DDL导出 3.2 数据导出 3.3 验证导出 4. 将Cloud Storage上的数据同步到华为云OBS 5. 创建用于装载数据的目标表 6. 将OBS数据导入DWS数仓 ... BigQuery数据迁移至华为DWS数仓 1. 前言 2. 准备工作 3. 将BigQuery的数据导出到Cloud Storage 3.1 DDL导出 3.2 数据导出 3.3 验证导出 4. 将Cloud Storage上的数据同步到华为云OBS 5. 创建用于装载数据的目标表 6. 将OBS数据导入DWS数仓 ...
- 【HCS】管控面升级注册细粒度工步报错定位过程 【HCS】管控面升级注册细粒度工步报错定位过程
- 数据库的存储模型直接影响数据处理的性能与效率,本文对当前dws支持的表类型进行介绍,从存储格式进行分类,对各种类型的表的适用场景进行介绍,并提供了一些简单的使用实例,方便业务进行表选型和开发。 数据库的存储模型直接影响数据处理的性能与效率,本文对当前dws支持的表类型进行介绍,从存储格式进行分类,对各种类型的表的适用场景进行介绍,并提供了一些简单的使用实例,方便业务进行表选型和开发。
- 本文主要介绍DWS中user和role的区别及user和schema如何解耦。 本文主要介绍DWS中user和role的区别及user和schema如何解耦。
- 【建议使用版本】910及以上TOPSQL全开场景【建议使用场景】CPU/内存/IO等资源偶尔非常高,初步分析不是一两个烂SQL导致,怀疑业务请求量上涨【分析步骤】(1)通过TOPSQL查询每个用户不同类型请求每分钟的请求次数,参考如下SQL:select to_char(start_time,‘yyyy-mm-dd hh24:mi’),username,stmt_type,count(*) ... 【建议使用版本】910及以上TOPSQL全开场景【建议使用场景】CPU/内存/IO等资源偶尔非常高,初步分析不是一两个烂SQL导致,怀疑业务请求量上涨【分析步骤】(1)通过TOPSQL查询每个用户不同类型请求每分钟的请求次数,参考如下SQL:select to_char(start_time,‘yyyy-mm-dd hh24:mi’),username,stmt_type,count(*) ...
- 容灾正常运行,但是界面显示容灾异常 容灾正常运行,但是界面显示容灾异常
- 1、问题现象 创建容灾后任务后,容灾启动失败。查看dwscontroller日志disaster_recovery.log发现有scp失败的错误。检查主备集群中节点/home/Ruby/.ssh/passphrase.file中的私钥和authorized_keys中的公钥,发现不一致。2、定位步骤及解决方案 步骤1 主集群显示容灾异常,登录实例节点,vi log/di... 1、问题现象 创建容灾后任务后,容灾启动失败。查看dwscontroller日志disaster_recovery.log发现有scp失败的错误。检查主备集群中节点/home/Ruby/.ssh/passphrase.file中的私钥和authorized_keys中的公钥,发现不一致。2、定位步骤及解决方案 步骤1 主集群显示容灾异常,登录实例节点,vi log/di...
- DWS文档持续提升信息体验,原理场景全解析,SQL语法精解,语法兼容更清晰,API优化+实战案例,助您高效用数。 DWS文档持续提升信息体验,原理场景全解析,SQL语法精解,语法兼容更清晰,API优化+实战案例,助您高效用数。
- 本文档是GaussDB备份恢复用户指南文档,主要描述了如何正确地使用CBR对GaussDB数据库进行数据备份与数据恢复的方法。 本文档是GaussDB备份恢复用户指南文档,主要描述了如何正确地使用CBR对GaussDB数据库进行数据备份与数据恢复的方法。
- 1. 常用元信息 2. 查看视图reloptions --推荐turbo+opt格式,刷新性能最优 3. 查看分区映射关系 4. 查看刷新耗时 5. 提取拓扑关系 --可视化分析拓扑关系 6. 在线删除物化视图 7. 使用不稳定函数 --如何强制使用to_date等不稳定函数 8. 配置级联刷新 --级联刷新节省资源,数据新鲜度一致 9. 级联修改定义 --辅助级联修改 1. 常用元信息 2. 查看视图reloptions --推荐turbo+opt格式,刷新性能最优 3. 查看分区映射关系 4. 查看刷新耗时 5. 提取拓扑关系 --可视化分析拓扑关系 6. 在线删除物化视图 7. 使用不稳定函数 --如何强制使用to_date等不稳定函数 8. 配置级联刷新 --级联刷新节省资源,数据新鲜度一致 9. 级联修改定义 --辅助级联修改
- [HCS]数仓集群因裸金属系统盘非MBR格式导致集群下发失败问题定位过程 [HCS]数仓集群因裸金属系统盘非MBR格式导致集群下发失败问题定位过程
- CPU限额未限制住CPU排查处理办法 CPU限额未限制住CPU排查处理办法
- mmap_sem锁产生的问题分析及优化 mmap_sem锁产生的问题分析及优化
- DWS roach备份调用顺序:FI管控面-> GaussRoach.py(备份场景使用)/SyncDataToStby.py(容灾场景使用) -> gs_roach DWS roach备份调用顺序:FI管控面-> GaussRoach.py(备份场景使用)/SyncDataToStby.py(容灾场景使用) -> gs_roach
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新,构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间,华为云展示了Serverless与MCP融合创新的解决方案,本期访谈直播,由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持,华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中,探讨处理器生态的关键要素及其联系,分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源,3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源,3步轻松管理成本,帮助提升日常管理效率!
回顾中
热门标签