- 一、执行计划是什么,有什么作用SQL语句在数据库中,经过SQL解析器时,解析器会分析SQL语句,并根据索引等信息,制定数据查询的步骤顺序。我们可以通过在SQL语句前添加 EXPLAIN关键字来输出执行计划。通过分析执行计划,我们可以了解到:SQL的索引使用情况。连接查询的执行顺序。查询扫描的数据函数。二、SQL执行顺序分析在了解执行计划之前,首先要清楚数据库SQL的执行顺序。SQL书写顺序:... 一、执行计划是什么,有什么作用SQL语句在数据库中,经过SQL解析器时,解析器会分析SQL语句,并根据索引等信息,制定数据查询的步骤顺序。我们可以通过在SQL语句前添加 EXPLAIN关键字来输出执行计划。通过分析执行计划,我们可以了解到:SQL的索引使用情况。连接查询的执行顺序。查询扫描的数据函数。二、SQL执行顺序分析在了解执行计划之前,首先要清楚数据库SQL的执行顺序。SQL书写顺序:...
- 01什么是小文件?生产上,我们往往将Spark SQL作为Hive的替代方案,来获得SQL on Hadoop更出色的性能。因此,本文所讲的是指存储于HDFS中小文件,即指文件的大小远小于HDFS上块(dfs.block.size)大小的文件。02小文件问题的影响一方面,大量的小文件会给Hadoop集群的扩展性和性能带来严重的影响。NameNode在内存中维护整个文件系统的元数据镜像,用户... 01什么是小文件?生产上,我们往往将Spark SQL作为Hive的替代方案,来获得SQL on Hadoop更出色的性能。因此,本文所讲的是指存储于HDFS中小文件,即指文件的大小远小于HDFS上块(dfs.block.size)大小的文件。02小文件问题的影响一方面,大量的小文件会给Hadoop集群的扩展性和性能带来严重的影响。NameNode在内存中维护整个文件系统的元数据镜像,用户...
- 招商银行定位为“金融科技银行”,作为银行业数字化转型的代表和先行者,在持续金融创新之路上坚定不移的探索前行。招行数据仓库架构师曾民在华为云TechWave全球技术峰会上分享了招商银行云化数仓探索之路。 早在1998年,招行就开始引入数据仓库的理念,使用SYBASE搭建数据处理平台,成为国内最早一批开展企业级数据仓库建设的银行。2002年基于DB2构建数据仓库平台,再到2013年重构... 招商银行定位为“金融科技银行”,作为银行业数字化转型的代表和先行者,在持续金融创新之路上坚定不移的探索前行。招行数据仓库架构师曾民在华为云TechWave全球技术峰会上分享了招商银行云化数仓探索之路。 早在1998年,招行就开始引入数据仓库的理念,使用SYBASE搭建数据处理平台,成为国内最早一批开展企业级数据仓库建设的银行。2002年基于DB2构建数据仓库平台,再到2013年重构...
- 大家期待已久的GaussDB(DWS)免费试用活动,来咯!现在填写试用申请问卷,工作人员将根据问卷信息筛选抽取用户赠送价值3578.4元的DWS免费试用机会,名额有限,快来申请吧! 大家期待已久的GaussDB(DWS)免费试用活动,来咯!现在填写试用申请问卷,工作人员将根据问卷信息筛选抽取用户赠送价值3578.4元的DWS免费试用机会,名额有限,快来申请吧!
- 4月15日晚8点,GaussDB(DWS)资深存储引擎专家虫虫&小小酥带来直播【数仓"索引"的正确打开姿势】,B-tree索引、倒排索引等传统技术在老瓶装新酒的今天还能碰撞出哪些新的火花,列存储、稀疏索引、算子下推等新面孔又会给我们带来多少变化和惊喜? 扫描图中二维码或进入论坛参与互动,移动电源、蓝牙音箱等多重好礼等你来拿,更有机会抽取价值3500元的DWS免费试用机会哦~ 4月15日晚8点,GaussDB(DWS)资深存储引擎专家虫虫&小小酥带来直播【数仓"索引"的正确打开姿势】,B-tree索引、倒排索引等传统技术在老瓶装新酒的今天还能碰撞出哪些新的火花,列存储、稀疏索引、算子下推等新面孔又会给我们带来多少变化和惊喜? 扫描图中二维码或进入论坛参与互动,移动电源、蓝牙音箱等多重好礼等你来拿,更有机会抽取价值3500元的DWS免费试用机会哦~
- “云原生”在2020年成为备受瞩目的热词,云原生在确保企业数字化转型中资源快速供给、按需使用的同时,支持敏捷的应用开发、稳定的交付运维,加速企业的敏捷创新,是企业数字化转型、智能化升级的必经之路。本文将讲述在华为云原生2.0技术峰会上,云原生数据仓库GaussDB(DWS)架构师为大家解读数仓的深度技术。 “云原生”在2020年成为备受瞩目的热词,云原生在确保企业数字化转型中资源快速供给、按需使用的同时,支持敏捷的应用开发、稳定的交付运维,加速企业的敏捷创新,是企业数字化转型、智能化升级的必经之路。本文将讲述在华为云原生2.0技术峰会上,云原生数据仓库GaussDB(DWS)架构师为大家解读数仓的深度技术。
- 一、导语这是我们第一次参加图像分类的比赛,很幸运的拿到了季军的名次,这得益于给力的队友和前人宝贵的经验。说实话,我们的很多办法都是借鉴上一届的华为云垃圾分类比赛的优秀团队们的经验。这里也向这些团队的无私分享表示万分感谢。我们的整个思路就是不断的降低过拟合,同时又让模型学到更多关键特征。两个目标之间不断的寻找新的平衡。一方面:数据扩充、增强更简单的模型dropout另一方面:调整图片尺寸更复杂... 一、导语这是我们第一次参加图像分类的比赛,很幸运的拿到了季军的名次,这得益于给力的队友和前人宝贵的经验。说实话,我们的很多办法都是借鉴上一届的华为云垃圾分类比赛的优秀团队们的经验。这里也向这些团队的无私分享表示万分感谢。我们的整个思路就是不断的降低过拟合,同时又让模型学到更多关键特征。两个目标之间不断的寻找新的平衡。一方面:数据扩充、增强更简单的模型dropout另一方面:调整图片尺寸更复杂...
- 在特殊场景下,对部分无法自动重分布的表进行手工重分布 在特殊场景下,对部分无法自动重分布的表进行手工重分布
- 【摘要】 用户需要更多的计算资源或存储资源以满足业务需要时,可以在管理控制台对已有集群,通过增加节点进行扩容操作。 如果您是因集群存储容量不足而扩容集群,建议您在扩容前先执行VACUUM清理和回收存储空间,GaussDB(DWS) 数据仓库中保存的数据在删除后,可能没有释放占用的磁盘空间形成脏数据,导致磁盘浪费。如果执行VACUUM后,已使用存储容量仍然占用过高,您再进行扩容。 【摘要】 用户需要更多的计算资源或存储资源以满足业务需要时,可以在管理控制台对已有集群,通过增加节点进行扩容操作。 如果您是因集群存储容量不足而扩容集群,建议您在扩容前先执行VACUUM清理和回收存储空间,GaussDB(DWS) 数据仓库中保存的数据在删除后,可能没有释放占用的磁盘空间形成脏数据,导致磁盘浪费。如果执行VACUUM后,已使用存储容量仍然占用过高,您再进行扩容。
- 【问题描述】Gds导出数据过程中报错 xxx connect failed【业务背景调研】现场300节点,4个主DN/节点:3节点服务端+3节点备gds服务端,对外提供虚拟ip两两互为主备,每节点1个gds进程,目前此套gds服务端业务偶现周六凌晨3点出现报错需要客户手动重试后规避【问题分析】1、查看gds进程网络建联情况:gds已接受12万个连接,还有9776个连接排队等待gds接收,达到... 【问题描述】Gds导出数据过程中报错 xxx connect failed【业务背景调研】现场300节点,4个主DN/节点:3节点服务端+3节点备gds服务端,对外提供虚拟ip两两互为主备,每节点1个gds进程,目前此套gds服务端业务偶现周六凌晨3点出现报错需要客户手动重试后规避【问题分析】1、查看gds进程网络建联情况:gds已接受12万个连接,还有9776个连接排队等待gds接收,达到...
- 在今天的技术世界里,接入华为云服务API可以比你想象的更简单。作为一名华为云相关的开发者,我深知那些看似繁琐的请求体编写和URL拼接实际上有多么耗时。幸运的是,华为云提供了一整套易于使用的SDK,大大简化了整个开发过程。在这篇文章中,我将分享我的个人经验和实用技巧,希望能帮助像我一样的开发者更高效地使用MRS服务,无论你是刚刚起步还是正在寻找改进开发流程的方法,这里都有你需要的东西。 SDK... 在今天的技术世界里,接入华为云服务API可以比你想象的更简单。作为一名华为云相关的开发者,我深知那些看似繁琐的请求体编写和URL拼接实际上有多么耗时。幸运的是,华为云提供了一整套易于使用的SDK,大大简化了整个开发过程。在这篇文章中,我将分享我的个人经验和实用技巧,希望能帮助像我一样的开发者更高效地使用MRS服务,无论你是刚刚起步还是正在寻找改进开发流程的方法,这里都有你需要的东西。 SDK...
- DWS CPU使用率倾斜场景下应急预案 DWS CPU使用率倾斜场景下应急预案
- DWS CPU整体使用率高应急预案 DWS CPU整体使用率高应急预案
- 近期工作上开始接触了相关容器化的内容,因此整理学习了一堆有关容器化的知识,特此进行分享。首先,理解K8S和容器,首先需要学习以下它的发展历史,才能逐步理解容器的意义和作用。 阶段一:隔离文件——chroot命令的诞生在1979年,Unix系统引入了一个革命性的命令,它允许系统管理员将进程的根目录锁定在指定的位置,从而有效地限制了该进程访问的文件系统范围。这个命令成为了早期容器技术的基石,因为... 近期工作上开始接触了相关容器化的内容,因此整理学习了一堆有关容器化的知识,特此进行分享。首先,理解K8S和容器,首先需要学习以下它的发展历史,才能逐步理解容器的意义和作用。 阶段一:隔离文件——chroot命令的诞生在1979年,Unix系统引入了一个革命性的命令,它允许系统管理员将进程的根目录锁定在指定的位置,从而有效地限制了该进程访问的文件系统范围。这个命令成为了早期容器技术的基石,因为...
- 本文从集群的架构,组成集群的各个实例功能,以及当集群实例出现故障时的问题定位思路三个方面,帮助新人入门GaussDB集群的运维。集群是GaussDB DWS数据库的基础,所以相关的实例组成和功能,对于加深对数据库的理解至关重要。 本文从集群的架构,组成集群的各个实例功能,以及当集群实例出现故障时的问题定位思路三个方面,帮助新人入门GaussDB集群的运维。集群是GaussDB DWS数据库的基础,所以相关的实例组成和功能,对于加深对数据库的理解至关重要。
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新,构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间,华为云展示了Serverless与MCP融合创新的解决方案,本期访谈直播,由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持,华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中,探讨处理器生态的关键要素及其联系,分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源,3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源,3步轻松管理成本,帮助提升日常管理效率!
回顾中
热门标签