- TPCDS是模拟OLAP应用的典型场景,因其贴近真实场景,且有工具直接生成数据,而成为SQL引擎测试组最常用的测试模型。,本文将从几个角度分别进行分析:模型、场景、语句、数据 TPCDS是模拟OLAP应用的典型场景,因其贴近真实场景,且有工具直接生成数据,而成为SQL引擎测试组最常用的测试模型。,本文将从几个角度分别进行分析:模型、场景、语句、数据
- 承接上一篇博客《GaussDB(DWS)性能调优系列基础篇一:万物之始analyze统计信息》,在GaussDB(DWS)的优化器根据analyze统计信息生成计划后,这里继续介绍如何详细解读计划以及计划的执行过程,从中发现可能存在的性能瓶颈点及其产生的原因。 承接上一篇博客《GaussDB(DWS)性能调优系列基础篇一:万物之始analyze统计信息》,在GaussDB(DWS)的优化器根据analyze统计信息生成计划后,这里继续介绍如何详细解读计划以及计划的执行过程,从中发现可能存在的性能瓶颈点及其产生的原因。
- 今天华为云服务器到期,已经做释放,原本想做文章推荐。但是因某种原因,目前暂时只做到离线文章画像。后期只能使用笔记本电脑来做。电脑配置cpu为4核8线程,内存32G,只能够开5台虚拟机和PyCharm。刚好能搭建一套高可用hadoop集群。虽然这次没完成,但还是使用很多软件,例如:1. 1.sible部署——2.docker——3. Keepalived——4. Proxy... 今天华为云服务器到期,已经做释放,原本想做文章推荐。但是因某种原因,目前暂时只做到离线文章画像。后期只能使用笔记本电脑来做。电脑配置cpu为4核8线程,内存32G,只能够开5台虚拟机和PyCharm。刚好能搭建一套高可用hadoop集群。虽然这次没完成,但还是使用很多软件,例如:1. 1.sible部署——2.docker——3. Keepalived——4. Proxy...
- 学完博客,您将能够 熟悉GaussDB(DWS)数据库安装补丁、升级、扩容流程 熟悉GaussDB(DWS)数据库安装补丁、升级、扩容前检查; 熟悉GaussDB(DWS)数据库安装补丁、升级、扩容具体过程; 熟悉GaussDB(DWS)数据库安装补丁、升级、扩容问题排查。 学完博客,您将能够 熟悉GaussDB(DWS)数据库安装补丁、升级、扩容流程 熟悉GaussDB(DWS)数据库安装补丁、升级、扩容前检查; 熟悉GaussDB(DWS)数据库安装补丁、升级、扩容具体过程; 熟悉GaussDB(DWS)数据库安装补丁、升级、扩容问题排查。
- 1. 采用的是Python黑马头条推荐系统项目这个案例,选择它是用python完成。相关视频可以哔哩哔哩上找到。新建文章数据库,存储文章数据、中间计算结果以及文章画像结果 2. 以为资源配置高,想把25个频道循环分频道做文章画像。因为pyspark下把变量传递到sql语句里,使用$是不行... 1. 采用的是Python黑马头条推荐系统项目这个案例,选择它是用python完成。相关视频可以哔哩哔哩上找到。新建文章数据库,存储文章数据、中间计算结果以及文章画像结果 2. 以为资源配置高,想把25个频道循环分频道做文章画像。因为pyspark下把变量传递到sql语句里,使用$是不行...
- GaussDB在执行SQL语句时,会对其性能表现进行分析和记录,通过视图和函数等手段呈现给用户。本文将简要介绍如何利用GaussDB提供的这些“第一手”数据,分析和定位SQL语句中存在的性能问题,识别和消除SQL中的“坏味道”。 GaussDB在执行SQL语句时,会对其性能表现进行分析和记录,通过视图和函数等手段呈现给用户。本文将简要介绍如何利用GaussDB提供的这些“第一手”数据,分析和定位SQL语句中存在的性能问题,识别和消除SQL中的“坏味道”。
- 1 什么是Unique SQL用户执行SQL语句时,每一个SQL语句文本都会进入解析器(Parser),生成“解析树”(parse tree)。遍历解析树中各个结点,忽略其中的常数值,以一定的算法结合树中的各结点,计算出来一个整数值,用来唯一标识这一类SQL,这个整数值被称为Unique SQL ID,Unique SQL ID相同的SQL语句属于同一个“Unique SQL”。例如,用户... 1 什么是Unique SQL用户执行SQL语句时,每一个SQL语句文本都会进入解析器(Parser),生成“解析树”(parse tree)。遍历解析树中各个结点,忽略其中的常数值,以一定的算法结合树中的各结点,计算出来一个整数值,用来唯一标识这一类SQL,这个整数值被称为Unique SQL ID,Unique SQL ID相同的SQL语句属于同一个“Unique SQL”。例如,用户...
- 1. 测试supervisorctl能否正常运行collect_click.sh脚本1. 上传数据到/user/hive/warehouse//opt/modules/hadoop/bin/hdfs dfs -put /opt/datas/backup/toutiao.db /user/hive/warehouse//opt/modules/hadoop/bin/hd... 1. 测试supervisorctl能否正常运行collect_click.sh脚本1. 上传数据到/user/hive/warehouse//opt/modules/hadoop/bin/hdfs dfs -put /opt/datas/backup/toutiao.db /user/hive/warehouse//opt/modules/hadoop/bin/hd...
- 关系型数据库or非关系型数据库,开源or自研,傻傻分不清楚。 关系型数据库or非关系型数据库,开源or自研,傻傻分不清楚。
- 1. 用户日志如何收集,配置flume,通过flume将业务数据服务器mas1的日志收集到hadoop服务器hdfs的hive中。通过向userClick.log数据进行测试安装Supervisor,出现无法在线安装。使用离线。先下载下来,再安装。启动脚本:2. 配置kafka 参照https://www.cnblogs.com/Dev0ps/p/11259324.h... 1. 用户日志如何收集,配置flume,通过flume将业务数据服务器mas1的日志收集到hadoop服务器hdfs的hive中。通过向userClick.log数据进行测试安装Supervisor,出现无法在线安装。使用离线。先下载下来,再安装。启动脚本:2. 配置kafka 参照https://www.cnblogs.com/Dev0ps/p/11259324.h...
- GaussDB(DWS)的表被视图引用的话,特定场景下,部分DDL操作是不能直接执行的,比如修改被视图引用的字段的类型,删除表等,而新增字段是可以操作,主要原因是视图引用了表的字段,修改的话视图也需要变化 GaussDB(DWS)的表被视图引用的话,特定场景下,部分DDL操作是不能直接执行的,比如修改被视图引用的字段的类型,删除表等,而新增字段是可以操作,主要原因是视图引用了表的字段,修改的话视图也需要变化
- 最近开始接触GaussDB(DWS),在查询一些表信息的时候,总是忘记字典表是啥,虽然说用的多就记住了,但是还没记住的时候,总是要查询产品文档或之前的笔记,挺麻烦的。同时比如优化SQL的时候,总会需要综合多方面的信息,就需要多个字典表,比如表的分布列,分布方式,空间大小,倾斜率,有没收集统计信息等等,还需要统计一起,那就需要更多工作了。决定写一个shell脚本来减轻工作量。 最近开始接触GaussDB(DWS),在查询一些表信息的时候,总是忘记字典表是啥,虽然说用的多就记住了,但是还没记住的时候,总是要查询产品文档或之前的笔记,挺麻烦的。同时比如优化SQL的时候,总会需要综合多方面的信息,就需要多个字典表,比如表的分布列,分布方式,空间大小,倾斜率,有没收集统计信息等等,还需要统计一起,那就需要更多工作了。决定写一个shell脚本来减轻工作量。
- 1.虽然提供的数据不需要使用sqoop来倒入到hive,但还是根据案例部署sqoop.启动sqoop出现上面情况,解决方法如下:方法一:方法二:https://wenda.chinahadoop.cn/question/2121 (本人没测试过)修改$SQOOP_HOME/bin/configure-sqoop注释掉HCatalog,Accumulo检查$HCAT_HOME$ACCUMUL... 1.虽然提供的数据不需要使用sqoop来倒入到hive,但还是根据案例部署sqoop.启动sqoop出现上面情况,解决方法如下:方法一:方法二:https://wenda.chinahadoop.cn/question/2121 (本人没测试过)修改$SQOOP_HOME/bin/configure-sqoop注释掉HCatalog,Accumulo检查$HCAT_HOME$ACCUMUL...
- gaussdb gaussdb
- 在GaussDB(DWS)上实现ORACLE的触发器 在GaussDB(DWS)上实现ORACLE的触发器
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新,构建AI应用全新智能中枢
2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间,华为云展示了Serverless与MCP融合创新的解决方案,本期访谈直播,由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持,华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考
2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中,探讨处理器生态的关键要素及其联系,分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源,3步轻松管理企业成本
2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源,3步轻松管理成本,帮助提升日常管理效率!
回顾中
热门标签