- Sql:成功解决将sql输出的datetime时间格式转为常规格式 目录 SQL应用案例 1、将sql输出的datetime时间格式转为常规格式 SQL应用案例 1、将sql输出的datetime时间格式转为常规格式 #将sql输出的datetime时间格式转为常规格式,如datetime.datetime(2018, 7, 24,... Sql:成功解决将sql输出的datetime时间格式转为常规格式 目录 SQL应用案例 1、将sql输出的datetime时间格式转为常规格式 SQL应用案例 1、将sql输出的datetime时间格式转为常规格式 #将sql输出的datetime时间格式转为常规格式,如datetime.datetime(2018, 7, 24,...
- hive中的lateral view() 与 explode函数的使用 背景介绍: explode与lateral view在关系型数据库中本身是不该出现的。 因为他的出现本身就是在操作不满足第一范式的数据(每个属性都不可再分)。本身已经违背了数据库的设计原理(不论是业务系统还是数据仓库系统),在面向分析的数据库 数据仓库中,发生了改变。 explode函数可以将一个array... hive中的lateral view() 与 explode函数的使用 背景介绍: explode与lateral view在关系型数据库中本身是不该出现的。 因为他的出现本身就是在操作不满足第一范式的数据(每个属性都不可再分)。本身已经违背了数据库的设计原理(不论是业务系统还是数据仓库系统),在面向分析的数据库 数据仓库中,发生了改变。 explode函数可以将一个array...
- 项目中所有的源码都可以在此链接的仓库中找到:https://github.com/chenhaoxiang/uifuture-ssm 文章目录 第3篇 MyBatis 第9章 MyBatis组件 9.1 SqlSessionFactoryBuilder(工厂构造器) 9.1.1 SqlSessionFactoryBuilder源码 ... 项目中所有的源码都可以在此链接的仓库中找到:https://github.com/chenhaoxiang/uifuture-ssm 文章目录 第3篇 MyBatis 第9章 MyBatis组件 9.1 SqlSessionFactoryBuilder(工厂构造器) 9.1.1 SqlSessionFactoryBuilder源码 ...
- 简介 前一篇文章,笔者探讨了如何使用grafana创建插件,以及制作配置面板,本文介绍如何把sql查询结果内的数据显示到pannel面板内。 数据准备 mysql 数据源 drop table if EXISTS `table1`; CREATE TABLE `table1` ( `id` INT ( 11 ) NOT NULL AUTO_INCREMENT, `create... 简介 前一篇文章,笔者探讨了如何使用grafana创建插件,以及制作配置面板,本文介绍如何把sql查询结果内的数据显示到pannel面板内。 数据准备 mysql 数据源 drop table if EXISTS `table1`; CREATE TABLE `table1` ( `id` INT ( 11 ) NOT NULL AUTO_INCREMENT, `create...
- 11.4.6 集合嵌套查询与嵌套结果(结果集) -《SSM深入解析与项目实战》 项目中所有的源码都可以在此链接的仓库中找到:https://github.com/chenhaoxiang/uifuture-ssm 文章目录 11.4.6 集合嵌套查询与嵌套结果 博客与文章表SQL xml接口使用嵌套查询为博客加载文章 BlogExt实... 11.4.6 集合嵌套查询与嵌套结果(结果集) -《SSM深入解析与项目实战》 项目中所有的源码都可以在此链接的仓库中找到:https://github.com/chenhaoxiang/uifuture-ssm 文章目录 11.4.6 集合嵌套查询与嵌套结果 博客与文章表SQL xml接口使用嵌套查询为博客加载文章 BlogExt实...
- 2.hive的基本概念 1.hive的概念 hive:是hadoop的一个数据仓库。提供了一个类sql的功能,通过写一个sql语句完成数据的分析。 将结构化的数据映射成一张表 结构化数据: 存有关系的数据(关系型数据库)、有一定规则的文本 半结构化数据:非关系模型的、有基本固定结构模式的数据,例如日志文件、XML文档、JSON文档、Email等。 非结构化数据:没有固定模式的... 2.hive的基本概念 1.hive的概念 hive:是hadoop的一个数据仓库。提供了一个类sql的功能,通过写一个sql语句完成数据的分析。 将结构化的数据映射成一张表 结构化数据: 存有关系的数据(关系型数据库)、有一定规则的文本 半结构化数据:非关系模型的、有基本固定结构模式的数据,例如日志文件、XML文档、JSON文档、Email等。 非结构化数据:没有固定模式的...
- Spark sql 的属性 ① 易整合: 可以通过sql开发对应的应用程序, 也可以使用java/scala/phython/R编写的API来开发 ② 统一的数据源访问: 可以使用相同的方式来连接到不同的数据源 // 即: sparkSession.read.文件格式(文件路径) ③ 兼容hive: 可以使用spark sql来操作hive sql ④ 标准的数据连接: sp... Spark sql 的属性 ① 易整合: 可以通过sql开发对应的应用程序, 也可以使用java/scala/phython/R编写的API来开发 ② 统一的数据源访问: 可以使用相同的方式来连接到不同的数据源 // 即: sparkSession.read.文件格式(文件路径) ③ 兼容hive: 可以使用spark sql来操作hive sql ④ 标准的数据连接: sp...
- Kylin 定义 Apache Kylin 是一个开源的分布式分析引擎,提供 Hadoop/Spark 之上的 SQL 查询接口 及多维分析(OLAP)能力以支持超大规模数据,最初由 eBay 开发并贡献至开源社区。它能 在亚秒内查询巨大的 Hive 表 kylin是一个开源的分布式分析引擎, 提供hadoop的sql查询接口 提供spark上的查询接口 提供多维分析OLA... Kylin 定义 Apache Kylin 是一个开源的分布式分析引擎,提供 Hadoop/Spark 之上的 SQL 查询接口 及多维分析(OLAP)能力以支持超大规模数据,最初由 eBay 开发并贡献至开源社区。它能 在亚秒内查询巨大的 Hive 表 kylin是一个开源的分布式分析引擎, 提供hadoop的sql查询接口 提供spark上的查询接口 提供多维分析OLA...
- 最近新项目中用到PostgreSQL,运行测试导入表结构和数据是必须的,用navicat导入sql文件报错,之后查询了一下资料,得到了正确的导入方式: 1.命令行(cmd或powershell)进入PostgreSQL安装目录 cd \PostgreSQL\11\bin 1 2.执行语句psql -d ethgateway -U ethgateway -f D:\... 最近新项目中用到PostgreSQL,运行测试导入表结构和数据是必须的,用navicat导入sql文件报错,之后查询了一下资料,得到了正确的导入方式: 1.命令行(cmd或powershell)进入PostgreSQL安装目录 cd \PostgreSQL\11\bin 1 2.执行语句psql -d ethgateway -U ethgateway -f D:\...
- 项目中所有的源码都可以在此链接的仓库中找到:https://github.com/chenhaoxiang/uifuture-ssm 文章目录 9.2.7 mapperElement方法 9.2.7 mapperElement方法 mappers节点元素进行定义了SQL语句的映射关系(也就是配置SQL语句xml的路径)。可以有多种配... 项目中所有的源码都可以在此链接的仓库中找到:https://github.com/chenhaoxiang/uifuture-ssm 文章目录 9.2.7 mapperElement方法 9.2.7 mapperElement方法 mappers节点元素进行定义了SQL语句的映射关系(也就是配置SQL语句xml的路径)。可以有多种配...
- 关于sparksql Spark SQL是Spark中专门用来处理结构化数据(每一行数据都遵循Schema信息 —— 建表时表的字段及其 类型)的一个模块; 提供了 DataFrame/Dataset 的对分布式数据处理的基本抽象; 是一个分布式的 SQL 引擎。 关于hive 数据仓库,能使用 SQL 读取、写入和管理存在于分布式存储架构上的大数据集; 结构可以映射到已经存储... 关于sparksql Spark SQL是Spark中专门用来处理结构化数据(每一行数据都遵循Schema信息 —— 建表时表的字段及其 类型)的一个模块; 提供了 DataFrame/Dataset 的对分布式数据处理的基本抽象; 是一个分布式的 SQL 引擎。 关于hive 数据仓库,能使用 SQL 读取、写入和管理存在于分布式存储架构上的大数据集; 结构可以映射到已经存储...
- 算子调优一:mapPartitions 普通的 map 算子对 RDD 中的每一个元素进行操作,而 mapPartitions 算子对 RDD 中每一个分区进行操作。如果是普通的 map 算子,假设一个 partition 有 1 万条数据, 那么 map 算子中的 function 要执行 1 万次, 也就是对每个元素进行操作。 图 2-3 map 算子 imag... 算子调优一:mapPartitions 普通的 map 算子对 RDD 中的每一个元素进行操作,而 mapPartitions 算子对 RDD 中每一个分区进行操作。如果是普通的 map 算子,假设一个 partition 有 1 万条数据, 那么 map 算子中的 function 要执行 1 万次, 也就是对每个元素进行操作。 图 2-3 map 算子 imag...
- 项目中所有的源码都可以在此链接的仓库中找到:https://github.com/chenhaoxiang/uifuture-ssm 文章目录 9.4.2 带参数的增删改查方法 DefaultSqlSession类中带参数的增删改查方法 SqlSession增删改查外的方法 ResultHandler接口 9.4.2 带参... 项目中所有的源码都可以在此链接的仓库中找到:https://github.com/chenhaoxiang/uifuture-ssm 文章目录 9.4.2 带参数的增删改查方法 DefaultSqlSession类中带参数的增删改查方法 SqlSession增删改查外的方法 ResultHandler接口 9.4.2 带参...
- 项目中所有的源码都可以在此链接的仓库中找到:https://github.com/chenhaoxiang/uifuture-ssm 文章目录 11.4.1 高级结果映射 查询博客信息SQL 复杂对象模型的ResultMap resultMap元素的子元素说明 resultMap元素属性 11.4.1 高级结果映射 在有... 项目中所有的源码都可以在此链接的仓库中找到:https://github.com/chenhaoxiang/uifuture-ssm 文章目录 11.4.1 高级结果映射 查询博客信息SQL 复杂对象模型的ResultMap resultMap元素的子元素说明 resultMap元素属性 11.4.1 高级结果映射 在有...
- 文章目录 Why PerformanceMySQL PerformanceHow To Optimize MySQLSQL语句优化原理实践使用有问题的SQL分析执行计划优化实战 索引优化选择合适的列构建索引减少索引冗余维护索引 数据库表结构优化选择合适的数据类型范式化与反范式化Schema设计数据库的垂直拆分数据库的水平拆分 系统配置优化服务器系统配置优化MyS... 文章目录 Why PerformanceMySQL PerformanceHow To Optimize MySQLSQL语句优化原理实践使用有问题的SQL分析执行计划优化实战 索引优化选择合适的列构建索引减少索引冗余维护索引 数据库表结构优化选择合适的数据类型范式化与反范式化Schema设计数据库的垂直拆分数据库的水平拆分 系统配置优化服务器系统配置优化MyS...
上滑加载中
推荐直播
-
基于HarmonyOS NEXT应用开发之旅
2025/07/17 周四 19:00-20:00
吴玉佩、刘俊威-华为开发者布道师-高校学生
两位学生华为开发者布道师,连续两届HarmonyOS极客马拉松获奖选手联袂呈现HarmonyOS NEXT开发全景!从基础筑基,到工具提效。为您铺就一条从入门到精通的鸿蒙应用开发之路。无论您是新手开发者,还是经验老手,都能在此收获满满干货,开启您的HarmonyOS NEXT高效、智能开发新篇章!
回顾中
热门标签