- 1、 默认分页（1） 创建API时，取数方式为配置方式对于配置方式取数的API来说，当用户配置了API之后，DLM服务会在用户调试/调用的时候生成相应的SQL进行取数，其分页方式为默认分页。例如，如果将API的请求参数、返回参数、排序参数按照以下配置的话：DLM服务生成的SQL为: SELECT c,x FROM tableName Where c = {p} AND x = {h} ... 1、 默认分页（1） 创建API时，取数方式为配置方式对于配置方式取数的API来说，当用户配置了API之后，DLM服务会在用户调试/调用的时候生成相应的SQL进行取数，其分页方式为默认分页。例如，如果将API的请求参数、返回参数、排序参数按照以下配置的话：DLM服务生成的SQL为: SELECT c,x FROM tableName Where c = {p} AND x = {h} ...
- 华为云遇到网络不通、权限不够等问题的解决方案。 华为云遇到网络不通、权限不够等问题的解决方案。
- debug原理和调试技巧 debug原理和调试技巧
- 在大数据时代，数据已经被公认为一项重要的资产，对于拥有大量数据的企业而言，如何整合数据，用好数据，让数据本身为我们产生更大的价值，形成数据资产，将是我们不得不面临的一个课题。而这些数据想要“变现”，就要快速的从数据中获取价值，在数据新时代中，在大量晦涩数据中查找数据所花费的时间多于分析数据的时间，为了使发现数据资产变的更加简单，就需要通过数据目录让各个组织内的晦涩数据变的更加明晰，随着企业体... 在大数据时代，数据已经被公认为一项重要的资产，对于拥有大量数据的企业而言，如何整合数据，用好数据，让数据本身为我们产生更大的价值，形成数据资产，将是我们不得不面临的一个课题。而这些数据想要“变现”，就要快速的从数据中获取价值，在数据新时代中，在大量晦涩数据中查找数据所花费的时间多于分析数据的时间，为了使发现数据资产变的更加简单，就需要通过数据目录让各个组织内的晦涩数据变的更加明晰，随着企业体...
- 本文主要介绍的这个组件是actuator。actuator主要是对springboot应用程序进行监控和管理，简单的说就是通过restful api接口请求来进行监管、审计、健康和数据采集你的应用程序运行的情况1. 开启Actuatorspring-boot-actuator模块提供Spring Boot所有的production-ready特性，启用该特性的最简单方式是添加spring-b... 本文主要介绍的这个组件是actuator。actuator主要是对springboot应用程序进行监控和管理，简单的说就是通过restful api接口请求来进行监管、审计、健康和数据采集你的应用程序运行的情况1. 开启Actuatorspring-boot-actuator模块提供Spring Boot所有的production-ready特性，启用该特性的最简单方式是添加spring-b...
- 配置、运行采集任务是构建数据资产的前提，下面举例说明如何通过配置采集任务达到灵活采集元数据的目的 配置、运行采集任务是构建数据资产的前提，下面举例说明如何通过配置采集任务达到灵活采集元数据的目的
- 1. DAYU数据血缘实现方案在DAYU平台中，数据血缘是通过在数据开发模块中配置数据处理迁移类型的算子产生的。当前是采集算子静态配置产生的血缘和部分算子实例上的血缘。2. 数据血缘支持的算子类型2.1 SQL类型算子目前支持对DLISQL，DWSSQL，HIVESQL算子的血缘解析，可以支持多SQL解析及列级血缘解析，当语句中有临时表时，会自动在数据资产中创建相关的临时表实体。2.... 1. DAYU数据血缘实现方案在DAYU平台中，数据血缘是通过在数据开发模块中配置数据处理迁移类型的算子产生的。当前是采集算子静态配置产生的血缘和部分算子实例上的血缘。2. 数据血缘支持的算子类型2.1 SQL类型算子目前支持对DLISQL，DWSSQL，HIVESQL算子的血缘解析，可以支持多SQL解析及列级血缘解析，当语句中有临时表时，会自动在数据资产中创建相关的临时表实体。2....
- DAYU数据开发常见问题解答，持续更新~ DAYU数据开发常见问题解答，持续更新~
- DAYU主机连接管理介绍 主机连接管理用于管理连接linux虚拟机的配置，该配置用于在脚本或者节点中执行shell命令前置条件 首先得准备一台linux主机，配置了ssh server，可以支持密码或者秘钥登陆创建 在大禹首页点击作业开发进入DLF页面，左侧菜单栏进入到主机连接管理 点击创建会跳转到管理中心界面，此时在次点击创建数据连接，弹出弹窗，... DAYU主机连接管理介绍 主机连接管理用于管理连接linux虚拟机的配置，该配置用于在脚本或者节点中执行shell命令前置条件 首先得准备一台linux主机，配置了ssh server，可以支持密码或者秘钥登陆创建 在大禹首页点击作业开发进入DLF页面，左侧菜单栏进入到主机连接管理 点击创建会跳转到管理中心界面，此时在次点击创建数据连接，弹出弹窗，...
- CDM配合DLF补数据功能，根据日期或者递增ID，配置作业自动分片迁移 CDM配合DLF补数据功能，根据日期或者递增ID，配置作业自动分片迁移
- 本文主要分析了友商的SQL编辑器功能优势，包括一些线下的SQL开发工具。阿里DataWorks1. 编辑器提供用户自定义设置，用户可选择不同主题，设置不同的字体大小，代码提示偏好，是否自动换行等。2. 未保存的代码会进行缓存，如果刷新，会提示用户有代码未保存，让用户选择使用缓存的内容还是后端保存的内容。3. 提供结构视图，将sql语句图形化显示，S代表源表，T代表目标表，tmp代表中间表。... 本文主要分析了友商的SQL编辑器功能优势，包括一些线下的SQL开发工具。阿里DataWorks1. 编辑器提供用户自定义设置，用户可选择不同主题，设置不同的字体大小，代码提示偏好，是否自动换行等。2. 未保存的代码会进行缓存，如果刷新，会提示用户有代码未保存，让用户选择使用缓存的内容还是后端保存的内容。3. 提供结构视图，将sql语句图形化显示，S代表源表，T代表目标表，tmp代表中间表。...
- 通知管理用于在作业运行处于不同的结果状态时，发送邮件短信等消息通知用户 当前支持 运行异常/失败、成功两种状态，作业超时，手动停止属于失败场景，也会发送邮件 作业通知可以在多处进行配置，灵活方便，如下图 用户可以定制周期发送作业统计，用于统计作业的失败详情，失败明细，方便用户了解作业的执行情况作业通知支持多个作业配置同一个smn主题，方便统一管理通知管理经过了成千上万个作业的并发测试，... 通知管理用于在作业运行处于不同的结果状态时，发送邮件短信等消息通知用户 当前支持 运行异常/失败、成功两种状态，作业超时，手动停止属于失败场景，也会发送邮件 作业通知可以在多处进行配置，灵活方便，如下图 用户可以定制周期发送作业统计，用于统计作业的失败详情，失败明细，方便用户了解作业的执行情况作业通知支持多个作业配置同一个smn主题，方便统一管理通知管理经过了成千上万个作业的并发测试，...
- 目前DAYU数据开发脚本开发支持DWS，DLI，HIVE, SparkSQL，Shell，Flink SQL，RDS SQL等脚本的编辑和调试。针对不同类型的脚本，DAYU提供不同的关键字语法提示和补全，不同类型脚本的关键字类型放在附件中供查阅。下面来详细介绍相关功能的使用方法：1. 按Tab键弹出自动补全提示框： 如下图所示，提示加上了类型，便于用户区分是关键字，还是函数，或是数据类型。 ... 目前DAYU数据开发脚本开发支持DWS，DLI，HIVE, SparkSQL，Shell，Flink SQL，RDS SQL等脚本的编辑和调试。针对不同类型的脚本，DAYU提供不同的关键字语法提示和补全，不同类型脚本的关键字类型放在附件中供查阅。下面来详细介绍相关功能的使用方法：1. 按Tab键弹出自动补全提示框： 如下图所示，提示加上了类型，便于用户区分是关键字，还是函数，或是数据类型。 ...
- 今年年初这场突如其来的疫情，让我们早晨醒来打开手机的第一件事情，从刷朋友圈变成了刷每日最新的疫情数据。看看国内外新增确诊人数/现存确诊人数，看看国内外疫情分布的地图。丁香医生也因为快速上线疫情实时动态板块，成为了大家了解疫情发展的首选阵地。 今年年初这场突如其来的疫情，让我们早晨醒来打开手机的第一件事情，从刷朋友圈变成了刷每日最新的疫情数据。看看国内外新增确诊人数/现存确诊人数，看看国内外疫情分布的地图。丁香医生也因为快速上线疫情实时动态板块，成为了大家了解疫情发展的首选阵地。
- 1. Atlas介绍Atlas 是一个可伸缩和可扩展的核心基础治理服务集合 ，使企业能够有效地和高效地满足 Hadoop 中的合规性要求，并允许与整个企业数据生态系统的集成。Apache Atlas为组织提供开放式元数据管理和治理功能，用以构建其数据资产目录，对这些资产进行分类和管理，并为数据科学家，数据分析师和数据治理团队提供围绕这些数据资产的协作功能。2. 特性2.1 元数据类型 & 实... 1. Atlas介绍Atlas 是一个可伸缩和可扩展的核心基础治理服务集合 ，使企业能够有效地和高效地满足 Hadoop 中的合规性要求，并允许与整个企业数据生态系统的集成。Apache Atlas为组织提供开放式元数据管理和治理功能，用以构建其数据资产目录，对这些资产进行分类和管理，并为数据科学家，数据分析师和数据治理团队提供围绕这些数据资产的协作功能。2. 特性2.1 元数据类型 & 实...
上滑加载中
推荐直播
-
GaussDB管理平台TPOPS，DBA高效运维的一站式解决方案2024/12/24 周二 16:30-18:00
Leo 华为云数据库DTSE技术布道师
数据库的复杂运维，是否让你感到头疼不已？今天，华为云GaussDB管理平台将彻底来改观！本期直播，我们将深入探索GaussDB管理平台的TPOPS功能，带你感受一键式部署安装的便捷，和智能化运维管理的高效，让复杂的运维、管理变得简单，让简单变得可靠。
回顾中 -
走进数据库：数据库基础知识精讲2024/12/27 周五 16:00-17:30
Steven 华为云学堂技术讲师
数据管理是数据库的核心任务，本期直播将带领大家一起走进数据库，了解期发展趋势、基础模型、架构演进及相关的技术特点。同时还会介绍数据库对象和相关概念，帮助开发者对数据库使用和实践夯实基础。
去报名
热门标签