- CarbonData中的物化视图的简单介绍及使用方法 CarbonData中的物化视图的简单介绍及使用方法
- 本文主要是通过Spark代码走读来了解spark-submit的流程 本文主要是通过Spark代码走读来了解spark-submit的流程
- 服务功能更新1.【新功能】支持交互式分析能力基于openLooKeng引擎，推出交互式查询能力，兼容业界著名的开源SQL引擎Presto生态，并持续在融合场景查询、跨数据中心/云、数据源扩展、性能、可靠性、安全性等方面发展，让数据治理、使用更简单。2．【新特性】Flink作业支持1.7/1.10多版本新上线Flink多版本能力，用户在提交作业时可以选择使用Flink1.7或者1.10版本，丰... 服务功能更新1.【新功能】支持交互式分析能力基于openLooKeng引擎，推出交互式查询能力，兼容业界著名的开源SQL引擎Presto生态，并持续在融合场景查询、跨数据中心/云、数据源扩展、性能、可靠性、安全性等方面发展，让数据治理、使用更简单。2．【新特性】Flink作业支持1.7/1.10多版本新上线Flink多版本能力，用户在提交作业时可以选择使用Flink1.7或者1.10版本，丰...
- ECS节点添加永久路由方法，亲测有效 ECS节点添加永久路由方法，亲测有效
- 当我们需要同时执行多个任务、并且不会因为其中一个任务的执行时间漫长而陷入阻塞，就需要用到并发，也即多线程。Java中的并发实现主要在java.util.concurrent包中，Future这个概念其实Java里也有。Scala是在Java的基础上实现的函数式编程语言，所以Scala也可以调用Java API。今天会介绍Scala并发中应用比较多的两个概念——Future、ExecutionCon 当我们需要同时执行多个任务、并且不会因为其中一个任务的执行时间漫长而陷入阻塞，就需要用到并发，也即多线程。Java中的并发实现主要在java.util.concurrent包中，Future这个概念其实Java里也有。Scala是在Java的基础上实现的函数式编程语言，所以Scala也可以调用Java API。今天会介绍Scala并发中应用比较多的两个概念——Future、ExecutionCon
- Metastore client自动解析域名问题 Metastore client自动解析域名问题
- 华为云的 数据湖Catalog（DLCatalog）是基于华为云的 统一身份认证（IAM）进行的用户管理和认证，那么对于非华为云IAM体系的外部用户（例如 Hadoop Kerberos 用户），如何来访问DLCatalog服务并实现DLCatalog服务的访问控制呢？对DLCatalog而言，在内部使用IAM的DLCatalog策略实现DLCatalog资源的细粒度访问控制；那么从外部来看... 华为云的 数据湖Catalog（DLCatalog）是基于华为云的 统一身份认证（IAM）进行的用户管理和认证，那么对于非华为云IAM体系的外部用户（例如 Hadoop Kerberos 用户），如何来访问DLCatalog服务并实现DLCatalog服务的访问控制呢？对DLCatalog而言，在内部使用IAM的DLCatalog策略实现DLCatalog资源的细粒度访问控制；那么从外部来看...
- 华为云弹性云服务器的ECS主机有多种flavor可供选择，当用户选择的ECS主机包含两块及以上网卡的时候，如图所示，该机器配有三块网卡，为了与外网通讯，会给某块网卡配置EIP，一般情况下，当配置完EIP后服务即可进行正常的网络访问请求，但有一种情况需要考虑，当服务所监听的网卡和EIP不在一块网卡上时，会出现服务请求失败的情况，此时需要根据实际情况定位问题。首先要看服务进程有没有起来，ps -... 华为云弹性云服务器的ECS主机有多种flavor可供选择，当用户选择的ECS主机包含两块及以上网卡的时候，如图所示，该机器配有三块网卡，为了与外网通讯，会给某块网卡配置EIP，一般情况下，当配置完EIP后服务即可进行正常的网络访问请求，但有一种情况需要考虑，当服务所监听的网卡和EIP不在一块网卡上时，会出现服务请求失败的情况，此时需要根据实际情况定位问题。首先要看服务进程有没有起来，ps -...
- “流动的数据才能产生价值”。我们所有数据的接入、汇聚、治理、分析，最终的目的都是为了把数据更好地开放出去，实现“数据使能”。数据开放主要有三种形式：数据服务、数据共享交换以及可信智能计算。 “流动的数据才能产生价值”。我们所有数据的接入、汇聚、治理、分析，最终的目的都是为了把数据更好地开放出去，实现“数据使能”。数据开放主要有三种形式：数据服务、数据共享交换以及可信智能计算。
- 在规范设计-模型设计功能中，用户除了可以使用我们内置的表属性项以外，也可以按需使用自定义项功能，为表添加属性。表的自定义项也会作为用户的业务资产属性，同步至数据资产模块。目前，支持该项功能的对象有：关系建模-业务表、维度建模-维度(表)、维度建模-事实表以及维度建模-汇总表。如何使用该功能？请参考以下步骤：在规范设计左边导航栏中，选择进入配置中心；在顶部标签中选择模型配置；点击"表自定义项"... 在规范设计-模型设计功能中，用户除了可以使用我们内置的表属性项以外，也可以按需使用自定义项功能，为表添加属性。表的自定义项也会作为用户的业务资产属性，同步至数据资产模块。目前，支持该项功能的对象有：关系建模-业务表、维度建模-维度(表)、维度建模-事实表以及维度建模-汇总表。如何使用该功能？请参考以下步骤：在规范设计左边导航栏中，选择进入配置中心；在顶部标签中选择模型配置；点击"表自定义项"...
- DAYU通过开放架构，联合伙伴，共同帮助客户实现数字化转型。 DAYU的开放性体现在： 支持模型资产沉淀 、 支持通过标准API与伙伴集成。 DAYU 数据开发模块中三种和外部系统对接的方式：提供数据开发API、提供RestClient算子、提供事件驱动调度能力。 DAYU通过开放架构，联合伙伴，共同帮助客户实现数字化转型。 DAYU的开放性体现在： 支持模型资产沉淀 、 支持通过标准API与伙伴集成。 DAYU 数据开发模块中三种和外部系统对接的方式：提供数据开发API、提供RestClient算子、提供事件驱动调度能力。
- 背景经过前面Hive的配置，基本的功能已经准备好。可以通过hive命令直接进入交互式命令行，进行Hive SQL语句的编写、提交、运行等。但还不支持通过JDBC链接。也就无法使用Datagrip一类的SQL IDE。在一些场景下会有开发效率上的影响。为此继续在Windows下配置运行HiveServer2。版本OS：Windows 10 Pro 1903Java：1.8.0_231zooke... 背景经过前面Hive的配置，基本的功能已经准备好。可以通过hive命令直接进入交互式命令行，进行Hive SQL语句的编写、提交、运行等。但还不支持通过JDBC链接。也就无法使用Datagrip一类的SQL IDE。在一些场景下会有开发效率上的影响。为此继续在Windows下配置运行HiveServer2。版本OS：Windows 10 Pro 1903Java：1.8.0_231zooke...
- 问题说明：spring3.0以上版本，若是直接返回字符串（json），所有中文均会变为？？？问题解析：中文字符串乱码是spring3.0以上版本的通用现象，是由于spring mvc默认字符串处理器字符集为ISO_8859_1引起的。如上图所示，spring源码中，mvc注册时，首先加载消息处理器然后如果没有用户自定义的消息处理器，则加载默认消息处理器而默认消息处理器中，字符串处理器 str... 问题说明：spring3.0以上版本，若是直接返回字符串（json），所有中文均会变为？？？问题解析：中文字符串乱码是spring3.0以上版本的通用现象，是由于spring mvc默认字符串处理器字符集为ISO_8859_1引起的。如上图所示，spring源码中，mvc注册时，首先加载消息处理器然后如果没有用户自定义的消息处理器，则加载默认消息处理器而默认消息处理器中，字符串处理器 str...
- 【DAYU数据服务】默认分页与自定义分页的区别https://bbs.huaweicloud.cn/blogs/195014 默认分页切换自定义分页[原版示例][基本配置] 入参定义新增两个参数page_size、page_numpage_size:参数位置：query类型：num是否必填：否默认值：100 page_num:参数位置：query类型：num是否必填：否默认值：1[取数逻辑... 【DAYU数据服务】默认分页与自定义分页的区别https://bbs.huaweicloud.cn/blogs/195014 默认分页切换自定义分页[原版示例][基本配置] 入参定义新增两个参数page_size、page_numpage_size:参数位置：query类型：num是否必填：否默认值：100 page_num:参数位置：query类型：num是否必填：否默认值：1[取数逻辑...
- Spark on RDMA指在Spark计算的shuffle过程中采用RDMA的技术来加快shuffle数据的传输以加快数据处理的计算性能。而目前常用的RDMA设备由IB及Mellanox，本文中采用的为Mellanox的网卡及SparkRDMA套件。1.SparkRDMA及Hibench套件的下载SparkRDMA的下载地址为 https://github.com/Mellanox/Spa... Spark on RDMA指在Spark计算的shuffle过程中采用RDMA的技术来加快shuffle数据的传输以加快数据处理的计算性能。而目前常用的RDMA设备由IB及Mellanox，本文中采用的为Mellanox的网卡及SparkRDMA套件。1.SparkRDMA及Hibench套件的下载SparkRDMA的下载地址为 https://github.com/Mellanox/Spa...
上滑加载中
推荐直播
-
香橙派AIpro的远程推理框架与实验案例2025/07/04 周五 19:00-20:00
郝家胜 -华为开发者布道师-高校教师
AiR推理框架创新采用将模型推理与模型应用相分离的机制，把香橙派封装为AI推理黑盒服务，构建了分布式远程推理框架，并提供多种输入模态、多种输出方式以及多线程支持的高度复用框架，解决了开发板环境配置复杂上手困难、缺乏可视化体验和资源稀缺课程受限等痛点问题，真正做到开箱即用，并支持多种笔记本电脑环境、多种不同编程语言，10行代码即可体验图像分割迁移案例。
回顾中 -
鸿蒙端云一体化应用开发2025/07/10 周四 19:00-20:00
倪红军 华为开发者布道师-高校教师
基于鸿蒙平台终端设备的应用场景越来越多、使用范围越来越广。本课程以云数据库服务为例，介绍云侧项目应用的创建、新建对象类型、新增存储区及向对象类型中添加数据对象的方法，端侧（HarmonyOS平台）一体化工程项目的创建、云数据资源的关联方法及对云侧数据的增删改查等操作方法，为开发端云一体化应用打下坚实基础。
即将直播
热门标签