- 首先先看下任务计划书 ,大概了解了下这个任务的主要工作是通过flink读取Kafka写入GaussDB并且可以写入数据的验证工作。主要是需要花时间熟悉kafka和flink的架构、环境搭建、扩展新功能和开发简单的界面展示效果。下面介绍下适配过程中的一些关键步骤。开发过程首先参考任务计划书给的参考资料: https://kafka.apache.org/和 https://flink.apac... 首先先看下任务计划书 ,大概了解了下这个任务的主要工作是通过flink读取Kafka写入GaussDB并且可以写入数据的验证工作。主要是需要花时间熟悉kafka和flink的架构、环境搭建、扩展新功能和开发简单的界面展示效果。下面介绍下适配过程中的一些关键步骤。开发过程首先参考任务计划书给的参考资料: https://kafka.apache.org/和 https://flink.apac...
- Flume 是一个分布式、可靠、高可用的海量日志采集、聚合和传输的系统。它最初是 Cloudera 公司开发的,用于在 Hadoop 生态系统中有效地收集、移动和聚合大量的日志数据。主要功能是从各种数据源(如服务器上的日志文件、网络端口、消息队列等)采集数据,并将这些数据传输到数据存储系统进行进一步的分析和处理。 Flume 是一个分布式、可靠、高可用的海量日志采集、聚合和传输的系统。它最初是 Cloudera 公司开发的,用于在 Hadoop 生态系统中有效地收集、移动和聚合大量的日志数据。主要功能是从各种数据源(如服务器上的日志文件、网络端口、消息队列等)采集数据,并将这些数据传输到数据存储系统进行进一步的分析和处理。
- 1. 背景介绍 开源for Huawei(参考:https://developer.huaweicloud.cn/programs/opensource/contributing/)通过和公司、高校、社区的开发者合作,完成鲲鹏、昇腾、欧拉、鸿蒙、高斯、云服务等与开源软件的适配开发,帮助繁荣Huawei的基础生态,同时让开源软件能够更加简单、高效的运行于华为云上。 1. 背景介绍 开源for Huawei(参考:https://developer.huaweicloud.cn/programs/opensource/contributing/)通过和公司、高校、社区的开发者合作,完成鲲鹏、昇腾、欧拉、鸿蒙、高斯、云服务等与开源软件的适配开发,帮助繁荣Huawei的基础生态,同时让开源软件能够更加简单、高效的运行于华为云上。
- Gemma 2模型在处理复杂的语言结构、生成丰富多样的文本内容以及理解和生成多种语言方面,都展现出了卓越的性能和广泛的应用潜力。本任务的主要目的是完成 Gemma 2适配 Ascend 和 Kunpeng 处理器并部署 Gemma 2模型在处理复杂的语言结构、生成丰富多样的文本内容以及理解和生成多种语言方面,都展现出了卓越的性能和广泛的应用潜力。本任务的主要目的是完成 Gemma 2适配 Ascend 和 Kunpeng 处理器并部署
- Apache HertzBeat 是一个易用友好的开源实时监控告警系统,无需 Agent,高性能集群,兼容 Prometheus,提供强大的自定义监控和状态页构建能力。本任务的主要目的是让 HertzBeat 能够通过 JDBC 协议支持 GaussDB 数据库,并完成功能验证。 Apache HertzBeat 是一个易用友好的开源实时监控告警系统,无需 Agent,高性能集群,兼容 Prometheus,提供强大的自定义监控和状态页构建能力。本任务的主要目的是让 HertzBeat 能够通过 JDBC 协议支持 GaussDB 数据库,并完成功能验证。
- 本任务的主要目的是让ClickHouse支持华为云GaussDB服务,拓展GaussDB影响力,方便ClickHouse的用户使用华为云服务时能够顺利对接ClickHouse服务。同时,该任务也可以为一些项目迁移时候的改造适配打下基础,方便用户在云上做方案选型的时候,可以选择GaussDB服务,缩短开发周期,保证项目迁移进度,降低开发上云成本 。 本任务的主要目的是让ClickHouse支持华为云GaussDB服务,拓展GaussDB影响力,方便ClickHouse的用户使用华为云服务时能够顺利对接ClickHouse服务。同时,该任务也可以为一些项目迁移时候的改造适配打下基础,方便用户在云上做方案选型的时候,可以选择GaussDB服务,缩短开发周期,保证项目迁移进度,降低开发上云成本 。
- K3s 是一个轻量级的 Kubernetes 发行版,专为边缘计算、IoT 和其他资源受限的环境设计。它简化了 Kubernetes 的安装和管理,同时保持了 Kubernetes 的核心功能。 K3s 是一个轻量级的 Kubernetes 发行版,专为边缘计算、IoT 和其他资源受限的环境设计。它简化了 Kubernetes 的安装和管理,同时保持了 Kubernetes 的核心功能。
- Flyte 是一个开源数据编排器,有助于构建生产级数据和ML管道。它是为可扩展性和可重复性而构建的,利用Kubernetes作为其底层平台。通过Flyte,用户团队可以使用Python SDK构建管道,并将其无缝部署在云和本地环境中,从而实现分布式处理和高效的资源利用。 Flyte 是一个开源数据编排器,有助于构建生产级数据和ML管道。它是为可扩展性和可重复性而构建的,利用Kubernetes作为其底层平台。通过Flyte,用户团队可以使用Python SDK构建管道,并将其无缝部署在云和本地环境中,从而实现分布式处理和高效的资源利用。
- go-zero 是一个集成了各种工程实践的 web 和 rpc 框架,它通过弹性设计保障了大并发服务端的稳定性,经受了充分的实战检验。本任务的主要目的是帮助开源开发者体验开源 for Huawei 的过程,并熟悉 GaussDB 基础的开发能力。开发者需要在 DEMO 基础上,集成 ORM 框架并访问 GaussDB。 go-zero 是一个集成了各种工程实践的 web 和 rpc 框架,它通过弹性设计保障了大并发服务端的稳定性,经受了充分的实战检验。本任务的主要目的是帮助开源开发者体验开源 for Huawei 的过程,并熟悉 GaussDB 基础的开发能力。开发者需要在 DEMO 基础上,集成 ORM 框架并访问 GaussDB。
- pandas-ai适配鲲鹏开源验证任务心得根据任务计划书(https://onebox.huawei.cn/p/fef4f00a5a7e67aba890b0b5573d0e4b)了解任务内容,主要目的是将 pandas-ai项目适配至华为的 鲲鹏(CPU),确保其在鲲鹏上能够正常运行,并让用户能够以自然语言向数据提问。开发过程明确目的后开始熟悉项目,pandas-ai模型的github网址... pandas-ai适配鲲鹏开源验证任务心得根据任务计划书(https://onebox.huawei.cn/p/fef4f00a5a7e67aba890b0b5573d0e4b)了解任务内容,主要目的是将 pandas-ai项目适配至华为的 鲲鹏(CPU),确保其在鲲鹏上能够正常运行,并让用户能够以自然语言向数据提问。开发过程明确目的后开始熟悉项目,pandas-ai模型的github网址...
- VLLM适配昇腾开源验证任务心得 首先看了一下任务计划书:https://bbs.huaweicloud.cn/blogs/440479,主要目的是将 VLLM项目适配至华为的 Ascend(昇腾)和 Kunpeng(鲲鹏)处理器,确保其在这些硬件平台上的高效运行,也就是说验证VLLM能不能在 Ascend(昇腾)和 Kunpeng(鲲鹏)处理器中运行。 开发过程明确目的后开始熟悉模型,V... VLLM适配昇腾开源验证任务心得 首先看了一下任务计划书:https://bbs.huaweicloud.cn/blogs/440479,主要目的是将 VLLM项目适配至华为的 Ascend(昇腾)和 Kunpeng(鲲鹏)处理器,确保其在这些硬件平台上的高效运行,也就是说验证VLLM能不能在 Ascend(昇腾)和 Kunpeng(鲲鹏)处理器中运行。 开发过程明确目的后开始熟悉模型,V...
- 1 背景介绍开源for Huawei(参考:https://developer.huaweicloud.cn/programs/opensource/contributing/) 通过和公司、高校、社区的开发者合作,完成鲲鹏、昇腾、欧拉、鸿蒙、高斯、云服务等与开源软件的适配开发,帮助繁荣Huawei的基础生态,同时让开源软件能够更加简单、高效的运行于华为云上。开始之前,开发者可以下载 开... 1 背景介绍开源for Huawei(参考:https://developer.huaweicloud.cn/programs/opensource/contributing/) 通过和公司、高校、社区的开发者合作,完成鲲鹏、昇腾、欧拉、鸿蒙、高斯、云服务等与开源软件的适配开发,帮助繁荣Huawei的基础生态,同时让开源软件能够更加简单、高效的运行于华为云上。开始之前,开发者可以下载 开...
- 华为技术专家出品,《华为开发者空间案例指南》带你玩转云上20+场景应用开发;分布式训练中的常见的三种模型并行(MP),即流水并行(PP)张量并行(TP)和专家并行(EP)的概念以及通信模式;解读BTree索引和UBTree索引的存储结构,探讨它们在读写并发、写写并发以及MVCC(多版本并发控制)能力方面的优势,并展望它们的未来演进... 华为技术专家出品,《华为开发者空间案例指南》带你玩转云上20+场景应用开发;分布式训练中的常见的三种模型并行(MP),即流水并行(PP)张量并行(TP)和专家并行(EP)的概念以及通信模式;解读BTree索引和UBTree索引的存储结构,探讨它们在读写并发、写写并发以及MVCC(多版本并发控制)能力方面的优势,并展望它们的未来演进...
- 本任务的主要目的是让Helm支持华为云OBS服务,chart(chart就是一个描述Kubernetes相关资源的文件集合)存储到华为云OBS上,拓展OBS服务的影响力。方便Helm的用户使用华为云服务时能够顺利对接OBS服务。 本任务的主要目的是让Helm支持华为云OBS服务,chart(chart就是一个描述Kubernetes相关资源的文件集合)存储到华为云OBS上,拓展OBS服务的影响力。方便Helm的用户使用华为云服务时能够顺利对接OBS服务。
- Telegraf适配GaussDB开源开发任务心得 Telegraf适配GaussDB开源开发任务心得
上滑加载中
推荐直播
-
香橙派AIpro的远程推理框架与实验案例
2025/07/04 周五 19:00-20:00
郝家胜 -华为开发者布道师-高校教师
AiR推理框架创新采用将模型推理与模型应用相分离的机制,把香橙派封装为AI推理黑盒服务,构建了分布式远程推理框架,并提供多种输入模态、多种输出方式以及多线程支持的高度复用框架,解决了开发板环境配置复杂上手困难、缺乏可视化体验和资源稀缺课程受限等痛点问题,真正做到开箱即用,并支持多种笔记本电脑环境、多种不同编程语言,10行代码即可体验图像分割迁移案例。
回顾中 -
鸿蒙端云一体化应用开发
2025/07/10 周四 19:00-20:00
倪红军 华为开发者布道师-高校教师
基于鸿蒙平台终端设备的应用场景越来越多、使用范围越来越广。本课程以云数据库服务为例,介绍云侧项目应用的创建、新建对象类型、新增存储区及向对象类型中添加数据对象的方法,端侧(HarmonyOS平台)一体化工程项目的创建、云数据资源的关联方法及对云侧数据的增删改查等操作方法,为开发端云一体化应用打下坚实基础。
即将直播
热门标签