- 一、大数据介绍学习目标w 能够了解为什么使用大数据技术 w 能够了解大数据指的是什么1. 为什么使用大数据技术？ 。 数据量越来越大。 数据分析的实时性越来越强 。 数据结果的应用越来越广泛结论：我们需要使用大数据技术2. 大数据的定义大数据是收集、整理、处理大容量数据集，并从中获得结果的技术总称。二、大数据应用领域学习目标w 能够了解大数据应用在哪些领域1. 广告。 广告投放。 广告策略 ... 一、大数据介绍学习目标w 能够了解为什么使用大数据技术 w 能够了解大数据指的是什么1. 为什么使用大数据技术？ 。 数据量越来越大。 数据分析的实时性越来越强 。 数据结果的应用越来越广泛结论：我们需要使用大数据技术2. 大数据的定义大数据是收集、整理、处理大容量数据集，并从中获得结果的技术总称。二、大数据应用领域学习目标w 能够了解大数据应用在哪些领域1. 广告。 广告投放。 广告策略 ...
- JNI'cl'不是内部或外部命令,也不是可运行的程序或批处理文件在进行Java Native Interface (JNI)开发时，有时会遇到一个常见的错误提示：“cl不是内部或外部命令, 也不是可运行的程序或批处理文件”。这个错误通常发生在尝试编译C/C++代码以生成本地库时。本文将探讨这一问题的原因及解决方法。问题背景JNI允许Java代码和其他语言（如C/C++）编写的代码之间... JNI'cl'不是内部或外部命令,也不是可运行的程序或批处理文件在进行Java Native Interface (JNI)开发时，有时会遇到一个常见的错误提示：“cl不是内部或外部命令, 也不是可运行的程序或批处理文件”。这个错误通常发生在尝试编译C/C++代码以生成本地库时。本文将探讨这一问题的原因及解决方法。问题背景JNI允许Java代码和其他语言（如C/C++）编写的代码之间...
- 智能体性能优化：延迟、吞吐量与成本控制🌟 Hello，我是摘星！🌈 在彩虹般绚烂的技术栈中，我是那个永不停歇的色彩收集者。🦋 每一个优化都是我培育的花朵，每一个特性都是我放飞的蝴蝶。🔬 每一次代码审查都是我的显微镜观察，每一次重构都是我的化学实验。🎵 在编程的交响乐中，我既是指挥家也是演奏者。让我们一起，在技术的音乐厅里，奏响属于程序员的华美乐章。摘要作为一名深耕AI领域多年的技术... 智能体性能优化：延迟、吞吐量与成本控制🌟 Hello，我是摘星！🌈 在彩虹般绚烂的技术栈中，我是那个永不停歇的色彩收集者。🦋 每一个优化都是我培育的花朵，每一个特性都是我放飞的蝴蝶。🔬 每一次代码审查都是我的显微镜观察，每一次重构都是我的化学实验。🎵 在编程的交响乐中，我既是指挥家也是演奏者。让我们一起，在技术的音乐厅里，奏响属于程序员的华美乐章。摘要作为一名深耕AI领域多年的技术...
- 作为一名深耕AI领域多年的技术博主摘星，我深刻认识到智能体（AI Agent）性能优化在当今人工智能应用中的关键地位。随着大语言模型和智能体技术的快速发展，如何在保证服务质量的前提下优化系统性能、控制运营成本，已成为每个AI从业者必须面对的核心挑战。在我多年的实践经验中，我发现许多团队在部署智能体系统时往往只关注功能实现，而忽视了性能优化的重要性，导致系统在高并发场景下响应缓慢、成本居高不下，最终 作为一名深耕AI领域多年的技术博主摘星，我深刻认识到智能体（AI Agent）性能优化在当今人工智能应用中的关键地位。随着大语言模型和智能体技术的快速发展，如何在保证服务质量的前提下优化系统性能、控制运营成本，已成为每个AI从业者必须面对的核心挑战。在我多年的实践经验中，我发现许多团队在部署智能体系统时往往只关注功能实现，而忽视了性能优化的重要性，导致系统在高并发场景下响应缓慢、成本居高不下，最终
- 🏆本文收录于「滚雪球学SpringBoot」专栏(全网一个名)，手把手带你零基础入门Spring Boot，从入门到就业，助你早日登顶实现财富自由🚀；同时，欢迎大家关注&&收藏&&订阅！持续更新中，up！up！up！！环境说明：Windows 10 + IntelliJ IDEA 2021.3.2 + Jdk 1.8 📜 前言：为什么选择Spring Batch？随着信息化时代的到来，... 🏆本文收录于「滚雪球学SpringBoot」专栏(全网一个名)，手把手带你零基础入门Spring Boot，从入门到就业，助你早日登顶实现财富自由🚀；同时，欢迎大家关注&&收藏&&订阅！持续更新中，up！up！up！！环境说明：Windows 10 + IntelliJ IDEA 2021.3.2 + Jdk 1.8 📜 前言：为什么选择Spring Batch？随着信息化时代的到来，...
- 华为云MRS（MapReduce Service）中的Hive支持使用Python实现自定义函数（UDF），但原生Python UDF需依赖特定环境配置，而通过TRANSFORM子句调用Python脚本则是更通用且灵活的实现方式。1. Python UDF的原生支持有限支持：华为云MRS Hive的官方文档提到，当前仅支持参数数量≤5的Hive UDF，且... 华为云MRS（MapReduce Service）中的Hive支持使用Python实现自定义函数（UDF），但原生Python UDF需依赖特定环境配置，而通过TRANSFORM子句调用Python脚本则是更通用且灵活的实现方式。1. Python UDF的原生支持有限支持：华为云MRS Hive的官方文档提到，当前仅支持参数数量≤5的Hive UDF，且...
- Spring Batch 是 Spring 生态体系中的一个轻量级、全面的批处理框架，专门用于高效处理大规模数据集（如百万/亿级记录）的批量任务。它提供了可扩展的架构、事务管理、错误恢复和任务调度等核心功能，广泛应用于金融、物流、电商等需要定期执行离线数据处理的场景。以下从核心概念、架构、功能、典型场景及代码示例展开说明： 一、核心概念批处理（Batch Processing）批处理是一种非... Spring Batch 是 Spring 生态体系中的一个轻量级、全面的批处理框架，专门用于高效处理大规模数据集（如百万/亿级记录）的批量任务。它提供了可扩展的架构、事务管理、错误恢复和任务调度等核心功能，广泛应用于金融、物流、电商等需要定期执行离线数据处理的场景。以下从核心概念、架构、功能、典型场景及代码示例展开说明： 一、核心概念批处理（Batch Processing）批处理是一种非...
- 在DataArts作业中，Shell节点可以通过以下方式获取MRS Hive SQL节点执行的结果：使用EL表达式：当MRS Hive SQL节点的输出结果只有一个字段时，可以使用#{StringUtil.split(StringUtil.split(StringUtil.split(Job.getNodeOutput(\"前一节点名\"),\"]\"),\"[\"),\"\\\\\"\")... 在DataArts作业中，Shell节点可以通过以下方式获取MRS Hive SQL节点执行的结果：使用EL表达式：当MRS Hive SQL节点的输出结果只有一个字段时，可以使用#{StringUtil.split(StringUtil.split(StringUtil.split(Job.getNodeOutput(\"前一节点名\"),\"]\"),\"[\"),\"\\\\\"\")...
- 开篇语哈喽，各位小伙伴们，你们好呀，我是喵手。运营社区：C站/掘金/腾讯云/阿里云/华为云/51CTO；欢迎大家常来逛逛 今天我要给大家分享一些自己日常学习到的一些知识点，并以文字的形式跟大家一起交流，互相学习，一个人虽可以走的更快，但一群人可以走的更远。 我是一名后端开发爱好者，工作日常接触到最多的就是Java语言啦，所以我都尽量抽业余时间把自己所学到所会的，通过文章的形式进行输出，... 开篇语哈喽，各位小伙伴们，你们好呀，我是喵手。运营社区：C站/掘金/腾讯云/阿里云/华为云/51CTO；欢迎大家常来逛逛 今天我要给大家分享一些自己日常学习到的一些知识点，并以文字的形式跟大家一起交流，互相学习，一个人虽可以走的更快，但一群人可以走的更远。 我是一名后端开发爱好者，工作日常接触到最多的就是Java语言啦，所以我都尽量抽业余时间把自己所学到所会的，通过文章的形式进行输出，...
- 开篇语哈喽，各位小伙伴们，你们好呀，我是喵手。运营社区：C站/掘金/腾讯云/阿里云/华为云/51CTO；欢迎大家常来逛逛 今天我要给大家分享一些自己日常学习到的一些知识点，并以文字的形式跟大家一起交流，互相学习，一个人虽可以走的更快，但一群人可以走的更远。 我是一名后端开发爱好者，工作日常接触到最多的就是Java语言啦，所以我都尽量抽业余时间把自己所学到所会的，通过文章的形式进行输出，... 开篇语哈喽，各位小伙伴们，你们好呀，我是喵手。运营社区：C站/掘金/腾讯云/阿里云/华为云/51CTO；欢迎大家常来逛逛 今天我要给大家分享一些自己日常学习到的一些知识点，并以文字的形式跟大家一起交流，互相学习，一个人虽可以走的更快，但一群人可以走的更远。 我是一名后端开发爱好者，工作日常接触到最多的就是Java语言啦，所以我都尽量抽业余时间把自己所学到所会的，通过文章的形式进行输出，...
- Java在大数据处理中的应用：从MapReduce到Spark大数据时代的到来让数据的存储、处理和分析变得前所未有的重要。随着数据量的剧增，传统的单机计算方式已经无法满足处理需求。为了解决这个问题，许多分布式计算框架应运而生，其中MapReduce和Apache Spark是两种主流的解决方案。在大数据处理过程中，Java作为一种高效、平台无关的编程语言，扮演了至关重要的角色。本文将带你深... Java在大数据处理中的应用：从MapReduce到Spark大数据时代的到来让数据的存储、处理和分析变得前所未有的重要。随着数据量的剧增，传统的单机计算方式已经无法满足处理需求。为了解决这个问题，许多分布式计算框架应运而生，其中MapReduce和Apache Spark是两种主流的解决方案。在大数据处理过程中，Java作为一种高效、平台无关的编程语言，扮演了至关重要的角色。本文将带你深...
- MRS HBase全局二级索引原理与使用场景 MRS HBase全局二级索引原理与使用场景
- MapReduce是Hadoop平台的基础组件之一，它是一个分布式的计算框架，用于大数据的离线计算，和HDFS、YARN搭配使用。MapReduce主要分为切片File、Map 、shuffle和Reduce四个阶段，数据导入——首先是将数据上传到HDFS上进行切片（一般默认分片是64M）、存储Map阶段——然后会由YARN进行资源的协调与分配，启动job，进行分片操作，一般默认HDFS的一... MapReduce是Hadoop平台的基础组件之一，它是一个分布式的计算框架，用于大数据的离线计算，和HDFS、YARN搭配使用。MapReduce主要分为切片File、Map 、shuffle和Reduce四个阶段，数据导入——首先是将数据上传到HDFS上进行切片（一般默认分片是64M）、存储Map阶段——然后会由YARN进行资源的协调与分配，启动job，进行分片操作，一般默认HDFS的一...
- 注意：此文档只适用于MRS2.X版本，非MRS2.0.0版本文档中对应的路径需要以实际路径为准1 创建RDS实例 创建RDS实例时指定为Postgres数据库可以参考： https://static.huaweicloud.cn/upload/files/pdf/20171208/20171208101321_89598.pdf 注意：1）RDS实例的V... 注意：此文档只适用于MRS2.X版本，非MRS2.0.0版本文档中对应的路径需要以实际路径为准1 创建RDS实例 创建RDS实例时指定为Postgres数据库可以参考： https://static.huaweicloud.cn/upload/files/pdf/20171208/20171208101321_89598.pdf 注意：1）RDS实例的V...
- 什么是Hadoop？Hadoop是一个开源的框架，可编写和运行分布式应用处理大规模数据，是专为离线和大规模数据分析而设计的，Hadoop=HDFS（文件系统，数据存储技术相关）+ Mapreduce（数据处理），Hadoop的数据来源可以是任何形式，在处理半结构化和非结构化数据上与关系型数据库相比有更好的性能，具有更灵活的处理能力，不管任何数据形式最终会转化为key/value，key/va... 什么是Hadoop？Hadoop是一个开源的框架，可编写和运行分布式应用处理大规模数据，是专为离线和大规模数据分析而设计的，Hadoop=HDFS（文件系统，数据存储技术相关）+ Mapreduce（数据处理），Hadoop的数据来源可以是任何形式，在处理半结构化和非结构化数据上与关系型数据库相比有更好的性能，具有更灵活的处理能力，不管任何数据形式最终会转化为key/value，key/va...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签