- 听说!!! 28元起!零基础!40分钟!就能get一种云计算技能? 不用报班不用去现场不用高额学费,在线就能实操练习? 考取华为云官方微认证,可以获得面试优先推荐机会? 现在学习,完成考试,还能领取荣耀手环等好礼? OMG!这就是传说中的久旱逢甘霖! 为了解决技术爱好者、高校学生、社会从业者想要学习华为云先进的技术,华为云微认证一站式提供MOOC视频学习+场景化在线实验+自主在线考试+官方证... 听说!!! 28元起!零基础!40分钟!就能get一种云计算技能? 不用报班不用去现场不用高额学费,在线就能实操练习? 考取华为云官方微认证,可以获得面试优先推荐机会? 现在学习,完成考试,还能领取荣耀手环等好礼? OMG!这就是传说中的久旱逢甘霖! 为了解决技术爱好者、高校学生、社会从业者想要学习华为云先进的技术,华为云微认证一站式提供MOOC视频学习+场景化在线实验+自主在线考试+官方证...
- 学习hadoop,必不可少的就是编写 MapReduce 程序。当然,对于简单的分析程序,我们只需一个MapReduce任务就能搞定,然而对于比较复杂的分析程序,我们可能需要多个Job或者多个Map或者Reduce进行分析计算。 本次主要说明的是多个 Job 或者多个 MapReduce 的编程形式。 学习hadoop,必不可少的就是编写 MapReduce 程序。当然,对于简单的分析程序,我们只需一个MapReduce任务就能搞定,然而对于比较复杂的分析程序,我们可能需要多个Job或者多个Map或者Reduce进行分析计算。 本次主要说明的是多个 Job 或者多个 MapReduce 的编程形式。
- SparkStreaming性能调优 SparkStreaming性能调优
- 从Hadoop MR到Spark 从Hadoop MR到Spark
- Apache Spark™ is a fast and general engine for large-scale data processing. Apache Spark™ is a fast and general engine for large-scale data processing.
- Storm集群的架构图 Storm集群的架构图
- Flume是一个分布式、可靠、和高可用的海量日志聚合的系统,支持在系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。 Flume是一个分布式、可靠、和高可用的海量日志聚合的系统,支持在系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。
- Hive最初是Facebook为了满足对海量社交网络数据的管理和机器学习的需求而产生和发展的。马云在退休的时候说互联网现在进入了大数据时代,大数据是现在互联网的趋势,而hadoop就是大数据时代里的核心技术,但是hadoop的mapreduce操作专业性太强,所以facebook在这些基础上开发了hive框架,毕竟世界上会sql的人比会java的人多的多,hive可以说是学习hadoop相关技术的 Hive最初是Facebook为了满足对海量社交网络数据的管理和机器学习的需求而产生和发展的。马云在退休的时候说互联网现在进入了大数据时代,大数据是现在互联网的趋势,而hadoop就是大数据时代里的核心技术,但是hadoop的mapreduce操作专业性太强,所以facebook在这些基础上开发了hive框架,毕竟世界上会sql的人比会java的人多的多,hive可以说是学习hadoop相关技术的
- 1 背景介绍华为云对象存储服务可以提供稳定、安全、高效、易用的云存储服务。当前,华为云OBS可以与Hadoop和Spark大数据生态进行对接,为用户提供计算存储分离的大数据解决方案。该方案具有高性能、低成本的优势,且无扩容问题,使用维护更加方便简洁。本操作指导书旨在帮助华为云用户在开源大数据平台Hadoop和Spark上快速对接OBSFileSystem组件,更好的使用华为云对象存... 1 背景介绍华为云对象存储服务可以提供稳定、安全、高效、易用的云存储服务。当前,华为云OBS可以与Hadoop和Spark大数据生态进行对接,为用户提供计算存储分离的大数据解决方案。该方案具有高性能、低成本的优势,且无扩容问题,使用维护更加方便简洁。本操作指导书旨在帮助华为云用户在开源大数据平台Hadoop和Spark上快速对接OBSFileSystem组件,更好的使用华为云对象存...
- 一.市场背景企业大量的数据在各种纸质文档中,如何保证海量数据的存储与协作共享,以及解决企业纸质文档数据集中管理及安全问题,必须彻底解决企业纸质文档数据的自动录入问题,形成数字电子化数据控制。云脉技术顺应大数据时代潮流,推出各种纸质文档OCR云识别云检索云管理服务、纸质文档管理系统,竭力提高各行业大数据录入和管理的效率!二.方案描述1、图像自动切边、倾斜校正、增强美化、压缩存储2、手机拍照或文... 一.市场背景企业大量的数据在各种纸质文档中,如何保证海量数据的存储与协作共享,以及解决企业纸质文档数据集中管理及安全问题,必须彻底解决企业纸质文档数据的自动录入问题,形成数字电子化数据控制。云脉技术顺应大数据时代潮流,推出各种纸质文档OCR云识别云检索云管理服务、纸质文档管理系统,竭力提高各行业大数据录入和管理的效率!二.方案描述1、图像自动切边、倾斜校正、增强美化、压缩存储2、手机拍照或文...
- 随着互联网的高速发展,传统工厂行业数字化转型已快速进行中,贵州鑫智联科技有限公司致力于传统工厂的数字化转型,帮助传统工厂快速形成产业流水线。贵州鑫智联科技有限公司于2016年在贵阳国家高新区注册成立,是一家专业从事工业大数据、智能制造的高新技术企业。公司具备软硬件自主研发能力,现主要软件产品:IDF(数字工厂)、MDC(车间数据融合与分析系统)、IETC(智慧工训)、ILAB(智慧实验... 随着互联网的高速发展,传统工厂行业数字化转型已快速进行中,贵州鑫智联科技有限公司致力于传统工厂的数字化转型,帮助传统工厂快速形成产业流水线。贵州鑫智联科技有限公司于2016年在贵阳国家高新区注册成立,是一家专业从事工业大数据、智能制造的高新技术企业。公司具备软硬件自主研发能力,现主要软件产品:IDF(数字工厂)、MDC(车间数据融合与分析系统)、IETC(智慧工训)、ILAB(智慧实验...
- 1、要学Java,java跨平台,并且很多大数据的框架都是java开发。2、hadoop 虽然现在好多都用spark,但了解 hadoop 有利于对其他的了解,并且现在也有很多是用的hadoop+spark3、Linux 这个就不用说了4、Hive Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为M... 1、要学Java,java跨平台,并且很多大数据的框架都是java开发。2、hadoop 虽然现在好多都用spark,但了解 hadoop 有利于对其他的了解,并且现在也有很多是用的hadoop+spark3、Linux 这个就不用说了4、Hive Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为M...
- 随着Face ID 的高调出道,人脸识别迎来了高光时刻。菜鸟驿站的刷脸取件,支付宝的刷脸支付、城市街头的无人超市......从小小的手机解锁应用技术,逐步蔓延到生活中各个角落,安防门禁也无法逃避。上个世纪90年代,IC卡投入门禁商用,2017年,人脸识别进入千家万户。刷卡式门禁作为曾今的门禁王者,已经默默陪伴我们走过几十年。随着复制技术的发展,刷卡门禁不得不面临复制技术带来的灾难,安全性大大... 随着Face ID 的高调出道,人脸识别迎来了高光时刻。菜鸟驿站的刷脸取件,支付宝的刷脸支付、城市街头的无人超市......从小小的手机解锁应用技术,逐步蔓延到生活中各个角落,安防门禁也无法逃避。上个世纪90年代,IC卡投入门禁商用,2017年,人脸识别进入千家万户。刷卡式门禁作为曾今的门禁王者,已经默默陪伴我们走过几十年。随着复制技术的发展,刷卡门禁不得不面临复制技术带来的灾难,安全性大大...
- 大数据时代已经来到了,我们生活中有很多的数据,工业生产也有很多的数据,我们的数据存储下来了吗?我们数据存储下来,我们服务器已经可以帮助我们记录工业级这方面的信息,但是我们如何应用呢?这就需要产品经理深入到业务中。举个例子,我的一个师兄毕业后去了一家电力企业,由于不是很爱说话就做自己的事情,没有意思,但是他对电力行业很感兴趣,于是他就做了一个业务深入了解,了解了电力行业运转的框图,分析图之后得... 大数据时代已经来到了,我们生活中有很多的数据,工业生产也有很多的数据,我们的数据存储下来了吗?我们数据存储下来,我们服务器已经可以帮助我们记录工业级这方面的信息,但是我们如何应用呢?这就需要产品经理深入到业务中。举个例子,我的一个师兄毕业后去了一家电力企业,由于不是很爱说话就做自己的事情,没有意思,但是他对电力行业很感兴趣,于是他就做了一个业务深入了解,了解了电力行业运转的框图,分析图之后得...
- 大数据这几年的势头没有像人工智能变得如此之火爆,原因在于大数据门槛较低,应用场景高度依赖业务场景,通用性较差,必须依赖于懂业务的人,失去业务大数据将变得沉积,如何改变这个现状能呢?需要我们的研发人员走不去,了解市场的变化,我们产品经理必须清楚市场动静。这句话说出来比较容易,但是做起来比较困难。原因在于技术人员沟通能力,沟通技巧,对事物责任感及当担能力,一句话:心里不够强大,不敢做... 大数据这几年的势头没有像人工智能变得如此之火爆,原因在于大数据门槛较低,应用场景高度依赖业务场景,通用性较差,必须依赖于懂业务的人,失去业务大数据将变得沉积,如何改变这个现状能呢?需要我们的研发人员走不去,了解市场的变化,我们产品经理必须清楚市场动静。这句话说出来比较容易,但是做起来比较困难。原因在于技术人员沟通能力,沟通技巧,对事物责任感及当担能力,一句话:心里不够强大,不敢做...
上滑加载中
推荐直播
-
Skill 构建 × 智能创作:基于华为云码道的 AI 内容生产提效方案2026/03/25 周三 19:00-20:00
余伟,华为云软件研发工程师/万邵业(万少),华为云HCDE开发者专家
本次直播带来两大实战:华为云码道 Skill-Creator 手把手搭建专属知识库 Skill;如何用码道提效 OpenClaw 小说文本,打造从大纲到成稿的 AI 原创小说全链路。技术干货 + OPC创作思路,一次讲透!
回顾中 -
码道新技能,AI 新生产力——从自动视频生成到开源项目解析2026/04/08 周三 19:00-21:00
童得力-华为云开发者生态运营总监/何文强-无人机企业AI提效负责人
本次华为云码道 Skill 实战活动,聚焦两大 AI 开发场景:通过实战教学,带你打造 AI 编程自动生成视频 Skill,并实现对 GitHub 热门开源项目的智能知识抽取,手把手掌握 Skill 开发全流程,用 AI 提升研发效率与内容生产力。
回顾中 -
华为云码道:零代码股票智能决策平台全功能实战2026/04/18 周六 10:00-12:00
秦拳德-中软国际教育卓越研究院研究员、华为云金牌讲师、云原生技术专家
利用Tushare接口获取实时行情数据,采用Transformer算法进行时序预测与涨跌分析,并集成DeepSeek API提供智能解读。同时,项目深度结合华为云CodeArts(码道)的代码智能体能力,实现代码一键推送至云端代码仓库,建立起高效、可协作的团队开发新范式。开发者可快速上手,从零打造功能完整的个股筛选、智能分析与风险管控产品。
回顾中
热门标签