- 本章主要讲述华为云大数据解决方案,云上大数据处理与分析方法。介绍了华为云EI主流大数据服务,如MRS服务、DWS服务和CSS服务。由此引出两种常见的大数据解决方案,离线处理和实时流处理,并对它们的架构优势、实现原理、应用分析与案例场景进行讲解。最后对DAYU数据运营平台进行了介绍。 本章主要讲述华为云大数据解决方案,云上大数据处理与分析方法。介绍了华为云EI主流大数据服务,如MRS服务、DWS服务和CSS服务。由此引出两种常见的大数据解决方案,离线处理和实时流处理,并对它们的架构优势、实现原理、应用分析与案例场景进行讲解。最后对DAYU数据运营平台进行了介绍。
- 激活数据要素价值,赋能业务创新 激活数据要素价值,赋能业务创新
- 前言在信息化高速发展的大潮下,各行各业都在力求加入数字化转型的赛道,构建新的工作方式和服务模式尤为重要。然而,企业内部往往存在应用割裂、数据孤岛、业务断点等情况,给业务人员带来大量手工重复劳动的负担.....基于这三项业务难点考量,华为GDE的低代码平台应运而出,以快速赋能非IT专业人员参与应用开发和功能迭代,提高项目交付效率、节省时间和优化客户服务体验。【云驻共创】低代码平台关键能力之数据... 前言在信息化高速发展的大潮下,各行各业都在力求加入数字化转型的赛道,构建新的工作方式和服务模式尤为重要。然而,企业内部往往存在应用割裂、数据孤岛、业务断点等情况,给业务人员带来大量手工重复劳动的负担.....基于这三项业务难点考量,华为GDE的低代码平台应运而出,以快速赋能非IT专业人员参与应用开发和功能迭代,提高项目交付效率、节省时间和优化客户服务体验。【云驻共创】低代码平台关键能力之数据...
- 前言2021年10月24日☼ 星期日 辛丑年(牛) 九月(戊戌) 十九(乙巳)利用华为的大数据技术快速探索星际奥秘。体验步骤一、准备环境开通对象存储服务(OBS)对象存储服务(Object Storage Service,OBS)是一个基于对象的存储服务,为客户提供海量、安全、高可靠、低成本的数据存储能力,使用时无需考虑容量限制,并且提供多种存储类型供选择,满足客户各类业务场景诉求产品--存... 前言2021年10月24日☼ 星期日 辛丑年(牛) 九月(戊戌) 十九(乙巳)利用华为的大数据技术快速探索星际奥秘。体验步骤一、准备环境开通对象存储服务(OBS)对象存储服务(Object Storage Service,OBS)是一个基于对象的存储服务,为客户提供海量、安全、高可靠、低成本的数据存储能力,使用时无需考虑容量限制,并且提供多种存储类型供选择,满足客户各类业务场景诉求产品--存...
- Cassandra数据库是一个高度可扩展的高性能分布式数据库,面向大数据场景,可用于管理大量的结构化数据。在业务使用的过程中,随着业务量和数据流量的持续增长,往往一些业务的设计弊端逐渐暴露出来,降低了集群的稳定性和可用性。比如主键设计不合理,单个分区的记录数或数据量过大,出现超大分区键,引起了节点负载不均,集群稳定性会下降,这一类问题称为大key问题。当某一热点key的请求在某一主机上的访问... Cassandra数据库是一个高度可扩展的高性能分布式数据库,面向大数据场景,可用于管理大量的结构化数据。在业务使用的过程中,随着业务量和数据流量的持续增长,往往一些业务的设计弊端逐渐暴露出来,降低了集群的稳定性和可用性。比如主键设计不合理,单个分区的记录数或数据量过大,出现超大分区键,引起了节点负载不均,集群稳定性会下降,这一类问题称为大key问题。当某一热点key的请求在某一主机上的访问...
- 华为云Stack是华为云为政企客户提供的,部署在客户本地数据中心的云基础设施。华为云Stack通过持续同步华为云公有云的能力,为客户提供云上和本地体验一致的云服务,兼顾公有云的快速创新能力和私有云的可管可控。同时匹配政企组织架构和业务流程,实现用户视角一朵云。 华为云Stack是华为云为政企客户提供的,部署在客户本地数据中心的云基础设施。华为云Stack通过持续同步华为云公有云的能力,为客户提供云上和本地体验一致的云服务,兼顾公有云的快速创新能力和私有云的可管可控。同时匹配政企组织架构和业务流程,实现用户视角一朵云。
- 这篇关于 ELK 堆栈教程的博客到此结束。现在您已准备好使用 Logstash、Elasticsearch 和 Kibana 对您想要的任何数据执行各种搜索和分析。 这篇关于 ELK 堆栈教程的博客到此结束。现在您已准备好使用 Logstash、Elasticsearch 和 Kibana 对您想要的任何数据执行各种搜索和分析。
- clickhouse是一款非常优秀的OLAP数据库系统,2016年刚开源的时候就因为卓越的性能表现得到大家的关注,而近两年国内互联网公司的大规模应用和推广,使得它在业内声名鹊起,且受到了大家一致的认可。从网络上公开分享的资料和客户使用的案例总结来看,clickhouse主要是应用在实时数仓和离线加速两个场景,其中有些实时业务为了追求极致的性能会上全ssd的配置,考虑到实时数据集的有限规模,这. clickhouse是一款非常优秀的OLAP数据库系统,2016年刚开源的时候就因为卓越的性能表现得到大家的关注,而近两年国内互联网公司的大规模应用和推广,使得它在业内声名鹊起,且受到了大家一致的认可。从网络上公开分享的资料和客户使用的案例总结来看,clickhouse主要是应用在实时数仓和离线加速两个场景,其中有些实时业务为了追求极致的性能会上全ssd的配置,考虑到实时数据集的有限规模,这.
- 这个长假,如果能与云,与AI,与大数据相结合,又将解锁怎样的花式新玩法?现在就跟随云市场,一起码住这份“云端”黄金周攻略吧! 这个长假,如果能与云,与AI,与大数据相结合,又将解锁怎样的花式新玩法?现在就跟随云市场,一起码住这份“云端”黄金周攻略吧!
- Jmeter压测工具使用之HetuEngine测试 测试场景如图:使用jmeter同时向MRS集群内的两套HetuEngine计算集群进行10并发的压力测试,并将最后的测试结果统一 Jmeter配置测试计划配置线程组1的配置:Hetu JDBC connection Configuration配置:JDBC Request配置:Precise Throughout Timer配置:说明:使... Jmeter压测工具使用之HetuEngine测试 测试场景如图:使用jmeter同时向MRS集群内的两套HetuEngine计算集群进行10并发的压力测试,并将最后的测试结果统一 Jmeter配置测试计划配置线程组1的配置:Hetu JDBC connection Configuration配置:JDBC Request配置:Precise Throughout Timer配置:说明:使...
- 9月23日至25日,华为全联接2021以“深耕数字化”为主题,各行业领军人物分享最新成果与实践。其中在“华为云FusionInsight智能数据湖打造千行百业数据底座”专题演讲中,华为云FusionInsight技术专家陈祥,发表“华为云FusionInsight智能数据湖版本新能力解读”演讲。 9月23日至25日,华为全联接2021以“深耕数字化”为主题,各行业领军人物分享最新成果与实践。其中在“华为云FusionInsight智能数据湖打造千行百业数据底座”专题演讲中,华为云FusionInsight技术专家陈祥,发表“华为云FusionInsight智能数据湖版本新能力解读”演讲。
- 在移动互联网时代,用户数量庞大,标签数量众多,用户标签的数据量巨大。用户画像系统中,对于标签的存储和查询,不同的企业有不同的实现方案。当前主流的实现方案采用ElasticSearch方案。但基于ElasticSearch构建用户画像平台,往往面临灵活性不足、资源开销大、无SQL接口开发不便等问题。为此,本文提供了一种基于华为MRS ClickHouse构建用户画像系统的方法。 在移动互联网时代,用户数量庞大,标签数量众多,用户标签的数据量巨大。用户画像系统中,对于标签的存储和查询,不同的企业有不同的实现方案。当前主流的实现方案采用ElasticSearch方案。但基于ElasticSearch构建用户画像平台,往往面临灵活性不足、资源开销大、无SQL接口开发不便等问题。为此,本文提供了一种基于华为MRS ClickHouse构建用户画像系统的方法。
- 从2014年大数据首次被写入政府工作报告,7年的时间,我们的生活已经被各种各样的数据包围。网络环境下的每一个操作,都有着自己的数据戳,再加上AI、物联网、5G等技术的快速发展,大数据的价值正在被最大化地挖掘使用。这些数据是如何一步步包围你我的生活?在大数据行业从业五年有余的华为云专家周培源有话说。如果兴趣与工作重合,再好不过周培源从大学期间开始接触计算机基础技术和C++编程,便产生了浓厚的兴... 从2014年大数据首次被写入政府工作报告,7年的时间,我们的生活已经被各种各样的数据包围。网络环境下的每一个操作,都有着自己的数据戳,再加上AI、物联网、5G等技术的快速发展,大数据的价值正在被最大化地挖掘使用。这些数据是如何一步步包围你我的生活?在大数据行业从业五年有余的华为云专家周培源有话说。如果兴趣与工作重合,再好不过周培源从大学期间开始接触计算机基础技术和C++编程,便产生了浓厚的兴...
- 当下,信息社会正在从互联网时代走向物联网时代,信息交互变得更加庞杂、高效和智能。对于互联网公司和IOT企业来说,既是机遇,也是挑战。因为,企业不可避免的要面对数据量剧增带来的一系列问题:如何高效存储和扩容,如何在对原有业务改动最小的情况下做到智能化和实时分析。针对挑战,华为云GaussDB (for Cassandra) 为客户提供了强扩展、高存储、高效导入/导出和实时分析等一系列能力,并成... 当下,信息社会正在从互联网时代走向物联网时代,信息交互变得更加庞杂、高效和智能。对于互联网公司和IOT企业来说,既是机遇,也是挑战。因为,企业不可避免的要面对数据量剧增带来的一系列问题:如何高效存储和扩容,如何在对原有业务改动最小的情况下做到智能化和实时分析。针对挑战,华为云GaussDB (for Cassandra) 为客户提供了强扩展、高存储、高效导入/导出和实时分析等一系列能力,并成...
- 使用MRS CDL实现实时数据同步的极致性能- Chetan Kothari 华为印度首席架构师MRS CDL提供从多个RDBMS捕获CDC事件并复制到大数据生态系统的机制,以实现实时数据湖分析和实时DWH场景。解决性能问题是数据复制解决方案解决低延迟、高吞吐量使用情形的关键要求之一。实时数据复制性能通常使用以下两个属性来衡量 吞吐量:在一个时间窗口中可以处理多少GB的事务日志卷、行或... 使用MRS CDL实现实时数据同步的极致性能- Chetan Kothari 华为印度首席架构师MRS CDL提供从多个RDBMS捕获CDC事件并复制到大数据生态系统的机制,以实现实时数据湖分析和实时DWH场景。解决性能问题是数据复制解决方案解决低延迟、高吞吐量使用情形的关键要求之一。实时数据复制性能通常使用以下两个属性来衡量 吞吐量:在一个时间窗口中可以处理多少GB的事务日志卷、行或...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新,构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间,华为云展示了Serverless与MCP融合创新的解决方案,本期访谈直播,由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持,华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中,探讨处理器生态的关键要素及其联系,分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源,3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源,3步轻松管理成本,帮助提升日常管理效率!
回顾中
热门标签