- 大数据是集收集，处理，存储为一体的技术总称。在海量数据处理的场景，大数据对计算及存储的要求较高，普遍以集群形式存在。海量数据需要更高的并发度来加速数据处理，鲲鹏多核计算的特点能够提升大数据任务的并发度，加速大数据的计算性能。大数据并行计算特点天然匹配鲲鹏多核架构，但是，为了获得更好的性能，仍需根据硬件配置和应用程序特点，对软硬件系统做进一步的优化。 大数据是集收集，处理，存储为一体的技术总称。在海量数据处理的场景，大数据对计算及存储的要求较高，普遍以集群形式存在。海量数据需要更高的并发度来加速数据处理，鲲鹏多核计算的特点能够提升大数据任务的并发度，加速大数据的计算性能。大数据并行计算特点天然匹配鲲鹏多核架构，但是，为了获得更好的性能，仍需根据硬件配置和应用程序特点，对软硬件系统做进一步的优化。
- 5G时代来临，游戏、视频直播成为当下最为热门的娱乐方式，网上冲浪更快更满足。但数据量的爆发式增长带来的系统响应速度迟缓、数据库无损扩容难、数据存储成本陡增等问题扑面而来。以视频业务为例，每秒10万业务请求时，单表产生的数据量可能会高达数十亿。数据量暴增则需要扩容，对于传统... 5G时代来临，游戏、视频直播成为当下最为热门的娱乐方式，网上冲浪更快更满足。但数据量的爆发式增长带来的系统响应速度迟缓、数据库无损扩容难、数据存储成本陡增等问题扑面而来。以视频业务为例，每秒10万业务请求时，单表产生的数据量可能会高达数十亿。数据量暴增则需要扩容，对于传统...
- 基于CarbonData的电信时空大数据探索-- 张军、龚云骏1 使用场景随着万物互联的时代到来，以及智慧终端普及，现实世界超过80%的数据与地理位置相关，比如日常使用的社交、支付、出行相关APP。作为IOT最底层的无线通信网络也会生成大量与位置相关的数据，用于无线通信网络规划和优化，帮助电信运营商建设更好体验的精品网络，构建万物互联的信息社会。为表征无线网络相关指标在地理空... 基于CarbonData的电信时空大数据探索-- 张军、龚云骏1 使用场景随着万物互联的时代到来，以及智慧终端普及，现实世界超过80%的数据与地理位置相关，比如日常使用的社交、支付、出行相关APP。作为IOT最底层的无线通信网络也会生成大量与位置相关的数据，用于无线通信网络规划和优化，帮助电信运营商建设更好体验的精品网络，构建万物互联的信息社会。为表征无线网络相关指标在地理空...
- 根据《使用DGC实现每日动态发布电影排行榜》操作指导内容完成项目实践；操作类作业若未领取到免费资源或未领取到代金券请勿操作，创建服务作业或实例的区域需与领取套餐区域保持一致；建议操作时间1-2小时，结束后立即删除有关服务实例、作业、资源，避免扣费！！！ 如：a.删除OBS相关资源；b.删除DLI作业与队列、数据库资源；c.删除消息通知服务；d.删除DGC作业与脚本资源等；本实践通过数据开发和... 根据《使用DGC实现每日动态发布电影排行榜》操作指导内容完成项目实践；操作类作业若未领取到免费资源或未领取到代金券请勿操作，创建服务作业或实例的区域需与领取套餐区域保持一致；建议操作时间1-2小时，结束后立即删除有关服务实例、作业、资源，避免扣费！！！ 如：a.删除OBS相关资源；b.删除DLI作业与队列、数据库资源；c.删除消息通知服务；d.删除DGC作业与脚本资源等；本实践通过数据开发和...
- 华为云FunsionInsight MRS已集成Apache Hudi 0.8版本，基于MRS-Hudi构建数据湖解决方案 华为云FunsionInsight MRS已集成Apache Hudi 0.8版本，基于MRS-Hudi构建数据湖解决方案
- IoTDB时序数据库聚焦海量杂时序数据的处理，具有“专、快、稳、省、易”五大特点，解决通用数据库和列式数据库在超大规模复杂时序场景的功能短板和性能瓶颈，轻松应对海量负责时间序列数据的处理，并能实现一套引擎打通云边端的时序数据分析。MRS IoTDB是华为云FusionInsight MRS云原生数据湖中的时序数据库组件，近期将在FusionInsight8.1.0版本重磅推出高性能企业级时序数据库 IoTDB时序数据库聚焦海量杂时序数据的处理，具有“专、快、稳、省、易”五大特点，解决通用数据库和列式数据库在超大规模复杂时序场景的功能短板和性能瓶颈，轻松应对海量负责时间序列数据的处理，并能实现一套引擎打通云边端的时序数据分析。MRS IoTDB是华为云FusionInsight MRS云原生数据湖中的时序数据库组件，近期将在FusionInsight8.1.0版本重磅推出高性能企业级时序数据库
- MRS CDL是FusionInsight MRS推出的一种数据实时同步服务，旨在将传统OLTP数据库中的事件信息捕捉并实时推送到大数据产品中去，本文档会详细为大家介绍CDL的整体架构以及关键技术。 MRS CDL是FusionInsight MRS推出的一种数据实时同步服务，旨在将传统OLTP数据库中的事件信息捕捉并实时推送到大数据产品中去，本文档会详细为大家介绍CDL的整体架构以及关键技术。
- kafka的高频运维操作 kafka的高频运维操作
- 所有异常自己都去实验过,解决方案也是 我为自己的文章准确性负责 所有异常自己都去实验过,解决方案也是 我为自己的文章准确性负责
- 满足运维开发同学 对kafka的所有日常操作 满足运维开发同学 对kafka的所有日常操作
- HBase是Hadoop Database的简称，是建立在Hadoop文件系统之上的分布式面向列的数据库，它具有高可靠、高性能、面向列和可伸缩的特性，提供快速随机访问海量数据能力。 当HBase集群规模越来越大时，发现故障恢复时间较长。本文重点分析了故障恢复问题和耗时阶段，针对耗时进行了对应优化；最后总结了优化配置提升HBase MTTR效率。 HBase是Hadoop Database的简称，是建立在Hadoop文件系统之上的分布式面向列的数据库，它具有高可靠、高性能、面向列和可伸缩的特性，提供快速随机访问海量数据能力。 当HBase集群规模越来越大时，发现故障恢复时间较长。本文重点分析了故障恢复问题和耗时阶段，针对耗时进行了对应优化；最后总结了优化配置提升HBase MTTR效率。
- 1. DeepWalkDeepWalk算法开创性的将NLP领域词嵌入的思想引入了图结构，基于Word2vec模型，将图中各节点用一个低维向量表示。为了配合Skip-gram模型的输入要求，DeepWalk算法中利用Random walk采样方法来对每一节点进行采样，将采样得到的节点序列当作NLP中的语句送入Skip-gram模型进行训练，从而得到各节点的d-dim低维嵌入式表示。2. Nod... 1. DeepWalkDeepWalk算法开创性的将NLP领域词嵌入的思想引入了图结构，基于Word2vec模型，将图中各节点用一个低维向量表示。为了配合Skip-gram模型的输入要求，DeepWalk算法中利用Random walk采样方法来对每一节点进行采样，将采样得到的节点序列当作NLP中的语句送入Skip-gram模型进行训练，从而得到各节点的d-dim低维嵌入式表示。2. Nod...
- “local quorum查询某个分区键的条数，每次查询，条数都不一样。”“按这个分区键的token修复，直接瞬间修复结束。但是再查，还是每次查询条数不一致。”“之前遇到墓碑丢失的问题，单个token查询结果不一致，修复也解决不了”…..不用再为数据不一致苦恼，因为强一致的Cassandra来了，DBA们不用加班修数据了。GaussDB(for Cassandra)是一款基于华为自主研发的计... “local quorum查询某个分区键的条数，每次查询，条数都不一样。”“按这个分区键的token修复，直接瞬间修复结束。但是再查，还是每次查询条数不一致。”“之前遇到墓碑丢失的问题，单个token查询结果不一致，修复也解决不了”…..不用再为数据不一致苦恼，因为强一致的Cassandra来了，DBA们不用加班修数据了。GaussDB(for Cassandra)是一款基于华为自主研发的计...
- 实验目的：理解FFT不是新的变换，而只是DFT的一种快速算法。 实验目的：理解FFT不是新的变换，而只是DFT的一种快速算法。
- 在数据和经济时代，业务和数据的多样性需要新的计算架构，海量的数据增长也带来了更高的计算需求。那么在这个过程中，鲲鹏计算产业也正在成为更多计算场景的新一代 IP 基座。基于华为鲲鹏处理器构建的鲲鹏全栈 IT 技术实施设施行业应用以及服务，致力于为智能世界持续提供我们的先进算力支持，使得各个行业可以实现数字化转型。应用软件的迁移与优化一直是鲲鹏软件生态的难点和关键。本次鲲鹏 BoostKit 训练营为 在数据和经济时代，业务和数据的多样性需要新的计算架构，海量的数据增长也带来了更高的计算需求。那么在这个过程中，鲲鹏计算产业也正在成为更多计算场景的新一代 IP 基座。基于华为鲲鹏处理器构建的鲲鹏全栈 IT 技术实施设施行业应用以及服务，致力于为智能世界持续提供我们的先进算力支持，使得各个行业可以实现数字化转型。应用软件的迁移与优化一直是鲲鹏软件生态的难点和关键。本次鲲鹏 BoostKit 训练营为
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签