- 本实践基于华为云MapReduce服务，用于指导您创建MRS集群后，使用BulkLoad方式向HBase中批量导入本地数据，在首次数据加载时，能极大的提高写入效率，并降低对Region Server节点的写入压力。 本实践基于华为云MapReduce服务，用于指导您创建MRS集群后，使用BulkLoad方式向HBase中批量导入本地数据，在首次数据加载时，能极大的提高写入效率，并降低对Region Server节点的写入压力。
- 大数据融合分析时代，GaussDB(DWS)如需访问MRS数据源，该如何实现？本期云小课带您开启MRS数据源之门，通过远程读取MRS集群Hive上的ORC数据表完成数据导入DWS。准备环境需确保MRS和DWS集群在同一个区域、可用区、同一VPC子网内，确保集群网络互通。基本流程1、创建MRS分析集群（选择Hive组件）。2、通过将本地txt数据文件上传至OBS桶，再通过OBS桶导入Hive，... 大数据融合分析时代，GaussDB(DWS)如需访问MRS数据源，该如何实现？本期云小课带您开启MRS数据源之门，通过远程读取MRS集群Hive上的ORC数据表完成数据导入DWS。准备环境需确保MRS和DWS集群在同一个区域、可用区、同一VPC子网内，确保集群网络互通。基本流程1、创建MRS分析集群（选择Hive组件）。2、通过将本地txt数据文件上传至OBS桶，再通过OBS桶导入Hive，...
- 中国工商银行联合华为云FusionInsight MRS落地大数据存算分离架构试点工作，实现资源价值最大化，存储与计算资源全面云化、灵活配置、弹性伸缩。 中国工商银行联合华为云FusionInsight MRS落地大数据存算分离架构试点工作，实现资源价值最大化，存储与计算资源全面云化、灵活配置、弹性伸缩。
- 大数据处理目前比较流行的是两种方法，一种是离线处理，一种是在线处理。 大数据处理目前比较流行的是两种方法，一种是离线处理，一种是在线处理。
- 在 React 中，useState 是最常用的状态管理钩子之一，但它并不总是适用于所有场景。当状态逻辑变得复杂时，useReducer 钩子提供了一种更结构化的方式来管理状态。本文将从基础到进阶，详细介绍 useReducer 的使用方法、常见问题及如何避免这些问题，并通过代码示例来加深理解。 什么是 useReducer？useReducer 是 React 提供的一个 Hook，用于处... 在 React 中，useState 是最常用的状态管理钩子之一，但它并不总是适用于所有场景。当状态逻辑变得复杂时，useReducer 钩子提供了一种更结构化的方式来管理状态。本文将从基础到进阶，详细介绍 useReducer 的使用方法、常见问题及如何避免这些问题，并通过代码示例来加深理解。 什么是 useReducer？useReducer 是 React 提供的一个 Hook，用于处...
- 本文介绍了如何将MRS和OBS中的数据导入到DWS中，包括节点连接准备、在Hive中创建数据、登录DWS数据库并导入等步骤。同时，还介绍了如何上传数据到OBS，并创建外表和执行数据导入等操作。这些操作可以帮助用户更好地管理和利用数据资源。 本文介绍了如何将MRS和OBS中的数据导入到DWS中，包括节点连接准备、在Hive中创建数据、登录DWS数据库并导入等步骤。同时，还介绍了如何上传数据到OBS，并创建外表和执行数据导入等操作。这些操作可以帮助用户更好地管理和利用数据资源。
- 近期工作上开始接触了大量容器化和华为云云容器引擎CCE的内容，因此整理学习了一堆有关容器化的知识，特此进行分享。在学习容器化之前，首先要了解一个内容，为什么要使用容器，好处是什么？ 兼容性问题我们在工程实践中，经常会遇到一些兼容性的问题，比如：ISA兼容：目标机器指令集的兼容性ABI兼容：目标系统或者依赖库的二进制兼容性环境兼容： 目标环境的兼容性。例如环境变量、配置、注册中心等。以一个多服... 近期工作上开始接触了大量容器化和华为云云容器引擎CCE的内容，因此整理学习了一堆有关容器化的知识，特此进行分享。在学习容器化之前，首先要了解一个内容，为什么要使用容器，好处是什么？ 兼容性问题我们在工程实践中，经常会遇到一些兼容性的问题，比如：ISA兼容：目标机器指令集的兼容性ABI兼容：目标系统或者依赖库的二进制兼容性环境兼容： 目标环境的兼容性。例如环境变量、配置、注册中心等。以一个多服...
- 本文深入探讨了MapReduce的各个方面，从基础概念和工作原理到编程模型和实际应用场景，最后专注于性能优化的最佳实践。关注【TechLeadCloud】，分享互联网架构、云服务技术的全维度知识。作者拥有10+年互联网服务架构、AI产品研发经验、团队管理经验，同济本复旦硕，复旦机器人智能实验室成员，阿里云认证的资深架构师，项目管理专业人士，上亿营收AI产品研发负责人。 一、引言 1.1 数据... 本文深入探讨了MapReduce的各个方面，从基础概念和工作原理到编程模型和实际应用场景，最后专注于性能优化的最佳实践。关注【TechLeadCloud】，分享互联网架构、云服务技术的全维度知识。作者拥有10+年互联网服务架构、AI产品研发经验、团队管理经验，同济本复旦硕，复旦机器人智能实验室成员，阿里云认证的资深架构师，项目管理专业人士，上亿营收AI产品研发负责人。 一、引言 1.1 数据...
- 本文介绍大企业erp流程中使用MRS流加工模型对比选型及最佳实践 本文介绍大企业erp流程中使用MRS流加工模型对比选型及最佳实践
- 随着云原生的概念越来越火，服务的架构应该如何发展和演进，成为很多程序员关心的话题。大名鼎鼎的《深入理解java虚拟机》一书作者于21年推出了新作《凤凰架构》，从这本书中可以看到当前时下很多最新的技术或者理念。本博文将沉淀发布这本书的学习笔记和思考。 如果希望了解更加详细的内容，欢迎购买该书继续详细学习。其他笔记内容：云原生时代，远程服务调用和RESTful，如何分析和抉择？云原生时代，你应当... 随着云原生的概念越来越火，服务的架构应该如何发展和演进，成为很多程序员关心的话题。大名鼎鼎的《深入理解java虚拟机》一书作者于21年推出了新作《凤凰架构》，从这本书中可以看到当前时下很多最新的技术或者理念。本博文将沉淀发布这本书的学习笔记和思考。 如果希望了解更加详细的内容，欢迎购买该书继续详细学习。其他笔记内容：云原生时代，远程服务调用和RESTful，如何分析和抉择？云原生时代，你应当...
- 随着云原生的概念越来越火，服务的架构应该如何发展和演进，成为很多程序员关心的话题。大名鼎鼎的《深入理解java虚拟机》一书作者于21年推出了新作《凤凰架构》，从这本书中可以看到当前时下很多最新的技术或者理念。因此本文以及后续都将持续沉淀发布这本书的学习笔记和思考，也欢迎购买该书进行详细学习，或者关注后续的学习笔记内容发布，了解精华内容和总结思考。 流量治理 1 服务容错 1.1 容错策略文章... 随着云原生的概念越来越火，服务的架构应该如何发展和演进，成为很多程序员关心的话题。大名鼎鼎的《深入理解java虚拟机》一书作者于21年推出了新作《凤凰架构》，从这本书中可以看到当前时下很多最新的技术或者理念。因此本文以及后续都将持续沉淀发布这本书的学习笔记和思考，也欢迎购买该书进行详细学习，或者关注后续的学习笔记内容发布，了解精华内容和总结思考。 流量治理 1 服务容错 1.1 容错策略文章...
- 随着云原生的概念越来越火，服务的架构应该如何发展和演进，成为很多程序员关心的话题。大名鼎鼎的《深入理解java虚拟机》一书作者于21年推出了新作《凤凰架构》，从这本书中可以看到当前时下很多最新的技术或者理念。本博文将沉淀发布这本书的学习笔记和思考。 如果希望了解更加详细的内容，欢迎购买该书继续详细学习。 二、访问远程服务 2.1 远程服务调用这一个章节主要讲解rpc的设计理念和发展历史。先是... 随着云原生的概念越来越火，服务的架构应该如何发展和演进，成为很多程序员关心的话题。大名鼎鼎的《深入理解java虚拟机》一书作者于21年推出了新作《凤凰架构》，从这本书中可以看到当前时下很多最新的技术或者理念。本博文将沉淀发布这本书的学习笔记和思考。 如果希望了解更加详细的内容，欢迎购买该书继续详细学习。 二、访问远程服务 2.1 远程服务调用这一个章节主要讲解rpc的设计理念和发展历史。先是...
- 随着云原生的概念越来越火，服务的架构应该如何发展和演进，成为很多程序员关心的话题。大名鼎鼎的《深入理解java虚拟机》一书作者于21年推出了新作《凤凰架构》，从这本书中可以看到当前时下很多最新的技术或者理念。本博文将沉淀发布这本书的学习笔记和思考。 如果希望了解更加详细的内容，欢迎购买该书继续详细学习。 一、服务架构演进史 1.1原始分布式时代DCE（Distributed Computin... 随着云原生的概念越来越火，服务的架构应该如何发展和演进，成为很多程序员关心的话题。大名鼎鼎的《深入理解java虚拟机》一书作者于21年推出了新作《凤凰架构》，从这本书中可以看到当前时下很多最新的技术或者理念。本博文将沉淀发布这本书的学习笔记和思考。 如果希望了解更加详细的内容，欢迎购买该书继续详细学习。 一、服务架构演进史 1.1原始分布式时代DCE（Distributed Computin...
- 1 背景1.1 数仓和数据湖的概念数据分析技术在2010~2019年间，以湖仓两层架构技术作为主流被各数据厂商所应用，即大数据数仓+数据湖的技术形式。大数据数仓：出现最早，也最完备，从单机向分布式、智能化发展。例如 Hive、华为DWS等数据湖：狭义上的湖主要是云厂商参与，以统一的对象存储底座结合云平台水平扩展的计算资源，让分析以数据为本、让业务快起来。1.2 ... 1 背景1.1 数仓和数据湖的概念数据分析技术在2010~2019年间，以湖仓两层架构技术作为主流被各数据厂商所应用，即大数据数仓+数据湖的技术形式。大数据数仓：出现最早，也最完备，从单机向分布式、智能化发展。例如 Hive、华为DWS等数据湖：狭义上的湖主要是云厂商参与，以统一的对象存储底座结合云平台水平扩展的计算资源，让分析以数据为本、让业务快起来。1.2 ...
- 公有云中，拉远的计算服务层和存储服务层之间存在“数据访问墙”问题，极大地影响数据密集型应用的性能。MemArtsCC意在构建华为云上的云原生读缓存服务，打破“数据访问墙”。 公有云中，拉远的计算服务层和存储服务层之间存在“数据访问墙”问题，极大地影响数据密集型应用的性能。MemArtsCC意在构建华为云上的云原生读缓存服务，打破“数据访问墙”。
上滑加载中
推荐直播
-
GaussDB管理平台TPOPS，DBA高效运维的一站式解决方案2024/12/24 周二 16:30-18:00
Leo 华为云数据库DTSE技术布道师
数据库的复杂运维，是否让你感到头疼不已？今天，华为云GaussDB管理平台将彻底来改观！本期直播，我们将深入探索GaussDB管理平台的TPOPS功能，带你感受一键式部署安装的便捷，和智能化运维管理的高效，让复杂的运维、管理变得简单，让简单变得可靠。
回顾中 -
走进数据库：数据库基础知识精讲2024/12/27 周五 16:00-17:30
Steven 华为云学堂技术讲师
数据管理是数据库的核心任务，本期直播将带领大家一起走进数据库，了解期发展趋势、基础模型、架构演进及相关的技术特点。同时还会介绍数据库对象和相关概念，帮助开发者对数据库使用和实践夯实基础。
去报名
热门标签