- 简单说一下HBase数据过程中的增量迁移 简单说一下HBase数据过程中的增量迁移
- Grafana+Prometheus是目前非常流行监控方案,图形化展示非常强大。 Grafana+Prometheus是目前非常流行监控方案,图形化展示非常强大。
- 在自建Spark集群安装完后,当运行Spark On Yarn的作业运行时以及完成后,无法访问Task在Yarn上的日志。 在自建Spark集群安装完后,当运行Spark On Yarn的作业运行时以及完成后,无法访问Task在Yarn上的日志。
- Actor模型作为一种高性能网络中的并行处理方式由Carl Hewitt几十年前提出-高性能网络环境在当时还不可用。如今,硬件和基础设施的能力已经赶上并超越了Hewitt的愿景。因此,高要求的分布式系统的建造者遇到了不能完全由传统的面向对象编程(OOP)模型解决的挑战,但这可以从Actor模型中获益。今天,Actor模型不仅被认为是高效的解决方案——这已经被世界上要求最高的应用所检验。 Actor模型作为一种高性能网络中的并行处理方式由Carl Hewitt几十年前提出-高性能网络环境在当时还不可用。如今,硬件和基础设施的能力已经赶上并超越了Hewitt的愿景。因此,高要求的分布式系统的建造者遇到了不能完全由传统的面向对象编程(OOP)模型解决的挑战,但这可以从Actor模型中获益。今天,Actor模型不仅被认为是高效的解决方案——这已经被世界上要求最高的应用所检验。
- 在处理Excel数据时,选择合适的库是至关重要的,因为它直接关系到开发效率、程序性能以及最终用户的体验。本文比较了五种常用的Excel处理库:Apache POI、JExcelAPI、EasyExcel、Aspose.Cells for Java以及SimpleXLSX,每个库都有其特点和优势。因此,选择合适的库,可以显著提高开发效率和应用性能。 在处理Excel数据时,选择合适的库是至关重要的,因为它直接关系到开发效率、程序性能以及最终用户的体验。本文比较了五种常用的Excel处理库:Apache POI、JExcelAPI、EasyExcel、Aspose.Cells for Java以及SimpleXLSX,每个库都有其特点和优势。因此,选择合适的库,可以显著提高开发效率和应用性能。
- 数据导入作为数据分析任务的先行工作,将直接影响数据分析结果的准确性和可靠性。本系列文章将给大家分享CloudTable Doris 丰富的数据导入生态,6个案例带你轻松玩转Doris数据导入。本文是Doris数据导入系列文章的第一篇,主要介绍CloudTable Doris中比较常用,也是官方推荐的数据导入方式:StreamLoad和BrokerLoad。 数据导入作为数据分析任务的先行工作,将直接影响数据分析结果的准确性和可靠性。本系列文章将给大家分享CloudTable Doris 丰富的数据导入生态,6个案例带你轻松玩转Doris数据导入。本文是Doris数据导入系列文章的第一篇,主要介绍CloudTable Doris中比较常用,也是官方推荐的数据导入方式:StreamLoad和BrokerLoad。
- 本文主要解析介绍Hive虚拟列BLOCK__OFFSET__INSIDE__FILE相关源码 本文主要解析介绍Hive虚拟列BLOCK__OFFSET__INSIDE__FILE相关源码
- 文本主要解析Hive添加UDF的源码流程 文本主要解析Hive添加UDF的源码流程
- 背景前面的文章,基本实现了从0搭建Hive的运行环境。包括Hadoop、Hive,也包括HiveServer2、Tez。距离在Hive上调试开发,还欠缺一套开发环境,待后续补充。而环境有了后,测试什么、用什么表示这个系统可用?大多时候,我们想额外学习一个软件或者开源项目时候,就容易陷入"安装-部署-安装-部署"的循环中。没有实际使用的场景,或者自己构造的场景不足以触发特性(考虑不周),我们... 背景前面的文章,基本实现了从0搭建Hive的运行环境。包括Hadoop、Hive,也包括HiveServer2、Tez。距离在Hive上调试开发,还欠缺一套开发环境,待后续补充。而环境有了后,测试什么、用什么表示这个系统可用?大多时候,我们想额外学习一个软件或者开源项目时候,就容易陷入"安装-部署-安装-部署"的循环中。没有实际使用的场景,或者自己构造的场景不足以触发特性(考虑不周),我们...
- 本文介绍如何使用Flink将流数据入库到CarbonData表,并使用Spark SQL实时查询CarbonData表数据 本文介绍如何使用Flink将流数据入库到CarbonData表,并使用Spark SQL实时查询CarbonData表数据
- 快捷部署系列,本期带来的是Doris,便于入门学习体验以及技术验证等场景。 快捷部署系列,本期带来的是Doris,便于入门学习体验以及技术验证等场景。
- hbase 的复制方式是 master-push 方式,即主集群推的方式,主要是因为每个rs都有自己的WAL。 一个master集群可以复制给多个从集群,复制是异步的,运行集群分布在不同的地方,这也意味着从集群和主集群的数据不是完全一致的,它的目标就是最终一致性 hbase 的复制方式是 master-push 方式,即主集群推的方式,主要是因为每个rs都有自己的WAL。 一个master集群可以复制给多个从集群,复制是异步的,运行集群分布在不同的地方,这也意味着从集群和主集群的数据不是完全一致的,它的目标就是最终一致性
- 本文主要解析介绍Hive虚拟列相关源码 本文主要解析介绍Hive虚拟列相关源码
- 背景前面博客已经介绍了如何配置Hadoop和Hive运行环境。即本文开始前,本地已经顺利运行Hive,并可以提交hive on mr任务。在hive领域中,tez是其中一款比较常用的执行引擎。其支持DAG作业模式,可以将多个有依赖的作业转换为一个作业从而大幅提升DAG作业的性能。Hive也有一部分优化特性基于tez实现。本文介绍如何让hive能够启动执行tez任务。下面内容有一部分依赖WS... 背景前面博客已经介绍了如何配置Hadoop和Hive运行环境。即本文开始前,本地已经顺利运行Hive,并可以提交hive on mr任务。在hive领域中,tez是其中一款比较常用的执行引擎。其支持DAG作业模式,可以将多个有依赖的作业转换为一个作业从而大幅提升DAG作业的性能。Hive也有一部分优化特性基于tez实现。本文介绍如何让hive能够启动执行tez任务。下面内容有一部分依赖WS...
- HBase的Snapshot功能可以在不复制数据的情况下,快速克隆一张表,本文将根据实际的Snapshot操作,来讲述打完快照后底层HDFS的文件变化 HBase的Snapshot功能可以在不复制数据的情况下,快速克隆一张表,本文将根据实际的Snapshot操作,来讲述打完快照后底层HDFS的文件变化
上滑加载中
推荐直播
-
GaussDB管理平台TPOPS,DBA高效运维的一站式解决方案
2024/12/24 周二 16:30-18:00
Leo 华为云数据库DTSE技术布道师
数据库的复杂运维,是否让你感到头疼不已?今天,华为云GaussDB管理平台将彻底来改观!本期直播,我们将深入探索GaussDB管理平台的TPOPS功能,带你感受一键式部署安装的便捷,和智能化运维管理的高效,让复杂的运维、管理变得简单,让简单变得可靠。
回顾中 -
走进数据库:数据库基础知识精讲
2024/12/27 周五 16:00-17:30
Steven 华为云学堂技术讲师
数据管理是数据库的核心任务,本期直播将带领大家一起走进数据库,了解期发展趋势、基础模型、架构演进及相关的技术特点。同时还会介绍数据库对象和相关概念,帮助开发者对数据库使用和实践夯实基础。
去报名
热门标签