- Maxwell介绍和工作原理一、Maxwell介绍Maxwell是由美国Zendesk开源，使用Java编写的MySQL实时抓取工具，可以实时读取MySQL二进制日志binlog，并生成 JSON 格式的消息，作为生产者发送给 Kafka，Kinesis、RabbitMQ、Redis、Google Cloud Pub/Sub、文件或其它平台的应用程序。它设计的初衷是实时采集Mysql数据到... Maxwell介绍和工作原理一、Maxwell介绍Maxwell是由美国Zendesk开源，使用Java编写的MySQL实时抓取工具，可以实时读取MySQL二进制日志binlog，并生成 JSON 格式的消息，作为生产者发送给 Kafka，Kinesis、RabbitMQ、Redis、Google Cloud Pub/Sub、文件或其它平台的应用程序。它设计的初衷是实时采集Mysql数据到...
- RabbitMQ的概念 RabbitMQ是一个消息中间件：它接受并转发消息。你可以把它当做一个快递站点，当你要发送一个包裹时，你把你的包裹放到快递站，快递员最终会把你的快递送到收件人那里，按照这种逻辑RabbitMQ是一个快递站，一个快递员帮你传递快件。RabbitMQ与快递站的主要区别在于，它不处理快件而是接收，存储和转发消息数据。 四大核心概念 生产者产生数据发送消息的程序是生产者交换... RabbitMQ的概念 RabbitMQ是一个消息中间件：它接受并转发消息。你可以把它当做一个快递站点，当你要发送一个包裹时，你把你的包裹放到快递站，快递员最终会把你的快递送到收件人那里，按照这种逻辑RabbitMQ是一个快递站，一个快递员帮你传递快件。RabbitMQ与快递站的主要区别在于，它不处理快件而是接收，存储和转发消息数据。 四大核心概念 生产者产生数据发送消息的程序是生产者交换...
- 大数据集群的部署实例 大数据集群的部署实例
- 大数据 │ ECharts与pyecharts数据可视化应用 大数据 │ ECharts与pyecharts数据可视化应用
- Flink核心特性Flink具有先进的架构理念，拥有诸多的优秀特性以及完善的编程接口，Flink的优势有以下几点：一、批流一体化Flink可以在底层用同样的数据抽象和计算模型来进行批处理和流处理。事实上，Flink在设计理念上没有刻意强调批处理和流处理，而更多的强调数据的有界和无界，这就意味着Flink能够满足企业业务需求，无需用两种甚至多种框架分别实现批处理和流处理，这大大降低了架构设计、... Flink核心特性Flink具有先进的架构理念，拥有诸多的优秀特性以及完善的编程接口，Flink的优势有以下几点：一、批流一体化Flink可以在底层用同样的数据抽象和计算模型来进行批处理和流处理。事实上，Flink在设计理念上没有刻意强调批处理和流处理，而更多的强调数据的有界和无界，这就意味着Flink能够满足企业业务需求，无需用两种甚至多种框架分别实现批处理和流处理，这大大降低了架构设计、...
- Flink应用场景以及其他实时计算框架对比一、Flink应用场景在实际生产的过程中，大量数据在不断地产生，例如金融交易数据、互联网订单数据、GPS定位数 据、传感器信号、移动终端产生的数据、通信信号数据等，以及我们熟悉的网络流量监控、服务器产生的日志数据，这些数据最大的共同点就是实时从不同的数据源中产生，然后再传输到下游的分析系统。针对这些数据类型主要包括实时智能推荐、复杂事件处理、实时欺诈... Flink应用场景以及其他实时计算框架对比一、Flink应用场景在实际生产的过程中，大量数据在不断地产生，例如金融交易数据、互联网订单数据、GPS定位数 据、传感器信号、移动终端产生的数据、通信信号数据等，以及我们熟悉的网络流量监控、服务器产生的日志数据，这些数据最大的共同点就是实时从不同的数据源中产生，然后再传输到下游的分析系统。针对这些数据类型主要包括实时智能推荐、复杂事件处理、实时欺诈...
- Power BI下载安装和模块介绍一、Power BI下载安装首先在Microsoft官方网站上下载PowerBI Desktop，然后进行安装。下载地址：https://www.microsoft.com/zh-cn/download/details.aspx?id=58494点击"Next"后会弹出下载框，进行下载即可，下载好的PowerBI名称为"PBIDesktopSetup_x64... Power BI下载安装和模块介绍一、Power BI下载安装首先在Microsoft官方网站上下载PowerBI Desktop，然后进行安装。下载地址：https://www.microsoft.com/zh-cn/download/details.aspx?id=58494点击"Next"后会弹出下载框，进行下载即可，下载好的PowerBI名称为"PBIDesktopSetup_x64...
- Canal介绍一、什么是CanalCanal [kə'næl]，译意为水道/管道/沟渠，主要用途是基于 MySQL 数据库增量日志解析，提供增量数据订阅和消费。早期阿里巴巴因为杭州和美国双机房部署，存在跨机房同步的业务需求，实现方式主要是基于业务 trigger 获取增量变更。从 2010 年开始，业务逐步尝试数据库日志解析获取增量变更进行同步，由此衍生出了大量的... Canal介绍一、什么是CanalCanal [kə'næl]，译意为水道/管道/沟渠，主要用途是基于 MySQL 数据库增量日志解析，提供增量数据订阅和消费。早期阿里巴巴因为杭州和美国双机房部署，存在跨机房同步的业务需求，实现方式主要是基于业务 trigger 获取增量变更。从 2010 年开始，业务逐步尝试数据库日志解析获取增量变更进行同步，由此衍生出了大量的...
- Oozie是Hadoop工作流调度引擎。 Oozie是Hadoop工作流调度引擎。
- Redis是Key-Value内存数据库。 Redis是Key-Value内存数据库。
- Flink是分布式流数据处理引擎。 Flink是分布式流数据处理引擎。
- ClickHouse(CK)是面向OLAP的列式数据库。 ClickHouse(CK)是面向OLAP的列式数据库。
- ElasticSearch(简称ES)是分布式实时全文搜索引擎和实时文件存储数据库。 ElasticSearch(简称ES)是分布式实时全文搜索引擎和实时文件存储数据库。
- Kafka是分布式消息队列，可充当缓存数据库。 Kafka是分布式消息队列，可充当缓存数据库。
- 冰岛DEM v1.0 10m自2015年起，北极（北纬60度以北，包括冰岛）的高程数据开始通过ArcticDEM项目公开提供，该项目由明尼苏达大学极地地理空间中心领导（https://www.pgc.umn.edu/data/arcticdem/）。这些数据包括大量反复获取的数字高程模型（DEM）（多时态），通常从2012年至今，最古老的数据可以追溯到2008年。这些DEMs来自于卫星亚米... 冰岛DEM v1.0 10m自2015年起，北极（北纬60度以北，包括冰岛）的高程数据开始通过ArcticDEM项目公开提供，该项目由明尼苏达大学极地地理空间中心领导（https://www.pgc.umn.edu/data/arcticdem/）。这些数据包括大量反复获取的数字高程模型（DEM）（多时态），通常从2012年至今，最古老的数据可以追溯到2008年。这些DEMs来自于卫星亚米...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签