- 目录一、背景和挖掘目标 1、RFM模型缺点分析2、原始数据情况3、挖掘目标二、分析方法与过程1、初步分析：提出适用航空公司的LRFMC模型2、总体流程 第一步：数据抽取第二步：探索性分析第三步：数据预处理第四步：构建模型总结和思考项目地址：Datamining_project: 数据挖掘实战项目代码一、背景和挖掘目标 在企业的客户关系管理中，对客户分类，区分不同价值的客户。针对不同价值的客户... 目录一、背景和挖掘目标 1、RFM模型缺点分析2、原始数据情况3、挖掘目标二、分析方法与过程1、初步分析：提出适用航空公司的LRFMC模型2、总体流程 第一步：数据抽取第二步：探索性分析第三步：数据预处理第四步：构建模型总结和思考项目地址：Datamining_project: 数据挖掘实战项目代码一、背景和挖掘目标 在企业的客户关系管理中，对客户分类，区分不同价值的客户。针对不同价值的客户...
- 产业发展服务平台，也可以称为“产业大脑”，是基于系统集成和经济调节智能化的理念，将资源要素数据、产业链数据、创新链数据、供应链数据、贸易流通数据等汇聚起来，运用云计算、大数据、人工智能、区块链等新一代信息技术，对地方产业发展和产业数字化转型进行即时分析、引导、调度、管理，实现产业链和创新链双向融合，推动数字经济高质量发展。 产业发展服务平台，也可以称为“产业大脑”，是基于系统集成和经济调节智能化的理念，将资源要素数据、产业链数据、创新链数据、供应链数据、贸易流通数据等汇聚起来，运用云计算、大数据、人工智能、区块链等新一代信息技术，对地方产业发展和产业数字化转型进行即时分析、引导、调度、管理，实现产业链和创新链双向融合，推动数字经济高质量发展。
- Apache Flink术语Flink计算框架可以处理批数据也可以处理流式数据，Flink将批处理看成是流处理的一个特例，认为数据原本产生就是实时的数据流，这种数据叫做无界流（unbounded stream），无界流是持续不断的产生没有边界，批数据只是无界流中的一部分叫做有界流（bounded stream），针对无界流数据处理叫做实时处理,这种程序一般是7*24不间断运行的；针对有界流数... Apache Flink术语Flink计算框架可以处理批数据也可以处理流式数据，Flink将批处理看成是流处理的一个特例，认为数据原本产生就是实时的数据流，这种数据叫做无界流（unbounded stream），无界流是持续不断的产生没有边界，批数据只是无界流中的一部分叫做有界流（bounded stream），针对无界流数据处理叫做实时处理,这种程序一般是7*24不间断运行的；针对有界流数...
- Flink HA搭建配置默认情况下，每个Flink集群只有一个JobManager，这将导致单点故障（SPOF，single point of failure），如果这个JobManager挂了，则不能提交新的任务，并且运行中的程序也会失败，这是我们可以对JobManager做高可用（High Availability，简称HA），JobManager HA集群当Active JobMana... Flink HA搭建配置默认情况下，每个Flink集群只有一个JobManager，这将导致单点故障（SPOF，single point of failure），如果这个JobManager挂了，则不能提交新的任务，并且运行中的程序也会失败，这是我们可以对JobManager做高可用（High Availability，简称HA），JobManager HA集群当Active JobMana...
- Flink On Yarn任务提交一、Flink On Yarn运行原理Flink On Yarn即Flink任务运行在Yarn集群中，Flink On Yarn的内部实现原理如下图：当启动一个新的Flink YARN Client会话时，客户端首先会检查所请求的资源（容器和内存）是否可用，之后，它会上传Flink配置和JAR文件到HDFS。客户端的下一步是向ResourceManager请... Flink On Yarn任务提交一、Flink On Yarn运行原理Flink On Yarn即Flink任务运行在Yarn集群中，Flink On Yarn的内部实现原理如下图：当启动一个新的Flink YARN Client会话时，客户端首先会检查所请求的资源（容器和内存）是否可用，之后，它会上传Flink配置和JAR文件到HDFS。客户端的下一步是向ResourceManager请...
- Flink本地模式开启WebUI在工作中我们一般使用IntelliJ IDEA开发工具进行代码开发，为了能方便快速的调试Flink和了解Flink程序的运行情况，我们希望本地开发工具中运行Flink时能查看到WebUI，这就可以在编写Flink程序时开启本地WebUI。一、在Flink 项目中添加本地模式 WebUI的依赖在Flink1.15版本之前根据使用Scala版本在Java Fli... Flink本地模式开启WebUI在工作中我们一般使用IntelliJ IDEA开发工具进行代码开发，为了能方便快速的调试Flink和了解Flink程序的运行情况，我们希望本地开发工具中运行Flink时能查看到WebUI，这就可以在编写Flink程序时开启本地WebUI。一、在Flink 项目中添加本地模式 WebUI的依赖在Flink1.15版本之前根据使用Scala版本在Java Fli...
- Flink History Server配置使用基于Standalone或者Yarn模式提交Flink任务后，当任务执行失败、取消或者完成后，可以在WebUI中查看对应任务的统计信息，这些统计信息在生产环境中对我们来说非常重要，可以知道一个任务异常挂掉前发生了什么，便于定位问题。当基于Standalone session模式提交相应任务时，集群重启后我们没有办法查看集群之前运行任务的情况，... Flink History Server配置使用基于Standalone或者Yarn模式提交Flink任务后，当任务执行失败、取消或者完成后，可以在WebUI中查看对应任务的统计信息，这些统计信息在生产环境中对我们来说非常重要，可以知道一个任务异常挂掉前发生了什么，便于定位问题。当基于Standalone session模式提交相应任务时，集群重启后我们没有办法查看集群之前运行任务的情况，...
- 1. 什么是物联网具有通信能力设备组成的网络，其背后拥有一套完整的物联网架构和解决方案。但是设备连上网就是真的物联网了吗？物联网(Internet of Things) 简称IoT ，是新一代信息技术组成的重要部分，也是信息化时代的重要发展阶段。物联网通过智能感知、识别技术与普适计算机等通信感知技术，广泛应用于网络的融合中，也因此被称为继计算机、互联网之后世界信息产业发展的第三次浪潮。也对我... 1. 什么是物联网具有通信能力设备组成的网络，其背后拥有一套完整的物联网架构和解决方案。但是设备连上网就是真的物联网了吗？物联网(Internet of Things) 简称IoT ，是新一代信息技术组成的重要部分，也是信息化时代的重要发展阶段。物联网通过智能感知、识别技术与普适计算机等通信感知技术，广泛应用于网络的融合中，也因此被称为继计算机、互联网之后世界信息产业发展的第三次浪潮。也对我...
- Flink入门案例需求：读取本地数据文件，统计文件中每个单词出现的次数。一、IDEA Project创建及配置本案例编写Flink代码选择语言为Java和Scala，所以这里我们通过IntelliJ IDEA创建一个目录，其中包括Java项目模块和Scala项目模块，将Flink Java api和Flink Scala api分别在不同项目模块中实现。步骤如下：1、打开IDEA，创建空项目... Flink入门案例需求：读取本地数据文件，统计文件中每个单词出现的次数。一、IDEA Project创建及配置本案例编写Flink代码选择语言为Java和Scala，所以这里我们通过IntelliJ IDEA创建一个目录，其中包括Java项目模块和Scala项目模块，将Flink Java api和Flink Scala api分别在不同项目模块中实现。步骤如下：1、打开IDEA，创建空项目...
- 实时同步MySQL数据到Hive案例：将mysql中新增的数据实时同步到Hive中。以上案例需要用到的处理器有：“CaptureChangeMySQL”、“RouteOnAttribute”、“EvaluateJsonPath”、“ReplaceText”、“PutHiveQL”。首先通过“CaptureChangeMySQL”读取MySQL中数据的变化（需要开启MySQL binlog日... 实时同步MySQL数据到Hive案例：将mysql中新增的数据实时同步到Hive中。以上案例需要用到的处理器有：“CaptureChangeMySQL”、“RouteOnAttribute”、“EvaluateJsonPath”、“ReplaceText”、“PutHiveQL”。首先通过“CaptureChangeMySQL”读取MySQL中数据的变化（需要开启MySQL binlog日...
- 沿海国家高程数据库（CoNED）项目--地形测量数字高程模型（TBDEMs）沿海国家高程数据库（CoNED）项目--地形测量数字高程模型（TBDEMs）是地形（陆地高程）和水深（水体深度）的合并渲染，为美国部分沿海地区提供无缝高程产品（2011年至今）。这个沿海高程数据库将不同的光探测和测距（激光雷达）和测深数据源（如声纳）整合到共同的数据库中，在垂直和水平方向上与共同的参考系统对齐。这个... 沿海国家高程数据库（CoNED）项目--地形测量数字高程模型（TBDEMs）沿海国家高程数据库（CoNED）项目--地形测量数字高程模型（TBDEMs）是地形（陆地高程）和水深（水体深度）的合并渲染，为美国部分沿海地区提供无缝高程产品（2011年至今）。这个沿海高程数据库将不同的光探测和测距（激光雷达）和测深数据源（如声纳）整合到共同的数据库中，在垂直和水平方向上与共同的参考系统对齐。这个...
- 地球生态系统中不可恢复的碳这些数据集提供了2010年和2018年的全球碳密度地图（地上、地下生物质碳和土壤有机碳储量），空间分辨率约为300米，单位为Mg ha-1（坐标系：WGS 1984，浮点格式）。输入的地图从已发表的文献中收集，并在必要时进行更新，以涵盖重点时间段。这些更新被应用于可管理碳、脆弱碳和不可恢复碳地图。可管理的碳是陆地和沿海生态系统中可能经历人为土地使用转换事件的碳。脆... 地球生态系统中不可恢复的碳这些数据集提供了2010年和2018年的全球碳密度地图（地上、地下生物质碳和土壤有机碳储量），空间分辨率约为300米，单位为Mg ha-1（坐标系：WGS 1984，浮点格式）。输入的地图从已发表的文献中收集，并在必要时进行更新，以涵盖重点时间段。这些更新被应用于可管理碳、脆弱碳和不可恢复碳地图。可管理的碳是陆地和沿海生态系统中可能经历人为土地使用转换事件的碳。脆...
- 加拿大陆地生态系统中的土壤碳储量这个集合包含了加拿大土壤和植物中碳储量的空间分布和树冠高度的数据集。它被公开，作为目前正在审查的出版物《加拿大陆地生态系统中的大型土壤碳储存》的补充数据。这些地图是在2020年1月至12月期间在麦克马斯特大学的遥感实验室制作的。这个研究项目是由世界野生动物基金会（WWF）-加拿大的拨款促成的。该项目旨在利用多源卫星、气候和地形数据以及机器学习算法，首次以25... 加拿大陆地生态系统中的土壤碳储量这个集合包含了加拿大土壤和植物中碳储量的空间分布和树冠高度的数据集。它被公开，作为目前正在审查的出版物《加拿大陆地生态系统中的大型土壤碳储存》的补充数据。这些地图是在2020年1月至12月期间在麦克马斯特大学的遥感实验室制作的。这个研究项目是由世界野生动物基金会（WWF）-加拿大的拨款促成的。该项目旨在利用多源卫星、气候和地形数据以及机器学习算法，首次以25...
- 为了不断提升民生服务水平和城市治理能力，多地都在推进智慧城市建设。作为“两山理论”的诞生地——浙江安吉，在深度用云时代，以绿色智慧城市建设成果，再次令人瞩目。近年来，安吉不断探索绿色智慧城市建设，成立两山转化数字研究院，打造数字技术共享平台、数字产业孵化平台及数字生态构建平台。2022年11月，第二十四届中国“高交会”宣布安吉县获得“中国领军智慧县级城市奖”。目前，安吉已逐步构建起“政府主导... 为了不断提升民生服务水平和城市治理能力，多地都在推进智慧城市建设。作为“两山理论”的诞生地——浙江安吉，在深度用云时代，以绿色智慧城市建设成果，再次令人瞩目。近年来，安吉不断探索绿色智慧城市建设，成立两山转化数字研究院，打造数字技术共享平台、数字产业孵化平台及数字生态构建平台。2022年11月，第二十四届中国“高交会”宣布安吉县获得“中国领军智慧县级城市奖”。目前，安吉已逐步构建起“政府主导...
- 华为云政务大数据解决方案采用1+3+5架构，即1套平台、“数据资源、共享开放、应用支撑”3中心、“标准规范、安全保障、运维监控、运营支撑、集成支持”5体系，在全国已有600+项目实践，市场份额第一。 华为云政务大数据解决方案采用1+3+5架构，即1套平台、“数据资源、共享开放、应用支撑”3中心、“标准规范、安全保障、运维监控、运营支撑、集成支持”5体系，在全国已有600+项目实践，市场份额第一。
上滑加载中
推荐直播
-
基于开源鸿蒙+海思星闪开发板：嵌入式系统开发实战（Day1）2025/03/29 周六 09:00-18:00
华为开发者布道师
本次为期两天的课程将深入讲解OpenHarmony操作系统及其与星闪技术的结合应用，涵盖WS63E星闪开发板的详细介绍、“OpenHarmony+星闪”的创新实践、实验环境搭建以及编写首个“Hello World”程序等内容，旨在帮助学员全面掌握相关技术并进行实际操作
回顾中 -
基于开源鸿蒙+海思星闪开发板：嵌入式系统开发实战（Day2）2025/03/30 周日 09:00-12:00
华为开发者布道师
本次为期两天的课程将深入讲解OpenHarmony操作系统及其与星闪技术的结合应用，涵盖WS63E星闪开发板的详细介绍、“OpenHarmony+星闪”的创新实践、实验环境搭建以及编写首个“Hello World”程序等内容，旨在帮助学员全面掌握相关技术并进行实际操作
回顾中 -
从AI基础到昇腾：大模型初探、DeepSeek解析与昇腾入门2025/04/02 周三 16:00-17:30
不易 / 华为云学堂技术讲师
昇腾是华为研发的AI芯片，其具有哪些能力？我们如何基于其进行开发？本期直播将从AI以及大模型基础知识开始，介绍人工智能核心概念、昇腾AI基础软硬件平台以及昇腾专区，旨在为零基础或入门级学习者搭建从AI基础知识到昇腾技术的完整学习路径。
回顾中
热门标签