- 使用 Airflow 和 PySpark 实现带多组参数和标签的 Amazon Redshift 数据仓库批量数据导出 介绍Apache Airflow 是一个平台，用于编排和监视工作流。PySpark 是 Spark 的 Python API，能够高效地处理大规模数据集。通过结合 Airflow 和 PySpark，可以实现自动化的数据管道，将 Amazon Redshift 中的数据批... 使用 Airflow 和 PySpark 实现带多组参数和标签的 Amazon Redshift 数据仓库批量数据导出 介绍Apache Airflow 是一个平台，用于编排和监视工作流。PySpark 是 Spark 的 Python API，能够高效地处理大规模数据集。通过结合 Airflow 和 PySpark，可以实现自动化的数据管道，将 Amazon Redshift 中的数据批...
- PySpark + PyFlink + Hive 地震预测系统 介绍地震预测系统是基于大数据技术和分析平台，用于处理和分析海量地震数据，提供实时可视化和预测功能。通过使用 PySpark 进行批处理、PyFlink 执行流处理，以及 Hive 作为数据仓库存储地震数据，可以构建一个强大的地震监测和预测平台。 应用使用场景地震监测：实时分析和可视化地震活动。灾害预警：提前检测潜在地震风险，发... PySpark + PyFlink + Hive 地震预测系统 介绍地震预测系统是基于大数据技术和分析平台，用于处理和分析海量地震数据，提供实时可视化和预测功能。通过使用 PySpark 进行批处理、PyFlink 执行流处理，以及 Hive 作为数据仓库存储地震数据，可以构建一个强大的地震监测和预测平台。 应用使用场景地震监测：实时分析和可视化地震活动。灾害预警：提前检测潜在地震风险，发...
- 搭建Storm集群Apache Storm 是一个免费开源的分布式实时计算系统。它使得处理大规模数据流变得简单而可靠。本文将详细介绍如何搭建一个基本的Storm集群，包括环境准备、配置文件修改以及启动集群等步骤。环境准备硬件要求至少3台机器（1个Nimbus节点和2个Supervisor节点）每台机器至少4GB内存，推荐8GB或以上每台机器至少1个CPU核心，推荐2个或以上软件要求Java ... 搭建Storm集群Apache Storm 是一个免费开源的分布式实时计算系统。它使得处理大规模数据流变得简单而可靠。本文将详细介绍如何搭建一个基本的Storm集群，包括环境准备、配置文件修改以及启动集群等步骤。环境准备硬件要求至少3台机器（1个Nimbus节点和2个Supervisor节点）每台机器至少4GB内存，推荐8GB或以上每台机器至少1个CPU核心，推荐2个或以上软件要求Java ...
- 在之前這兩篇，預備好了今天要做的2020-01-17,如何將 Django 項目掛到公網云服務器华为弹性云服务器 CentOS7.6 運行 【Django3.0】在調試今天的 Apache WSGI 之前，要先確認幾個要點：IP 地址Linux 服務器版本Apache 服務器版本Python 版本Django 版本 在之前這兩篇，預備好了今天要做的2020-01-17,如何將 Django 項目掛到公網云服務器华为弹性云服务器 CentOS7.6 運行 【Django3.0】在調試今天的 Apache WSGI 之前，要先確認幾個要點：IP 地址Linux 服務器版本Apache 服務器版本Python 版本Django 版本
- 编译环境配置安装依赖包：yum install apr-devel.aarch64 apr-util-devel.aarch64 pcre-devel.aarch64 -y下载速度太慢了获取安装包。wget http://us.mirrors.quenda.co/apache//httpd/httpd-2.4.39.tar.gz 解压安装包。tar –zxvf httpd-2.4.3... 编译环境配置安装依赖包：yum install apr-devel.aarch64 apr-util-devel.aarch64 pcre-devel.aarch64 -y下载速度太慢了获取安装包。wget http://us.mirrors.quenda.co/apache//httpd/httpd-2.4.39.tar.gz 解压安装包。tar –zxvf httpd-2.4.3...
- Apache Web服务器是一个功能强大的应用程序,能够为用户提供关键性的业务功 能。同时,它也可能被误用或遭到攻击。为了保证 Apache服务器能够安全运行,我们 提供了一系列的措施来增强 Apache应用程序的安全性。配置 Apache Web服务器时,应为 Apache Web服务器准备好一个操作系统。其中每个过程都包含很多个子步骤,我们将在接下来的部分讲述详情为 Apache Web... Apache Web服务器是一个功能强大的应用程序,能够为用户提供关键性的业务功 能。同时,它也可能被误用或遭到攻击。为了保证 Apache服务器能够安全运行,我们 提供了一系列的措施来增强 Apache应用程序的安全性。配置 Apache Web服务器时,应为 Apache Web服务器准备好一个操作系统。其中每个过程都包含很多个子步骤,我们将在接下来的部分讲述详情为 Apache Web...
- Apache Pulsar是一种新型的消息队列软件。由雅虎2013年创建，并于2016年并入Apache基金会。目前雅虎和Twitter都是每天通过Pulsar发送超过1000亿条消息。Pulsar原理类似于Kafka， 而不同与Kafka使用本地Broker保存消息， Pulsar使用了Apache BookKeeper提供的数据访问层。故Pulsar是一种计算存储分离的架构，Broke... Apache Pulsar是一种新型的消息队列软件。由雅虎2013年创建，并于2016年并入Apache基金会。目前雅虎和Twitter都是每天通过Pulsar发送超过1000亿条消息。Pulsar原理类似于Kafka， 而不同与Kafka使用本地Broker保存消息， Pulsar使用了Apache BookKeeper提供的数据访问层。故Pulsar是一种计算存储分离的架构，Broke...
- Spark源码编译 Spark源码编译
- Join操作概述在关系型数据库中 Join 是非常常见的操作，各种优化手段已经到了极致。在海量数据的环境下，不可避免的也会碰到这种类型的需求， 例如在数据分析时需要连接从不同的数据源中获取到数据。不同于传统的单机模式，在分布式存储下采用 MapReduce 编程模型，也有相应的处理措施和优化方法。我们先简要地描述待解决的问题。假设有两个数据集：气象站数据库和天气记录数据库，并考虑如何合二为一... Join操作概述在关系型数据库中 Join 是非常常见的操作，各种优化手段已经到了极致。在海量数据的环境下，不可避免的也会碰到这种类型的需求， 例如在数据分析时需要连接从不同的数据源中获取到数据。不同于传统的单机模式，在分布式存储下采用 MapReduce 编程模型，也有相应的处理措施和优化方法。我们先简要地描述待解决的问题。假设有两个数据集：气象站数据库和天气记录数据库，并考虑如何合二为一...
- Apache Pulsar是一个功能强大的pub-sub模型，基于分层架构，开箱即用，具有Geo-Replication，多重租户，零重新平衡时间，统一排队和流，基于TLS的身份验证/授权，代理和持久性。 Apache Pulsar是一个功能强大的pub-sub模型，基于分层架构，开箱即用，具有Geo-Replication，多重租户，零重新平衡时间，统一排队和流，基于TLS的身份验证/授权，代理和持久性。
- 成功在沃通申请SSL证书后，会得到一个压缩包文件，解压后得到四个文件：for Apache、for IIS、for Ngnix、 for Other Server，Apache 上需要用到 for Apache解压出来的证书文件以及自主生成的私钥.key文件。 成功在沃通申请SSL证书后，会得到一个压缩包文件，解压后得到四个文件：for Apache、for IIS、for Ngnix、 for Other Server，Apache 上需要用到 for Apache解压出来的证书文件以及自主生成的私钥.key文件。
- Apache Module加载问题解决方案 Apache Module加载问题解决方案
- Flight是什么？Flight是一个快速，简易，可扩展的PHP框架。Flight能使你快速和轻松地创建RESTful Web应用。require 'flight/Flight.php';Flight::route('/', function(){ echo 'hello world!';});Flight::start();需求Flight需要PHP 5.3或更高版本。License... Flight是什么？Flight是一个快速，简易，可扩展的PHP框架。Flight能使你快速和轻松地创建RESTful Web应用。require 'flight/Flight.php';Flight::route('/', function(){ echo 'hello world!';});Flight::start();需求Flight需要PHP 5.3或更高版本。License...
- Apache重量级嘉宾 · 云原生大咖 · 客户CTO案例分享 · 现场编程互动 Apache重量级嘉宾 · 云原生大咖 · 客户CTO案例分享 · 现场编程互动
- web开发可能会用到的一个环境是PHP+mysql+apache的方案，由于这些都是开源软件，所以使用起来也挺便捷的，想深究的童鞋还可以把源代码撸下来一探究竟，只是第一次接触时，去搭建这个环境还真是遇到了不少坑。 web开发可能会用到的一个环境是PHP+mysql+apache的方案，由于这些都是开源软件，所以使用起来也挺便捷的，想深究的童鞋还可以把源代码撸下来一探究竟，只是第一次接触时，去搭建这个环境还真是遇到了不少坑。
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签