- 随着Spark SQL计算引擎的发展，Spark批处理的能力和性能也越来越成熟。很多大数据平台开始将自己的业务从Hive迁移到Spark，Facebook就是其中之一。在迁移过程中难免出现不兼容、性能下降等问题，本文将针对Facebook Hive UDF迁移到Spark过程中遇到的各种问题进行介绍。 随着Spark SQL计算引擎的发展，Spark批处理的能力和性能也越来越成熟。很多大数据平台开始将自己的业务从Hive迁移到Spark，Facebook就是其中之一。在迁移过程中难免出现不兼容、性能下降等问题，本文将针对Facebook Hive UDF迁移到Spark过程中遇到的各种问题进行介绍。
- 基于Spark Catalyst的物化视图改写引擎的实现 基于Spark Catalyst的物化视图改写引擎的实现
- 敏捷智库月刊，每月更新一刊，欢迎大家品读。本期推荐敏捷和效能专家Ali、重磅解读第14次敏捷报告、DevOps转型避坑指南、TiD2020大会预告，精彩内容值得分享。 敏捷智库月刊，每月更新一刊，欢迎大家品读。本期推荐敏捷和效能专家Ali、重磅解读第14次敏捷报告、DevOps转型避坑指南、TiD2020大会预告，精彩内容值得分享。
- 前言JDK是一个强大的开发工具集，里面提供了大量的通用类和API，在Java代码开发过程中也被大量使用，但事实上，你对JDK真有你想象当中的那么“熟悉”吗？在代码检视过程中，经常发现的一些JDK中的类或API未被合理地、正确地使用，本篇将列举几种最常用的案例，并进行分析说明。案例分析1. 被误用的SimpleDateFormatSimpleDateFormat在平常的开发过程中比... 前言JDK是一个强大的开发工具集，里面提供了大量的通用类和API，在Java代码开发过程中也被大量使用，但事实上，你对JDK真有你想象当中的那么“熟悉”吗？在代码检视过程中，经常发现的一些JDK中的类或API未被合理地、正确地使用，本篇将列举几种最常用的案例，并进行分析说明。案例分析1. 被误用的SimpleDateFormatSimpleDateFormat在平常的开发过程中比...
- Spark任务失败 Container be Killed怎么解决？ Spark任务失败 Container be Killed怎么解决？
- 一文让你开发效率蹭蹭蹭的上涨（idea快捷键指南） 一文让你开发效率蹭蹭蹭的上涨（idea快捷键指南）
- BaseParser | |_TXTParser --List<string> | |_WordParser --- List<Aspose.Words.Node> | |_PDFParser ---PDF =>Doc,List<Aspose.Words.Node> --Paragraph | |_PPTParser ---List... BaseParser | |_TXTParser --List<string> | |_WordParser --- List<Aspose.Words.Node> | |_PDFParser ---PDF =>Doc,List<Aspose.Words.Node> --Paragraph | |_PPTParser ---List...
- python mysqls数据库连表查询相关知识。 python mysqls数据库连表查询相关知识。
- idea 启动命令行的时候提示不能创建PTY idea 启动命令行的时候提示不能创建PTY
- JAVA实现一个简单的异步请求 JAVA实现一个简单的异步请求
- 前端时间写了个自动化的脚本，每天从编译环境上取软件包到自己的开发环境，然后安装软件包。但是遇到了一个问题，就是执行scp或ssh命令是需要输入密码的，网上搜了下，用了两种方法搭建了两个自动化环境。 前端时间写了个自动化的脚本，每天从编译环境上取软件包到自己的开发环境，然后安装软件包。但是遇到了一个问题，就是执行scp或ssh命令是需要输入密码的，网上搜了下，用了两种方法搭建了两个自动化环境。
- 客户端:参考: 基于Websocket的简易webshell实现 ---- https://stackoverflow.com/questions/38277740/html-css-javascript-command-line-like-interface有几点小改动:addLine添加br并且设置滚动位置 ;点击背景,设置焦点到textarea;ws.onmessage是调用... 客户端:参考: 基于Websocket的简易webshell实现 ---- https://stackoverflow.com/questions/38277740/html-css-javascript-command-line-like-interface有几点小改动:addLine添加br并且设置滚动位置 ;点击背景,设置焦点到textarea;ws.onmessage是调用...
- mysql 数据库单表查询操作相关知识。 mysql 数据库单表查询操作相关知识。
- mysql 数据库的增、删、改的操作语法学习。 mysql 数据库的增、删、改的操作语法学习。
- 不错的qt线程启动暂停停止的实现方法:具体实现参考:https://codereview.stackexchange.com/questions/26724/thread-pausing-resuming-canceling-with-qtQItemDelegate绘制图片m_image = new QImage(":/xxxx.png");...painter->drawImage(opt... 不错的qt线程启动暂停停止的实现方法:具体实现参考:https://codereview.stackexchange.com/questions/26724/thread-pausing-resuming-canceling-with-qtQItemDelegate绘制图片m_image = new QImage(":/xxxx.png");...painter->drawImage(opt...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签