- 随着Spark SQL计算引擎的发展，Spark批处理的能力和性能也越来越成熟。很多大数据平台开始将自己的业务从Hive迁移到Spark，Facebook就是其中之一。在迁移过程中难免出现不兼容、性能下降等问题，本文将针对Facebook Hive UDF迁移到Spark过程中遇到的各种问题进行介绍。 随着Spark SQL计算引擎的发展，Spark批处理的能力和性能也越来越成熟。很多大数据平台开始将自己的业务从Hive迁移到Spark，Facebook就是其中之一。在迁移过程中难免出现不兼容、性能下降等问题，本文将针对Facebook Hive UDF迁移到Spark过程中遇到的各种问题进行介绍。
- 基于Spark Catalyst的物化视图改写引擎的实现 基于Spark Catalyst的物化视图改写引擎的实现
- 敏捷智库月刊，每月更新一刊，欢迎大家品读。本期推荐敏捷和效能专家Ali、重磅解读第14次敏捷报告、DevOps转型避坑指南、TiD2020大会预告，精彩内容值得分享。 敏捷智库月刊，每月更新一刊，欢迎大家品读。本期推荐敏捷和效能专家Ali、重磅解读第14次敏捷报告、DevOps转型避坑指南、TiD2020大会预告，精彩内容值得分享。
- 前言JDK是一个强大的开发工具集，里面提供了大量的通用类和API，在Java代码开发过程中也被大量使用，但事实上，你对JDK真有你想象当中的那么“熟悉”吗？在代码检视过程中，经常发现的一些JDK中的类或API未被合理地、正确地使用，本篇将列举几种最常用的案例，并进行分析说明。案例分析1. 被误用的SimpleDateFormatSimpleDateFormat在平常的开发过程中比... 前言JDK是一个强大的开发工具集，里面提供了大量的通用类和API，在Java代码开发过程中也被大量使用，但事实上，你对JDK真有你想象当中的那么“熟悉”吗？在代码检视过程中，经常发现的一些JDK中的类或API未被合理地、正确地使用，本篇将列举几种最常用的案例，并进行分析说明。案例分析1. 被误用的SimpleDateFormatSimpleDateFormat在平常的开发过程中比...
- Spark任务失败 Container be Killed怎么解决？ Spark任务失败 Container be Killed怎么解决？
- 一文让你开发效率蹭蹭蹭的上涨（idea快捷键指南） 一文让你开发效率蹭蹭蹭的上涨（idea快捷键指南）
- BaseParser | |_TXTParser --List<string> | |_WordParser --- List<Aspose.Words.Node> | |_PDFParser ---PDF =>Doc,List<Aspose.Words.Node> --Paragraph | |_PPTParser ---List... BaseParser | |_TXTParser --List<string> | |_WordParser --- List<Aspose.Words.Node> | |_PDFParser ---PDF =>Doc,List<Aspose.Words.Node> --Paragraph | |_PPTParser ---List...
- python mysqls数据库连表查询相关知识。 python mysqls数据库连表查询相关知识。
- idea 启动命令行的时候提示不能创建PTY idea 启动命令行的时候提示不能创建PTY
- JAVA实现一个简单的异步请求 JAVA实现一个简单的异步请求
- 前端时间写了个自动化的脚本，每天从编译环境上取软件包到自己的开发环境，然后安装软件包。但是遇到了一个问题，就是执行scp或ssh命令是需要输入密码的，网上搜了下，用了两种方法搭建了两个自动化环境。 前端时间写了个自动化的脚本，每天从编译环境上取软件包到自己的开发环境，然后安装软件包。但是遇到了一个问题，就是执行scp或ssh命令是需要输入密码的，网上搜了下，用了两种方法搭建了两个自动化环境。
- 客户端:参考: 基于Websocket的简易webshell实现 ---- https://stackoverflow.com/questions/38277740/html-css-javascript-command-line-like-interface有几点小改动:addLine添加br并且设置滚动位置 ;点击背景,设置焦点到textarea;ws.onmessage是调用... 客户端:参考: 基于Websocket的简易webshell实现 ---- https://stackoverflow.com/questions/38277740/html-css-javascript-command-line-like-interface有几点小改动:addLine添加br并且设置滚动位置 ;点击背景,设置焦点到textarea;ws.onmessage是调用...
- mysql 数据库单表查询操作相关知识。 mysql 数据库单表查询操作相关知识。
- mysql 数据库的增、删、改的操作语法学习。 mysql 数据库的增、删、改的操作语法学习。
- 不错的qt线程启动暂停停止的实现方法:具体实现参考:https://codereview.stackexchange.com/questions/26724/thread-pausing-resuming-canceling-with-qtQItemDelegate绘制图片m_image = new QImage(":/xxxx.png");...painter->drawImage(opt... 不错的qt线程启动暂停停止的实现方法:具体实现参考:https://codereview.stackexchange.com/questions/26724/thread-pausing-resuming-canceling-with-qtQItemDelegate绘制图片m_image = new QImage(":/xxxx.png");...painter->drawImage(opt...
上滑加载中
推荐直播
-
用码道，让你的AI作品三步上朋友圈2026/08/04 周二 19:00-20:00
林华鼎-华为云AI开发者运营负责人
从入门 · 到做AI应用 · 到企业级开发。不教编程，只教用AI · 零代码、有产出、能带走、可炫耀 · 每课人人动手实操
回顾中 -
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家；李炎-华为云码道产品专家；彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战，从0到1打通消息通道；码道鸿蒙端云一体化实战，快速搭建员工签到系统。
回顾中 -
基于华为云码道，构建你的定制化AI搭子2026/08/14 周五 09:00-11:30
明亮-华为云开发者发展与支持部部长
本期直播将向您全面介绍华为云码道产品，并基于码道手把手教你部署自己的定制化AI陪伴搭子。
回顾中
热门标签