- 开发者
- HUAWEI CONNECT
#HUAWEI CONNECT#
- 前一篇博客介绍了Spark-Redis入门篇:包括一些基础概念和重要的类、方法。Spark-Redis是用Spark在redis上面进行读写数据操作的包。其支持redis的所有数据结构。由于redis是基于内存的数据库,稳定性并不是很高,尤其是standalone模式下的redis。于是工作中在使用Spark-Redis时也会碰到很多问题,尤其是执行海量数据插入与查询的场景中。 前一篇博客介绍了Spark-Redis入门篇:包括一些基础概念和重要的类、方法。Spark-Redis是用Spark在redis上面进行读写数据操作的包。其支持redis的所有数据结构。由于redis是基于内存的数据库,稳定性并不是很高,尤其是standalone模式下的redis。于是工作中在使用Spark-Redis时也会碰到很多问题,尤其是执行海量数据插入与查询的场景中。
- 路径生成是表关联方式确定的主要阶段,本文介绍了几个影响路径生成的要素:cost_param, scan方式,join方式,stream方式,并从原理上分析如何干预路径的生成。从另外一个角度看,即路径生成,是从这些底层的选择开始,从行数的估算、到scan的选择、再到join方式以及stream的选择,构成一条简单路径,然后多条路径根据代价选择,再逐层关联更多的表,最终形成一个完整的执行路径。 路径生成是表关联方式确定的主要阶段,本文介绍了几个影响路径生成的要素:cost_param, scan方式,join方式,stream方式,并从原理上分析如何干预路径的生成。从另外一个角度看,即路径生成,是从这些底层的选择开始,从行数的估算、到scan的选择、再到join方式以及stream的选择,构成一条简单路径,然后多条路径根据代价选择,再逐层关联更多的表,最终形成一个完整的执行路径。
- Huawei Connet 2020:张小白淘金记 Day1 Huawei Connet 2020:张小白淘金记 Day1
- 一、Serverless简介 云计算的不断发展,涌现出很多改变传统IT架构和运维方式的新技术,而以虚拟机、容器、微服务为代表的技术更是在各个层面不断提升云服务的技术能力,它们将应用和环境中很多通用能力变成了一种服务。但无论这些技术应用在哪里,帮助企业“降本增效”是技术变革永恒的主题。Serverless架构的出现,带来了跨越式的变革。Serverless下主机管理、操作系统管理、基础软件的部... 一、Serverless简介 云计算的不断发展,涌现出很多改变传统IT架构和运维方式的新技术,而以虚拟机、容器、微服务为代表的技术更是在各个层面不断提升云服务的技术能力,它们将应用和环境中很多通用能力变成了一种服务。但无论这些技术应用在哪里,帮助企业“降本增效”是技术变革永恒的主题。Serverless架构的出现,带来了跨越式的变革。Serverless下主机管理、操作系统管理、基础软件的部...
- 随着硬件系统的越来越好,数据库运行的CPU、磁盘、内存资源都日渐增大,SQL语句的串行执行由于不能充分利用资源,已经不能满足日益发展的需要。为此,GaussDB(DWS)开发了并行计算技术,在语句执行时可以充分利用硬件资源进行并行加速,提高执行的吞吐率。本文将详细介绍GaussDB(DWS)并行计算技术的原理,以及其在performance信息中的展示,帮助各位开发者朋友更好地分析并行的性能。 随着硬件系统的越来越好,数据库运行的CPU、磁盘、内存资源都日渐增大,SQL语句的串行执行由于不能充分利用资源,已经不能满足日益发展的需要。为此,GaussDB(DWS)开发了并行计算技术,在语句执行时可以充分利用硬件资源进行并行加速,提高执行的吞吐率。本文将详细介绍GaussDB(DWS)并行计算技术的原理,以及其在performance信息中的展示,帮助各位开发者朋友更好地分析并行的性能。
- HC2020,网络人工智能(NAIE)专题将以线上线下双渠道方式呈现精彩纷呈的网络人工智能内容。更多惊喜等着你! HC2020,网络人工智能(NAIE)专题将以线上线下双渠道方式呈现精彩纷呈的网络人工智能内容。更多惊喜等着你!
- HUAWEI CONNECT 2019第三天,华为正式发布沃土计划2.0,宣布未来5年将投入15亿美金,全球发展五百万开发者,欢迎广大企业和个人开发者共同参与计算产业的生态发展。同时,首次发布了华为鲲鹏开发套件和昇腾AI系列第一本教材。张顺茂演讲全文如下前段时间在飞机上看了部电影“海王”,一句台词打动了我:you can even talk under water.有什么不可能的呢?什么都是... HUAWEI CONNECT 2019第三天,华为正式发布沃土计划2.0,宣布未来5年将投入15亿美金,全球发展五百万开发者,欢迎广大企业和个人开发者共同参与计算产业的生态发展。同时,首次发布了华为鲲鹏开发套件和昇腾AI系列第一本教材。张顺茂演讲全文如下前段时间在飞机上看了部电影“海王”,一句台词打动了我:you can even talk under water.有什么不可能的呢?什么都是...
- [中国,上海,2019年9月20日] 在2019华为全联接大会(HUAWEI CONNECT 2019)上,华为公司正式发布面向开发者的沃土计划2.0,宣布未来5年将投入15亿美金,欢迎广大企业和个人开发者共同参与计算产业的生态发展。同时,首次发布了华为鲲鹏开发套件,并升级发布一站式AI开发管理平台ModelArts 2.0,支持开发者在鲲鹏和昇腾计算平台上进行简单高效的软件开发。华为正式发... [中国,上海,2019年9月20日] 在2019华为全联接大会(HUAWEI CONNECT 2019)上,华为公司正式发布面向开发者的沃土计划2.0,宣布未来5年将投入15亿美金,欢迎广大企业和个人开发者共同参与计算产业的生态发展。同时,首次发布了华为鲲鹏开发套件,并升级发布一站式AI开发管理平台ModelArts 2.0,支持开发者在鲲鹏和昇腾计算平台上进行简单高效的软件开发。华为正式发...
- HUAWEI CONNECT 2019第三天,华为正式发布沃土计划2.0,宣布未来5年将投入15亿美金,全球发展五百万开发者,欢迎广大企业和个人开发者共同参与计算产业的生态发展。同时,首次发布了华为鲲鹏开发套件和昇腾AI系列第一本教材。 HUAWEI CONNECT 2019第三天,华为正式发布沃土计划2.0,宣布未来5年将投入15亿美金,全球发展五百万开发者,欢迎广大企业和个人开发者共同参与计算产业的生态发展。同时,首次发布了华为鲲鹏开发套件和昇腾AI系列第一本教材。
- 前不久,一款能翻跟斗能尬舞的机器狗上了热搜。现在,AI加持下的机器狗又学会了新本领,一起来看看吧! 前不久,一款能翻跟斗能尬舞的机器狗上了热搜。现在,AI加持下的机器狗又学会了新本领,一起来看看吧!
- 训练、标注成本节省90%!华为云自动化AI开发平台ModelArts 3.0发布,从训练数据到模型落地一站式打通 训练、标注成本节省90%!华为云自动化AI开发平台ModelArts 3.0发布,从训练数据到模型落地一站式打通
- 当我们需要同时执行多个任务、并且不会因为其中一个任务的执行时间漫长而陷入阻塞,就需要用到并发,也即多线程。Java中的并发实现主要在java.util.concurrent包中,Future这个概念其实Java里也有。Scala是在Java的基础上实现的函数式编程语言,所以Scala也可以调用Java API。今天会介绍Scala并发中应用比较多的两个概念——Future、ExecutionCon 当我们需要同时执行多个任务、并且不会因为其中一个任务的执行时间漫长而陷入阻塞,就需要用到并发,也即多线程。Java中的并发实现主要在java.util.concurrent包中,Future这个概念其实Java里也有。Scala是在Java的基础上实现的函数式编程语言,所以Scala也可以调用Java API。今天会介绍Scala并发中应用比较多的两个概念——Future、ExecutionCon
- 网络是一个开放的环境,仅仅依靠用户名和密码难以应对复杂的网络环境,针对可能存在的身份伪造的欺骗行为,以及监听通信内容的窃听行为,为了确保通信双方身份的真实性和通信内容的私密性,防止非法用户对GaussDB(DWS)系统、其他用户造成不利影响,GaussDB(DWS)建立了一套完整而严密的防护机制——连接认证机制,可以有效防止非法用户入侵。 网络是一个开放的环境,仅仅依靠用户名和密码难以应对复杂的网络环境,针对可能存在的身份伪造的欺骗行为,以及监听通信内容的窃听行为,为了确保通信双方身份的真实性和通信内容的私密性,防止非法用户对GaussDB(DWS)系统、其他用户造成不利影响,GaussDB(DWS)建立了一套完整而严密的防护机制——连接认证机制,可以有效防止非法用户入侵。
- 新价值 AI 机械狗 新价值 AI 机械狗
- 追逐星光,遇见最真实的自己——记华为2020全联接大会有感 追逐星光,遇见最真实的自己——记华为2020全联接大会有感
上滑加载中
推荐直播
-
全面解析华为云EI-API服务:理论基础与实践应用指南
2024/11/29 周五 18:20-20:20
Alex 华为云学堂技术讲师
本期直播给大家带来的是理论与实践结合的华为云EI-API的服务介绍。从“主要功能,应用场景,实践案例,调用流程”四个维度来深入解析“语音交互API,文字识别API,自然语言处理API,图像识别API及图像搜索API”五大场景下API服务,同时结合实验,来加深开发者对API服务理解。
回顾中 -
企业员工、应届毕业生、在读研究生共探项目实践
2024/12/02 周一 19:00-21:00
姚圣伟 在职软件工程师 昇腾社区优秀开发者 华为云云享专家 HCDG天津地区发起人
大神带你一键了解和掌握LeakyReLU自定义算子在ONNX网络中应用和优化技巧,在线分享如何入门,以及在工作中如何结合实际项目进行学习
即将直播 -
昇腾云服务ModelArts深度解析:理论基础与实践应用指南
2024/12/03 周二 14:30-16:30
Alex 华为云学堂技术讲师
如何快速创建和部署模型,管理全周期AI工作流呢?本期直播聚焦华为昇腾云服务ModelArts一站式AI开发平台功能介绍,同时结合基于ModelArts 的实践性实验,帮助开发者从理论到实验更好地理解和使用ModelArts。
去报名
热门标签