- kubectl常用命令：获取pod，查看pod相关信息，重启pod，上传下载pod中的文件等命令 kubectl常用命令：获取pod，查看pod相关信息，重启pod，上传下载pod中的文件等命令
- 场景概述如果需要确认DLI队列的运行状态，决定是否运行更多的作业时需要查看队列负载。操作步骤在华为云控制条搜索云服务监控CES。图1 搜索CES进入CES后，在页面左侧“云服务监控”列表中，单击“数据湖探索”。图2 云服务监控选择队列进行查看。图3 查看队列负载 场景概述如果需要确认DLI队列的运行状态，决定是否运行更多的作业时需要查看队列负载。操作步骤在华为云控制条搜索云服务监控CES。图1 搜索CES进入CES后，在页面左侧“云服务监控”列表中，单击“数据湖探索”。图2 云服务监控选择队列进行查看。图3 查看队列负载
- conda的使用(常用命令) 0. conda简要介绍Conda是一个开源包和环境管理系统，可以在Windows、Linux和macOS上方面地安装、运行和更新包以及相应的依赖。 1. 创建新环境使用conda create命令，可以指定相关参数。环境安装在/home/user/anaconda3/envs/xxx下。# clone base 环境中的所有包$ conda create -... conda的使用(常用命令) 0. conda简要介绍Conda是一个开源包和环境管理系统，可以在Windows、Linux和macOS上方面地安装、运行和更新包以及相应的依赖。 1. 创建新环境使用conda create命令，可以指定相关参数。环境安装在/home/user/anaconda3/envs/xxx下。# clone base 环境中的所有包$ conda create -...
- 相位欧拉运动放大是对欧拉视频放大技术的出色改进，主要借鉴了相移刻画微小位移的经典思想。 相位欧拉运动放大是对欧拉视频放大技术的出色改进，主要借鉴了相移刻画微小位移的经典思想。
- 背景 在银行传统的信用评估决策机制中，最常用的几个特征维度无非是个人资产、收入、信贷历史、抵押担保等。这些维度虽然能够反映借款人的还款能力，但是过于简单的规则往往也会拒绝掉很多潜在的优质客户。并且审核过程过于依赖网点客户经理，不但成本很高，人为风险也比较大。 随着互联网的快速发展，我们在网络上留下越来越多的轨迹，比如购物、租房、招聘、学历、社交信息等等。将这些特征引入... 背景 在银行传统的信用评估决策机制中，最常用的几个特征维度无非是个人资产、收入、信贷历史、抵押担保等。这些维度虽然能够反映借款人的还款能力，但是过于简单的规则往往也会拒绝掉很多潜在的优质客户。并且审核过程过于依赖网点客户经理，不但成本很高，人为风险也比较大。 随着互联网的快速发展，我们在网络上留下越来越多的轨迹，比如购物、租房、招聘、学历、社交信息等等。将这些特征引入...
- 数据湖探索（Data Lake Insight，简称DLI）是一款Serverless的大数据分析服务，可通过弹性伸缩资源来提高资源的使用率，减少用户数据分析成本。未来考虑基于负载的自动扩缩容来进一步智能化地管理用户的资源，提供更高的性价比服务。基于此背景，本博文简单介绍了微软发表在SIGMOD'16的一篇关于资源动态按需调整的论文，Automated Demand-driven Resou... 数据湖探索（Data Lake Insight，简称DLI）是一款Serverless的大数据分析服务，可通过弹性伸缩资源来提高资源的使用率，减少用户数据分析成本。未来考虑基于负载的自动扩缩容来进一步智能化地管理用户的资源，提供更高的性价比服务。基于此背景，本博文简单介绍了微软发表在SIGMOD'16的一篇关于资源动态按需调整的论文，Automated Demand-driven Resou...
- 数据湖探索（Data Lake Insight，简称DLI）是一款Serverless的大数据分析服务，可通过弹性伸缩资源来提高资源的使用率，减少用户数据分析成本。未来考虑基于负载的自动扩缩容来进一步智能化地管理用户的资源，提供更高的性价比服务。基于此背景，本博文简单介绍了微软发表在SIGMOD'16的一篇关于资源动态按需调整的论文，Automated Demand-driven Resou... 数据湖探索（Data Lake Insight，简称DLI）是一款Serverless的大数据分析服务，可通过弹性伸缩资源来提高资源的使用率，减少用户数据分析成本。未来考虑基于负载的自动扩缩容来进一步智能化地管理用户的资源，提供更高的性价比服务。基于此背景，本博文简单介绍了微软发表在SIGMOD'16的一篇关于资源动态按需调整的论文，Automated Demand-driven Resou...
- 早期，数据库仅仅提供SQL命令来查询其内部的运行状态，导致数据库运维操作门槛高，易用性差，DBA一度成为高度专业化的关键岗位，享受高薪和大家羡慕的目光的同时，也为企业的数据安全带来了不确定性风险。并且，命令行运维不直观，严重依赖运维人员经验，不能做到快速的发现、定位、解决问题，导致数据库运维问题，发现难，定位难，解决难。为了应对这种情况，数据库运行数据的可视化... 早期，数据库仅仅提供SQL命令来查询其内部的运行状态，导致数据库运维操作门槛高，易用性差，DBA一度成为高度专业化的关键岗位，享受高薪和大家羡慕的目光的同时，也为企业的数据安全带来了不确定性风险。并且，命令行运维不直观，严重依赖运维人员经验，不能做到快速的发现、定位、解决问题，导致数据库运维问题，发现难，定位难，解决难。为了应对这种情况，数据库运行数据的可视化...
- 互联网浪潮下，新电商、游戏等企业迎来了新一轮市场竞争，许多电商企业每天都在思考该如何更好地利用手中的数据，为现有客户提供“更贴身”服务、洞察新业务、挖掘更多潜在消费者、拓展新市场。如何面对业务飞速增长的挑战一直专注于应用的电商企业，在面对如何构建数字化能力所需要的ICT基础设施和服务时，面临着选择：是该自己投入高研发成本呢？还是选择市场领先的产品呢？梦饷集团也曾面临这样的挑战，作为新电商基础... 互联网浪潮下，新电商、游戏等企业迎来了新一轮市场竞争，许多电商企业每天都在思考该如何更好地利用手中的数据，为现有客户提供“更贴身”服务、洞察新业务、挖掘更多潜在消费者、拓展新市场。如何面对业务飞速增长的挑战一直专注于应用的电商企业，在面对如何构建数字化能力所需要的ICT基础设施和服务时，面临着选择：是该自己投入高研发成本呢？还是选择市场领先的产品呢？梦饷集团也曾面临这样的挑战，作为新电商基础...
- 背景FusionInsight MRS集群默认安装Ranger服务并启用了Ranger鉴权模型，管理员可以通过组件权限插件对组件资源的访问设置细粒度的安全访问策略。目前安全模式集群中支持Ranger的组件包括：HDFS、Yarn、HBase、Hive、Spark2x、Kafka、Storm、Elasticsearch、HetuEngine。 使用场景MRS3.0.2以前的版本中只需要在Fu... 背景FusionInsight MRS集群默认安装Ranger服务并启用了Ranger鉴权模型，管理员可以通过组件权限插件对组件资源的访问设置细粒度的安全访问策略。目前安全模式集群中支持Ranger的组件包括：HDFS、Yarn、HBase、Hive、Spark2x、Kafka、Storm、Elasticsearch、HetuEngine。 使用场景MRS3.0.2以前的版本中只需要在Fu...
- 为了保护用户的数据安全，避免系统管理员拥有过度集中的权利带来高风险，DWS支持使用不同类型的用户分别控制不同权限的三权分立模式。开启此模式后将系统管理员的权限分立给安全管理员和审计管理员。 为了保护用户的数据安全，避免系统管理员拥有过度集中的权利带来高风险，DWS支持使用不同类型的用户分别控制不同权限的三权分立模式。开启此模式后将系统管理员的权限分立给安全管理员和审计管理员。
- 问题场景：某个需求里，需要使用calcite， 将优化后的calcite逻辑计划树转成sql语句。 static String toSql(RelNode root, DataSourceType dataSourceType) { SqlDialect dialect; // 根据对应数据库类型决定dialect dialect = dat... 问题场景：某个需求里，需要使用calcite， 将优化后的calcite逻辑计划树转成sql语句。 static String toSql(RelNode root, DataSourceType dataSourceType) { SqlDialect dialect; // 根据对应数据库类型决定dialect dialect = dat...
- 在DWS中，通过锁以及多版本并发控制可以保护数据的一致性等，例如A正在查询数据，B就无法对A访问的对象执行DDL。A正在更新某条记录，B就不能删除或更新这条记录；锁本身是数据库自动管理的，同时数据库还提供了LOCK语法，允许用户自己控制锁。 当然，如果应用业务的程序逻辑设计不合理，就可能导致严重的锁等待现象，或者死锁的产生。如果你发现SQL请求大多数时候处于等待... 在DWS中，通过锁以及多版本并发控制可以保护数据的一致性等，例如A正在查询数据，B就无法对A访问的对象执行DDL。A正在更新某条记录，B就不能删除或更新这条记录；锁本身是数据库自动管理的，同时数据库还提供了LOCK语法，允许用户自己控制锁。 当然，如果应用业务的程序逻辑设计不合理，就可能导致严重的锁等待现象，或者死锁的产生。如果你发现SQL请求大多数时候处于等待...
- 在kafka-0.8.2之后，producer不再区分同步(sync)和异步方式(async)，所有的请求以异步方式发送，这样提升了客户端效率。producer请求会返回一个应答对象，包括偏移量或者错误信。这种异步方地批量的发送消息到kafka broker节点，因而可以减少server端资源的开销。新的producer和所有的服务器网络通信都是异步地，在ack=-1模式下需要等待所有的re... 在kafka-0.8.2之后，producer不再区分同步(sync)和异步方式(async)，所有的请求以异步方式发送，这样提升了客户端效率。producer请求会返回一个应答对象，包括偏移量或者错误信。这种异步方地批量的发送消息到kafka broker节点，因而可以减少server端资源的开销。新的producer和所有的服务器网络通信都是异步地，在ack=-1模式下需要等待所有的re...
- 首先让我们先来总结一下用户修改块时，Oracle内部都发生了什么：1、如果块不在Buffer cache，将块读入Buffer cache2、先生成重做记录，并记入日志缓存，在用户提交时写到日志文件中3、在Buffer cache中修改块4、在Buffer cache中设置块的脏标志位，标志块变成脏块，同时在检查点队列末尾增加一个新节点，记录这个新脏块的信息，信息包括：脏块在Buffer c... 首先让我们先来总结一下用户修改块时，Oracle内部都发生了什么：1、如果块不在Buffer cache，将块读入Buffer cache2、先生成重做记录，并记入日志缓存，在用户提交时写到日志文件中3、在Buffer cache中修改块4、在Buffer cache中设置块的脏标志位，标志块变成脏块，同时在检查点队列末尾增加一个新节点，记录这个新脏块的信息，信息包括：脏块在Buffer c...
上滑加载中
推荐直播
-
HDC深度解读系列 - AI时代的华为开发者空间2025/07/24 周四 16:30-18:00
Edwin 华为开发者空间产品总监 姚圣伟 HCDG天津核心组代表&HCDE
继HDC发布开发者空间新特性后，本期直播聚焦华为开发者空间核心升级，邀您一起深度解读其如何赋能AI时代智能应用开发，解锁开发新体验
回顾中 -
OpenHarmony生态构建2025/07/24 周四 19:00-20:00
王天一、聂嘉一 -华为开发者布道师-高校学生
本次直播将结合讲师的实践经验，深入剖析OpenHarmony开发中的核心痛点与难点，展示从入门到进阶的多层次开发案例，并分享高效的学习路径、实用开发技巧和常见问题的解决方案。同时，我们还将探讨OpenHarmony的生态建设，解析测试规范与开发实践，帮助开发者更好地适配多设备，共同推动OpenHarmony生态的发展。
回顾中
热门标签