- 前言当集群中的 node 或 pod 异常时,大部分用户会使用 kubectl 查看对应的 events,那么 events 是从何而来?其实 K8s 中的各个组件会将运行时产生的各种事件汇报到 apiserver,对于 K8s 中的可描述资源,使用 kubectl describe 都可以看到其相关的 events,那 K8s 中又有哪几个组件都上报 events 呢?只要在 k8s.io... 前言当集群中的 node 或 pod 异常时,大部分用户会使用 kubectl 查看对应的 events,那么 events 是从何而来?其实 K8s 中的各个组件会将运行时产生的各种事件汇报到 apiserver,对于 K8s 中的可描述资源,使用 kubectl describe 都可以看到其相关的 events,那 K8s 中又有哪几个组件都上报 events 呢?只要在 k8s.io...
- Kubernetes 疑难杂症排查分享,本文通过一个案例,解析 “No route to host” 报错问题,信息量不小,Are you ready ?问题反馈有用户反馈 Deployment 滚动更新的时候,业务日志偶尔会报 “No route to host” 的错误。问题分析之前没遇到滚动更新会报 “No route to host” 的问题,我们先看下滚动更新导致连接异常有哪些常见... Kubernetes 疑难杂症排查分享,本文通过一个案例,解析 “No route to host” 报错问题,信息量不小,Are you ready ?问题反馈有用户反馈 Deployment 滚动更新的时候,业务日志偶尔会报 “No route to host” 的错误。问题分析之前没遇到滚动更新会报 “No route to host” 的问题,我们先看下滚动更新导致连接异常有哪些常见...
- Spark 社区从 2.3 版本开始,已经可以很好的支持跑着 Kubernetes 上了。这对于统一资源池,提高整体资源利用率,降低运维成本(特别是技术栈归一)有着非常大的帮助。这些趋势是一个大数据人不得不重视的信号,所以一起提前了解并考虑起来吧!大数据邂逅云计算相信玩 Spark 的你已经注意到最新的 Spark 版本已经支持不做任何修改就可以直接跑在 K8s 上了,即以 Kubernet... Spark 社区从 2.3 版本开始,已经可以很好的支持跑着 Kubernetes 上了。这对于统一资源池,提高整体资源利用率,降低运维成本(特别是技术栈归一)有着非常大的帮助。这些趋势是一个大数据人不得不重视的信号,所以一起提前了解并考虑起来吧!大数据邂逅云计算相信玩 Spark 的你已经注意到最新的 Spark 版本已经支持不做任何修改就可以直接跑在 K8s 上了,即以 Kubernet...
- 近日,KubeEdge 发布了新的特性版本 v1.1在上个版本发布 EdgeMesh、EdgeSite 等特性后,KubeEdge 持续保持高速的迭代开发,本次发布的 v1.1 新版本包含了容器存储标准 CSI 集成、对象校验组件 Admission Webhook、单机一键启动 KubeEdge 集群工具、边缘节点支持 DockerShim、升级 Kubernetes 依赖到 v1.15 ... 近日,KubeEdge 发布了新的特性版本 v1.1在上个版本发布 EdgeMesh、EdgeSite 等特性后,KubeEdge 持续保持高速的迭代开发,本次发布的 v1.1 新版本包含了容器存储标准 CSI 集成、对象校验组件 Admission Webhook、单机一键启动 KubeEdge 集群工具、边缘节点支持 DockerShim、升级 Kubernetes 依赖到 v1.15 ...
- JSON,全称为JavaScript Object Notation, 也就是JavaScript对象标记,它通过对象和数组的组合来表示数据,构造简洁但是结构化程度非常高,是一种轻量级的数据交换格式。今天,我们就来了解如何利用Python保存数据到JSON文件。 JSON,全称为JavaScript Object Notation, 也就是JavaScript对象标记,它通过对象和数组的组合来表示数据,构造简洁但是结构化程度非常高,是一种轻量级的数据交换格式。今天,我们就来了解如何利用Python保存数据到JSON文件。
- 很多人问我数据科学和数据分析的最大区别是什么。有的人认为两者没有区别,有的人则认为两者千差万别。我认为,尽管两者确实存在很多不同之处,但最大的不同在于数据科学严格遵循结构化、一步一步的操作过程,保证了分析结果的可靠性。和其他科学研究一样,这些过程必须被严格执行,否则分析结果将不可靠。再直白一点,对于外行的数据科学家,严格遵循这些过程将能够快速获得准确结果。反之,如果没有清晰的路线图,则分析结... 很多人问我数据科学和数据分析的最大区别是什么。有的人认为两者没有区别,有的人则认为两者千差万别。我认为,尽管两者确实存在很多不同之处,但最大的不同在于数据科学严格遵循结构化、一步一步的操作过程,保证了分析结果的可靠性。和其他科学研究一样,这些过程必须被严格执行,否则分析结果将不可靠。再直白一点,对于外行的数据科学家,严格遵循这些过程将能够快速获得准确结果。反之,如果没有清晰的路线图,则分析结...
- 这套架构我做的时候主要领域是信贷行业的大数据反欺诈,后来也看过电商的架构,也看过金融大数据的架构,发现其实大家使用的其实也差不多是这个套路,只是在各个环节都有不同的细节。 这套架构我做的时候主要领域是信贷行业的大数据反欺诈,后来也看过电商的架构,也看过金融大数据的架构,发现其实大家使用的其实也差不多是这个套路,只是在各个环节都有不同的细节。
- 1.数据虚拟化的诞生 在这个“信息爆炸”的时代,大数据已经成为这个时代的关键词之一!随着云计算、物联网、移动计算、智慧城市、人工智能等领域日新月异的发展,人类社会已经步入了“信息高速路”的行驶轨道,数据量增长迅速,各类应用对大数据处理的需求也发生着变化。 与此同时,“久经沙场”的数据仓库不再一统江湖,而以流、批处理、AI、数据探索、MapReduce等为代表的应用势头迅猛。数据已... 1.数据虚拟化的诞生 在这个“信息爆炸”的时代,大数据已经成为这个时代的关键词之一!随着云计算、物联网、移动计算、智慧城市、人工智能等领域日新月异的发展,人类社会已经步入了“信息高速路”的行驶轨道,数据量增长迅速,各类应用对大数据处理的需求也发生着变化。 与此同时,“久经沙场”的数据仓库不再一统江湖,而以流、批处理、AI、数据探索、MapReduce等为代表的应用势头迅猛。数据已...
- 用于配置集群访问信息的文件叫作 kubeconfig 文件,在开启了 TLS 的集群中,每次与集群 交互 时都需要身份认证,生产环境一般使用证书进行认证,其认证所需要的信息会放在 kubeconfig 文件中。此外,K8s 的组件都可以使用 kubeconfig 连接 apiserver,client-go 、operator、helm 等其他组件也使用 kubeconfig 访问 apis... 用于配置集群访问信息的文件叫作 kubeconfig 文件,在开启了 TLS 的集群中,每次与集群 交互 时都需要身份认证,生产环境一般使用证书进行认证,其认证所需要的信息会放在 kubeconfig 文件中。此外,K8s 的组件都可以使用 kubeconfig 连接 apiserver,client-go 、operator、helm 等其他组件也使用 kubeconfig 访问 apis...
- 产品简介中安威士大数据安全平台(VS-BDSG)专注于为大数据环境的数据资产提供一系列的审计、访问控制、加密、脱敏等保护措施及管控,对数据的收集、加工、存储、应用等全生命周期的每个环节进行自动监测和实时处理。提供数据在事前、事中、事后的安全应对方案和处理机制,形成事前能预测,事中有方法,事后可追踪的安全闭环。产品功能 大数据安全审计本系统支持大数据HDFS、HIVE、HBASE等组件的数据安... 产品简介中安威士大数据安全平台(VS-BDSG)专注于为大数据环境的数据资产提供一系列的审计、访问控制、加密、脱敏等保护措施及管控,对数据的收集、加工、存储、应用等全生命周期的每个环节进行自动监测和实时处理。提供数据在事前、事中、事后的安全应对方案和处理机制,形成事前能预测,事中有方法,事后可追踪的安全闭环。产品功能 大数据安全审计本系统支持大数据HDFS、HIVE、HBASE等组件的数据安...
- 中国是一个“多煤、缺油、少气”的国家。因此,一直以来煤炭都是中国能源消费的主力,包括发电、供暖以及工业用能等能源消耗大户大多都是以燃烧煤炭为主。然而随着中国经济向高质量发展转变,以及人们生态环境保护意识的日渐增强,煤炭行业以往粗放式生产方式已不可持续,不仅造成人力和物力的极大浪费,对生态环境也造成了严重的破坏。在此背景下,推动新旧动能转换和能源消费结构的升级正在成为煤炭行业必须解决的一道难题... 中国是一个“多煤、缺油、少气”的国家。因此,一直以来煤炭都是中国能源消费的主力,包括发电、供暖以及工业用能等能源消耗大户大多都是以燃烧煤炭为主。然而随着中国经济向高质量发展转变,以及人们生态环境保护意识的日渐增强,煤炭行业以往粗放式生产方式已不可持续,不仅造成人力和物力的极大浪费,对生态环境也造成了严重的破坏。在此背景下,推动新旧动能转换和能源消费结构的升级正在成为煤炭行业必须解决的一道难题...
- 一年之计在于春,人工智能,云计算,大数据,软件开发四大热门领域微认证齐齐上线!拯救报复性熬夜,利用玩手机一小时充电拿华为官方认证证书。零基础可学让小白变身大神,还不来为升职加薪做准备?限时折扣转发抽平板和Mate20! 一年之计在于春,人工智能,云计算,大数据,软件开发四大热门领域微认证齐齐上线!拯救报复性熬夜,利用玩手机一小时充电拿华为官方认证证书。零基础可学让小白变身大神,还不来为升职加薪做准备?限时折扣转发抽平板和Mate20!
- Zookeeper 是一个高可用的分布式数据管理与协调框架,基于ZAB协议算法的实现,该框架能够很好的保证分布式环境中数据的一致性。Zookeeper的典型应用场景主要有:数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master选举、分布式锁和分布式队列等。本文主要介绍如何利用Zookeeper实现Master选举。Master选举Master选举在分布式系统中是一个非常... Zookeeper 是一个高可用的分布式数据管理与协调框架,基于ZAB协议算法的实现,该框架能够很好的保证分布式环境中数据的一致性。Zookeeper的典型应用场景主要有:数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master选举、分布式锁和分布式队列等。本文主要介绍如何利用Zookeeper实现Master选举。Master选举Master选举在分布式系统中是一个非常...
- 分布式系统分布式系统的简单定义:分布式系统是一个硬件或软件组件分布在不同的网络计算机上,彼此之间仅仅通过消息传递进行通信和协调的系统。分布式系统的特征:分布性:系统中的计算机在空间上随意分布和随时变动对等性:系统中的计算机是对等的,没有主从之分并发性:并发性操作是非常常见的行为缺乏全局时钟:系统中的计算机具有明显的分布性,且缺乏一个全局的时钟序列控制,所以很难比较两个事件的先后故障总是会发生... 分布式系统分布式系统的简单定义:分布式系统是一个硬件或软件组件分布在不同的网络计算机上,彼此之间仅仅通过消息传递进行通信和协调的系统。分布式系统的特征:分布性:系统中的计算机在空间上随意分布和随时变动对等性:系统中的计算机是对等的,没有主从之分并发性:并发性操作是非常常见的行为缺乏全局时钟:系统中的计算机具有明显的分布性,且缺乏一个全局的时钟序列控制,所以很难比较两个事件的先后故障总是会发生...
- 系统管理">系统管理mysql服务">启动MySQL服务通过windows服务管理器启动MySQL服务 ?1开始-->运行-->输入services.msc命令-->启动MySQL服务 通过DOS命令启动MySQL服务 ?1net start mysql 停止MySQL服务通过windows服务管理器启动MySQL服务 ?1开始-->运行-->输入services.msc命令-->停止MyS... 系统管理">系统管理mysql服务">启动MySQL服务通过windows服务管理器启动MySQL服务 ?1开始-->运行-->输入services.msc命令-->启动MySQL服务 通过DOS命令启动MySQL服务 ?1net start mysql 停止MySQL服务通过windows服务管理器启动MySQL服务 ?1开始-->运行-->输入services.msc命令-->停止MyS...
上滑加载中
推荐直播
-
基于开源鸿蒙+海思星闪开发板:嵌入式系统开发实战(Day1)
2025/03/29 周六 09:00-18:00
华为开发者布道师
本次为期两天的课程将深入讲解OpenHarmony操作系统及其与星闪技术的结合应用,涵盖WS63E星闪开发板的详细介绍、“OpenHarmony+星闪”的创新实践、实验环境搭建以及编写首个“Hello World”程序等内容,旨在帮助学员全面掌握相关技术并进行实际操作
回顾中 -
基于开源鸿蒙+海思星闪开发板:嵌入式系统开发实战(Day2)
2025/03/30 周日 09:00-12:00
华为开发者布道师
本次为期两天的课程将深入讲解OpenHarmony操作系统及其与星闪技术的结合应用,涵盖WS63E星闪开发板的详细介绍、“OpenHarmony+星闪”的创新实践、实验环境搭建以及编写首个“Hello World”程序等内容,旨在帮助学员全面掌握相关技术并进行实际操作
回顾中 -
从AI基础到昇腾:大模型初探、DeepSeek解析与昇腾入门
2025/04/02 周三 16:00-17:30
不易 / 华为云学堂技术讲师
昇腾是华为研发的AI芯片,其具有哪些能力?我们如何基于其进行开发?本期直播将从AI以及大模型基础知识开始,介绍人工智能核心概念、昇腾AI基础软硬件平台以及昇腾专区,旨在为零基础或入门级学习者搭建从AI基础知识到昇腾技术的完整学习路径。
回顾中
热门标签