- 一、前述Spark的资源调度是个很重要的模块，只要搞懂原理，才能具体明白Spark是怎么执行的，所以尤其重要。自愿申请的话，本文分粗粒度和细粒度模式分别介绍。二、具体Spark资源调度流程图：Spark资源调度和任务调度的流程：1、启动集群后，Worker节点会向Master节点汇报资源情况，Master掌握了集群资源情况。2、当Spark提交一个Application后，根据RDD之间的依... 一、前述Spark的资源调度是个很重要的模块，只要搞懂原理，才能具体明白Spark是怎么执行的，所以尤其重要。自愿申请的话，本文分粗粒度和细粒度模式分别介绍。二、具体Spark资源调度流程图：Spark资源调度和任务调度的流程：1、启动集群后，Worker节点会向Master节点汇报资源情况，Master掌握了集群资源情况。2、当Spark提交一个Application后，根据RDD之间的依...
- GR是Graceful Restart（平滑重启）的简称，是一种在协议重启时保证转发业务不中断的机制。 GR机制的核心在于：当某设备进行协议重启时，能够通知其周边设备在一定时间内将到该设备的邻居关系和路由保持稳定。在协议重启完毕后，周边设备协助其进行信息（包括支持GR的路由/MPLS相关协议所维护的各种拓扑、路由和会话信息）同步，在尽量短的时间内使该设备恢复到重启前的状态。在整个协议重启过程中不会 GR是Graceful Restart（平滑重启）的简称，是一种在协议重启时保证转发业务不中断的机制。 GR机制的核心在于：当某设备进行协议重启时，能够通知其周边设备在一定时间内将到该设备的邻居关系和路由保持稳定。在协议重启完毕后，周边设备协助其进行信息（包括支持GR的路由/MPLS相关协议所维护的各种拓扑、路由和会话信息）同步，在尽量短的时间内使该设备恢复到重启前的状态。在整个协议重启过程中不会
- （原创，转载请说明出处！谢谢--http://www.cnblogs.com/linguanh/） 此文目的为了帮助大家较全面、通俗地了解线程 Thread 相关基础知识！ 目录： --线程的创建： --启动线程 --线程的调度 --Thread 类的简介 --线程的同步/异步 --wait() 和 notify(),... （原创，转载请说明出处！谢谢--http://www.cnblogs.com/linguanh/） 此文目的为了帮助大家较全面、通俗地了解线程 Thread 相关基础知识！ 目录： --线程的创建： --启动线程 --线程的调度 --Thread 类的简介 --线程的同步/异步 --wait() 和 notify(),...
- 异步、多线程、任务、并行编程之一：选择合适的多线程模型 本篇概述： @FCL4.0中已经存在的线程模型，以及它们之间异同点； @多线程编程模型的选择。 1：异步、多线程、任务、并行的本质 这四个概念对应在CLR中的本质，本质都是多线程。 异步，简单的讲就是BeginInvoke、EndInvoke模式，它在CLR内部线程池进行管理... 异步、多线程、任务、并行编程之一：选择合适的多线程模型 本篇概述： @FCL4.0中已经存在的线程模型，以及它们之间异同点； @多线程编程模型的选择。 1：异步、多线程、任务、并行的本质 这四个概念对应在CLR中的本质，本质都是多线程。 异步，简单的讲就是BeginInvoke、EndInvoke模式，它在CLR内部线程池进行管理...
- 什么是批处理？在现代企业应用当中，面对复杂的业务以及海量的数据，除了通过庞杂的人机交互界面进行各种处理外，还有一类工作，不需要人工干预，只需要定期读入大批量数据，然后完成相应业务处理并进行归档。这类工作即为“批处理”为什么使用Spring BatchSpring Batch 作为 Spring 的子项目，是一款基于 Spring 的企业批处理框架。通过它可以构建出健壮的企业批处理应用。Spr... 什么是批处理？在现代企业应用当中，面对复杂的业务以及海量的数据，除了通过庞杂的人机交互界面进行各种处理外，还有一类工作，不需要人工干预，只需要定期读入大批量数据，然后完成相应业务处理并进行归档。这类工作即为“批处理”为什么使用Spring BatchSpring Batch 作为 Spring 的子项目，是一款基于 Spring 的企业批处理框架。通过它可以构建出健壮的企业批处理应用。Spr...
- Too many open files有四种可能:一 单个进程打开文件句柄数过多,二 操作系统打开的文件句柄数过多,三 systemd对该进程进行了限制,四 inotify达到上限. Too many open files有四种可能:一 单个进程打开文件句柄数过多,二 操作系统打开的文件句柄数过多,三 systemd对该进程进行了限制,四 inotify达到上限.
- 近年来越来越多的企业开始实践微服务，本文分为上下两篇介绍微服务框架ServiceComb如何帮助企业应用进行微服务化，实现快速交付，并可靠地运行在云端。下篇介绍ServiceComb的通信处理设计。 近年来越来越多的企业开始实践微服务，本文分为上下两篇介绍微服务框架ServiceComb如何帮助企业应用进行微服务化，实现快速交付，并可靠地运行在云端。下篇介绍ServiceComb的通信处理设计。
- 之前在某次安全测试时，遇到一个80端口被占用的坑，将解决方法共享出来。 使用netstat -ano 命令查看是哪个进程正在占用80端口 之前在某次安全测试时，遇到一个80端口被占用的坑，将解决方法共享出来。 使用netstat -ano 命令查看是哪个进程正在占用80端口
- 本文对OOM、OOM killer以及Overcommit进行了介绍，对其配置进行了说明。 本文对OOM、OOM killer以及Overcommit进行了介绍，对其配置进行了说明。
- 1 介绍MySQL 提供了异步复制，主库并不关心备库是否收到日志，从而可能导致较多的数据丢失。从MySQL5.5开始引入了一种半同步复制功能，该功能可以确保主服务器和至少一台从服务器之间的数据一致性和冗余，从而可以减少数据的丢失。1.1 异步复制 master将binlog event发送给slave后，不去确认slave是否已经收到就返回成功给客户端。1.2 半同步 1 介绍MySQL 提供了异步复制，主库并不关心备库是否收到日志，从而可能导致较多的数据丢失。从MySQL5.5开始引入了一种半同步复制功能，该功能可以确保主服务器和至少一台从服务器之间的数据一致性和冗余，从而可以减少数据的丢失。1.1 异步复制 master将binlog event发送给slave后，不去确认slave是否已经收到就返回成功给客户端。1.2 半同步
- 对于kafka，我们不仅在单机、集群、参数调优等方面，对kakfa全方位研究，更要在代码层解读，从原理到代码细节一一打开看看。(声明：所有这系列代码分析章节，有些图片/资料整理来自网络公开资料，站在巨人肩膀上二次仔细解读代码总结分享给大家) 对于kafka，我们不仅在单机、集群、参数调优等方面，对kakfa全方位研究，更要在代码层解读，从原理到代码细节一一打开看看。(声明：所有这系列代码分析章节，有些图片/资料整理来自网络公开资料，站在巨人肩膀上二次仔细解读代码总结分享给大家)
- 对于kafka，我们不仅在单机、集群、参数调优等方面，对kakfa全方位研究，更要在代码层解读，从原理到代码细节一一打开看看。(声明：所有这系列代码分析章节，有些图片/资料整理来自网络公开资料，站在巨人肩膀上二次仔细解读代码总结分享给大家) 对于kafka，我们不仅在单机、集群、参数调优等方面，对kakfa全方位研究，更要在代码层解读，从原理到代码细节一一打开看看。(声明：所有这系列代码分析章节，有些图片/资料整理来自网络公开资料，站在巨人肩膀上二次仔细解读代码总结分享给大家)
- 对于kafka，我们不仅在单机、集群、参数调优等方面，对kakfa全方位研究，更要在代码层解读，从原理到代码细节一一打开看看。(声明：所有这系列代码分析章节，有些图片/资料整理来自网络公开资料，站在巨人肩膀上二次仔细解读代码总结分享给大家) 对于kafka，我们不仅在单机、集群、参数调优等方面，对kakfa全方位研究，更要在代码层解读，从原理到代码细节一一打开看看。(声明：所有这系列代码分析章节，有些图片/资料整理来自网络公开资料，站在巨人肩膀上二次仔细解读代码总结分享给大家)
- Go语言程序初始化过程总览在Go语言链接的时候会，会生成程序入口点符号，在cmd\link\internal\ld\lib.go中if *flagEntrySymbol == "" { switch Buildmode { case BuildmodeCShared, BuildmodeCArchive: *flagEntrySymbol = fm Go语言程序初始化过程总览在Go语言链接的时候会，会生成程序入口点符号，在cmd\link\internal\ld\lib.go中if *flagEntrySymbol == "" { switch Buildmode { case BuildmodeCShared, BuildmodeCArchive: *flagEntrySymbol = fm
- 我们知道，开发项目里面进度最难以预期的就是解决bug的速度，经常会遇到一些难以分析解决的bug影响整个项目的进度。当我们使用C/C++构建我们的程序的时候，经常会遇到这类问题，主要表现在• 问题难以复现• 大压力下运行几天才能出现。• 大并发问题下，出现问题现场无法分析定位问题。• ...经过大量的分析 我们知道，开发项目里面进度最难以预期的就是解决bug的速度，经常会遇到一些难以分析解决的bug影响整个项目的进度。当我们使用C/C++构建我们的程序的时候，经常会遇到这类问题，主要表现在• 问题难以复现• 大压力下运行几天才能出现。• 大并发问题下，出现问题现场无法分析定位问题。• ...经过大量的分析
上滑加载中
推荐直播
-
华为云码道 × 仓颉编程：工程化AI编码探索2026/05/27 周三 19:00-21:00
刘俊杰-华为云仓颉语言专家/李炎-华为云码道技术专家/王智鹏-OpenCangjie开源社区发起人
本场直播围绕华为云仓颉语言与华为云码道的深度结合，展示华为云智能编程从零基础到高效落地的完整生态能力。以华为云码道为引擎，仓颉语言为载体，带给大家日常提效、趣味创新到极速量产的开发体验。
回顾中
热门标签