Kubernetes 中调度器的工作流程分析

AI 编程助手,豆包旗下的编程助手,提供智能补全、智能预测、智能问答等能力,节省开发时间,释放脑海中的创造力,支持 VSCode,点击体验 AI

Kubernetes 是目前最流行的容器编排系统之一,它提供了许多优秀的特性,其中之一就是调度器。调度器是 Kubernetes 集群中负责管理容器调度的组件,它的主要作用是将容器部署到合适的节点上以尽可能地利用资源。

本文将会对 Kubernetes 中调度器的工作流程进行分析,并且分享一些最佳实践以及示例代码。

调度器的概念及作用

调度器是 Kubernetes 中的一个核心组件,主要负责对集群中的容器进行调度,并将其分配到适当的节点上进行部署。

调度器在 Kubernetes 中的核心作用如下:

  • 监听 API server 中 SchedulerConfigMap 和 SchedulerPolicyConfigMap 中的配置变更,从而调整调度策略;
  • 监听 Pod 资源的创建和删除操作,调度尚未绑定到节点的 Pod 到合适的节点上;
  • 监听节点的变化,例如节点宕机或新增节点,然后对相关 Pod 进行重新调度或或将其直接绑定到这些新节点上。

一个调度器通常由两部分组成:调度器本身和调度器算法(也称为 Predicates 和 Priorities)。

  • 调度器本身:负责监听和响应 API server 的操作,并采用调度器算法确定要绑定到哪个节点上。
  • 调度算法:是一些规则和策略,用于判断哪些节点可以绑定 Pod,并根据 Pod 的需求和节点的资源特性来确定最终的节点。调度算法中的两个重要部分是 Predicates 和 Priorities。

Predicates 和 Priorities

Predicates 和 Priorities 是 Kubernetes 调度算法中的两个重要组件,它们都是用于确定哪些节点可以绑定 Pod,并根据其特性和资源需求将 Pod 分派到合适的节点上。下面分别介绍。

Predicates

Predicates 是调度器算法的第一步,它用于从候选节点列表中过滤掉不符合条件的节点。通常情况下,Predicates 会根据诸如资源限制、亲和性、互斥等因素来确定哪些节点适合绑定 Pod。

Predicates 应该是轻量级和快速的,它们可能会在调度器算法的后续步骤中被多次调用。常见的 Predicates 如下:

  • PodFitsResources:调度器会过滤掉资源不足的节点,例如内存或 CPU 小于需求量的节点;
  • PodFitsHostPorts:调度器会过滤掉与 Pod 端口冲突的节点;
  • PodMatchNodeSelector:调度器会过滤掉无法满足 Pod 标签选择器的节点;
  • PodFitsHost:调度器会过滤掉不能满足 Pod 亲和性或互斥约束的节点。

Priorities

Priorities 是调度器算法的第二步,它用于从 Predicates 过滤后的候选节点列表中选择最优节点。根据优先级策略,调度器将从候选节点列表中选择某个节点将绑定 Pod。

Priorities 应该是相对较重的,因为它们通常仅在候选节点列表中选择前几个节点。常见的 Priorities 如下:

  • SelectorSpreadPriority:调度器会尽可能将 Pod 分散到不同的节点上,以降低节点出现故障的概率;
  • LeastRequestedPriority:调度器会选择可用资源最大的节点(也称为 best-fit);
  • SelectorPreferencePriority:调度器将依据先前指定的标签选择器来选择节点。

调度器的工作流程

根据上述分析,我们可以开始分析调度器的工作流程了。一个简单的调度器工作流程如下:

图中省略的部分是:k8s_scheduler_config,其实是 kube-system namespace 内的 kube-scheduler ConfigMap。ConfigMap 的内容主要包含调度器的工作配置和算法。

从上图可以看出,调度器的工作流程包含以下几个步骤:

  1. Pod 创建:一个 Pod 对象被创建,并被提交到 Kubernetes 集群中的 API server 中。
  2. 调度器监听:调度器会监听到 Pod 创建事件,并检查 Pod 是否具有可以马上绑定到节点上的节点。
  3. Predicates 运行:调度器启动 Predicates (多个)POS(Parallel Optimal Scheduling)算法,以过滤掉无法满足 Pod 要求的节点。
  4. Priorities 运行:从 Predicates 过滤后的候选节点列表中选择最优节点,通过 Priorities 策略将 Pod 绑定到选定的节点上。
  5. 节点绑定:调度器将调度决策写入 API server 中的 PodBindings 对象,以便 Kubernetes 后续将 Pod 绑定到节点上。
  6. Pod 启动:Pod 会被 Kubernetes API server 内部的控制器管理器分配到节点上,并启动相应的容器。

示例代码

下面是一些使用 Kubernetes Python 客户端库的示例代码,该库提供了从 Python 访问 Kubernetes API server 的功能。

---- ---------- ------ ------- ------
------ ----

-------------------------

- ------------- --- ---
---- --------------- -- --
    ---- - ------------

- -- --- --
-- - ------------------
---- - ----------------------------------- --------------------
---------- -------- ------------ - -------------------

上述代码使用 YAML 文件定义 Pod,并将其提交到 Kubernetes API server。使用 Kubernetes Python 客户端库可以轻松地编写自定义调度器,并为 Kubernetes 添加一些自定义功能。

一些最佳实践

最后,我们还想分享一些最佳实践和设计约定,有助于将 Kubernetes 中的调度器优化到最佳状态。

资源请求和限制

当我们创建 Pod 时,我们应该明确地指定 Pod 的资源需求和限制。这将帮助调度器更好地使用可用资源,并将 Pod 分配到与其需求最匹配的节点上。

为了完成这项工作,我们可以使用 PodSpec 中的 resources 字段,例如:

----------- --
----- ---
---------
  ----- -----
-----
  -----------
  - ----- -----
    ------ -----
    ----------
      -------
        ---- ---
        ------- -------
      ---------
        ---- ------
        ------- -------

上述 YAML 文件定义了一个名为 "nginx" 的 Pod,它要求 500m CPU 和 256Mi 内存,同时最多限制 1 CPU 和 512Mi 内存。

亲和性和互斥

Pod 在进行调度时,可以指定与某个或某个节点关联性(亲和性)或互斥性。这可以帮助我们使 Pod 与特定集群节点共生或排斥它们,并可以使用 Label 来指定关联规则。

例如:

----------- --
----- ---
---------
  -------
    ---- -----
  ----- -----
-----
  ---------
    -------------
      -----------------------------------------------
        ------------------
        - -----------------
          - ---- ----------------------
            --------- --
            -------
            - -------
  -----------
    ------ -----
    ----- -----
    ------
    - -------------- --

示例文件指定在计划 Pod 时,调度器只会寻找具有标签 kubernetes.io/hostname=my-node 的节点。这通常是将特定类型的工作负载绑定到特定节点的一种方法,以使集群更轻松地管理和平衡。

总结

Kubernetes 调度器是 Kubernetes 集群中一个重要的组成部分。它可以帮助我们将容器部署到合适的节点上,以便在集群中最大化利用资源。本文对 Kubernetes 中调度器的工作流程进行了详细的介绍,并且分享了一些最佳实践和设计约定。同时,我们还提供了一些使用 Kubernetes Python 客户端库的示例代码。

来源:JavaScript中文网 ,转载请联系管理员! 本文地址:https://www.javascriptcn.com/post/645d497c968c7c53b0fccb2c


猜你喜欢

  • 使用 Server-sent Events 实现实时在线图书馆

    在一个现代化的在线图书馆应用中,用户需要能够方便地查找图书、借阅图书,并可在借阅中保持实时感。这就需要实时在线图书馆的实现,而 Server-sent Events 技术正是一种用于实现实时通信的工具...

    1 年前
  • 优化您的 UI:提高无障碍性

    在前端开发中,为了提高用户体验和页面可访问性,我们需要始终关注无障碍性方面的问题。无障碍性(Accessibility)是指让所有人都可以平等地使用我们开发的网站或应用程序,包括残障人士、老年人、低视...

    1 年前
  • 「ES12」中如何使用 Array.prototype.at() 方法

    在最新的 ECMAScript 12(ES12) 中,新增了 Array.prototype.at() 方法,可以方便地获取数组中指定位置的元素,而不用通过计算索引等复杂的方式。

    1 年前
  • eslint-plugin-chai-expect 封装 chai.expect 猪脚

    前言 在前端开发中,我们经常要进行各种测试,而测试框架中最常用的是 Chai,它是一个 BDD / TDD 库,可以方便地编写断言和测试用例。其中 chai.expect() 方法是很常用的,但使用方...

    1 年前
  • RESTful API 如何处理请求频率限制?

    RESTful API 是现在很多 Web 应用程序的核心,它们提供可扩展和易于维护的解决方案。但是,随着用户数量的增加,有必要引入请求频率限制,以保护服务器免受意外的攻击。

    1 年前
  • CSS Reset 在响应式设计中的应用

    在响应式设计的开发中,CSS Reset 扮演着至关重要的角色。CSS Reset 是一种允许开发者重置浏览器默认的 CSS 样式的技术,它使开发者能够更好地控制 HTML 元素的样式,避免浏览器默认...

    1 年前
  • React 单元测试神器 ——Enzyme

    什么是 React 单元测试 在 React 开发中,单元测试是非常重要的一环。单元测试是指对程序中最小可测试单元进行检查和验证,以保证其功能正确。在 React 中,最小可测试单元可以是组件、函数等...

    1 年前
  • 如何实现 Fastify 的插件化开发

    Fastify 是一个流行的 Node.js Web 框架,它提供了高效、极速的路由和中间件处理能力。Fastify 的插件化开发方式,使得我们开发和维护 Web 应用变得更加简单和灵活。

    1 年前
  • Redis 鉴权机制及使用方法详解

    前言 Redis 是一款开源的 key-value 存储系统,常用于缓存、消息队列等场景。在使用 Redis 时,我们需要注意安全性问题,尤其是针对鉴权问题。本文将介绍 Redis 的鉴权机制及使用方...

    1 年前
  • RxJS 中的 fromEvent 操作符详解

    RxJS 是一个非常优秀的 JavaScript 响应式编程库。它通过提供一系列操作符来简化开发者的工作。而 fromEvent 操作符是其中一个非常实用的操作符,它可以让开发者快速地将 DOM 事件...

    1 年前
  • SASS 中的 interpolation 字符串插值用法详解

    SASS 中的 interpolation 字符串插值用法详解 SASS 是一种用于编写 CSS 的扩展语言,它提供了很多方便的语法和功能,使得样式表的编写更加高效、灵活。

    1 年前
  • ES7 新增特性:Array.prototype.includes 方法

    在 ES7 中,新增了 Array.prototype.includes 方法,可以方便地检查数组中是否含有特定的元素。 语法 ---------------------------- -------...

    1 年前
  • 利用 Chai.js 对异常情况进行测试的最佳实践

    前言 在进行前端开发时,每个程序员都经常面临着代码异常问题。传统的调试方式可能会浪费很多时间,而单元测试可以帮助我们更快速地找出问题所在。在前端开发中,使用 Chai.js 单元测试框架可以帮助我们更...

    1 年前
  • ES6 中的 Proxy 用法详解

    ES6 中的 Proxy 用法详解 在 Javascript 的世界中,除了原生的对象、数组以外,我们经常会用到一些“特殊”的对象,比如像 JSON、Map、Set 等等。

    1 年前
  • 改善 Express.js 性能指南

    Express.js 是一个广泛使用的 Node.js Web 框架,然而手写 Express.js 应用时常常存在性能问题。本文将介绍如何改善 Express.js 应用的性能,提高应用的吞吐量和响...

    1 年前
  • Webpack4 优化之 SplitChunksPlugin 配置详解

    Webpack4 优化之 SplitChunksPlugin 配置详解 随着前端项目越来越庞大,模块化程度越来越高,打包构建工具的优化越来越被重视。其中,Webpack 是目前最流行的前端打包工具之一...

    1 年前
  • 使用 ImmutableJS 简化 Redux 的 state 管理

    使用 ImmutableJS 简化 Redux 的 state 管理 在前端开发中,Redux 是一种非常流行的状态管理工具。Redux 将整个应用程序的状态存储在一个单一的对象中,称为 store。

    1 年前
  • Node.js 中使用 WebSocket 进行实时通信

    前言 随着移动互联网和 Web 技术的发展,实时性越来越重要,特别是在在线聊天、游戏、股票行情等场景下。传统的 HTTP 请求-响应模式对于实时通信的支持比较有限,一般需要轮询或短连接等方法。

    1 年前
  • Flex 布局如何实现三栏布局?

    在前端开发中,布局是一个非常重要的部分。在页面布局中,经常会遇到需要将页面分为三栏的情况,比如左栏、中栏、右栏。如何使用 flex 布局实现三栏布局呢? Flex 布局简介 Flex 布局是一种响应式...

    1 年前
  • C# 性能优化的五个方面

    在前端领域,优化性能是一个至关重要的任务。C# 是一种流行的编程语言,使用它开发的应用程序也需要考虑性能问题。在本文中,我们将讨论 C# 性能优化的五个方面,并提供一些相关的示例代码。

    1 年前

相关推荐

    暂无文章