利用 JuiceFS给Flink 容器启动加速
作者 | 胡梦宇，知乎大数据架构开发工程师 编辑 | Linda Flink 因为其可靠性和易用性，已经成为当前最流行的流处理框架之一，在流计算领域占据了主导地位。早在 18 年知乎就引入了 Flink，发展到现在，Flink 已经成为知乎内部最重要的组件之一，积累了 4000 多个 Flink 实时任务，每天处理 PB 级的数据。 Flink 的部署方式有多种，根据资源调度器来分
juicefs
InfoQ . 2021-12-16 1150
IBM的ModelMesh走向开源 使开发者能够大规模部署A
模型服务是AI用例的一个关键组成部分。它涉及从人工智能模型中提供推论，以响应用户的请求。那些涉足企业级机器学习应用的人知道，通常不是一个模型提供推论，而是实际上有数百甚至数千个模型在同步运行。 这在计算上是一个非常昂贵的过程，因为你不可能在每次要提供请求时都启动一个专用容器。这对在Kubernetes集群中部署大量模型的开发者来说是一个挑战，因为存在一些限制，如允许的最大荚数和IP地
model
希恩贝塔 . 2021-10-13 1796
百度混部实践：如何提高 Kubernetes 集群资源利用率？
作者 | 百度云原生 随着 Kubernetes 被业界越来越广泛地使用，单个集群规模也逐渐增大，很多人都会发现自己维护的 Kubernetes 集群普遍存在一个问题：分配率较高，而利用率偏低。比如，一个有 1000+ 节点的集群，在分配率达到 80% 后，常常会因为集群碎片的原因，很多大规格的 Pod 就无法再被创建出来。与此同时，整个集群的日均 CPU 利用率却不足 15%，常态使用率
kubernetes
InfoQ . 2021-09-22 1840
Mesos 已死，容器永生｜极客时间
就在前几个月，Apache 宣布准备将曾火极一时的 Mesos 项目移至 Attic 下 ，保存为“只读”状态。要知道，Attic 是 Apache 软件基金会为已终止项目提供的一种解决方案，这意味着 Mesos 正式进入项目“退休”阶段。 说实话，我并不惊讶。过去几年，以 docker、kubernetes 为代表的容器技术已发展为一项通用技术，BAT、滴滴、京东、头条等大厂，都争相把容器和 k
mesos
InfoQ . 2021-07-18 1162
基于kubernetes托管虚机后续管理设计
基于kubernetes托管虚机有一些现成的方案，不过今天笔者要聊的是在虚机交付后，该如何实现后续的管理，包括如何实现环境和代码的部署与更新，感兴趣的可以一起看看，本篇是设计篇 1. 虚机应用的托管 由于虚机应用交付流程链路的复杂性，我们无法设计一套机制，能cover住100%的异常场景，所以我们专注正常流的交付，后期可以针对异常的案例来进行复盘，不断提高交付成功率，本节主要介绍我们设计的自动化交
控制器
oschina . 2020-10-15 805
Kubernetes架构和核心组件组成 Kubernetes节点“容器运行时”技术分析
Kubernetes架构简介 Kubernetes架构如下图所示： 在这张系统架构图中，我们把服务分为运行在工作节点上的服务和组成集群级别控制板的服务。Kubernetes节点有运行应用容器必备的服务，而这些都是受Master的控制。 每次个节点上当然都要运行Docker。Docker来负责所有具体的映像下载和容器运行。 Kubernetes主要由以下几个核心组件组成： 1) etcd保存了整个集
容器
Chinaunix . 2020-09-25 575
- 1