IBM的ModelMesh走向开源 使开发者能够大规模部署A
模型服务是AI用例的一个关键组成部分。它涉及从人工智能模型中提供推论，以响应用户的请求。那些涉足企业级机器学习应用的人知道，通常不是一个模型提供推论，而是实际上有数百甚至数千个模型在同步运行。 这在计算上是一个非常昂贵的过程，因为你不可能在每次要提供请求时都启动一个专用容器。这对在Kubernetes集群中部署大量模型的开发者来说是一个挑战，因为存在一些限制，如允许的最大荚数和IP地
model
希恩贝塔 . 2021-10-13 2231
- 1