0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

4 个场景揭秘,如何低成本让容器化应用 Serverless 化

电子设计 来源: 电子设计 作者: 电子设计 2020-12-15 00:30 次阅读

作者 | changshuai

FaaS 的门槛

Serverless 形态的云服务帮助开发者承担了大量复杂的扩缩容、运维、容量规划、云产品打通集成等责任,使得开发者可以专注业务逻辑、提高交付速度 (Time-to-market) ,持续优化成本。Function-as-a-Service (FaaS) 作为云上最早也是应用最广泛的 Serverless 计算形态,在几年的时间内吸引了大批开发者,逐渐建立了 Serverless 优先的选型逻辑。然而从传统应用迁移到 FaaS 在开发者体验上还面临诸多挑战:

环境不统一:各厂商定义的交付物格式,运行环境兼容性、丰富度都不尽相同,需要开发者适配,甚至重新编译;

学习成本:打包依赖库、构建成压缩代码包和熟悉的开发部署方式不同;

服务限制:如代码包限制在百 MB 级别,迫使交付物代码依赖分离,加大管理和发布难度;

交付物缺乏版本管理:格式不标准,最佳实践不统一,需要开发者自行负责;

生态不成熟:缺少流行开源工具(如 CI/CD 流水线)的支持和集成。

另一方面,容器在可移植性和交付敏捷性上实现了颠覆式创新。围绕容器的生态沉淀非常丰富且成熟,被广泛接受使用,应用容器化正在快速成为开发和部署的事实标准。然而容器本身并没有减轻运维、扩缩容、闲置成本、和云服务集成等难题。

函数计算支持容器镜像

阿里云 FaaS 函数计算支持容器镜像作为函数交付物,将容器优秀的开发、部署、生态(上线前)结合函数计算自身免运维、零闲置成本、云服务集成等特性(上线后),全面升级开发者体验:

简化应用 Serverless 化:无需修改代码或是重新编译二进制、共享对象(*.so),本地调试,保持开发和线上环境一致;

更大函数代码限制:解压前镜像最大支持 1 GB(相比代码包最大解压前 50MB),避免代码和依赖分离,简化分发和部署;

容器镜像分层缓存:增量代码上传和拉取,提高开发效率和降低冷启动延迟;

镜像分享、复用:逻辑可以移植、减少重复开发建设;

混合部署:同一应用 Serverfull (ECS, 容器 ACK)、Serverless (FC, ASK, SAE),不同应用混合部署或同一应用不同服务间切流,达到性能一致、资源刚性交付、快速扩容、运维最小化的平衡;

CI/CD:持续构建、集成测试、代码上传、存储和标准的版本管理,丰富的开源生态 CI/CD 工具可以复用。

典型客户场景

1. 事件驱动音视频处理

视频处理有流量波动较大、对计算资源弹性要求高、监听视频上传事件以及依赖工作流和队列等服务的特性,使得 FaaS 成为自建音视频业务上云的首选。然而这类场景中最常用的软件 ffmpeg 往往需要定制编译满足不同的需求。编译的二进制依赖编译环境中的共享对象(*.so)和 glibc 等库,与 FaaS 运行环境不兼容无法运行。重新编译不仅带来了额外工作,不同的依赖和版本也给业务稳定性带来了挑战。

使用已有 Dockerfile 将转码逻辑以及相关依赖保持现有的安装方式和完全隔离的容器沙箱运行环境,极大降低迁移成本,稳定性风险和 FaaS 的开发部署学习成本。

2. Serverless AI/ML 模型预测、推理 serving

AI/ML 推理预测服务同样可以享受 FaaS 免运维、自动伸缩、低成本的好处。然而社区流行的框架如 TensorFlow 都默认以容器镜像的方式分享和复用。不仅官方提供了完整的版本覆盖,基于官方镜像的社区生态也非常活跃。

在离线模型训练阶段以容器镜像部署在 ECS 或 ACK/ASK GPU 集群。在服务推理/预测(serving inference/prediction)阶段,CPU 往往是性价比更高的选择。Serving 的特点是请求量驱动,既需要能快速响应突发(burst)流量,又要在波谷周期释放资源,甚至是缩容至0节省成本。而这些需求天然就是函数计算所擅长的。

在没有容器镜像支持之前,想要将一个 TensoflowFlow serving 的示例部署在函数计算上并不容易。TensorFlow 本身的库大小远超过代码包 50MB 的限制,将依赖打包进 NAS 可以绕过这个问题,然而却增大了上手和迁移的难度。不规范的依赖和版本管理也为变更引入稳定性风险。而使用容器镜像以及函数计算 HTTP server 的编程模型,简单的几行 Dockerfile 就可以在 FC 跑起来 Tensorflow Serving 的示例:

函数计算支持容器镜像帮助 AI/ML 场景平滑地混合部署容器和函数,统一 CICD 工具、流程和最佳实践。函数计算免运维、高并发、百毫秒级别的实例扩容和 100% 资源利用率进一步优化了服务质量和成本。

3. 传统 Web 单体 HTTP 应用 Serverless 演进

传统 Web 单体 (monolithic) 应用现代化有三个主要的诉求:责任拆分、减轻运维压力(资源规划、系统升级、安全补丁等运维负担)以及成本优化。虽然采用职责单一的函数是一种最佳实践,但是进行职责拆分往往需要更长时间的设计和重构。借助函数计算的镜像支持能力,单体应用可以很容易的迁移至 FaaS 服务以满足免运维,弹性水平扩展和100%成本效率的诉求。

传统 Web 应用由于历史原因或者业务复杂度,运行环境(容器镜像)和业务逻辑往往高度耦合且解耦代价较高。为了 Serverless 化改造有时不得不升级操作系统及依赖库版本,在 FaaS 厂商提供的环境中重新编译。迁移至 Serverless 架构有时间成本和稳定性风险。函数计算对容器镜像的支持帮助传统容器化 Web 应用无改造,更快地享受 Serverless 的价值,将时间和精力专注于业务逻辑创新和迭代而非重复枯燥的环境、依赖版本管理、升级维护和容量规划和伸缩。

4. 云上云下,跨云厂商混合部署

企业上云的节奏在不断加快,然而由于业务特性,私有云和公共云混合的运行方式将是未来相当长一段时间内作为常态。企业甚至需要多云厂商来保证迁移、容灾、资源刚性交付的需求。容器镜像是云上、云下的软件交付物统一的默认选择。

函数计算自定义 runtime 选择 HTTP server 标准的交互方式,函数代码编程方式不与厂商绑定,减轻企业对云厂商锁定(vendor-lockin)的顾虑,在云上可以运行的函数,在云下甚至其他云厂商同样可以作为独立的 HTTP Web 应用单独部署,服务请求。容器打包的函数可以运行在其他云服务的容器服务或 IaaS 自建服务,实现多云的容灾、弹性资源保障。

冷启动最佳实践

容器镜像地址推荐使用与函数计算同地域的 VPC 镜像地址,例如 registry-vpc.cn-hangzhou.aliyuncs.com/fc-demo/helloworld:v1beta1, 以获得最优的镜像拉取延时和稳定性;

镜像最小化,使用类似 docker-slim 工具仅保存必要的依赖和代码,避免不需要的文档、数据或其他文件造成的额外延迟;

在资源允许和线程安全的情况下,搭配单实例多并发一同使用,可避免不必要的冷启动,同时降低成本;

容器镜像配合预留实例一起使用,消除冷启动。

DevOps/GitOps 最佳实践

容器镜像的支持标准化了构建步骤和函数交付产物,让复用 CI/CD 工具成为可能。函数计算与阿里云云效DevOps 服务集成,推出了 CI/CD 流水线。

当有新的代码被 push 进入代码仓库(Github/Gitlab) master 分支, 构建流水线任务被开启,按照代码中指定的 Dockerfile, 容器镜像会被构建并推送至阿里云容器镜像服务。流水线的最后一个步骤会部署发布新版本的函数,完成一次自动化的发布。

除了云效 DevOps 完整自动化的持续集成交付体验,阿里云容器镜像服务和自建开源 CICD 流水线也同样可以用方自动化函数发布。函数计算发布方式的标准化使得企业可以用统一的工具持续交付多个不同的服务,降低开发运维人员对部署工具的学习成本,自动化部署提高成功率和交付速度 (time-to-market)。

和 Custom Runtime 的异同

函数计算在 2019 年推出了的自定义运行时Custom runtime,那么这次发布的自定义容器(custom-container)和已有的运行时有和异同呢?

相同的编程模型和函数计算系统的交互方式:完全相同的 HTTP server 协议,已有的 custom runtime 函数可以直接移植到环境兼容的自定义容器环境中,不需要修改代码;

两个 runtime 有不同的适用场景和取舍:

对于非容器化的应用,您可以持续使用 custom runtime;

对于冷启动延迟容忍度较低的场景,推荐您使用 custom runtime 节省镜像拉取时间;

对于异步离线且已经容器化的任务(job 类型),推荐您使用 cutome-container runtime;

使用函数计算预留实例,且部署环境和业务逻辑耦合紧密的应用可以优先考虑使用 custom-container runtime。

未来规划

随着容器逐渐成为应用交付部署的标准方式,FaaS 会和容器生态做更紧密的融合,帮助容器化的应用以更低的成本 Serverless 化,包括周边配套生态例如声明式的部署方式的融合,同 K8s 相似的应用抽象,云原生可观测性软件集成。基于容器镜像拉取加速,让函数计算能兼顾可移植和快速启动的性能。

容器技术和 Serverless 的初心都是要帮助用户更快地交付(time-to-market)和持续优化成本,消除资源闲置产生的浪费,增加企业竞争力。

最终云原生的两大技术领域:Serverless 和容器技术的联系将会变得更加紧密,开发部署运维差异不断缩小,让开发者几乎不需要修改业务逻辑即能为不同的工作负载选择合适的技术方案,用开放、标准、统一的云原生技术持续创新,为客户创造更多价值。

审核编辑 黄昊宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 云计算
    +关注

    关注

    39

    文章

    7776

    浏览量

    137369
  • 人工智能
    +关注

    关注

    1791

    文章

    47208

    浏览量

    238303
  • 大数据
    +关注

    关注

    64

    文章

    8884

    浏览量

    137412
  • serverless
    +关注

    关注

    0

    文章

    65

    浏览量

    4510
收藏 人收藏

    评论

    相关推荐

    低成本解决方案,RK3506的应用场景分析!

    RK3506 是瑞芯微推出的MPU产品,芯片制程为22nm,定位于轻量级、低成本解决方案。该MPU具有低功耗、外设接口丰富、实时性高的特点,适合用多种工商业场景。本文将基于RK3506的设计特点,为大家分析其应用场景
    的头像 发表于 12-11 15:26 317次阅读
    <b class='flag-5'>低成本</b>解决方案,RK3506的应用<b class='flag-5'>场景</b>分析!

    模块仪器的技术原理和应用场景

    模块仪器是插拔式的计算机板卡,功能类似于传统的台式仪器,其技术原理和应用场景可以归纳如下:一、技术原理 模块设计:模块仪器使用一框架
    发表于 11-28 15:09

    emc虚拟技术的应用场景

    ,实现了资源的动态分配和优化,从而帮助企业提高运营效率和降低成本。 1. 数据中心虚拟 数据中心虚拟是EMC虚拟技术应用最为广泛的领域之一。通过虚拟
    的头像 发表于 11-01 15:26 326次阅读

    低成本高效益 | 自连医疗设备无线改造实例汇集

    实施的几个具体的医械设备无线低成本改造案例:01老旧床旁监护仪在病房和急救室中,监护仪是关键医疗设备之一。传统的老旧监护仪设备只能通过以太网接口去连接有线网络,随着病房布局的调整和移动医疗的需求增
    的头像 发表于 10-24 17:25 161次阅读

    高速数字仪的技术原理和应用场景

    高速数字仪是一种用于采集高速模拟信号,并将其转换为数字信号进行处理和储存的设备。以下是对其技术原理和应用场景的详细介绍:一、技术原理 采样:高速数字仪的采样率是指每秒钟采样多少次,采样率越高
    发表于 10-21 14:34

    华为云全域 Serverless 8 月更新盘点

    【摘要】 近年来,华为云持续构筑全域 Serverless 云服务,推出了一系列竞争力领先的 Serverless 产品,包括函数工作流 FunctionGraph、Serverless 容器
    的头像 发表于 09-27 00:06 836次阅读
    华为云全域 <b class='flag-5'>Serverless</b> 8 月更新盘点

    揭秘能耗管理系统:如何你的建筑绿色又省钱?

    , EMS)以其独特的优势,成为了推动建筑绿色与节能降耗的重要力量。今天,我们就来深入揭秘这一系统,看看它是如何帮助建筑实现绿色又省钱的双重目标的。 能耗管理系统,顾名思义,是一集数据采集、分析、优化于一体的智能
    的头像 发表于 08-14 10:38 250次阅读

    涂鸦HEDV本地部署方案,助你低成本实现定制化开发!

    ,如何低成本实现快速交付、敏捷迭代以及满足本地合规部署的需求,成为了行业亟待解决的问题。面对这一挑战,涂鸦智能精心推出了海德薇(HEDV)本地部署解决方案,一轻量
    的头像 发表于 07-06 08:15 763次阅读
    涂鸦HEDV本地<b class='flag-5'>化</b>部署方案,助你<b class='flag-5'>低成本</b>实现定制化开发!

    英特尔携手Aible打造创新解决方案,助力企业实现低成本智能升级

    对于需要运行生成式AI工作负载的企业来说,基于英特尔至强处理器的Aible无服务器解决方案可帮助其降低成本、提高智能,并有效提升RAG及微调效率 近日,英特尔与端到端Serverless(无服务器
    的头像 发表于 07-03 19:17 370次阅读
    英特尔携手Aible打造创新解决方案,助力企业实现<b class='flag-5'>低成本</b>智能<b class='flag-5'>化</b>升级

    膜和金属膜电容器的优缺点

    膜电容器和金属膜电容器是两种常见的电子元件,它们在电路设计中有不同的特点和应用场景。 1、阻膜电
    的头像 发表于 07-02 14:27 232次阅读
    阻<b class='flag-5'>化</b>膜和金属膜电<b class='flag-5'>容器</b>的优缺点

    AGV叉车自动存取货场景到底有哪些?

    AGV无人叉车在工业自动领域应用广泛,可高效完成重复性搬运等任务。其具备实时感应、安全识别等功能,适用于多种场景,如平面运输、上下货架、多层堆叠和自动装卸。AGV无人叉车提高作业效率,降低成本,并能在恶劣环境下作业。
    的头像 发表于 06-27 17:51 327次阅读
    AGV叉车自动<b class='flag-5'>化</b>存取货<b class='flag-5'>场景</b>到底有哪些?

    揭秘工业路由器:工业自动更高效!

    作为一种专门为工业应用而设计的网络设备,工业路由器以其高效、稳定、安全等特点,为工业自动提供了强大的支持。本文将从多个方面深入揭秘工业路由器,读者了解其工作原理和优势,从而更好地应用于工业自动
    的头像 发表于 04-15 17:52 920次阅读

    低成本高效率易部署,蓝蜂物联网关+EMCP云平台赋能工厂数字转型

    低成本高效率易部署,蓝蜂物联网关+EMCP云平台赋能工厂数字转型 搜索蓝蜂物联网官网,即可免费领取样机使用!!先到先得!!! 在数字转型的大潮中,许多工厂面临着如何采用先进技术、降低成本
    的头像 发表于 02-27 14:25 734次阅读
    <b class='flag-5'>低成本</b>高效率易部署,蓝蜂物联网关+EMCP云平台赋能工厂数字<b class='flag-5'>化</b>转型

    企业组网如何兼顾低成本与高性能?

    在数字浪潮席卷全球的今天,企业的网络需求变得愈加复杂和多样。面对激烈的市场竞争,企业不得不寻求一种既能降低成本又能保证高性能的网络解决方案。传统组网方式虽然稳定可靠,但昂贵的硬件投入和升级
    的头像 发表于 02-26 14:59 390次阅读

    小型微型的边缘计算盒子有哪些优势

    边缘计算网关、边缘计算盒子的小型和微型,是当前的一大趋势,小型和微型将赋予边缘计算网盒更丰富的场景适用能力,同时还可以降
    的头像 发表于 01-24 17:51 853次阅读
    小型<b class='flag-5'>化</b>微型<b class='flag-5'>化</b>的边缘计算盒子有哪些优势