腾讯云 Serverless 支撑「新东方」核心业务算力资源

谈起 Serverless 计算，在技术圈热度很高 —— 所有人都在说 Serverless，大家都声称在做 Serverless，但每个 Serverless 又不一样。我们不禁想问，Serverless 是不是只是一个炒热度的空洞热门词？

Serverless Demo 体验 👉 serverless/start

其实不然，Serverless 作为一种更易用、低成本、免运维的通用计算服务，已经在互联网核心业务中承担重要的算力角色，适用于各种计算应用场景。也正是因为其作为通用计算支撑，场景众多，业内使用 Serverless 计算的场景覆盖广泛，随处可见。

纵观国内 Serverless 领域，腾讯云 Serverless 已在众多互联网计算服务场景中发挥重要的作用。腾讯云 Serverless 技术已广泛应用于数百家企业，成为企业核心业务的支撑，是早已经成熟的技术。我们熟知的 58 短信、百视通、新东方、腾讯地图等企业的视频转码计算的业务，已经完全基于腾讯云 Serverless 计算服务支撑。

在新东方的核心业务 —— 课程视频转码计算的业务中，已经基于腾讯云 Serverless 计算服务落地。一般的业务场景对资源的需求通常有两类，一类是计算密集型，需要强大的计算力支持；一类是 I/O 密集型，偏重于网络和存储。对于新东方来说，随着在线教育行业的火热，线上教育正逐渐成为新东方的核心业务。而新东方的核心业务中的视频转码部分就是计算密集型业务，需要性能强大又经济耐用的算力解决方案。

背景

在视频应用、社交应用等场景下，用户上传的图片、音视频的总量大、频率高，对处理系统的实时性和并发能力都有较高的要求。传统的容器服务，需要用户自己维护容器集群，弹性伸缩效率较低。

如果使用腾讯云 Serverless 云函数，当用户上传的视频短片，可以使用多个云函数对其分别处理，对应不同的清晰度,例如：1080p 、720p 等，可以满足不同场景下用户的需求，同时，也满足移动网络带宽较小且不稳定的特性。

腾讯云 Serverless 云函数在视频应用、社交应用等场景下的核心价值：

高效整合：凭借云函数(SCF)的强大联动能力，将视频上传、视频处理、图片处理、存储场景有机地整合为一体。
灵活处理：用户可以自定义转码函数，帮助客户快速搭建定制化任务处理能力，弥补当前单独云服务的功能盲点。
平滑迁移：可以把 ffmpeg 业务方便地从物理机、云主机或容器中移植到云函数。
成本低廉：腾讯云首发 1 毫秒计费粒度，真正实现了按实际用量计费，相对传统计算服务，帮助用户获得显著的成本优势。

运行原理

使用云函数 + ffmpeg 和 COS 联动做音视频转码的运行原理如下图：

对比优势（和传统容器服务）

如上图所示：在实现方面，两者差别不大；开发流程上，云函数更加简单高效；云函数自带能力较完善，如果需要对接自建平台，起 agent 不如容器方案简单。在运维方面，云函数更加易用和省心，在费用方面，云函数相比容器服务可节省费用 30% 以上。

使用腾讯云 Serverless 云函数实现音视频转码服务的优势：

云函数提供标准运行环境，并且保障资源的高可用和弹性伸缩，无需专人维护；
云函数基于实际业务消耗收费，不存在资源浪费；
云函数的开发调试流程效率会更加高效，依赖和业务解耦，可以分别单独更新，支持实时热更新；
运行环境隔离，单次请求失败不影响其他请求的正常执行。

当然，当现有业务引入云函数时，需要注意以下两点：

云函数的引入，需要对接现有 CI/CD 流程，开发方式上有一定的转变；
现有业务代码需要做一定的改造：主要在 ffmpeg 的编包上（云函数可以提供编包工具、提供相关）。

客户案例：新东方

下面我们以新东方为例，看看新东方是如何实现业务迁移，使用腾讯云 Serverless 云函数的。

背景

在每年暑期的时候，都会有大量的学生在新东方的平台学习。以前新东方都是在自建的机房里基于服务器和 NFS 来实现音视频课程的存储和转码逻辑。但是由于暑期流量比较大，IDC 里的服务器不一定能满足计算需求，同时自建服务的硬件采购周期较长，于是期望寻找一种弹性的方法，既能够支持快速业务部署，又能高效的完成转码功能。

过程实现

凭借腾讯云云函数 (SCF) 的强大联动能力，新东方将视频上传、视频处理、图片处理、存储场景有机地整合为一体。腾讯云 Serverless 云函数支持自定义转码函数，帮助新东方快速搭建定制化任务处理能力，弥补当前单独云服务的功能盲点，把 ffmpeg 业务方便地从物理机、云主机或容器中移植到云函数。

技术方案上，在云上采用云函数+ COS 的方式，可以支持弹性伸缩，即使把本地流量全部切到云上，也能有全部承载。那么新的业务流程，就会加入任务调度模块，当业务流量过来的时候，可以自动或者手动把流量分别导入自研服务和云上服务，并在流程里加入了很多高可用的技术，比如通过任务 TraceID 进行全链路追踪、云端计算失败本地重新计算一次等。新的方案里，云端服务开发起来很简单，且不需要投入太多的运维精力。

最后，费用方面相对也很低，用多少付多少的云函数计费方式，帮助新东方节省了成本。

部署实践

下面通过一个简单的实践 Demo，一起来体验一下吧！

前置条件

以广州地域为例：

提前在对象存储控制台上创建好 COS Bucket，Bucket 权限设置为公有读私有写。
（可选）提前在文件存储控制台上开通 CFS 服务（当视频文件大于 500MB 时需要用到），用于扩展云函数的本地存储空间。
登录访问管理控制台，新建云函数的运行角色，授予该角色 COS 的读写权限、CFS 的读写权限，用于授权云函数访问相应服务。

参考文档

CFS 配置及使用文档可参考：挂载 CFS 文件系统，如果视频文件小于 500MB，可以不用操作该步骤。

云函数运行角色使用说明可参考：创建函数运行角色。

1. 创建云函数

登录云函数控制台，选择地域后，新建函数，选择运行环境 Python 3.6，搜索「转码」，选中模板函数后，点击「下一步」。

在页面末尾左下方，点击「高级设置」

配置环境变量，并启用运行角色。 target_bucket：转码后的视频，上传到已创建好的对象存储 bucket 中。 target_path: 转码后的视频，上传到 bucket 的指定目录中。运行角色：云函数在运行时，会使用运行角色换取临时秘钥，操作读取和写入 COS Bucket 的资源。

点击「完成」，完成函数创建。

2. 创建 COS Bucket 触发器

在函数侧边栏「触发器管理」，创建 COS Bucket 触发器，如果用的同一个 Bucket 存储源视频和转码后的视频，一定要在触发器这里配置前缀过滤规则，如 demo/。

3. 配置 CFS 挂载（可选)

如果已经开通了 CFS 挂载服务，则可以在侧边栏「函数管理」->「函数配置」-> 编辑，同时启用私有网络和文件系统挂载能力。如果启用了 CFS 挂载，则需要在代码中修改文件上传路径，注释掉 76 行代码，添加 77 行，把 /tmp/new- 改成 /mnt/new-，如下所示：

测试功能

在 COS 控制台对应的 Bucket 目录下，上传视频文件，并到对应的转码目录下查看是否生成压缩的视频文件。

根据视频大小不同，压缩时间也不同，如果视频过大，压缩时间会比较久，需要较长的时间才能查看到新视频。

在云函数控制台查看函数运行日志，如下：

在函数控制台上还可以查看监控和配置告警，如下：

扩展能力

基于本 Demo，还可以扩展支持自动化 CDN 刷新 /预热的能力，比如转码后的视频在回传 COS Bucket 时，还可以触发新函数执行 CDN 刷新 /预热功能，该功能可以在 COS 控制台上一键开启。

ffmpeg 是非常强大的转码工具，除了转码、视频压缩等，还可以做视频切片等，通过修改代码里的命令参数，可以非常方便的实现该能力。甚至和云上的 AI 接口结合，实现视频加字幕等功能。

感兴趣的同学还可以借助云函数的高并发能力，实现快速转码或者切片功能。如函数 A 做任务调度，函数 B 做实际的转码 /切片工作。这里可以借助 CFS 挂载能力，轻松实现跨函数的文件共享功能。