Serverless 已经成为近期热度越来越高的技术,众所周知,Serverless 的核心是帮用户屏蔽了底层的资源、提供按需请求、按需使用、按需付费的一种全新服务,像腾讯云的云函数(SCF)和对象存储等都是 Serverless 化的服务。基于 Serverless 云函数,用户可以快速构建各种功能性的 REST API 服务,如 WEB 服务后台、APP 应用后台、小游戏的聊天服务、图片处理、音视频转码等。本文就以 API网关 + 云函数 + 对象存储等云产品,分享如何快速实现自定义的音视频转码服务。
核心价值
视频应用、社交应用等场景下,用户上传的图片、音视频的总量大、频率高,对处理系统的实时性和并发能力都有较高的要求。例如:对于用户上传的视频短片,我们可以使用多个云函数对其分别处理,对应不同的清晰度(1080p、720p等),以满足不同场景下用户的需求,适应移动网络带宽较小且不稳定的特性。使用云函数来做的核心优势在于:
1.高效整合:凭借云函数(SCF)的强大联动能力,将视频上传、视频处理、图片处理、存储场景有机地整合为一体。
2.灵活处理:用户可以自定义转码函数,帮助客户快速搭建定制化任务处理能力,弥补当前单独云服务的功能盲点。
3.平滑迁移:可以把ffmpeg业务方便地从物理机、云主机或容器中移植到云函数。
4.成本低廉:云函数提供丰富的计量方式,帮忙用户获得显著的成本优势。
运行原理
使用云函数 + ffmpeg 和COS联动做音视频转码的运行原理:
优势对比
和容器服务等对比,使用云函数+ffmpeg 做音视频转码服务的优势和不足在于:
部署流程
前置条件
以广州地域为例:
- 提前在对象存储控制台上创建好COS Bucket,Bucket权限设置为公有读私有写。
- (可选)提前在文件存储控制台上开通CFS服务(当视频文件大于500MB时需要用到),用于扩展云函数的本地存储空间。
- 登录访问管理控制台,新建云函数的运行角色,授予该角色COS的读写权限、CFS的读写权限,用于授权云函数访问相应服务。
CFS配置及使用文档可参考:挂载CFS文件系统。如果视频文件小于500MB,可以不用操作该步骤。
云函数运行角色使用说明可参考:创建函数运行角色。
创建云函数
- 登录云函数控制台,选择地域后,新建函数,选择运行环境Python3.6,搜索“转码”,选中模板函数后,下一步。
- 在下一步中,点开高级设置:配置环境变量,并启用运行角色。
target_bucket:转码后的视频,上传到已创建好的对象存储bucket中。
target_path: 转码后的视频,上传到bucket的指定目录中。
运行角色:云函数在运行时,会使用运行角色换取临时秘钥,操作读取和写入COS Bucket的资源。
- 下一步,完成函数创建。
- 在函数侧边栏【触发器管理】,创建COS Bucket 触发器,如果用的同一个Bucket存储源视频和转码后的视频,一定要在触发器这里配置前缀过滤规则,如demo/。
(可选)配置CFS挂载
- 如果已经开通了CFS挂载服务,则可以在侧边栏【函数管理】-》【函数配置】-》编辑,同时启用私有网络和文件系统挂载能力。
- 如果启用了CFS挂载,则需要在代码中修改文件上传路径,注释掉76行代码,添加77行,把 ‘/tmp/new-‘ 改成 ‘/mnt/new-‘,如下所示:
测试功能
- 到 COS 控制台,对应的 Bucket 目录下,上传视频文件,并到对应的转码目录下查看,是否生成压缩的视频文件。
根据视频大小不同,压缩时间也不同,如果视频过大,压缩时间会比较久,需要较长的时间才能查看到新视频。
- 到云函数控制台查看函数运行日志,如下:
- 在函数控制台上还可以查看监控和配置告警:
扩展能力
基于本demo,还可以扩展支持自动化CDN刷新/预热的能力,比如转码后的视频在回传COS Bucket时,还可以触发新函数执行CDN刷新/预热功能(该功能可以在COS控制台上一键开启)。
ffmpeg是非常强大的转码工具,除了转码、视频压缩等,还可以做视频切片等,通过修改代码里的命令参数,可以非常方便的实现该能力。甚至和云上的AI接口结合,实现视频加字幕等功能。
感兴趣的同学还可以借助云函数的高并发能力,实现快速转码或者切片功能。如函数A做任务调度,函数B做实际的转码/切片工作。这里可以借助 CFS 挂载能力,轻松实现跨函数的文件共享功能。