免费淘宝图片处理软件 淘宝图片制作教程( 六 )


向大家介绍一下转码服务 , 它的核心技术是窄带高清和S265 , 分别有两个视觉处理模型 。首先是窄带高清的处理模型包括质量分类 , 细小纹理去除、脱焦区域弱化(节省码率)、易感知纹理增强(增强视觉体验)、人脸保护(避免过度增强引起体感不好)、马赛克修复、去隔行扫描 。S265视觉压缩模型有三个点 , 人眼感知与失真拐点(BD-rate曲线刚开始较陡 , 向后较缓 , 要找到高性价比的点 , 感觉不出更多的失真又可以达到合适码率)、码率与分辨率甜蜜拐点(不同码率在不同内容上适合于不同分辨率压缩 。如果一个非常低的码率300K强行压缩1080P出来都是块主观体验很差 , 如果压缩540P、360P可以获得更高的视觉体验)、场景分类编码(不同分类场景适合不同编码参数、码率的选择) 。
3.3 电竞场景中的美颜

免费淘宝图片处理软件 淘宝图片制作教程


在内容生产中美颜作为一项基础功能 , 已经被人们广泛接受 , 但是常规美颜在电商场景中存在一些问题 , 比如过度美化 , 商品变色 , 背景模糊 , 资源消耗大等等;在PixelAI美颜中 , 我们使用了Face3D重建来保障形变的自然 , 使用AI肤色模型来保证美颜不会伤害到背景和商品 。
3.4 HDR10端到端系统
免费淘宝图片处理软件 淘宝图片制作教程


随着采集和显示设备的发展 , HDR+10Bit逐渐有一些应用 , 我们觉得HDR10有三项核心技术:第一是动态范围 。在低照度、曝光过度场景下帮助我们看清内容;第二是色域空间 。支持BT2020提升色彩还原;第三是10bit位深 。HDR对我们的商品还原会非常有帮助 , 因为电商直播和短视频中最核心的是还原商品而不是美化商品 。
但HDR是一个端到端的系统 , 需要考虑到各种设备的兼容 , 所以我们做了一些适配来提升用户体验 , 比如普通相机拍出的内容就用普通通道传输解码 , 而一些高端设备支持HDR10 , 可以把内容做10Bit压缩 , 传输 , 在对端根据播放设备能力 , 做HDR To SDR、10Bit To 8Bit的转换来保证质量 , 对于好的手机就可以得到最好的HDR体验 , 一般手机也能得到基础的HDR体验 。图中可以看到HDR技术使照片颜色更接近实物颜色 。
04 音频技术提升体验和生产力
第三个观点是视频技术提升体验和生产力 。音频在过去几年都伴随视频出现 , 而在去年Clubhouse的发布 , 大家觉得音频可以独立玩 , 这对音频技术来说是一个很好的启发 。除此以外 , 音频的技术还可以辅助我们做内容的生产、审核及各种音频处理 , 个人认为音频会是后续很重要的生产力 。
4.1 业务:用户数和时长
免费淘宝图片处理软件 淘宝图片制作教程


对内容业务来说 , 最核心的是用户数和时长 。对于技术来说 , 如何提升消费体验 , 提升主播生产效率 , 做好平台治理工作是核心工作 。在这几个方面音频都可以起到非常重要的作用 。
在主播角度 , 音频技术可以来做口播自动剪辑、来客提醒(不用一直守在电脑旁边)、开播辅助、字幕和配乐生成 。在用户角度 , 音频的互动可以支持连麦、游戏、猜价格、语音评论 。在平台角度 , 音频可以监管黄暴政、盗播、盗链、检测空镜 。

推荐阅读