在相同流量消耗的情况下,540p可秒变1080p?这不是魔法,通过视频超分辨率技术(简称视频超分),就能让视频变得更清晰

7月20日,在小红书最新版本7.48的App中,用户就能体验到这项技术带来的优质视频体验。小红书和华为HMS Core合作,在移动端上线了基于HUAWEI HiAI Foundation提供的视频超分能力,实现了视频笔记在相同流量消耗的情况下,540p清晰度可秒变1080p的视觉效果,让用户真正享受到低成本观看流畅清晰视频的快感。

真诚分享创造用户价值,同频探索低成本高画质

一直以来,小红书将用户基于真实生活的记录分享视为最宝贵的财富,鼓励用户通过短视频、图文、直播等形式记录生活,分享生活方式,并基于兴趣互动形成社区。以此为基础,小红书平台上涌现出内容与商业之间不断流转的良性交互,成长出独具特色的“种草经济”。

但在2K、4K屏幕分辨率已是主流的今天,用户对视频画质和体验效果的要求也越来越高,卡顿或视频分辨率太低都会让用户难以忍受。然而音视频领域业务复杂,端侧算力需求大、算法部署困难,想要实现新的功能,构建新的业务场景并不容易。

如何为用户打造低成本高画质的视频播放体验,成为短视频领域(尤其是各大头部短视频平台)迫切想要解决的问题。

与此同时,华为HMS Core通过对影像处理能力的不断积累,结合多媒体技术和AI算法,为社交、影音行业的开发者提供了一套AI视频超分解决方案,轻松实现让用户观看低分辨率视频时也能享受高分辨率体验的效果。

** 对音视频领域的一致探索,为小红书与HMS Core的合作拉开了帷幕。**

短视频超分加持,UGC种草刷到爽

致力于打造“超清视界”的AI视频超分技术,通过机器学习,可以将低分辨率的图像、视频进行重建,使图像、视频更加清晰。但传统超分算法对运算资源有较大的需求,且受限于移动端算力、算法功耗、多机型兼容性等问题,在移动端上部署实时超分技术面临着巨大挑战。

在本次合作中,小红书App通过接入基于HMS Core开放的HUAWEI HiAI Foudation,使能端侧超分业务。端侧视频超分模型对实时性要求较高,意味着视频超分功能不仅需要高算力,还需要通过底层硬件能力优化来降低功耗。HUAWEI HiAI Foundation作为端侧AI计算的平台底座,通过多IP协同、图融合优化等技术,充分发挥NPU硬件单元的算力,令视频超分以更低功耗更高性能在手机端侧高效运转。

这样一来,小红书开发者们就可通过降低或升高用户所观看视频的清晰度和码率,动态化选择网络环境,有效降低了宽带的使用成本,并且提升了开发与运营效率。同时,端侧视频超分的落地,也让小红书用户以相同的流量消耗,获得了更流畅清晰的“种草”视频观看体验。

高效合作,深度探索未来音视频行业无限可能

小红书团队与华为HMS Core团队对接始于今年4月,双方合作高效,共同基于对媒体领域的技术理解和方案,协同开发,很快便集成了HUAWEI HiAI Foundation并实现了端侧视频超分能力,通过AI硬件的加速,解决了功耗和性能的难题。小红书应用研发负责人邓林在提及与HMS Core合作感受时说到:“HMS Core帮助我们解决了端侧视频超分这一难题,这使得小红书的开发者们可以将更多精力放在业务创新方面,用旗舰技术赋能提升我们的用户体验。”

目前,小红书“视频超分”功能部署至HUAWEI MateX2系列、P50 Pro、Mate 40系列等90多款华为NPU手机机型,以及HUAWEI MatePad系列等10多款华为NPU平板机型,在相关手机和平板刷小红书视频笔记都能获得优质体验。

音视频行业还存在着大量潜在的业务创新需求,未来HMS Core和小红书也将持续探索为用户提供更多个性化的服务,提升用户体验,在运动类、赛事类等细分领域上探索更多创新玩法。HUAWEI HiAI Foundation也一直在为开发者解决底层算力与体验中的切实问题和最新技术难点,对开发者开放底层算力平台,助力更多的算法迁移到端侧部署。

了解更多详情>>

访问华为开发者联盟官网

获取开发指导文档

华为移动服务开源仓库地址:GitHubGitee

关注我们,第一时间了解 HMS Core 最新技术资讯~

小红书携手HMS Core,畅玩高清视界,种草美好生活的更多相关文章

  1. HMS Core积极探索基于硬件耳返的功能,帮助唱吧整体唱歌延迟率降低60%

    唱吧的使命是让唱歌更简单.让生活更美好,其布局的K歌业务专注于让曲库更全.音质更好,开创了同框合唱.弹唱等有意思的游戏类K歌玩法.为了让用户拥有更加沉浸的娱乐体验,唱吧与HMS Core积极探索基于硬 ...

  2. HMS Core 能力速配,唱响恋爱进行曲

    情人节,HMS Core 最具CP感的能力搭档来袭,浓浓爱意,表白各行业,你准备好了吗? 1.ML Kit +Signpal Kit 科技相助,恋爱提速.展现爱意的方式有千百种,你可以用文本翻译学习数 ...

  3. HMS Core Keyring携手航班管家和高铁管家,打造美好出行体验

    高铁管家是国内最早⽀持⼿机⽀付购买⽕⻋票App之⼀,日活用户超380万,为⽤户提供一站式铁路出⾏服务.高铁管家母公司--深圳市活⼒天汇科技股份有限公司是国内智能⼤出⾏的开创者,先后推出航班管家.⾼铁管 ...

  4. HMS Core Discovery第16期回顾|与虎墩一起,玩转AI新“声”态

    HMS Core 在AI领域最新的技术能力有哪些?本期Discovery直播以<与虎墩一起,玩转AI新"声"态>为主题,邀请了HMS Core 机器学习服务产品经理.机 ...

  5. 华为HMS Core携手超图为三维GIS注入新动能

    6月30日,在2022(第五届)GIS软件技术大会GIS基础软件新技术板块论坛上,华为联合超图推出了基于HMS Core 3D Engine开发的高保真三维GIS插件,通过3D渲染技术助力三维GIS实 ...

  6. 华为HMS Core图形引擎服务携手三七游戏打造移动端实时DDGI技术

    在2021年HDC大会的主题演讲中提到,华为HMS Core图形引擎服务(Scene Kit)正协同三七游戏一起打造实时DDGI(动态漫反射全局光照:Dynamic Diffuse Global Il ...

  7. HMS Core携手厦门大学打造AR增强现实技术

    HMS Core AR Engine团队联手厦门大学信息学院,与专业学生面对面深度交流行业发展与前沿成果.双方共同编写行业知识教材,引导学生开发AR游戏实践,为未来AR.VR人才培养培育可复制的教学模 ...

  8. HMS Core电商与游戏行业解决方案,全流程赋能开发者创新

    2021年12月29日,"华为云&华为终端云服务创新峰会2022"在北京柏悦酒店成功举办.华为HMS Core电商与游戏行业解决方案亮相本次峰会的线下展区,为行业开发者们解 ...

  9. 华为开发者大会HDC2022:HMS Core 持续创新,与开发者共创美好数智生活

    11月4日,华为开发者大会HDC2022在东莞松山湖拉开帷幕.HMS Core在本次大会上带来了包括音频编辑服务的高拟真歌声合成技术.视频编辑服务的智能提取精彩瞬间功能.3D Engine超大规模数字 ...

随机推荐

  1. LeetCode数组刷题——448、48、240、769

    1.[LeetCode448]:448. 找到所有数组中消失的数字 题目分析: 1-n之间有重复的,有没出现的,有出现一次.使用hashmap,空间复杂度为O(n) 方法一:哈希表,但是空间复杂度超过 ...

  2. Linux 系统安装 AutoFs 挂载服务

    关注「开源Linux」,选择"设为星标" 回复「学习」,有我为您特别筛选的学习资料~ 作者: Escape 链接: https://escapelife.github.io/pos ...

  3. C# 随机给一个全部信息都未知的类类型,如何获取该类的类名、属性个数、属性名、属性的数据类型、属性值?

    一.场景假设 假设现在有一个泛型类T的实例对象t,该T类的全部信息都未知. 要求:打印输出实例对象t的类名.属性个数.属性名.属性的数据类型.属性值. 二.解决问题 1.我们根据输出的内容要求定义一个 ...

  4. deepin安装jdk配置环境

    下载一个jdk压缩包https://download.oracle.com/java/18/latest/jdk-18_linux-x64_bin.tar.gz 这个包,不用安装,下下来,直接解压,然 ...

  5. Ansible的参数介绍

    安装完成ansible后查看ansible的参数:ansible -h ansible 命令格式:Usage: ansible <host-pattern> [options] ansib ...

  6. git 无法拉取最新代码

    删除本地文件后,想从远程仓库中重新新Pull最新代码,但是执行了git pull origin develop 命令后始终无法拉取下来 提示 Already up-to-date. 原因:当前本地库处 ...

  7. Similarity calculation

    推荐算法入门(相似度计算方法大全) 一.协同过滤算法简介 在推荐系统的众多方法之中,基于用户的协同过滤是诞最早的,原理也比较简单.基于协同过滤的推荐算法被广泛的运用在推荐系统中,比如影视推荐.猜你喜欢 ...

  8. Vue开发组件之替代marquee标签,超出宽度文字横向滚动效果

    一.npm 安装 如果你想安装插件(自己写的)安装 install dependencies npm i marquee-components 使用 在main.js引入 import marquee ...

  9. SAP APO-部署选项

    SAP SCM Server安装提供SAP APO功能模块的所有功能. 在SAP APO的附加部署模型中,以下组件可用作SAP APO工具的一部分- OTE-在附加部署模型中,无法通过SAP SCM服 ...

  10. ASP.NET MVC之读取服务器文件资源的两种方式

    初次认识asp.net mvc时,以为所有文件都需要走一遍路由,然后才能在客户端显示, 所以我首先介绍这一种方式 比如说:我们在服务器上有图片: ~/resource/image/5.jpg 我们就需 ...