
音视频
文章平均质量分 85
IT&IC先生
博士,2001年做开发当程序员,专注音视频研发与应用运营10年,之前在移动支付和IC领域开发了10年,曾在欧洲和中国负责全球研发。欢迎小伙伴加好友探讨问题,共同进步。
当前任咪咕文化技术VP,咪咕音乐副总经理,视频彩铃联盟秘书长,中国移动技术专家委员会成员,专利92项。带领核心技术团队,建立中台体系、研发运维体系、科研管理体系。从零起步主导研发音视频和AI中台,现网调用量日均20亿次,主导研发全球首个高清视频彩铃系统和产品,主导研发中国首个Web+4K超高清直播平台,创造单日直播16亿次记录,主导全球首个AI视频剪辑平台商用,主导编制3GPP、GSMA、W3C、ITU等国内外多个行业标准。
展开
-
视音频技术 - 我们在智能双语字幕的攻关历程
为了让比赛“看得懂”咪咕贴心上线了智能字幕功能,詹俊、张路、黄健翔、徐阳、娄一晨、刘越、张力等组成的咪咕嘉宾天团的精彩解说不仅能被听到,更能通过智能字幕“被看到”,让更多人感受到了“同频共振”的足球赛事狂欢。智能双语字幕在英超、西甲等五大联赛的常态化商用,通过在屏幕上实时准确呈现赛场解说字幕,帮助观众更准确理解赛事的同时,也将陪伴球迷共同见证联赛冠军的诞生时刻。原创 2022-05-03 14:35:30 · 1233 阅读 · 2 评论 -
视音频技术 - HDR Vivid 技术应用探索
在做冬奥直播期间,我们将我国自主知识产权的高动态范围的视频技术标准(HDR Vivid)应用到北京冬奥会赛事直播。这次探索的核心是,一是移动端解决方案,二是软解码软渲染,三是直播场景的应用突破,目的是让画面质感更细腻,主体更突出,更真实的视觉效果。在前期团队的灯塔文章中做了专题分析,借着五一假期的时间,再回顾一下我们的探索过程。原创 2022-05-03 14:30:46 · 3187 阅读 · 0 评论 -
视音频技术 - 我们在智能双语字幕的攻关历程
在冬奥的智能字幕之后,团队继续攻关。智能双语字幕在英超、西甲等五大联赛的常态化商用,通过在屏幕上实时准确呈现赛场解说字幕,帮助观众更准确理解赛事的同时,也将陪伴球迷共同见证联赛冠军的诞生时刻。原创 2022-05-01 21:54:39 · 671 阅读 · 0 评论 -
智能推荐:猜你所想
推荐系统技术,总体而言,与 NLP 和图像领域比,发展速度不算太快。不过最近两年,由于深度学习等一些新技术的引入,有了比较明显的提升。原创 2022-03-22 00:04:56 · 4834 阅读 · 0 评论 -
音视频云系列 - 谈谈XR关键技术及VR/AR/MR/XR关系
作者,李琳,毕蕾,灯塔一、先别被VR/AR/MR/XR搞晕,说说区别虚拟现实(Virtual Reality,VR)、增强现实(Augmented Reality,AR)等业务以其三维化、自然交互、空间计算等完全不同于当前移动互联网的特性,被认为将是下一代通用计算平台。自 2012 年谷歌发布 AR 眼镜 Google Glass, 2014 年 Facebook 收购 VR 头显厂商 Oculus 以来,VR/AR 行业历经了 2015 年至 2017 年的创业和资本的狂热,2018 年的行业退潮。随原创 2021-05-07 15:33:36 · 4457 阅读 · 1 评论 -
音视频系列 - 云游戏产业分析与技术剖析
作者,李琳,董乔,灯塔伴随5G网络、游戏引擎以及硬件技术发展,云游戏迎来了市场快速发展阶段。据统计2020年,中国云游戏用户为1.63亿,市场规模约为32.6亿元,预计2023年用户规模将超过5.57亿,市场规模有望达到435.5亿元。云游戏将为数字文化产业带来下一次变革。本期将介绍云游戏的基础概念及关键技术。01 背景云游戏的概念云游戏(Cloud Gaming)是以云计算为基础,游戏玩家无需高端游戏硬件设备,游戏在云端服务器上运行,并将渲染后的游戏画面或指令压缩后通过网络传送给游戏终端,本质上是原创 2021-05-07 13:32:02 · 3207 阅读 · 0 评论 -
谈谈核心网UPF和开放
作者,李琳,王雷,智超,华琦,灯塔一、什么是UPF用户面功能(UPF,User Plane Function)是3GPP 5G 核心网系统架构的重要组成部分,主要负责5G核心网用户面数据包的路由和转发相关功能。UPF 在5G 面向低时延、大带宽的边缘计算和网络切片技术上发挥着举足轻重的作用。1、历史用户面功能(UPF,User Plane Function)代表控制和用户平面分离(CUPS,Control and User Plane Separation)策略在数据平面的演进。2016 年前后,原创 2021-03-21 20:46:44 · 22900 阅读 · 3 评论 -
谈谈无线接入网开放Open RAN 历程
作者:李琳、王雷、智超、华琦、灯塔随着移动通信技术的更新换代,接入网的演进呈现出基站一体化向分布式转变、网络功能黑盒化向开放式转变的趋势。特别是近年来在 5G 的建设中,由于 5G 频段的物理特性决定了单个基站覆盖范围有限,各国运营商都面临着高昂的基站建设成本。为了降低建设资金投入,同时防止传统电信设备提供商的市场垄断,以欧美为首的运营商近年来力推开放无线接入网,即 Open RAN (Radio Access Network),将基站白盒化、软硬件解耦和接口开放,让更多的厂商能够参与到无线接入网建设中,原创 2021-03-21 20:30:44 · 2353 阅读 · 1 评论 -
视频技术系列 - 短内容冷启动推荐方法,最小收益最大化
作者,中国移动李琳,咪咕灯塔在众多内容平台中存在严重的马太效应,现象表明,热门内容逐渐走向流行,例如大量歌曲长时间得不到曝光,使得平台数据开始服从长尾分布,即20%的热门内容聚集了74%的收听行为。对千万数量级的音乐曲库来说,用户行为的数据稀疏性比其他内容(如书籍、电影)平台更为严重,此外,每天新上架的作品会进一步加剧数据的稀疏性。为了缓解数据稀疏导致的不精准推荐问题,当前主流方法是将用户和歌曲分别映射到相同的稠密语义空间,然后利用用户和歌曲在该空间中的内积来挖掘用户对歌曲的偏好关系。虽然这种方法在一定程原创 2021-03-20 18:54:30 · 1267 阅读 · 0 评论 -
视频云技术系列 - 5G 700MHz建设方案及产业链
作者,中国移动李琳,咪咕灯塔项目组中国广电作为新晋的通信运营商,在5G 拥有低频段700MHz,中频段4.9GHz 和3.3G~3.4GHz 多个频段的牌照。如何建设和部署才能充分发挥700MHz 频段的优势呢?前文已经介绍过5G 700MHz 频段的优势和关键技术,本期将分析广电700MHz 的建设方案和相关产业链的发展情况。一、广电700MHz网络建设方案伴随广电和移动2021年完成共建共享700MHz 网络具体协议签订,移动与广电将在10年内共享700MHz 频谱以及移动的2G\4G\5G 网络原创 2021-02-08 22:20:39 · 29889 阅读 · 3 评论 -
视频云技术系列 - 5G 700MHz关键技术,大塔小塔模式和无线上行增强技术原理
作者,中国移动李琳,咪咕灯塔项目组伴随移动通信技术的发展,广播电视用户对移动端音视频需求快速增长。传统的广播电视技术,已无法满足市场需求;世界各国组织机构逐渐意识到,5G 无线网将成为广播电视媒体的重要传播渠道,积极推动5G 无线广播技术的发展。前文讲述了700MHz为啥是黄金频道,主要介绍了5G 700M 相关的概念和标准。本文主要围绕5G 广播的关键技术展开讨论,边学边探究。本文分析研究包括,无线广播技术的发展历程,5G 无线广播技术的解决方案,例如地面广播模式、混合广播模式、大塔小塔融合模式;同时原创 2021-02-01 10:42:43 · 2820 阅读 · 3 评论 -
视频与4/5G网渊源之 - 700MHz为啥是黄金频道
作者,中国移动李琳,咪咕灯塔项目组700M 被有些人称作移动通信的“黄金频段”,在4G 时代就曾引爆过很多的话题,到底因何如此受到关注?中国广电携700M 正式入局,成为了第四家移动运营商。本文主要介绍标准以及频谱特点相关内容,核心就是要说说700M到底的好处,背景,现状,劣势。后续还会介绍700M 的关键技术、建设方案、应用场景、产业链现状、未来趋势等。一、700MHz 的定义及标准700MHz 在电信领域,泛指位于700M-800MHz 附近的无线电波频谱资源。全球的无线电频谱资源由国际电信联盟(原创 2021-01-25 12:38:19 · 2836 阅读 · 2 评论 -
视频技术系列 - 谈谈毫米波之二,应用篇
作者,中国移动李琳,咪咕灯塔项目组前文介绍了毫米波的概念及关键技术,本篇在标准化、应用情况、产业链现状以及未来前景等方面继续讨论5G毫米波的最新进展。实际上先吃螃蟹的人在两年前已经尝到了5G毫米波的味道,越来越多国家开始投入。1、标准化进展5G毫米波的标准已经日趋成熟。在3GPP 5G标准制定之初,5G毫米波就是重要组成部分之一,其标准化工作与中低频是同步展开的,目前3GPP已经完成了Rel-15、Rel-16两个版本的5G标准。下图是3GPP标准时间表。图1 3GPP标准时间表Rel-15是第原创 2021-01-18 09:28:20 · 26783 阅读 · 1 评论 -
视频技术系列 - 谈谈毫米波
作者,中国移动李琳,咪咕灯塔项目组本文介绍毫米波的技术优劣势,以及可以应对毫米波技术挑战的各项关键技术。2020年10月GSMA发布的《5G毫米波技术白皮书》预计,在2022年北京冬奥会上,5G毫米波有望大放异彩,为观众、媒体转播者、赛事组织和参与者等提供优质的观赛体验、完备的服务保障,将可提供全景VR、新型信息交互、智能安防、新闻媒体服务等,满足冬奥组委关于网络新技术方面的要求。本期和下期专题洞察,将围绕毫米波的技术优势和挑战、关键技术、应用情况、标准化、产业链现状以及未来前景展开讨论。按照ITU-原创 2021-01-17 17:00:55 · 28593 阅读 · 6 评论 -
视频技术系列:谈谈多接入边缘计算MEC
作者,中国移动李琳,咪咕灯塔项目组从边缘计算原来,看视频优化加速。本文讲述多接入边缘计算的起源、MEC标准化现状、5G MEC参考架构、MEC部署及解决方案、MEC应用趋势。例如边缘计算可将内容缓存至边缘上,减少音视频流传输的时延;动态感知下层网络吞吐率,动态决定上层视频格式;根据用户需求不同,合理分配网络资源等。伴随通信及互联网技术发展,交互式VR/AR、云游戏、车联网、工业互联网等新型垂直行业应用不断涌现,网络面临着超低时延、超大带宽、实时计算、海量设备连接等挑战,边缘计算技术应运而生并受到广泛关注原创 2021-01-17 16:46:50 · 4513 阅读 · 4 评论