freeswitch的proxy_media模式下video流的问题与修正

头图-77

 

概述

freeswitch是一款简单好用的VOIP开源软交换平台。

测试过程中发现fs的proxy_media模式的一个bug,就是video媒体流的转发处理有问题。

环境

CentOS 7.9

freeswitch 1.6.20

问题

fs配置为proxy_media模式,A路发起呼叫,A路远端的sdp中有audio和video媒体信息。

a642b367-754c-492e-b227-87f94e8010c7 m=audio 16394 RTP/AVP 8 18 101

a642b367-754c-492e-b227-87f94e8010c7 m=video 16396 RTP/AVP 99

fs处理拨号计划后,发起B路呼叫,B路的sdp继承了A路的sdp,本地sdp信息如下。

a642b367-754c-492e-b227-87f94e8010c7 m=audio 54398 RTP/AVP 8 18 101

a642b367-754c-492e-b227-87f94e8010c7 m=video 54400 RTP/AVP 99

B路收到终端的183sdp信息,处理媒体信息后,本地sdp修改如下。

a642b367-754c-492e-b227-87f94e8010c7 m=audio 54398 RTP/AVP 8 18 101

a642b367-754c-492e-b227-87f94e8010c7 m=video 44622 RTP/AVP 99

 

其中B路本端的audio端口为54398,video的端口从54400修改为了44622。

结果就是,B路本端的video媒体流从44622端口发到远端,远端的video媒体流送到本地的54400,造成媒体流擦肩而过。

 

查看switch_core_media.c的switch_core_media_patch_sdp函数,在处理video信息时,强制重选了video本地端口,而audio端口处理正常。

switch_core_media_choose_port(session, SWITCH_MEDIA_TYPE_VIDEO, 1);

 

查看调用堆栈,mod_sofia模块在处理183sdp的流程中,proxy_media模式下会主动调用“switch_core_media_patch_sdp”这一并无必要的操作。

修复

修改mod_sofia模块的sofia.c文件,屏蔽“switch_core_media_patch_sdp”操作。

/* by 01022.hk - online tools website : 01022.hk/zh/tempemail.html */
} else if (switch_channel_test_flag(channel, CF_PROXY_MEDIA)) {
    switch_channel_set_variable(channel, SWITCH_ENDPOINT_DISPOSITION_VARIABLE, "PROXY MEDIA");
    // switch_core_media_patch_sdp(tech_pvt->session);
    if (sofia_media_activate_rtp(tech_pvt) != SWITCH_STATUS_SUCCESS) {
        nua_respond(nh, SIP_488_NOT_ACCEPTABLE, TAG_END());
        switch_channel_hangup(channel, SWITCH_CAUSE_INCOMPATIBLE_DESTINATION);
    } else{
        switch_channel_mark_pre_answered(channel);
    }

 

测试

重新编译mod_sofia模块后,测试视频流程,媒体协商正常,B路本地端口协商正常,媒体流正常转发。

总结

未经过充分测试,不清楚对其他业务流程的影响。

经过修改后的fs虽然可以正常转发rtp媒体流,但是仍然无法转发rtcp消息,在网络较差的情况下,视频媒体流无法利用rtcp的特性修复视频卡顿。

 

空空如常

求真得真

 

根据原作 https://pan.quark.cn/s/0ed355622f0f 的源码改编 野火IM解决方案 野火IM是专业级即时通讯和实时音视频整体解决方案,由北京野火无限网络科技有限公司维护和支持。 主要特性有:私有部署安全可靠,性能强大,功能齐全,全平台支持,开源率高,部署运维简单,二次开发友好,方便第三方系统对接或者嵌入现有系统中。 详细情况请参考在线文档。 主要包括一下项目: 野火IM Vue Electron Demo,演示如何将野火IM的能力集成到Vue Electron项目。 前置说明 本项目所使用的是需要付费的,价格请参考费用详情 支持试用,具体请看试用说明 本项目默认只能连接到官方服务,购买或申请试用之后,替换,即可连到自行部署的服务 分支说明 :基于开发,是未来的开发重心 :基于开发,进入维护模式,不再开发新功能,鉴于已经终止支持且不再维护,建议客户升级到版本 环境依赖 mac系统 最新版本的Xcode nodejs v18.19.0 npm v10.2.3 python 2.7.x git npm install -g node-gyp@8.3.0 windows系统 nodejs v18.19.0 python 2.7.x git npm 6.14.15 npm install --global --vs2019 --production windows-build-tools 本步安装windows开发环境的安装内容较多,如果网络情况不好可能需要等较长时间,选择早上网络较好时安装是个好的选择 或参考手动安装 windows-build-tools进行安装 npm install -g node-gyp@8.3.0 linux系统 nodej...
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值