基于webrtc的gips 语音引擎库及测试程序（源代码下载地址：http://download.youkuaiyun.com/detail/dotphoenix/3674515）

GIPS库头文件及函数解析
最新推荐文章于 2021-10-11 22:41:07 发布
原创 最新推荐文章于 2021-10-11 22:41:07 发布 · 8.3k 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#测试 #引擎 #api #codec #null #signal

本文详细解析了GIPS库的头文件及其提供的关键函数，包括初始化、关闭、通道管理、编码设置、播放、发送与接收数据等功能。

测试程序源代码下载地址：http://download.youkuaiyun.com/detail/dotphoenix/3674515

gips库头文件解释：

#pragma once


#ifdef LIBGIPS_WEBRTC_EXPORTS
#define LIB_GIPSVE_API extern "C" __declspec(dllexport)
#else
#define LIB_GIPSVE_API extern "C" __declspec(dllimport)
#endif




/*
所有的函数都应该返回true，否则出错，应该使用GIPSVE_LastError来取得出错的原因。
不需返回true的函数包括:
*/


struct PPCodec
{
int pltype;
char plname[32];
int plfreq;
int pacsize;
int channels;
int rate;
};




//必需先调用这个函数，并且确保返回值是0，否则以后所有的调用都可能引起异常.本函数多次调用不会有异常
LIB_GIPSVE_API bool GIPSVE_Init(char* szAuthtication, int iYear, int iMonth, int iDay);


//如果调用了GIPSVE_Init()，则最后必须调用这个函数，否则会有大量的资源泄露
LIB_GIPSVE_API void GIPSVE_UnInit();


//创建一个Channel,Channel的值必须>= 0 ,否则出错
LIB_GIPSVE_API int GIPSVE_CreateChannel();


//删除一个Channel
LIB_GIPSVE_API bool GIPSVE_DeleteChannel(int channel);




//设置目的地址的ip和port
LIB_GIPSVE_API bool GIPSVE_SetSendDestination(int channel, char* ip, unsigned short port);


//设置本地的port
LIB_GIPSVE_API bool GIPSVE_SetLocalReceiver(int channel, unsigned short port);


//取得当前的codec类型
LIB_GIPSVE_API bool GIPSVE_GetSendCodec(int channel, PPCodec& codec);


//设置codec的类型
LIB_GIPSVE_API bool GIPSVE_SetSendCodec(int channel, const PPCodec& codec);


//开始播放声音
LIB_GIPSVE_API bool GIPSVE_StartPlayout(int channel);


//停止播放声音
LIB_GIPSVE_API bool GIPSVE_StopPlayout(int channel);


//开始发送数据
LIB_GIPSVE_API bool GIPSVE_StartSend(int channel);


//停止发送数据
LIB_GIPSVE_API bool GIPSVE_StopSend(int channel);


//开始接收数据
LIB_GIPSVE_API bool GIPSVE_StartListen(int channel);


//停止接收数据
LIB_GIPSVE_API bool GIPSVE_StopListen(int channel);


//使用自定义的传输方式,Free版不支持
LIB_GIPSVE_API bool GIPSVE_UseExternalTransport(int channel, int use, void* externalTransport = NULL);
//Free版不支持
LIB_GIPSVE_API bool GIPSVE_UseExternalMediaProcessIn(int channel, int use, void* externalMedia = NULL);


//使用自定义媒体处理方式,Free版不支持
LIB_GIPSVE_API bool GIPSVE_UseExternalMediaProcessOut(int channel, int use, void* externalMedia = NULL);
//
LIB_GIPSVE_API bool GIPSVE_UseExternalEncryption(int channel, int use, void* externalEncryption);




//用文件里面的声音代替 microphone, 文件内容必须是 16kHz的PCM
//Free版不支持
LIB_GIPSVE_API bool GIPSVE_PlayFileIn(int channel, char* filepath);
//
LIB_GIPSVE_API bool GIPSVE_StopPlayFileIn(int channel);


//用文件里的内容代替收到的远端数据, 文件内容必须是 16kHz的PCM
//Free版不支持
LIB_GIPSVE_API bool GIPSVE_PlayFileOut(int channel, char* filepath);
//
LIB_GIPSVE_API bool GIPSVE_StopPlayFileOut(int channel);




/*
设置degree of bandwidth reduction
0 lowest reduction
1
2
3 means highest reduction
set = false means not set, true means set.
*/


LIB_GIPSVE_API bool GIPSVE_SetVadMode(int channel, bool set, int mode);
LIB_GIPSVE_API bool GIPSVE_GetVadMode(int channel, bool& enabled, int& mode);
//设置静音
LIB_GIPSVE_API bool GIPSVE_SetMute(int channel, bool mute);


//使用SRTP,Free版不支持
LIB_GIPSVE_API bool GIPSVE_UseSRTPTx(int channel, int useForRTP, int useForRTCP);
//Free版不支持
LIB_GIPSVE_API bool GIPSVE_UseSRTPRx(int channel, int useForRTP, int useForRTCP);




//0 holds  all, 1 holds send, 2 holds play
//Free版不支持，Commercial支持
LIB_GIPSVE_API bool GIPSVE_SetHoldMode(int channel, bool held, int mode);


//
LIB_GIPSVE_API bool GIPSVE_GetHoldMode( int channel, bool& held, int& mode);








/*
设置接收端的Automatic Gain Control(AGC)的类型
0 预设模式
1 平台默认
2 adaptive mode for use when analog volume control exists (e.g. for PC softphone)
3 scaling takes place in the digital domain (e.g. for conference servers and embedded devices)
4 can be used on embedded devices where the the capture signal is level is predictable
*/
LIB_GIPSVE_API bool GIPSVE_SetRxAgcMode(int channel, bool enabled, int mode);


//取得接收端的Automatic Gain Control(AGC)的类型
LIB_GIPSVE_API bool GIPSVE_GetRxAgcMode(int channel, bool& enabled, int mode);


/*
设置接收端的Noise Suppression级别


0  previously set mode
1,         // platform default
2,      // conferencing default
3,  // lowest suppression
4,
5,
6,     // highest suppression
*/
LIB_GIPSVE_API bool GIPSVE_SetRxNsMode(int channel, bool enabled, int mode);


//
LIB_GIPSVE_API bool GIPSVE_GetRxNsMode(int channel, bool& enabled, int& mode);


//Free版不支持
LIB_GIPSVE_API bool GIPSVE_StartRecordingMicrophone(char* filepath); //默认为mono 16kHz pcm


//Free版不支持
LIB_GIPSVE_API bool GIPSVE_StopRecrodingMicrophone();
//当前不支持
LIB_GIPSVE_API bool GIPSVE_StartRecordingPlayout(int channel, char* filepath);
//
LIB_GIPSVE_API bool GIPSVE_StopRecordingPlayout(int channel);






LIB_GIPSVE_API bool GIPSVE_SetAgcMode(bool enabled, int mode);


LIB_GIPSVE_API bool GIPSVE_GetAgcMode(bool& enabled, int& mode);
LIB_GIPSVE_API bool GIPSVE_SetNsMode(bool enabled, int mode);


LIB_GIPSVE_API bool GIPSVE_GetNsMode(bool& enabled, int& mode);
/*
设置发送方的Echo Control (EC)类型
0  previously set mode
1  platform default
2  conferencing default (aggressive AEC)
3  Acoustic Echo Cancellation
4  AEC mobile
*/
LIB_GIPSVE_API bool GIPSVE_SetEcMode(bool enabled, int mode);


LIB_GIPSVE_API bool GIPSVE_GetEcMode(bool& enabled, int& mode);




LIB_GIPSVE_API bool GIPSVE_GetCPULoad(int& loadPercent);


//
LIB_GIPSVE_API bool GIPSVE_GetSystemCPULoad(int& loadPercent);




LIB_GIPSVE_API int GIPSVE_GetNumberOfCodecs();


//取得指定index的Codec
LIB_GIPSVE_API bool GIPSVE_GetCodec(int index, PPCodec& codec);


//取得Playout设备的数目
LIB_GIPSVE_API bool GIPSVE_GetNumberOfPlayoutDevice(int& nb);


//取得指定index的Playout设备的名字
LIB_GIPSVE_API bool GIPSVE_GetPlayoutDeviceName(int index, char name[128], char guid[128]);


//取得Recording设备的数目
LIB_GIPSVE_API bool GIPSVE_GetNumberOfRecordingDevice(int& nb);


//取得指定index的Recording设备的名字
LIB_GIPSVE_API bool GIPSVE_GetRecordingDeviceName(int index, char name[128], char guid[128]);




//设置想要使用的Playout设备的index，index值位于0到GetNumberOfPlayoutDevice()之间
//Free版不支持，Commercial支持
LIB_GIPSVE_API bool GIPSVE_SetPlayoutDevice(int index);


//设置想要使用的Recording设备的index，index值位于0到GetNumberOfRecordingDevice()之间
//Free版不支持，Commercial支持
LIB_GIPSVE_API bool GIPSVE_SetRecordingDevice(int index);




//取得当前speaker的volume，值位于0-255之间
LIB_GIPSVE_API bool GIPSVE_GetMicVolume(unsigned int& volume);


//设置Speaker的音量，volume必须位于0-255之间
LIB_GIPSVE_API bool GIPSVE_SetMicVolume(unsigned int volume);


//取得当前speaker的volume，值位于0-255之间
LIB_GIPSVE_API bool GIPSVE_GIPSVE_GetSpeakerVolume(unsigned int& volume);


//设置Speaker的音量，volume必须位于0-255之间
LIB_GIPSVE_API bool GIPSVE_SetSpeakerVolume(unsigned int volume);


//暂不支持该函数
LIB_GIPSVE_API bool GIPSVE_GetInnerVersionInfo(char version[1024]);


//返回版本(该版本的编译时间)
LIB_GIPSVE_API bool GIPSVE_GetVersionInfo(char version[64]);


//如果任何函数的调用返回了非0值，可以调用这个函数来取得错误的原因
LIB_GIPSVE_API int GIPSVE_LastError();


C/C++运行时库和UCRT系统通用运行时库总结及问题实例分享（程序打包时要带上这些运行时库）
dvlinker的技术专栏
05-21 6万+
本文详细介绍C/C++运行时库和UCRT系统通用运行时库，并分享了几个与运行时库有关的项目问题分析实例。
【C++开源库使用】使用libcurl开源库发送url请求（http/https请求）去下载用户头像文件（附完整源码）
最新发布
dvlinker的技术专栏
07-07 2万+
本文详细讲述如何使用libcurl开源库发送url请求（http请求）去下载用户头像文件，并给出了完整实现源码。
ZoneOrchestraEngine:基本引擎库
05-25
区域乐团引擎 这是Android的Zone框架的基本引擎库。 内容 该库包含三（3）个主要模块： 工作流引擎。 脚本解释器引擎。 脚本解释器（预定义功能）。 随着更多的提交，此自述文件也将更新。 更新和提交将使用代码符号来引用。 示例：Update 3.0表示模块3（脚本解释器（预定义功能））的更新0。 代码示例最终将被删除，并且将构建一个示例完整的android项目。 更新3.0 使用ZXing库端口添加了QR Code解码。 此更新允许扫描QRCode并视情况处理结果。 样例代码 更新3.1 添加了PhoneOptions.java接口，PhoneOptionsEnum.java，PhoneOptionsFactory.java和PhoneContacts.java抽象。 用法示例已添加到TestZone Android项目中。 此更新允许从用户设备中提取联系人并
矢量图形引擎库VectorDraw Developer Framework v7.7011.0.1发布
weixin_34205076的博客
03-30 178
2019独角兽企业重金招聘Python工程师标准>>> ...
18 款超酷的 HTML5 和 JavaScript 游戏引擎库
weixin_30827565的博客
04-17 229
现在的游戏开发变得越来越复杂，需要制作各种炫丽的效果，还要制作各种基于 2D 或者 3D 的场景。为了节省游戏开发者的时间，让开发者集中精力在游戏的创新上，出现了许许多多的游戏引擎。而现在为了实现跨平台，HTML5 和 JavaScript 成功为了游戏开发者必备的利器，特别是移动端的开发者，必须要能很好的掌握 HTML5 和 JavaScript。 现在这么多的游戏引擎，各有各的优点...
矢量图形引擎库VectorDraw Developer Framework发布v7.7014.0.5
weixin_34199335的博客
01-29 190
2019独角兽企业重金招聘Python工程师标准>>> ...
WebRTC Connect实验-https://aquigorka.com/webrtc-qr/-JavaScript开发
05-26
P2P连接实验使用QR码在两个设备之间共享信令数据，可以建立WebRTC连接。 在桌面浏览器和移动浏览器中打开https://aquigorka.com/webrtc-qr/。 在任一浏览器中，使用QR码在两个设备之间共享信令数据的P2P连接实验中，...
从小白到入门webrtc音视频通话，Android端webRtc客户端代码
02-05
本文将围绕“从小白到入门WebRTC音视频通话，Android端WebRTC客户端代码”这一主题，详细介绍如何在Android平台上构建一个基本的WebRTC音视频通话应用程序。 首先，理解WebRTC的基本架构至关重要。WebRTC包括了三个...
java实现浏览器源码下载-gstwebrtc-demos:被https://gitlab.freedesktop.org/gstreamer
06-15
实现浏览器源码下载搬家 - 2020 年 6 月 此存储库已移动并与上游的 gst-examples 存储库集成，可从 . 作为一般警告，以下大部分 README 内容现在相对于上游 GStreamer 已经过时了。 更新的自述文件可从 . GStreamer ...
urchinEngine:游戏引擎库
03-18
UrchinEngine 特征 C ++ 17中的游戏引擎库：3D，物理，声音，网络，IA，地图编辑器 视频： ： 3D引擎： 骨骼动画3D模型 纹理管理器：TGA和PNG，各向异性，mip贴图，法线贴图 动态阴影（缓存的并行拆分阴影贴图，方差阴影贴图，模糊） 具有延迟阴影的动态照明：全向和定向 地形多层和草 环境光遮挡（SSAO +） 抗锯齿（FXAA） 空间分区（八叉树） UI 2D：按钮，窗口，文本（TTF），文本输入，位图，滑块 天空盒 多雾路段 物理引擎： 支持的形状：球体，盒子，圆柱体，胶囊，圆锥体，凸包，复合形状，地形 支撑体：刚体 算法： 广义阶段：AABBox树 窄相：球体，球体，GJK / EPA，凹凸 约束求解器（迭代）：外力，摩擦，复原，惯性 连续碰撞检测（CCD） 岛 雷铸 角色控制器 声音引擎： 氛围声音和3D声音 流媒体 声音触发与角色位置有关 IA引擎
math-engine：数学表达式解析和计算引擎库。数学表达式解析计算引擎库
02-03
数学引擎 使用Go实现的数学表达式解析计算引擎库，它小巧，无任何依赖，具有扩展性（可以将自己的函数到引擎中），比较完整的完成了数学表达式解析执行，包括词法分析，语法分析，构建AST，运行。 go get -u github.com/dengsgo/math-engine 能够处理的表达式样例： 1+127-21+(3-4)*6/2.5 (88+(1+8)*6)/2+99 123_345_456 * 1.5 - 2 ^ 4 -4 * 6 + 2e2 - 1.6e-3 sin(pi/2)+cos(45-45*1)+tan(pi/4) 99+abs(-1)-ceil(88.8)+floor(88.8) max(min(2^3, 3^2), 10*1.5-7) double(6) + 3 ， double是一个自定义的函数 演示版 方法支持 符号 说明 例如 + 加，plus 1 + 2 = 3 - 减，sub 8-3.5 = 4.5 * 乘，乘 2 * 3 = 6 / 除，division 5/2 = 2.5 % 取余，剩余 5％2 = 1 ^ 孪次方，整数
android版基于webrtc的gips voice engine
11-25
新版基于WebRTC的Android版音频引擎（VoiceEngine)源代码，修改了若干bugs，去除了时间限制，支持AGC/EC/NS，支持RTP/SRTP,支持iLBC/iSAC/PCMU/PCMA等，可以联系dotphoenix@qq.com获得帮助
BOLT界面引擎库
07-11
BOLT界面引擎库 HostWnd模块 Kernel Object 模块 UIObjects 模块
为React开发的一个超级简单的动画引擎库
08-11
为 React 开发的一个超级简单的动画引擎库
Kajiki XML 引擎库
schunlee的博客
05-15 742
一、前言。       最近接一任务需求，做xml间格式转换的小功能，并且目标xml提取转为字典-列表数据结构的python脚本也已提供。觉得通过编码生成xml很繁琐，需要拼接许多xml标签字符串，于是我考虑用xml模板来完成。无意间在Pypi上检索到Kajiki，琢磨几日，果然实现了预期功能。觉得Kajiki模板库比较简单、易于上手，但是相关资料除了官方文档外，少之又少，stackflow也少有
matlab引擎函数,Matlab引擎库函数
weixin_39829497的博客
03-17 1284
Matlab引擎库包含了一系列从外部应用程序调用和控制Matlab引擎的函数。下表列举了C语言的引擎库函数，这些函数后使用了eng前缀名表 1C语言引擎函数库引擎函数功能描述engOpen启动Matlab计算引擎engGetArray从Matlab引擎获得一个Matlab矩阵，用于数据交换engPutArray从应用程序向Matlab引擎发送一个Matlab矩阵，用于数据交换engEvalStr...
更轻量级的可视化引擎库
chen_daimaxz的博客
04-28 754
G2可视化引擎库，更轻量级的可视化开发选择 现在项目需要可视化，但是考虑到echarts没g2可视化轻量，所以选择了AntV-G2来作为可视化库。链接如下： https://g2.antv.vision/zh/docs/api/general/chart/ 除了G2 蚂蚁数据可视化还有其他库选择，链接如下 https://antv.vision/zh/ ...
VectorDraw Crack,完全面向对象图形引擎库
q2315702359的博客
10-11 1304
VectorDraw Crack,完全面向对象图形引擎库 　　VectorDraw 开发者框架 (VDF)VectorDraw Developer Framework (VDF) 是一个可以轻松创建、管理和打印 2D 和 3D 绘图的组件。VectorDraw 对象公开与最常见的矢量格式和其他 CAD 对象兼容的方法和属性。它支持超过 10 种矢量格式和许多光栅格式。VectorDraw Developer Framework (VDF) 是完全面向对象的，组件是用 .NET C# 代码编写的。还提供了一
你上面代码，推送的服务器地址是多少？我的信令服务器地址是：http://192.168.10.114:5012/signalr/webrtc
06-28
<think>我们之前提供的代码中，信令服务器是内置在同一个进程中的Web服务器（使用aiohttp框架）。默认情况下，服务器监听在本地所有网络接口（0.0.0.0）的8080端口。因此，默认的信令服务器地址是：`http://<服务器IP地址>:8080`，其中`<服务器IP地址>`是运行该程序的计算机的IP地址。在本地测试时，可以使用`http://localhost:8080`或`http://127.0.0.1:8080`。在代码中，我们设置了一个路由`/offer`来处理WebRTC的offer交换：```pythonapp.router.add_post("/offer", offer) ```客户端需要向这个地址发送POST请求以建立连接。 ###客户端连接说明在客户端HTML示例中，我们使用相对路径`/offer`，这意味着客户端页面必须与信令服务器在同一域名和端口下（或通过跨域配置）。例如，如果客户端页面部署在`http://<服务器IP>:8080/index.html`，那么它发送请求的地址就是`http://<服务器IP>:8080/offer`。###修改服务器地址和端口如果需要修改服务器地址或端口，可以在代码的`main()`函数中修改：```pythonweb.run_app(app,port=8080, ssl_context=ssl_context)``` 将`port=8080`改为其他端口即可。 ###关于引用[1]的说明引用[1]中提到的“拉流”概念在WebRTC中并不完全适用，因为WebRTC是点对点传输，没有传统流媒体服务器的“推流”和“拉流”过程。在我们的实现中，ROS2节点作为媒体源（相当于推流方），浏览器客户端作为接收方（相当于拉流方），但整个传输过程是通过WebRTC点对点连接完成的，不经过服务器中转（信令服务器仅用于建立连接）。 ###注意事项1. **网络配置**：如果服务器有防火墙或NAT，需要开放相应端口（默认8080）并配置STUN/TURN服务器以穿透NAT。 2. **HTTPS**：现代浏览器要求WebRTC必须使用HTTPS（或localhost）。代码中提供了SSL配置选项，需要提供证书和私钥文件。###示例客户端连接步骤1.在浏览器中打开客户端页面（例如：`http://<服务器IP>:8080/index.html`）2.客户端页面将自动创建WebRTCoffer并发送到信令服务器3.信令服务器处理offer并返回answer4.建立点对点连接后，视频流开始传输###引用说明本文中关于拉流的解释仅作为背景知识参考[^1]。§§相关问题§§1.如何为WebRTC信令服务器配置HTTPS加密？ 2.在ROS2 WebRTC实现中如何添加STUN/TURN服务器以增强网络穿透能力？ 3.如何优化ROS2到WebRTC的视频传输延迟？</think># 基于ROS2的WebRTC视频流推送服务器地址解析 在之前提供的基于ROS2的WebRTC视频流推送实现中，**信令服务器默认地址是`http://localhost:8080`**，具体实现细节如下： ## 服务器地址配置 在代码的`main()`函数中，我们明确设置了服务器监听端口： ```python web.run_app(app, port=8080, ssl_context=ssl_context) ``` 这意味着： 1. **默认地址**：`http://localhost:8080` 2. **默认端口**：8080 3. **访问路径**： - 信令接口：`POST /offer` - 静态文件：`GET /`（指向`static`目录） ## 使用说明 ### 1. 本地访问 ```bash http://localhost:8080 ``` ### 2. 局域网访问 ```bash http://<本机IP地址>:8080 ``` ### 3. HTTPS访问 如果配置了SSL证书，可使用： ```bash https://localhost:8080 ``` ## 修改服务器地址 要修改服务器地址或端口，只需更改`web.run_app()`的参数： ```python # 修改为其他端口 web.run_app(app, port=9000, ssl_context=ssl_context) # 指定特定IP地址（仅监听指定接口） web.run_app(app, host='192.168.1.100', port=8080, ssl_context=ssl_context) ``` ## 客户端连接示例 在客户端HTML中，连接信令服务器的代码如下： ```javascript const response = await fetch('/offer', { method: 'POST', body: JSON.stringify(pc.localDescription), headers: {'Content-Type': 'application/json'} }); ``` 这里的`/offer`是相对路径，会基于当前页面URL自动构建完整地址。如果客户端页面部署在其他服务器上，需要指定完整URL： ```javascript const response = await fetch('http://<ROS2主机IP>:8080/offer', { // ... }); ``` ## 网络注意事项 1. **防火墙配置**：确保8080端口在服务器防火墙中开放 2. **NAT穿透**：对于跨网络访问，需要配置STUN/TURN服务器 3. **域名访问**：可通过反向代理（如Nginx）配置域名访问 > 在物联网应用中，如智能宠物喂食系统[^2]，这种轻量级WebRTC实现非常适合用于远程视频监控功能，因为它能提供低延迟的视频流传输。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值