斗鱼直播推流地址获取全攻略:从Post请求到PhantomJS调试的完整流程

【斗鱼直播源逆向解析】从浏览器调试到PHP自动获取直播流地址实战 本文详细解析了斗鱼直播源的逆向获取过程,从浏览器调试到PHP自动获取直播流地址的完整实战方案。通过分析JavaScript加密逻辑和动态签名生成机制,结合PHP实现自动化请求,帮助开发者高效获取斗鱼直播流地址,并集成到自定义播放器中。 阅读详情

斗鱼直播推流地址获取全攻略:从Post请求到PhantomJS调试的完整流程

在当今直播行业蓬勃发展的背景下,自动化获取直播推流地址成为了许多技术开发者和直播爱好者的需求。本文将深入探讨如何通过技术手段获取斗鱼直播的推流地址,重点介绍Post请求的构造和PhantomJS的调试技巧。不同于简单的网页抓取,这种方法能够实现稳定可靠的推流地址获取,适用于需要长期监控或自动化处理直播流的场景。

1. 理解斗鱼直播推流机制

斗鱼直播平台采用了一套复杂的推流地址生成机制,主要包含以下几个关键环节:

  1. 前端参数生成:通过JavaScript动态计算关键参数
  2. 后端验证:服务器对提交的参数进行校验
  3. 地址返回:验证通过后返回可用的推流地址

整个流程中最关键的是获取正确的请求参数,特别是v、tt和sign这三个核心参数。这些参数通常由前端JavaScript动态生成,且具有一定的时效性,这也是为什么简单的网页抓取往往无法长期有效。

提示:推流地址的有效期通常较短,建议在获取后尽快使用,或建立自动刷新机制。

2. 分析Post请求结构

要成功获取推流地址,首先需要理解斗鱼使用的Post请求结构。通过浏览器开发者工具可以观察到典型的请求格式:

POST /api/room/streamUrl HTTP/1.1
Host: www.douyu.com
Content-Type: application/x-www-form-urlencoded

room_id=123456&v=1.0.0&tt=1620000000&sign=abcdef1234567890

关键参数说明:

参数名说明获取方式
room_id直播间ID从直播间URL中提取
v版本号固定值或从页面获取
tt时间戳当前UNIX时间戳
sign签名参数通过JS函数计算生成

3. 获取关键参数的方法

3.1 提取room_id

room_id是最容易获取的参数,直接从直播间URL中即可提取:

https://www.douyu.com/123456  → room_id=123456

3.2 确定v参数

v参数通常是固定值,但不同版本的斗鱼网页可能使用不同的值。可以通过以下方法获取:

  1. 打开直播间页面
  2. 使用开发者工具搜索"v="
  3. 查找类似v=1.0.0的赋值语句

3.3 生成tt参数

tt参数是当前的时间戳,可以使用JavaScript轻松生成:

Math.floor(Date.now() / 1000)

3.4 计算sign参数

sign参数是最复杂的部分,通常由类似ub98484234这样的JavaScript函数生成。获取方法如下:

  1. 在浏览器中打开直播间页面
  2. 使用开发者工具搜索"sign="或"ub98484234"
  3. 找到生成sign的JavaScript函数
  4. 提取函数代码用于本地计算

4. 使用PhantomJS进行调试

由于sign参数的生成依赖于浏览器环境,使用PhantomJS这样的无头浏览器是最可靠的解决方案。以下是基本的使用流程:

4.1 PhantomJS环境准备

首先安装PhantomJS并创建基本脚本框架:

var page = require('webpage').create();
var system = require('system');

// 获取命令行参数
var roomId = system.args[1];

page.open('https://www.douyu.com/' + roomId, function(status) {
    if (status !== 'success') {
        console.log('无法加载页面');
        phantom.exit();
    }
    
    // 在这里执行后续操作
});

4.2 提取JavaScript函数

在页面加载完成后,需要提取生成sign的JavaScript函数:

var signFunction = page.evaluate(function() {
    // 这里需要根据实际情况调整选择器
    return document.querySelector('script[contains="ub98484234"]').textContent;
});

4.3 执行函数获取sign

提取函数后,可以在PhantomJS环境中执行它来获取sign值:

var sign = page.evaluate(function(funcText, roomId, v, tt) {
    // 创建一个函数并执行
    var func = new Function('a', 'b', 'c', funcText.match(/function[^{]+\{([\s\S]*)\}/)[1]);
    return func(roomId, v, tt);
}, signFunction, roomId, v, tt);

5. 构建完整的请求流程

将以上步骤组合起来,形成完整的推流地址获取流程:

  1. 启动PhantomJS加载直播间页面
  2. 提取生成sign的JavaScript函数
  3. 计算当前时间戳tt
  4. 执行函数获取sign值
  5. 构造Post请求并发送
  6. 解析返回的JSON获取推流地址

示例完整代码结构:

// phantomjs脚本:get_stream_url.js
var page = require('webpage').create();
var system = require('system');

// 获取房间ID参数
var roomId = system.args[1];
var v = "1.0.0"; // 需要根据实际情况调整

page.open('https://www.douyu.com/' + roomId, function(status) {
    if (status !== 'success') {
        console.log('无法加载页面');
        phantom.exit(1);
    }
    
    // 获取当前时间戳
    var tt = Math.floor(Date.now() / 1000);
    
    // 提取sign生成函数
    var signFunction = page.evaluate(function() {
        // 实际应用中需要更精确的选择器
        var scripts = document.getElementsByTagName('script');
        for (var i = 0; i < scripts.length; i++) {
            if (scripts[i].textContent.indexOf('ub98484234') !== -1) {
                return scripts[i].textContent;
            }
        }
        return null;
    });
    
    if (!signFunction) {
        console.log('找不到sign生成函数');
        phantom.exit(1);
    }
    
    // 计算sign值
    var sign = page.evaluate(function(funcText, rid, v, tt) {
        try {
            var func = new Function('a', 'b', 'c', 
                funcText.match(/function[^{]+\{([\s\S]*)\}/)[1]);
            return func(rid, v, tt);
        } catch(e) {
            return null;
        }
    }, signFunction, roomId, v, tt);
    
    if (!sign) {
        console.log('计算sign失败');
        phantom.exit(1);
    }
    
    // 构造请求参数
    var postData = 'room_id=' + roomId + '&v=' + v + '&tt=' + tt + '&sign=' + sign;
    
    // 发送Post请求
    page.open({
        url: 'https://www.douyu.com/api/room/streamUrl',
        method: 'POST',
        headers: {
            'Content-Type': 'application/x-www-form-urlencoded'
        },
        data: postData
    }, function(response) {
        if (response.status !== 200) {
            console.log('请求失败: ' + response.status);
            phantom.exit(1);
        }
        
        // 解析返回的JSON
        var result = JSON.parse(page.plainText);
        if (result.error !== 0) {
            console.log('API返回错误: ' + result.msg);
            phantom.exit(1);
        }
        
        // 输出推流地址
        console.log(result.data.url);
        phantom.exit();
    });
});

6. 常见问题与解决方案

在实际应用中,可能会遇到各种问题,以下是几个常见问题及其解决方法:

  1. sign函数找不到

    • 检查页面是否加载完整
    • 确认函数名称是否变化
    • 尝试搜索其他可能的关键字
  2. 返回的推流地址无效

    • 检查时间戳是否过期
    • 确认sign计算是否正确
    • 尝试更新v参数版本
  3. 请求被拒绝

    • 添加必要的请求头
    • 模拟更真实的浏览器行为
    • 尝试添加referer等参数
  4. PhantomJS执行超时

    • 增加页面加载等待时间
    • 添加适当的延迟
    • 检查网络连接

7. 进阶优化建议

对于需要长期稳定运行的系统,可以考虑以下优化措施:

  • 函数缓存:将提取的JavaScript函数缓存起来,避免每次都需要重新提取
  • 自动更新:定期检查函数是否有变化,自动更新缓存
  • 错误重试:实现自动重试机制,处理临时性失败
  • 多实例轮换:使用多个IP轮换请求,避免被封禁
  • 监控报警:实现推流地址有效性监控,异常时报警

在实际项目中,我发现最关键的还是保持对斗鱼前端代码变化的敏感度,定期检查sign生成逻辑是否有变更。建议建立一个自动化测试流程,每天至少验证一次获取流程是否仍然有效。

斗鱼直播链接提取 先看效果图 阅读详情

相关推荐

斗鱼直播推流地址解析与实战获取

本文详细解析了斗鱼直播推流地址的获取原理与实战方法。通过分析网络请求、逆向JavaScript签名生成逻辑,并利用Python与Pyppeteer进行自动化模拟,手把手教你如何稳定获取有效的直播流地址。文章重点攻克了签名参数(sign)这一核心难点,为开发者提供了可行的技术方案与排查思路。

i1j2k的博客 389

获取斗鱼房间以及直播地址

douyu.py #-*- coding:utf-8 -*- import requests import re,sys import execjs import time import hashlib def get_tt(): tt1 = str(int(time.time())) tt2 = str(int((time.time() * 1000))) t...

桜 8439

使用Python爬虫技术抓取斗鱼直播列表数据:解析AJAX加载数据并提取关键信息

发送请求:使用requests库或者urllib库发送HTTP请求,获取网页内容。解析数据:使用或lxml等库解析HTML页面或JSON格式的响应数据,提取出我们需要的信息。存储数据:将抓取的数据保存到CSV、JSON文件,或者存入数据库,便于后续分析。本文详细介绍了如何使用Python爬虫技术抓取斗鱼直播平台的主播列表与观看人数数据。我们通过分析斗鱼平台的动态加载机制,使用requests抓取AJAX请求返回的JSON数据,并展示了如何处理分页、存储数据、应对反爬机制等常见问题。

2201_76125261的博客 1398

【亲测免费】 探秘开源项目 `douyuTV`:实时直播抓取与播放的利器

探秘开源项目 douyuTV:实时直播抓取与播放的利器 项目简介 在深入探讨之前,先让我们了解一下这个项目。这是一个由开发者xiaomaxuetu开源的Python工具,专为实时抓取和播放斗鱼直播流而设计。对于喜欢研究直播平台工作原理、或是有自动化监控直播内容需求的人来说,这是一个非常实用的资源。 技术分析 核心功能 实时流抓取:douyuTV利用HTTP协议直接访问斗鱼直播服务器,获取到直播源...

gitblog_00034的博客 1026

斗鱼直播源数据的获取

已打包为exe,可以直接运行。 双击exe,弹出cmd窗口,显示运行数据,并写入txt。 关闭程序,结束获取,已获取部分可正常,不受影响。 源码,请参考博客。

企业数字化转型AI大模型赋能智能体平台及AI场景应用规划方案(生态合作版).pptx

企业数字化转型AI大模型赋能智能体平台及AI场景应用规划方案(生态合作版).pptx

DouyinLiveRecorder项目优化:斗鱼直播仅音频流获取技术解析

在直播录制领域,DouyinLiveRecorder作为一个开源项目,提供了对多个直播平台的内容录制功能。其中针对斗鱼直播平台的录制功能,近期有开发者提出了优化建议,主要聚焦在音频流的获取和处理方面。本文将深入分析这一优化方案的技术细节和实施价值。 ## 技术优化方案 ### 仅音频流获取机制 当前版本的DouyinLiveRecorder在获取斗鱼直播流时,默认会同时获取音频和视频数据。然...

gitblog_07967的博客 626

Window系统下搭建GIT本地服务器

这是一篇在window下搭建git本地服务器的教程,带你一步步搭建出本地的git服务器。

qwer971211的博客 2万+

让我们来抓取下斗鱼的直播信息吧!!!

斗鱼是大家常用的直播网站,相信大家也有喜欢的主播,那么我们今天使用之前提到的xpath方式来将斗鱼的各大主播的房间信息拿到 第一步 ,我们先来分析一下斗鱼,直播分类中的房间信息列表页接口 觉得今天的MSI不能错过!!!!!!!!!! 接口 url = 'https://www.douyu.com/directory/all' 我们就准备爬取此界面直播下的房间内容 这里就不做分页...

小羽飞的博客 2081

Unity性能优化 - 动态图集

Unity 动态图集是 Unity 引擎中用于处理游戏纹理优化的一种技术。本文介绍了什么是动态图集,动态图集的优缺点,以及提供了一套完整的代码供大家参考。

qq_33808037的博客 4840

MIKE水动力笔记13_数字化海图2之克里金插值

在进行MIKE水动力建模之初,需要准备好水深数据,本专题系列博文主要讲解如何将扫描版JPG格式海图数据在ArcGIS中进行数字化并制作成xyz水深地形数据,用的克里金插值方法,仅供参考。

晏长街的博客 2881

提取斗鱼直播源的图文教程

给个斗鱼直播的源,喜欢用Pot看的可以用。

vivianlinux的博客 3万+

【Matlab】如何使用Simulink进行电池建模和SOC预估

“通过Simulink电池建模进行SOC预估,其实挺容易!” 1 声明 本文只描述一般性电池建模方法,文中出现的电池相关数据来自一些论文或者外文文献,对数据的真实性不做任何保证。 本文参考了不少国内高校的硕士论文和外文文献,所以本篇文章只作为学术性交流,未经...

wanff1204的博客 2万+

**爬取斗鱼数据**

用到的关键模块是requests,json,pyquery以及pymysql,requests主要是发送get请求,json主要是将获取到的数据进行反序列化,pyquery模块可以使用css选择器选择需要的数据,pymysql模块是将pycharm与MySQL连接起来方便存储数据。

weixin_58293480的博客 476

SAP SLT REODPS_REPL API 的使用介绍

本文聚焦 SAP 数据复制生态中的 RODPS_REPL(常被误写为 REODPS_REPL),解析其作为 ODP(Operational Data Provisioning)标准接口的核心功能与应用场景。RODPS_REPL 是 SAP 提供的 ABAP 接口集合,支持从 ODP 上下文(如 ODP_SAPI、ODP_CDS)执行初始化装载和增量捕获,被 SAP BW、Datasphere 及第三方工具(如 Azure Data Factory、Qlik Replicate)广泛调用。 关键要点: 核心对

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 231

地平线旭日X3开发板--使用Opencv显示CSI摄像头例程

但是从libsrcampy获取的摄像头图像格式是NV12,无法直接在opencv上显示或者处理,调试过程发现旭日派无法直接用opencv的VideoCapture()调用CSI摄像头,需要使用opencv来做开发的小伙伴可以做个参考,效果如下图所示。需要使用libsrcampy库来获取CSI摄像头图像,为了能够使用opencv的API来处理图像,需要增加NV12转化成bgr像素格式的函数。opencv显示图像.png。

bingdund的博客 543

如何获取各大主流平台的推流地址?

目录斗鱼 斗鱼 打开斗鱼首页并登陆 点击头像进入“个人中心” 进入“个人中心”点击“主播中心”进入“主播中心”,点击打开“直播相关”折叠面板,然后点击“直播设置”进入“直播设置”选项卡,然后点击直播开关,开启直播,(注意:此时页面会跳转直播间页面,直播间页面也能获取到推流地址),既可以看到“推流地址”复制即可 ...

weixin_34920636的博客 2万+

华为OD机考双机位C卷 - 虚拟理财游戏(Java & Python& JS & C/C++ & GO )

华为OD机考双机位C卷 - 虚拟理财游戏(OD上机考试双机位C卷)。提供Java、C++、Python、Go、JavaScript源码实现,并提供完整思路讲解,以及在线OJ模拟做题。

算法大师! 670

斗鱼直播地址抓取——转载

先附上原地址斗鱼直播真实地址解析,直播源抓取方法 找了很久发现52pj上有一个帖子把自己尝试出来的办法发出来了,虽然有点分功夫,但还是发现了规律,难得的毅力。以下为摘录: 2019-5-19重磅更新:最精简的 斗鱼直播源 破解教程 经过我十多天的思考,测试,沉淀,升华,终于破解了斗鱼直播源 真实地址的精简标准格式(可能是之一): 标准格式:http://tx2play1.douyucdn.c...

weixin_43365295的博客 1万+

深入解析基于Fluent的蒸发冷凝相变UDF程序及其在重力热管液体蒸发冷凝变化计算中的应用

ANSYS Fluent是一款功能强大的CFD软件,广泛应用于流体流动、传热、化学反应和多相流等领域的数值模拟。Fluent提供了丰富的物理模型和求解器,支持用户自定义函数(UDF)以扩展其功能,实现更为复杂和特定的模拟需求。UDF是用C语言编写的程序,允许用户在Fluent中自定义物理模型、边界条件、源项等,以实现特定的模拟需求。在处理复杂的相变过程、非均匀物性参数或特定的热传导机制时,UDF提供了极大的灵活性和扩展性。

qq_38334677的博客 1266

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

python 直播源地址_斗鱼直播间真实rtmp地址获取(含工具类下载)

背景图片斗鱼直播间比赛截图最近在看英雄联盟比赛的时候,就在思考如何取直播的真实rtmp播放地址,放到类似于(potplayer播放器)中,或者自己也可以写一个app来玩一下,所以便有了本篇的内容。1:工具类下载搜索关键字:"斗鱼直播间真实rtmp地址获取"下载工具下载下来是一个可执行的exe文件鼠标双击即可运行,然后输入房间号(房间号通常为1~7位纯数字,浏览器地址栏中看到的房间号不一定是真实ri...

weixin_36138462的博客 5414

文档:亲测可用解决vnc灰屏,黑屏,鼠标大黑叉情况

主要解决vnc-viewer灰屏,黑屏,鼠标大黑叉等现象,详细见文档。

斗鱼直播数据分析(一)之利用python3爬虫获取数据

前言 随着2012年开始直播行业的兴起,吃外卖看直播成了很多大学生每天都会做的事(当年我们宿舍的就是这么过来的 ╮( ̄▽ ̄)╭),伴随着最近自己很喜欢的一位主播跳槽到海鲜台,所以就打算扒一扒这个海鲜台,本篇文章分成3个部分: (1)利用爬虫获取数据 (2)从各种维度对直播数据进行数据分析 (3)分析结果可视化 一、利用爬虫获取数据 Markdown和扩展Markdown简洁的语法...

技术集散地 1万+

SAP B1中文培訓教材_SDK

公司内部培训资料,对开发工具 ,DIAPI, UIAPI,Add-ON有详细解说

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

斗鱼直播实时数据爬取 ...

思路 1, 解析URL 2, 利用爬虫神器 bs4 和 正则表达式得到想要的信息; 3, 进库和本地保存 DJango后台展示和本地CSV(卖相太差,不发了) * 存储本地的CSV 直接运行 DySpyder().summary_data180() 即可* 直接上代码 # -*- coding: utf-8 -*- impo...

weixin_30954607的博客 1396

【Python爬虫】爬取斗鱼直播信息(Fiddler抓包分析)

大年初七了还不开始学习嘛? 过年期间一直再在看斗鱼直播平台的直播,学习主播的操作(骚套路)想着等有机会也来实战一波。看着看着就很想分析一下到底哪些主播观看的人数比较多,又为啥会有这么多人看。所以我们就要用爬虫来采集斗鱼直播平台上的数据了。 准 分析网页 打开斗鱼直播平台网页按F12进行分析(此步骤不用教了吧),我们发现每翻动一页网址没有发生变化且代码中页数也不是具体的url而是(看图),所以我们...

A_彬的博客 7873
上一篇: 车载惯性导航系统如何解决城市峡谷和隧道定位难题?实测案例解析
下一篇: 科研党必备:解决Kaggle注册时谷歌验证码收不到的完整避坑指南(2023最新)
vim8coder
博客等级 码龄1天 0粉丝 1693原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符  | 博主筛选后可见
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值