JavaCV本地视频流通过帧图片添加文本进行字幕合成

最新推荐文章于 2024-08-17 03:41:18 发布

原创

最新推荐文章于 2024-08-17 03:41:18 发布 · 1.1k 阅读

3 ·

CC 4.0 BY-SA版权

浩浩最牛X

文章标签：

#ffmpeg #java #开发语言

博客围绕音视频字幕合成展开，提到Java框架中JavaCV封装底层调用FFMPEG函数，但JavaCV实现字幕合成较难。OpenCV虽可实现但不支持中文，后采用Java自带的awt画图工具Graphics2D，给出了添加依赖和示例代码实现字幕合成。

　音视频的Java框架找了一大圈，除了JavaCV，目前找不到其他的。JavaCV封装了对底层C的调用，最终实际上执行的都是FFMPEG的函数。现在有个头疼的问题，FFMPEG的字幕合成用命令行一敲就完事了，比如想往input.mkv里合入字幕subtitles.srt，输出到output.mkv，简单的很：

ffmpeg -i input.mkv -vf subtitles=subtitles.srt output.mkv

上面的-vf参数表示内嵌字幕，也就是不用手动在播放器里设置，字幕就自己出来了。JavaCV怎么实现字幕合成呢？找了一大圈，没有。OpenCV倒是可以实现，就是比较麻烦，大概思路是：音视频帧 -> 视频帧 -> 视频帧转图片 -> 字幕文本画到图片指定位置上 -> 图片转回视频帧 -> 写视频帧 -> 写音频帧。说白了就是文本水印。可惜OpenCV不支持中文，画出来都是问号。

　　OpenCV就是一个画图工具而已，换，用Java自带的awt画图工具对象Graphics2D。不废话，上代码：

　　1、pom.xml添加Java CV依赖：

        <dependency>
            <groupId>org.bytedeco</groupId>
            <artifactId>javacv-platform</artifactId>
            <version>1.5.2</version>
        </dependency>

2、示例代码，这里用几句话模拟字幕循环输出，并展示合入字幕的时间：

import org.bytedeco.ffmpeg.global.avcodec;
import org.bytedeco.javacv.*;
import org.bytedeco.javacv.Frame;
import sun.font.FontDesignMetrics;

import java.awt.*;
import java.awt.image.BufferedImage;
import java.text.SimpleDateFormat;
import java.util.ArrayList;
import java.util.Date;
import java.util.List;

public class SubtitleMix {

private final static SimpleDateFormat sdf = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");

public static void main(String[] args) throws FrameGrabbe