热门标签 | HotTags
当前位置:  开发笔记 > Android > 正文

android采用FFmpeg实现音视频合成与分离

这篇文章主要为大家详细介绍了android采用FFmpeg实现音视频合成与分离,具有一定的参考价值,感兴趣的小伙伴们可以参考一下

上一篇文章谈到音频剪切、混音、拼接与转码,也详细介绍cMake配置与涉及FFmpeg文件的导入: android端采用FFmpeg进行音频混合与拼接剪切 。现在接着探讨音视频的合成与分离。

1、音频提取

从多媒体文件中提取音频,关键命令为“-acodec copy -vn”,其中“-acodec copy”是采用音频编码器拷贝音频流,“-vn”是去掉video视频流:

 /**
   * 使用ffmpeg命令行进行抽取音频
   * @param srcFile 原文件
   * @param targetFile 目标文件
   * @return 抽取后的音频文件
 */
  public static String[] extractAudio(String srcFile, String targetFile){
    //-vn:video not
    String mixAudioCmd = "ffmpeg -i %s -acodec copy -vn %s";
    mixAudioCmd = String.format(mixAudioCmd, srcFile, targetFile);
    return mixAudioCmd.split(" ");//以空格分割为字符串数组
  }

2、视频提取

从多媒体文件中提取视频,关键命令为“-vcodec copy -an”,其中“-vcodec copy”是采用视频编码器拷贝视频流,“-an”是去掉audio音频流:

/**
   * 使用ffmpeg命令行进行抽取视频
   * @param srcFile 原文件
   * @param targetFile 目标文件
   * @return 抽取后的视频文件
*/
  public static String[] extractVideo(String srcFile, String targetFile){
    //-an audio not
    String mixAudioCmd = "ffmpeg -i %s -vcodec copy -an %s";
    mixAudioCmd = String.format(mixAudioCmd, srcFile, targetFile);
    return mixAudioCmd.split(" ");//以空格分割为字符串数组
  }

3、音视频合成

把音频和视频文件合成多媒体文件,关键命令是“-i %s -i %s -t”,分别代表输入音频、视频和文件时长。需要注意的是,如果原视频文件包含有音频,先把单独视频流抽取出来,然后再使用独立音频和视频进行合成:

  /**
   * 使用ffmpeg命令行进行音视频合成
   * @param videoFile 视频文件
   * @param audioFile 音频文件
   * @param duration 视频时长
   * @param muxFile 目标文件
   * @return 合成后的文件
   */
  @SuppressLint("DefaultLocale")
  public static String[] mediaMux(String videoFile, String audioFile, int duration, String muxFile){
    //-t:时长 如果忽略音视频时长,则把"-t %d"去掉
    String mixAudioCmd = "ffmpeg -i %s -i %s -t %d %s";
    mixAudioCmd = String.format(mixAudioCmd, videoFile, audioFile, duration, muxFile);
    return mixAudioCmd.split(" ");//以空格分割为字符串数组
  }

单独的视频提取出来后,进行音视频合成:

public void handleMessage(Message msg) {
      super.handleMessage(msg);
      if(msg.what == 100){
        String audioFile = PATH + File.separator + "tiger.mp3";//tiger.mp3
        String muxFile = PATH + File.separator + "media-mux.mp4";
 
        try {
          //使用MediaPlayer获取视频时长
          MediaPlayer mediaPlayer = new MediaPlayer();
          mediaPlayer.setDataSource(videoFile);
          mediaPlayer.prepare();
          //单位为ms
          int videoDuration = mediaPlayer.getDuration()/1000;
          Log.i(TAG, "videoDuration=" + videoDuration);
          mediaPlayer.release();
          //使用MediaMetadataRetriever获取音频时长
          MediaMetadataRetriever mediaRetriever = new MediaMetadataRetriever();
          mediaRetriever.setDataSource(audioFile);
          //单位为ms
          String duration = mediaRetriever.extractMetadata(MediaMetadataRetriever.METADATA_KEY_DURATION);
          int audioDuration = (int)(Long.parseLong(duration)/1000);
          Log.i(TAG, "audioDuration=" + audioDuration);
          mediaRetriever.release();
          //如果视频时长比音频长,采用音频时长,否则用视频时长
          int mDuration = Math.min(audioDuration, videoDuration);
          //使用纯视频与音频进行合成
          String[] commandLine = FFmpegUtil.mediaMux(temp, audioFile, mDuration, muxFile);
          executeFFmpegCmd(commandLine);
          isMux = false;
        } catch (Exception e) {
          e.printStackTrace();
        }
      }
    }

拼接好FFmpeg命令后,调用native方法去执行:

/**
   * 调用ffmpeg处理音视频
   * @param handleType handleType
   */
  private void doHandleMedia(int handleType){
    String[] commandLine = null;
    switch (handleType){
      case 0://音视频合成
        try {
          //视频文件有音频,先把纯视频文件抽取出来
          commandLine = FFmpegUtil.extractVideo(videoFile, temp);
          isMux = true;
        } catch (Exception e) {
          e.printStackTrace();
        }
        break;
      case 1://提取音频
        String extractAudio = PATH + File.separator + "extractAudio.aac";
        commandLine = FFmpegUtil.extractAudio(srcFile, extractAudio);
        break;
      case 2://提取视频
        String extractVideo = PATH + File.separator + "extractVideo.mp4";
        commandLine = FFmpegUtil.extractVideo(srcFile, extractVideo);
        break;
      default:
        break;
    }
    executeFFmpegCmd(commandLine);
  }
FFmpeg执行的回调:
/**
   * 执行ffmpeg命令行
   * @param commandLine commandLine
   */
  private void executeFFmpegCmd(final String[] commandLine){
    if(commandLine == null){
      return;
    }
    FFmpegCmd.execute(commandLine, new FFmpegCmd.OnHandleListener() {
      @Override
      public void onBegin() {
        Log.i(TAG, "handle media onBegin...");
      }
 
      @Override
      public void onEnd(int result) {
        Log.i(TAG, "handle media onEnd...");
        if(isMux){
          mHandler.obtainMessage(100).sendToTarget();
        }else {
          runOnUiThread(new Runnable() {
            @Override
            public void run() {
              Toast.makeText(MediaHandleActivity.this, "handle media finish...", Toast.LENGTH_SHORT).show();
            }
          });
        }
      }
    });
  }

好了,使用FFmpeg进行音视频合成与分离介绍完毕。如果各位有什么问题或者建议,欢迎交流。

源码:链接地址。如果对您有帮助,麻烦fork和star。

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持。


推荐阅读
  • QUIC协议:快速UDP互联网连接
    QUIC(Quick UDP Internet Connections)是谷歌开发的一种旨在提高网络性能和安全性的传输层协议。它基于UDP,并结合了TLS级别的安全性,提供了更高效、更可靠的互联网通信方式。 ... [详细]
  • 本文介绍如何在 Android 中通过代码模拟用户的点击和滑动操作,包括参数说明、事件生成及处理逻辑。详细解析了视图(View)对象、坐标偏移量以及不同类型的滑动方式。 ... [详细]
  • 深入理解 Oracle 存储函数:计算员工年收入
    本文介绍如何使用 Oracle 存储函数查询特定员工的年收入。我们将详细解释存储函数的创建过程,并提供完整的代码示例。 ... [详细]
  • 本文总结了2018年的关键成就,包括职业变动、购车、考取驾照等重要事件,并分享了读书、工作、家庭和朋友方面的感悟。同时,展望2019年,制定了健康、软实力提升和技术学习的具体目标。 ... [详细]
  • 在计算机技术的学习道路上,51CTO学院以其专业性和专注度给我留下了深刻印象。从2012年接触计算机到2014年开始系统学习网络技术和安全领域,51CTO学院始终是我信赖的学习平台。 ... [详细]
  • CSS 布局:液态三栏混合宽度布局
    本文介绍了如何使用 CSS 实现液态的三栏布局,其中各栏具有不同的宽度设置。通过调整容器和内容区域的属性,可以实现灵活且响应式的网页设计。 ... [详细]
  • Linux 系统启动故障排除指南:MBR 和 GRUB 问题
    本文详细介绍了 Linux 系统启动过程中常见的 MBR 扇区和 GRUB 引导程序故障及其解决方案,涵盖从备份、模拟故障到恢复的具体步骤。 ... [详细]
  • 本文介绍了如何使用jQuery根据元素的类型(如复选框)和标签名(如段落)来获取DOM对象。这有助于更高效地操作网页中的特定元素。 ... [详细]
  • 本文将详细介绍如何使用剪映应用中的镜像功能,帮助用户轻松实现视频的镜像效果。通过简单的步骤,您可以快速掌握这一实用技巧。 ... [详细]
  • 深入理解Cookie与Session会话管理
    本文详细介绍了如何通过HTTP响应和请求处理浏览器的Cookie信息,以及如何创建、设置和管理Cookie。同时探讨了会话跟踪技术中的Session机制,解释其原理及应用场景。 ... [详细]
  • 本文介绍如何在 Xcode 中使用快捷键和菜单命令对多行代码进行缩进,包括右缩进和左缩进的具体操作方法。 ... [详细]
  • 本文介绍了一款用于自动化部署 Linux 服务的 Bash 脚本。该脚本不仅涵盖了基本的文件复制和目录创建,还处理了系统服务的配置和启动,确保在多种 Linux 发行版上都能顺利运行。 ... [详细]
  • 在Linux系统中配置并启动ActiveMQ
    本文详细介绍了如何在Linux环境中安装和配置ActiveMQ,包括端口开放及防火墙设置。通过本文,您可以掌握完整的ActiveMQ部署流程,确保其在网络环境中正常运行。 ... [详细]
  • Android 渐变圆环加载控件实现
    本文介绍了如何在 Android 中创建一个自定义的渐变圆环加载控件,该控件已在多个知名应用中使用。我们将详细探讨其工作原理和实现方法。 ... [详细]
  • 如何在WPS Office for Mac中调整Word文档的文字排列方向
    本文将详细介绍如何使用最新版WPS Office for Mac调整Word文档中的文字排列方向。通过这些步骤,用户可以轻松更改文本的水平或垂直排列方式,以满足不同的排版需求。 ... [详细]
author-avatar
罗斌强
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有