fluent-ffmpeg извлекает аудио с помощью потоковой передачи

Я пытаюсь извлечь аудио из видео. Этот код работает хорошо:

ffmpeg('1.mp4').output('1.mp3')
.noVideo()
.format('mp3')
.outputOptions('-ab','192k')
.run();

Но если я прочитаю файл с таким потоком:

var video = fs.createReadStream('1.mp4');
var audio = fs.createWriteStream('1.mp3');
ffmpeg(video).output(audio)
.noVideo()
.format('mp3')
.outputOptions('-ab','192k')
.run();

Выходной файл весит 1 КБ и в нем ничего нет.

Как я могу извлекать аудио с помощью потоков?


person ABE    schedule 24.12.2018    source источник
comment
Можно ли искать в Readstream? В противном случае ffmpeg не может прочитать MP4.   -  person Gyan    schedule 25.12.2018
comment
Что вы имеете в виду, говоря, что Readstream доступен для поиска? Файл находится на диске   -  person ABE    schedule 27.12.2018
comment
FFmpeg должен иметь возможность перемещаться вперед и назад в MP4. Если метод fs не поддерживает это, ffmpeg не сможет проанализировать ввод.   -  person Gyan    schedule 27.12.2018
comment
Но вы можете обойти эту проблему, если у вашего MP4 есть коробка MOOV спереди.   -  person Gyan    schedule 27.12.2018
comment
@ABE, у меня не было проблем с запуском кода выше. Для моего образца mp4 я использовал следующий файл: github.com / mediaelement / mediaelement-files / blob / master / Вы можете это проверить?   -  person r0hitsharma    schedule 28.12.2018
comment
@ r0hitsharma Да, работает нормально. Почему это работает только в вашем файле?   -  person ABE    schedule 30.12.2018
comment
@ABE, сложно сказать, можете ли вы загрузить и связать файл / образец, который не работает в вашем случае?   -  person r0hitsharma    schedule 30.12.2018
comment
@ r0hitsharma Этот образец файла вызывает проблемы. dds.s3.nl-ams.scw.cloud/3.mp4 Большое спасибо   -  person ABE    schedule 31.12.2018


Ответы (3)


Для дальнейшего исследования я добавил обратный вызов для различного рода ошибок при перекодировании, а также других событий. Первым намеком был следующий обратный вызов для события progress:

{ frames: NaN,
  currentFps: NaN,
  currentKbps: NaN,
  targetSize: 0,
  timemark: '00:00:00.00' }

Также было stderr событие:

ffmpeg version n4.1 Copyright (c) 2000-2018 the FFmpeg developers
  built with gcc 8.2.1 (GCC) 20180831
  configuration: --prefix=/usr --disable-debug --disable-static --disable-stripping --enable-fontconfig --enable-gmp --enable-gnutls --enable-gpl --enable-ladspa --enable-libaom --enable-libass --enable-libbluray --enable-libdrm --enable-libfreetype --enable-libfribidi --enable-libgsm --enable-libiec61883 --enable-libjack --enable-libmodplug --enable-libmp3lame --enable-libopencore_amrnb --enable-libopencore_amrwb --enable-libopenjpeg --enable-libopus --enable-libpulse --enable-libsoxr --enable-libspeex --enable-libssh --enable-libtheora --enable-libv4l2 --enable-libvidstab --enable-libvorbis --enable-libvpx --enable-libwebp --enable-libx264 --enable-libx265 --enable-libxcb --enable-libxml2 --enable-libxvid --enable-nvdec --enable-nvenc --enable-omx --enable-shared --enable-version3
  libavutil      56. 22.100 / 56. 22.100
  libavcodec     58. 35.100 / 58. 35.100
  libavformat    58. 20.100 / 58. 20.100
  libavdevice    58.  5.100 / 58.  5.100
  libavfilter     7. 40.101 /  7. 40.101
  libswscale      5.  3.100 /  5.  3.100
  libswresample   3.  3.100 /  3.  3.100
  libpostproc    55.  3.100 / 55.  3.100
[mov,mp4,m4a,3gp,3g2,mj2 @ 0x562c9e18de80] stream 0, offset 0x30: partial file
[mov,mp4,m4a,3gp,3g2,mj2 @ 0x562c9e18de80] Could not find codec parameters for stream 0 (Video: h264 (avc1 / 0x31637661), none, 240x180, 374 kb/s): unspecified pixel format
Consider increasing the value for the 'analyzeduration' and 'probesize' options
Input #0, mov,mp4,m4a,3gp,3g2,mj2, from 'pipe:0':
  Metadata:
    major_brand     : isom
    minor_version   : 512
    compatible_brands: isomiso2avc1mp41
    encoder         : Lavf54.63.104
  Duration: 00:00:14.72, start: 0.000000, bitrate: N/A
    Stream #0:0(und): Video: h264 (avc1 / 0x31637661), none, 240x180, 374 kb/s, 25 fps, 25 tbr, 12800 tbn, 25600 tbc (default)
    Metadata:
      handler_name    : VideoHandler
    Stream #0:1(und): Audio: aac (mp4a / 0x6134706D), 44100 Hz, stereo, fltp, 75 kb/s (default)
    Metadata:
      handler_name    : SoundHandler
Stream mapping:
  Stream #0:1 -> #0:0 (aac (native) -> mp3 (libmp3lame))
[mov,mp4,m4a,3gp,3g2,mj2 @ 0x562c9e18de80] stream 1, offset 0xa1e: partial file
pipe:0: Invalid data found when processing input
Output #0, mp3, to 'pipe:1':
  Metadata:
    major_brand     : isom
    minor_version   : 512
    compatible_brands: isomiso2avc1mp41
    TSSE            : Lavf58.20.100
    Stream #0:0(und): Audio: mp3 (libmp3lame), 44100 Hz, stereo, fltp, 192 kb/s (default)
    Metadata:
      handler_name    : SoundHandler
      encoder         : Lavc58.35.100 libmp3lame
size=       0kB time=00:00:00.00 bitrate=N/A speed=   0x    
{ frames: NaN,
  currentFps: NaN,
  currentKbps: NaN,
  targetSize: 0,
  timemark: '00:00:00.00' }
video:0kB audio:0kB subtitle:0kB other streams:0kB global headers:0kB muxing overhead: unknown
Output file is empty, nothing was encoded (check -ss / -t / -frames parameters if used)

Последнее объясняет пустой файл, который вы видите на выходе. Что касается того, почему ошибка возникает только при потоковой передаче файла, а не при его открытии другим методом, этот ответ объясняет детали: https://stackoverflow.com/a/40028894/1494833

К сожалению, библиотека еще не поддерживает параметр ввода movflags, как рекомендовано выше (https://github.com/fluent-ffmpeg/node-fluent-ffmpeg/issues/823).

person r0hitsharma    schedule 10.01.2019

По моему опыту, ffmpeg не любит использовать потоки в качестве входных данных. следующий код работал у меня, сначала позвольте ffmpeg делать свое дело, а затем создавать / воспроизводить потоки для ввода / вывода:

         let video = `${files[0].filename}`;
         readstream.pipe(fs.createWriteStream(`./${video}`))
           .on('error', () => {
             console.log("Some error occurred in download:" + error);
             res.send(error);
           })
           .on('finish', () => {
             let audio = `${video.split(".")[0]}.mp3`
             ffmpeg(`${video}`).output(audio)
               .noVideo()
               .format(`mp3`)
               .on(`end`, (stdout, stderr) => {
               let newReadstream = fs.createReadStream(`${audio}`);

               })
               .run()
}
person user2422190    schedule 07.06.2021

Предполагая, что вы используете пакет ffmpeg, который по сути является оболочкой для запуска ffmpeg в узле, вы пришлось бы сделать это примерно так:

Этот код работает в моей системе с использованием того же файла, который вы указали в комментариях выше, но вам, возможно, придется внести некоторые изменения (Node v8.12.0, ffmpeg v0.0.4).

const ffmpeg = require('ffmpeg');

try {
    let process = new ffmpeg('3.mp4');
    process.then(function (video) {
        // Callback mode
        video.fnExtractSoundToMP3('3.mp3', function (error, file) {
            if (!error)
                console.log('Audio file: ' + file);
        });
    }, function (err) {
        console.log('Error: ' + err);
    });
} catch (e) {
    console.log(e.code);
    console.log(e.msg);
}
person The Doctor    schedule 02.01.2019
comment
Спасибо за ваш ответ, но я, вероятно, не понял, проблем с извлечением звука нет, проблема в использовании потоков, ваш код не будет работать, если вы напишете так: let process = new ffmpeg (fs.createReadStream ('3. mp4 ')); video.fnExtractSoundToMP3 (fs.createWriteStream ('3.mp3') - person ABE; 02.01.2019