Recherche avancée

Sur d’autres sites (10243)

• Auto frame rate ffmpeg when passing frame with pipe

  16 mai 2017, par Elheni Mokhles

  I am using phantom js to render screenshots of the page and then passing it to FFmpeg to create a video, is it possible to make FFmpeg auto calculate the framerate using the duration between frames ?

  phantomjs file.js | ffmpeg -y -c:v png -f image2pipe -r 30 -i - -c:v libx264 -pix_fmt yuv420p -movflags +faststart outp.mp4

  I tried to make phantomjs send frame every 1/30 seconds but because it’s in a setIntervale it doesn’t work like expected.

• RTP lipsync synchronization

  18 mai 2017, par Pawel K

  Hi could someone please explain to me how to achieve a lipsync between two RTP streams (from the same RTSP session). I’m trying to calculate proper pts for ffmpeg AVPacket but I’m missing something and I can’t get my head around this.
  I have the following data available to me :
  u64RTCP_NTP_TS - NTP timestamp from RTCP Sender Report
  u32RTCP_TS - Timestamp from the RTCP Sender Report
  u32AudioRTP_TS - Timestamp from the Audio RTP packet
  u32VideoRTP_TS - Timestamp from the Video RTP Packet

  I’ve searched for an answer but still I can’t get a clear picture of how this should be achieved calculation-wise, what am I still missing.

• Decoding an mp3 file using FFmpeg but sound is glitchy

  28 avril 2017, par satyres

  After successfuly compiling the latest version of FFmpeg library and generated .a library in Ubuntu I’ve been struggling now for more than a week to play a simple mp3 file in Android without a success !
  The sound on my S4 working but it’s glitchy and stuttering
  I’ve followed this tutorial given by FFmpeg team in Github i’ve tried to use it in Android but no luck !
  here is the Native code.

   void Java_com_example_home_hellondk_MainActivity_audio_1decode_1example(JNIEnv * env, jobject obj, jstring file, jbyteArray array) {
  
          jboolean isfilenameCopy;
  
           const char * filename = (*env)->GetStringUTFChars(env, file,
  
                   &isfilenameCopy);
  
  jclass cls = (*env)->GetObjectClass(env, obj);
  
           jmethodID play = (*env)->GetMethodID(env, cls, "playSound", "([BI)V");
  
      AVCodec *codec;
  
      AVCodecContext *c= NULL;
  
      int len;
  
      FILE *f, *outfile;
  
      uint8_t inbuf[AUDIO_INBUF_SIZE + AV_INPUT_BUFFER_PADDING_SIZE];
  
      AVPacket avpkt;
  
      AVFrame *decoded_frame = NULL;
  
  AVFormatContext* container=NULL;
  
      av_init_packet(&avpkt);
  
  
  
      printf("Decode audio file %s \n", filename);
  
  LOGE("Decode audio file %s\n", filename);
  
      /* find the MPEG audio decoder */
  
    /*  codec = avcodec_find_decoder(AV_CODEC_ID_MP3);
  
      if (!codec) {
  
          fprintf(stderr, "Codec not found\n");
  
          LOGE("Codec not found\n");
  
          exit(1);
  
      }*/
  
  int lError;
  
           if ((lError = avformat_open_input(&container, filename, NULL, NULL))
  
                   != 0) {
  
               LOGE("Error open source file: %d", lError);
  
               exit(1);
  
           }
  
           if ((lError =  avformat_find_stream_info(container,NULL)) < 0) {
  
               LOGE("Error find stream information: %d", lError);
  
               exit(1);
  
           }
  
           LOGE("Stage 1.5");
  
          LOGE("audio format: %s", container->iformat->name);
  
         LOGE("audio bitrate: %llu", container->bit_rate);
  
  
  
      int stream_id = -1;
  
          // To find the first audio stream. This process may not be necessary
  
          // if you can gurarantee that the container contains only the desired
  
          // audio stream
  
             LOGE("nb_streams: %d", container->nb_streams);
  
          int i;
  
          for (i = 0; i < container->nb_streams; i++) {
  
              if (container->streams[i]->codec->codec_type == AVMEDIA_TYPE_AUDIO) {
  
                  stream_id = i;
  
                   LOGE("stream_id: %d", stream_id);
  
                  break;
  
              }
  
          }
  
  
  
          AVCodecContext* codec_context = container->streams[stream_id]->codec;
  
          codec = avcodec_find_decoder(codec_context->codec_id);
  
           LOGE("stream_id: %d", stream_id);
  
          LOGE("codec %s", codec->name);
  
          if (!codec) {
  
              fprintf(stderr, "codec not found\n");
  
              exit(1);
  
          }
  
  
  
      c = avcodec_alloc_context3(codec);
  
      if (!c) {
  
          fprintf(stderr, "Could not allocate audio codec context\n");
  
            LOGE("Could not allocate audio codec context\n");
  
          exit(1);
  
      }
  
  
  
      /* open it */
  
      if (avcodec_open2(c, codec, NULL) < 0) {
  
          fprintf(stderr, "Could not open codec\n");
  
           LOGE("Could not open codec\n");
  
          exit(1);
  
      }
  
  
  
      f = fopen(filename, "rb");
  
      if (!f) {
  
          fprintf(stderr, "Could not open %s\n", filename);
  
          LOGE("Could not open %s\n",filename);
  
          exit(1);
  
      }
  
  
  
  
  
  
  
          avpkt.data = inbuf;
  
          avpkt.size = fread(inbuf, 1, AUDIO_INBUF_SIZE, f);
  
          LOGE("Stage 5");
  
      /* decode until eof */
  
  
  
      while (1) {
  
  
  
      if ((len = av_read_frame(container, &avpkt)) < 0)
  
                         break;
  
  
  
          if (avpkt.stream_index == stream_id)
  
                       {
  
        if (!decoded_frame) {
  
                                               if (!(decoded_frame = av_frame_alloc())) {
  
                                                   fprintf(stderr, "Could not allocate audio frame\n");
  
                                                    LOGE("Could not allocate audio frame\n");
  
                                                   exit(1);
  
                                               }
  
                                           }
  
                              int got_frame = 0;
  
                                len = avcodec_decode_audio4(c, decoded_frame, &got_frame, &avpkt);
  
                               LOGE("len=%d",len);
  
                               if (len < 0)
  
                               {
  
                                   LOGE("Error decoding audio\n");
  
                                   continue;
  
                               }
  
  
  
                               if (got_frame)
  
                               {
  
                                    LOGE("begin frame decode\n");
  
                                    int data_size = av_samples_get_buffer_size(NULL, c->channels,decoded_frame->nb_samples,c->sample_fmt, 1);
  
                                  if (data_size>0)
  
                                  {
  
                                    LOGE("after frame decode %d\n",data_size);
  
  
  
                                   jbyte *bytes = (*env)->GetByteArrayElements(env, array, NULL);
  
                                    memcpy(bytes, decoded_frame->data[0], data_size);
  
                                    (*env)->ReleaseByteArrayElements(env, array, bytes, 0);
  
                                    (*env)->CallVoidMethod(env, obj, play, array, data_size);
  
  
  
                                   }
  
                                   else
  
                                   {
  
                                   fprintf(stderr, "Failed to calculate data size\n");
  
                                    exit(1);
  
  
  
                                   }
  
  
  
                               }
  
  
  
                               avpkt.size -= len;
  
                               avpkt.data += len;
  
                               avpkt.pts = AV_NOPTS_VALUE;
  
                              if (avpkt.size < AUDIO_REFILL_THRESH)
  
                              {
  
                                  memmove(inbuf, avpkt.data, avpkt.size);
  
                                  avpkt.data = inbuf;
  
                                  len = fread(avpkt.data + avpkt.size, 1, AUDIO_INBUF_SIZE - avpkt.size, f);
  
                                  if (len > 0)
  
                                      avpkt.size += len;
  
                              }
  
  
  
                         }
  
  
  
  
  
  
  
  
  
      }
  
  
  
  
  
      fclose(f);
  
  
  
      avcodec_free_context(&c);
  
  av_frame_free(&decoded_frame);
  
      }

  The Java code :

  package com.example.home.hellondk;
  
  
  
  import android.media.AudioFormat;
  
  import android.media.AudioManager;
  
  import android.media.AudioTrack;
  
  import android.media.MediaPlayer;
  
  import android.support.v7.app.AppCompatActivity;
  
  import android.os.Bundle;
  
  import android.util.Log;
  
  
  
  import java.io.File;
  
  import java.io.FileNotFoundException;
  
  import java.io.FileOutputStream;
  
  import java.io.IOException;
  
  
  
  public class MainActivity extends AppCompatActivity {
  
      static {
  
          System.loadLibrary("MyLibraryPlayer");
  
      }
  
      public native void createEngine();
  
  
  
      public native void audio_decode_example(String outfilename, byte[] array);
  
  
  
  
  
  
  
      private AudioTrack track;
  
      private FileOutputStream os;
  
  
  
      @Override
  
      protected void onCreate(Bundle savedInstanceState) {
  
          super.onCreate(savedInstanceState);
  
          setContentView(R.layout.activity_main);
  
          createEngine();
  
  
  
   /*        MediaPlayer mp = new MediaPlayer();
  
          mp.start();*/
  
  
  
          int bufSize = AudioTrack.getMinBufferSize(32000,
  
                  AudioFormat.CHANNEL_CONFIGURATION_STEREO,
  
                  AudioFormat.ENCODING_PCM_16BIT);
  
  
  
          track = new AudioTrack(AudioManager.STREAM_MUSIC,
  
                  32000,
  
                  AudioFormat.CHANNEL_CONFIGURATION_STEREO,
  
                  AudioFormat.ENCODING_PCM_16BIT,
  
                  bufSize,
  
                  AudioTrack.MODE_STREAM);
  
  
  
          byte[] bytes = new byte[bufSize];
  
  
  
  
  
     audio_decode_example("/storage/emulated/0/test.mp3", bytes);
  
  
  
      }
  
  
  
      void playSound(byte[] buf, int size) {
  
          //android.util.Log.v("ROHAUPT", "RAH Playing");
  
          if (track.getPlayState() != AudioTrack.PLAYSTATE_PLAYING)
  
              track.play();
  
          track.write(buf, 0, size);
  
  
  
  
  
      }
  
  }

  Thank you so much for your help.
  Kind regards