Recherche avancée

Médias (3)

Mot : - Tags -/collection

Autres articles (71)

  • Les autorisations surchargées par les plugins

    27 avril 2010, par

    Mediaspip core
    autoriser_auteur_modifier() afin que les visiteurs soient capables de modifier leurs informations sur la page d’auteurs

  • Support audio et vidéo HTML5

    10 avril 2011

    MediaSPIP utilise les balises HTML5 video et audio pour la lecture de documents multimedia en profitant des dernières innovations du W3C supportées par les navigateurs modernes.
    Pour les navigateurs plus anciens, le lecteur flash Flowplayer est utilisé.
    Le lecteur HTML5 utilisé a été spécifiquement créé pour MediaSPIP : il est complètement modifiable graphiquement pour correspondre à un thème choisi.
    Ces technologies permettent de distribuer vidéo et son à la fois sur des ordinateurs conventionnels (...)

  • HTML5 audio and video support

    13 avril 2011, par

    MediaSPIP uses HTML5 video and audio tags to play multimedia files, taking advantage of the latest W3C innovations supported by modern browsers.
    The MediaSPIP player used has been created specifically for MediaSPIP and can be easily adapted to fit in with a specific theme.
    For older browsers the Flowplayer flash fallback is used.
    MediaSPIP allows for media playback on major mobile platforms with the above (...)

Sur d’autres sites (13234)

  • How to extract frames at 30 fps using FFMPEG APIs on Android ?

    8 septembre 2016, par Amber Beriwal

    We are working on a project that consumes FFMPEG library for video frame extraction on Android platform.

    On Windows, we have observed :

    • Using CLI, ffmpeg is capable of extracting frames at 30 fps using command ffmpeg -i input.flv -vf fps=1 out%d.png.
    • Using Xuggler, we are able to extract frames at 30 fps.
    • Using FFMPEG APIs directly in code, we are getting frames at 30 fps.

    But when we use FFMPEG APIs directly on Android (See Hardware Details), we are getting following results :

    • 720p video (1280 x 720) - 16 fps (approx. 60 ms/frame)
    • 1080p video (1920 x 1080) - 7 fps (approx. 140 ms/frame)

    We haven’t tested Xuggler/CLI on Android yet.

    Ideally, we should be able to get the data in constant time (approx. 30 ms/frame).

    How can we get 30 fps on Android ?

    Code being used on Android :

    if (avformat_open_input(&pFormatCtx, pcVideoFile, NULL, NULL)) {
    
    iError = -1;  //Couldn't open file
    
}
    

    
if (!iError) {
    
    //Retrieve stream information
    
    if (avformat_find_stream_info(pFormatCtx, NULL) < 0)
    
        iError = -2; //Couldn't find stream information
    
}
    

    
//Find the first video stream
    
if (!iError) {
    

    
    for (i = 0; i < pFormatCtx->nb_streams; i++) {
    
        if (AVMEDIA_TYPE_VIDEO
    
                == pFormatCtx->streams[i]->codec->codec_type) {
    
            iFramesInVideo = pFormatCtx->streams[i]->nb_index_entries;
    
            duration = pFormatCtx->streams[i]->duration;
    
            begin = pFormatCtx->streams[i]->start_time;
    
            time_base = (pFormatCtx->streams[i]->time_base.num * 1.0f)
    
                    / pFormatCtx->streams[i]->time_base.den;
    

    
            pCodecCtx = avcodec_alloc_context3(NULL);
    
            if (!pCodecCtx) {
    
                iError = -6;
    
                break;
    
            }
    

    
            AVCodecParameters params = { 0 };
    
            iReturn = avcodec_parameters_from_context(&params,
    
                    pFormatCtx->streams[i]->codec);
    
            if (iReturn < 0) {
    
                iError = -7;
    
                break;
    
            }
    

    
            iReturn = avcodec_parameters_to_context(pCodecCtx, &params);
    
            if (iReturn < 0) {
    
                iError = -7;
    
                break;
    
            }
    

    
            //pCodecCtx = pFormatCtx->streams[i]->codec;
    

    
            iVideoStreamIndex = i;
    
            break;
    
        }
    
    }
    
}
    

    
if (!iError) {
    
    if (iVideoStreamIndex == -1) {
    
        iError = -3; // Didn't find a video stream
    
    }
    
}
    

    
if (!iError) {
    
    // Find the decoder for the video stream
    
    pCodec = avcodec_find_decoder(pCodecCtx->codec_id);
    
    if (pCodec == NULL) {
    
        iError = -4;
    
    }
    
}
    

    
if (!iError) {
    
    // Open codec
    
    if (avcodec_open2(pCodecCtx, pCodec, NULL) < 0)
    
        iError = -5;
    
}
    

    
if (!iError) {
    
    iNumBytes = av_image_get_buffer_size(AV_PIX_FMT_RGB24, pCodecCtx->width,
    
            pCodecCtx->height, 1);
    

    
    // initialize SWS context for software scaling
    
    sws_ctx = sws_getContext(pCodecCtx->width, pCodecCtx->height,
    
            pCodecCtx->pix_fmt, pCodecCtx->width, pCodecCtx->height,
    
            AV_PIX_FMT_RGB24,
    
            SWS_BILINEAR,
    
            NULL,
    
            NULL,
    
            NULL);
    
    if (!sws_ctx) {
    
        iError = -7;
    
    }
    
}
    
clock_gettime(CLOCK_MONOTONIC_RAW, &end);
    
delta_us = (end.tv_sec - start.tv_sec) * 1000000
    
        + (end.tv_nsec - start.tv_nsec) / 1000;
    
start = end;
    
//LOGI("Starting_Frame_Extraction: %lld", delta_us);
    
if (!iError) {
    
    while (av_read_frame(pFormatCtx, &packet) == 0) {
    
        // Is this a packet from the video stream?
    
        if (packet.stream_index == iVideoStreamIndex) {
    
            pFrame = av_frame_alloc();
    
            if (NULL == pFrame) {
    
                iError = -8;
    
                break;
    
            }
    

    
            // Decode video frame
    
            avcodec_decode_video2(pCodecCtx, pFrame, &iFrameFinished,
    
                    &packet);
    
            if (iFrameFinished) {
    
                //OUR CODE
    
            }
    
            av_frame_free(&pFrame);
    
            pFrame = NULL;
    
        }
    
        av_packet_unref(&packet);
    
    }
    
}

  • How to extract frames at 30 fps using FFMPEG APIs on Android ?

    11 mars 2020, par Amber Beriwal

    We are working on a project that consumes FFMPEG library for video frame extraction on Android platform.

    On Windows, we have observed :

    • Using CLI, ffmpeg is capable of extracting frames at 30 fps using command ffmpeg -i input.flv -vf fps=1 out%d.png.
    • Using Xuggler, we are able to extract frames at 30 fps.
    • Using FFMPEG APIs directly in code, we are getting frames at 30 fps.

    But when we use FFMPEG APIs directly on Android (See Hardware Details), we are getting following results :

    • 720p video (1280 x 720) - 16 fps (approx. 60 ms/frame)
    • 1080p video (1920 x 1080) - 7 fps (approx. 140 ms/frame)

    We haven’t tested Xuggler/CLI on Android yet.

    Ideally, we should be able to get the data in constant time (approx. 30 ms/frame).

    How can we get 30 fps on Android ?

    Code being used on Android :

    if (avformat_open_input(&pFormatCtx, pcVideoFile, NULL, NULL)) {
    
    iError = -1;  //Couldn't open file
    
}
    

    
if (!iError) {
    
    //Retrieve stream information
    
    if (avformat_find_stream_info(pFormatCtx, NULL) < 0)
    
        iError = -2; //Couldn't find stream information
    
}
    

    
//Find the first video stream
    
if (!iError) {
    

    
    for (i = 0; i < pFormatCtx->nb_streams; i++) {
    
        if (AVMEDIA_TYPE_VIDEO
    
                == pFormatCtx->streams[i]->codec->codec_type) {
    
            iFramesInVideo = pFormatCtx->streams[i]->nb_index_entries;
    
            duration = pFormatCtx->streams[i]->duration;
    
            begin = pFormatCtx->streams[i]->start_time;
    
            time_base = (pFormatCtx->streams[i]->time_base.num * 1.0f)
    
                    / pFormatCtx->streams[i]->time_base.den;
    

    
            pCodecCtx = avcodec_alloc_context3(NULL);
    
            if (!pCodecCtx) {
    
                iError = -6;
    
                break;
    
            }
    

    
            AVCodecParameters params = { 0 };
    
            iReturn = avcodec_parameters_from_context(&params,
    
                    pFormatCtx->streams[i]->codec);
    
            if (iReturn < 0) {
    
                iError = -7;
    
                break;
    
            }
    

    
            iReturn = avcodec_parameters_to_context(pCodecCtx, &params);
    
            if (iReturn < 0) {
    
                iError = -7;
    
                break;
    
            }
    

    
            //pCodecCtx = pFormatCtx->streams[i]->codec;
    

    
            iVideoStreamIndex = i;
    
            break;
    
        }
    
    }
    
}
    

    
if (!iError) {
    
    if (iVideoStreamIndex == -1) {
    
        iError = -3; // Didn't find a video stream
    
    }
    
}
    

    
if (!iError) {
    
    // Find the decoder for the video stream
    
    pCodec = avcodec_find_decoder(pCodecCtx->codec_id);
    
    if (pCodec == NULL) {
    
        iError = -4;
    
    }
    
}
    

    
if (!iError) {
    
    // Open codec
    
    if (avcodec_open2(pCodecCtx, pCodec, NULL) < 0)
    
        iError = -5;
    
}
    

    
if (!iError) {
    
    iNumBytes = av_image_get_buffer_size(AV_PIX_FMT_RGB24, pCodecCtx->width,
    
            pCodecCtx->height, 1);
    

    
    // initialize SWS context for software scaling
    
    sws_ctx = sws_getContext(pCodecCtx->width, pCodecCtx->height,
    
            pCodecCtx->pix_fmt, pCodecCtx->width, pCodecCtx->height,
    
            AV_PIX_FMT_RGB24,
    
            SWS_BILINEAR,
    
            NULL,
    
            NULL,
    
            NULL);
    
    if (!sws_ctx) {
    
        iError = -7;
    
    }
    
}
    
clock_gettime(CLOCK_MONOTONIC_RAW, &end);
    
delta_us = (end.tv_sec - start.tv_sec) * 1000000
    
        + (end.tv_nsec - start.tv_nsec) / 1000;
    
start = end;
    
//LOGI("Starting_Frame_Extraction: %lld", delta_us);
    
if (!iError) {
    
    while (av_read_frame(pFormatCtx, &packet) == 0) {
    
        // Is this a packet from the video stream?
    
        if (packet.stream_index == iVideoStreamIndex) {
    
            pFrame = av_frame_alloc();
    
            if (NULL == pFrame) {
    
                iError = -8;
    
                break;
    
            }
    

    
            // Decode video frame
    
            avcodec_decode_video2(pCodecCtx, pFrame, &iFrameFinished,
    
                    &packet);
    
            if (iFrameFinished) {
    
                //OUR CODE
    
            }
    
            av_frame_free(&pFrame);
    
            pFrame = NULL;
    
        }
    
        av_packet_unref(&packet);
    
    }
    
}

  • Revision 4b8f7a67e5 : Merge "configure : special case flag test for clang" into experimental

    4 mai 2013, par James Zern

    Merge "configure : special case flag test for clang" into experimental

Navigation