Lista de marcas de tiempo

Question

Estoy tratando de seleccionar, digamos, 10 cuadros de un video determinado, posiblemente con la mayor variedad y escenas. Me gustaría experimentar con varios escenarios de selección, ¡pero lo bueno es que la noción de I-framesignificado inherente cambia de escena! Entonces me gustaría obtener los I-frames. Pero tal vez haya muchos fotogramas I, así que probablemente tenga que probarlos.

¿Cómo puedo obtener la lista de frame_number de todos los I-frames en un video en FFMpeg o Python? Me gustaría usar la lista para seleccionar solo 10 de ellos y guardarlos como PNG/JPEG.

Answer 1

Esto parece un problema X/Y, así que propondré varios comandos diferentes:

Lista de marcas de tiempo

Si desea generar una lista de marcas de tiempo para cada fotograma clave:

ffprobe -v error -skip_frame nokey -show_entries frame=pkt_pts_time -select_streams v -of csv=p=0 input
0.000000
2.502000
3.795000
6.131000
10.344000
12.554000

Nota la -skip_frame nokey.

seleccionar filtro

Otro método es utilizar elseleccionar filtrocon la sceneopción de generar sus miniaturas:

ffmpeg -i input -vf "select=gt'(scene,0.4)',scale=160:-1" -vsync vfr %04d.png

Answer 2

Esto generará todos los fotogramas i como imágenes PNG.

ffmpeg -i 2.flv -vf "select=eq(pict_type\,I)" -vsync vfr frame-%02d.png

Crédito a este comentario por una pregunta similar de superuser.com. ¿Cómo extraer todos los fotogramas clave de un videoclip?

Espero que ayude. Salud.

ian

Answer 3

Obtener información deaquí, pude hacerlo con ffprobe:

def iframes():
    if not os.path.exists(iframe_path):
        os.mkdir(iframe_path)
    command = 'ffprobe -v error -show_entries frame=pict_type -of default=noprint_wrappers=1'.split()
    out = subprocess.check_output(command + [filename]).decode()
    f_types = out.replace('pict_type=','').split()
    frame_types = zip(range(len(f_types)), f_types)
    i_frames = [x[0] for x in frame_types if x[1]=='I']
    if i_frames:
        cap = cv2.VideoCapture(filename)
        for frame_no in i_frames:
            cap.set(cv2.CAP_PROP_POS_FRAMES, frame_no)
            ret, frame = cap.read()
            outname = iframe_path+'i_frame_'+str(frame_no)+'.jpg'
            cv2.imwrite(outname, frame)
        cap.release()
        print("I-Frame selection Done!!")


if __name__ == '__main__':
    iframes()

Answer 4

Para obtener el tipo de fotograma de todos los fotogramas del vídeo, puede utilizar la siguiente función de Python. Ver solución originalaquí.

def get_frames_metadata(file):
    command = '"{ffexec}" -show_frames -print_format json "{filename}"'.format(ffexec='ffprobe', filename=file)
    response_json = subprocess.check_output(command, shell=True, stderr=None)
    frames = json.loads(response_json)["frames"]
    frames_metadata, frames_type, frames_type_bool = [], [], []
    for frame in frames:
        if frame["media_type"] == "video":
            video_frame = json.dumps(dict(frame), indent=4)
            frames_metadata.append(video_frame)
            frames_type.append(frame["pict_type"])
            if frame["pict_type"] == "I":
                frames_type_bool.append(True)
            else:
                frames_type_bool.append(False)
    print(frames_type)
    return frames_metadata, frames_type, frames_type_bool

Resultado de salida:

['I', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'I', 'P']

Donde I y P es el tipo de marco.