Lista de carimbos de data/hora

Question

Estou tentando selecionar, digamos, 10 quadros de um determinado vídeo, possivelmente com maior variedade e cenas. Eu gostaria de experimentar vários cenários de seleção, mas o bom é que a noção de I-framesignifica inerentemente mudanças de cena! Então, eu gostaria de obter os I-frames. Mas talvez existam muitos I-frames, então provavelmente terei que experimentá-los.

Como posso obter a lista de todos os frames_number de I-frames em um vídeo em FFMpeg ou Python? Gostaria de usar a lista para selecionar apenas 10 deles e salvá-los como PNG/JPEG.

Answer 1

Parece um problema X/Y, então proporei vários comandos diferentes:

Lista de carimbos de data/hora

Se você deseja gerar uma lista de carimbos de data/hora para cada quadro-chave:

ffprobe -v error -skip_frame nokey -show_entries frame=pkt_pts_time -select_streams v -of csv=p=0 input
0.000000
2.502000
3.795000
6.131000
10.344000
12.554000

Note o -skip_frame nokey.

selecione filtro

Outro método é usar oselecione filtrocom a sceneopção de gerar suas miniaturas:

ffmpeg -i input -vf "select=gt'(scene,0.4)',scale=160:-1" -vsync vfr %04d.png

Answer 2

Isso produzirá todos os quadros i como imagens PNG.

ffmpeg -i 2.flv -vf "select=eq(pict_type\,I)" -vsync vfr frame-%02d.png

Dê crédito a este comentário por uma pergunta semelhante no superuser.com. Como extrair todos os quadros-chave de um videoclipe?

Espero que ajude. Saúde.

Ian

Answer 3

Obtendo insights deaqui, consegui fazer isso com ffprobe:

def iframes():
    if not os.path.exists(iframe_path):
        os.mkdir(iframe_path)
    command = 'ffprobe -v error -show_entries frame=pict_type -of default=noprint_wrappers=1'.split()
    out = subprocess.check_output(command + [filename]).decode()
    f_types = out.replace('pict_type=','').split()
    frame_types = zip(range(len(f_types)), f_types)
    i_frames = [x[0] for x in frame_types if x[1]=='I']
    if i_frames:
        cap = cv2.VideoCapture(filename)
        for frame_no in i_frames:
            cap.set(cv2.CAP_PROP_POS_FRAMES, frame_no)
            ret, frame = cap.read()
            outname = iframe_path+'i_frame_'+str(frame_no)+'.jpg'
            cv2.imwrite(outname, frame)
        cap.release()
        print("I-Frame selection Done!!")


if __name__ == '__main__':
    iframes()

Answer 4

Para obter o tipo de quadro de todos os quadros do vídeo, você pode usar a seguinte função python. Veja a solução originalaqui.

def get_frames_metadata(file):
    command = '"{ffexec}" -show_frames -print_format json "{filename}"'.format(ffexec='ffprobe', filename=file)
    response_json = subprocess.check_output(command, shell=True, stderr=None)
    frames = json.loads(response_json)["frames"]
    frames_metadata, frames_type, frames_type_bool = [], [], []
    for frame in frames:
        if frame["media_type"] == "video":
            video_frame = json.dumps(dict(frame), indent=4)
            frames_metadata.append(video_frame)
            frames_type.append(frame["pict_type"])
            if frame["pict_type"] == "I":
                frames_type_bool.append(True)
            else:
                frames_type_bool.append(False)
    print(frames_type)
    return frames_metadata, frames_type, frames_type_bool

Resultado de saída:

['I', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'P', 'I', 'P']

Onde I e P é o tipo de quadro.