Como usar a IA Gemini para resumir vĂ­deos do YouTube


Uma pergunta de acompanhamento sobre a pontuaĂ§Ă£o final foi respondida corretamente, mas Gemini obteve o nome do goleador do primeiro touchdown errado: a IA sugeriu que era Johan Dotson. Dotson recebeu um touchdown nos destaques com as pontuações em 0-0, mas foi descartado-um exemplo das nuances que a IA nĂ£o necessariamente aprende.

GĂªmeos identificou com sucesso quando o Kansas City Chiefs recebeu seus primeiros pontos e atĂ© incluiu um registro de data e hora ligando direto ao touchdown no clipe do YouTube. TambĂ©m acertou o nome do artilheiro. Parece que GĂªmeos depende fortemente do comentĂ¡rio de clipes de esportes, o que nĂ£o Ă© surpreendente.

Resuma o conteĂºdo do vĂ­deo

A imagem pode conter arquivo e pĂ¡gina da web

A IA pode escolher detalhes do vĂ­deo – se eles sĂ£o mencionados no Ă¡udio.

Fotografia: David Nield

Em seguida, tentamos colocar GĂªmeos contra um Featurette nos bastidores Para o Grand Budapeste Hotel, dirigido por Wes Anderson. O clipe vai atĂ© quatro minutos e meio, e GĂªmeos devolveu algumas respostas quase instantaneamente: identificou o nome do filme que estĂ¡ sendo discutido e as principais batidas da narrativa do clipe.

No entanto, tudo depende do Ă¡udio (ou da transcriĂ§Ă£o) novamente – nĂ£o parece haver nenhuma anĂ¡lise do conteĂºdo do vĂ­deo real. A IA nĂ£o sabia dizer quem estava as cabeças falantes no vĂ­deo, mesmo que seus nomes fossem exibidos na tela, e nĂ£o pudesse dizer quem era o diretor (mesmo que isso tambĂ©m tenha sido mencionado na descriĂ§Ă£o do vĂ­deo).

No lado positivo, Gemini fez um trabalho impressionante ao resumir o Ă¡udio do vĂ­deo. Ele identificou corretamente alguns dos desafios de cinema que foram mencionados por toda parte e forneceu timestamps para eles – desde procurar um set para representar o Grand Budapeste, a preenchĂª -lo com extras.

Resuma entrevistas

A imagem pode conter arquivo de texto e pĂ¡gina da web da pĂ¡gina

Os GĂªmeos podem fornecer registros de data e hora para o vĂ­deo especificado.

Fotografia: David Nield

Finalmente, tentamos o Google Gemini com uma entrevista: Canal 4 no Reino Unido falando com Charlie Brooker e Siena Kelly sobre a Ăºltima sĂ©rie de Espelho preto (talvez apropriado para um artigo sobre IA). GĂªmeos se mostrou muito capaz em escolher os pontos de discussĂ£o e adicionar registros de data e hora, embora, Ă© claro, todo o vĂ­deo esteja falando principalmente.

Novamente, porĂ©m, nĂ£o hĂ¡ contexto sobre nada fora do Ă¡udio ou da transcriĂ§Ă£o. Gemini Ai nĂ£o sabia dizer onde a entrevista ocorreu, ou como os participantes estavam agindo, ou qualquer outra coisa sobre o visual do vĂ­deo – que vale a pena ter em mente se vocĂª usar vocĂª mesmo.

Para vĂ­deos em que as respostas que vocĂª deseja estĂ£o no Ă¡udio de um vĂ­deo do YouTube e sua transcriĂ§Ă£o associada, Gemini funciona muito bem em resumir e fornecer respostas precisas (desde que os comentaristas mencionem quando um touchdown Ă© descartado, bem como quando alguĂ©m Ă© pontuado). Para qualquer tipo de informaĂ§Ă£o visual, vocĂª ainda terĂ¡ que assistir ao vĂ­deo.



Source link