Legendagem
com IA

INTRODUÇÃO

O que é a Legendagem com IA?

A legendagem manual de vídeos é um processo lento e custoso, além de estar propenso a erros humanos. Utilizando de inteligência artificial, conseguimos automatizar o processo de legendagem, acelerando resultados e obtendo maior robustez na solução. Para realizar o processo de geração de legendas, utilizamos uma arquitetura baseada no Whisper, ferramenta da OpenAI para geração de legendas.

CONTEXTO

Quando fazer legendagem com IA?

A solução de legendagem por IA possui um caso de uso direto no ramo da mídia digital, permitindo um aumento de acessibilidade em plataformas de vídeos. Além da geração da legenda em si, existe também a possibilidade da adição de módulos de tradução para gerar o conteúdo em múltiplos idiomas. Entretanto, a legendagem também tem aplicações práticas na transcrição de reuniões, permitindo que IAs possam atuar posteriormente na transcrição para resumir, extrair insights e gerar relatórios.

SOLUÇÃO

Arquitetura de Legendagem por IA

A figura abaixo apresenta a arquitetura de legendagem na AWS:

Nesse diagrama, todo o processo se inicia com uma requisição no API Gateway, que aciona a função Lambda de início do processo. Essa função vai realizar o upload do vídeo no S3, levantar os dados de processamento no DynamoDB e enfileirar o processo no SQS. Em paralelo, uma regra temporal do EventBridge inicia outra função Lambda que valida a fila para processamento e inicia o orquestrador no Step Functions.

O orquestrador inicia a instância do Whisper no EC2 por meio de uma função Lambda, atualiza a tabela de processo do DynamoDB e entra em um loop de verificação do status. Ao terminar, as legendas são armazenadas no S3 e podem ser obtidas pela API.

REQUISITOS

O que preciso ter para começar um projeto de Legendagem?

Para começar a desenvolver o seu sistema de legendagem por IA na Lascasas Consulting é simples! Separe:

• Vídeos para validação da legenda;
• Acesso à conta AWS para implantação da arquitetura;
• Repositório Git para a arquitetura;
• Definição de regras de negócio do desafio:
  • Utilizaremos tradução?
  • Qual o formato da transcrição/legenda?
  • Usaremos IA para resumir ou gerar relatório?

MODUS OPERANDI

Como é o projeto de Legendagem por IA?

Nesse projeto, iniciamos provisionando a arquitetura no ambiente AWS e validando o seu funcionamento. Após assegurar a qualidade das legendas e transcrições geradas, adicionamos estruturas novas de acordo com a necessidade de negócio, podendo ser módulos de tradução ou IA generativa.

PRÓXIMOS PASSOS

Como iniciar meu projeto?

Leia mais sobre um estudo de caso de IA aplicada para legendagem:

Escolha um pacote apropriado para a sua demanda de legendagem automática por IA: