ChatGPT ha recorrido un largo camino desde su lanzamiento al público por primera vez y GPT-4 ahora ha introducido soporte para complementos de terceros, lo que ayuda a introducir toneladas de nuevas formas creativas de usar la IA. Sin embargo, esta no es la única forma de aprovechar ChatGPT al máximo; existen toneladas de herramientas de código abierto desarrolladas por la comunidad que pueden ayudarlo a hacer mucho más con ChatGPT si desea utilizar su versión gratuita.
Una forma de hacerlo es mediante el uso Vlog, una herramienta que te ayuda a convertir documentos en videos que luego puedes chatear y discutir con ChatGPT. Entonces, si buscas transcribir, articular o discutir videos con una IA, esta es la herramienta perfecta para ti. Así es como puedes usar Vlog para convertir un video en un documento y chatear con ChatGPT sobre lo mismo.
¿Por qué convertir un vídeo en un documento para usarlo con ChatGPT?
Convertir un video a un documento tiene algunos beneficios. Puede crear una descripción detallada del video proporcionado usando Vlog, que luego ChatGPT puede analizar para obtener varios resultados. Puedes generar resúmenes, especulaciones y descripciones sobre varias partes del video, analizar detalles ocultos y mucho más. Vlog es una herramienta desarrollada por la comunidad alojada en GitHub que utiliza modelos previamente entrenados, incluidos BLIP2, GRIT y Whisper.
BLIP2 se utiliza para analizar imágenes en el vídeo, mientras que GRIT se utiliza para analizar el entorno. Por otro lado, Whisper se utiliza para comprobar y analizar el audio del vídeo y crear su documento en consecuencia. Estos modelos están previamente entrenados y el proyecto completo está disponible para descargar en GitHub. El desarrollador también tiene una demostración de HuggingFace que puedes utilizar para probar y analizar las capacidades de Vlog.
Cómo convertir un video a un documento usando ChatGPT (2 métodos)
Hay principalmente dos formas de utilizar Vlog: puedes probar la demostración alojada en HugggingFace o instalarla localmente en tu PC. Instalarlo localmente en su PC tiene algunos requisitos; sin embargo, lo guiaremos durante todo el proceso. Una vez instalado localmente, Vlog puede ayudarlo a convertir su video en un documento completo que luego puede enviar a ChatGPT para ayudar a analizarlo y discutirlo. Siga el método preferido a continuación para ayudarlo a usar Vlog en su PC.
Método 1: prueba la demostración de HuggingFace
Si solo desea probar las capacidades de Vlog antes de instalarlo localmente en su PC, puede probar la demostración de HuggingFace, que puede ayudarlo a probar un conjunto de videos precargados. Siga los pasos a continuación para ayudarlo con este proceso. Empecemos.
Visita plataforma.openai.com. Ahora inicie sesión en su cuenta OpenAI usando una de las opciones presentadas en su pantalla.
Una vez que hayas iniciado sesión, haz clic en el avatar de tu perfil en la esquina superior derecha de tu pantalla.
Haga clic en Ver claves API.
Ahora haga clic + Crear nueva clave secreta.
Nombra tu clave API como prefieras. Te recomendamos elegir un nombre que te ayude a identificar la clave en el futuro fácilmente. Para esta guía, nombraremos la clave. Prueba clave de vlog.
Una vez nombrado, haga clic Crear clave secreta.
Ahora se generará una nueva clave API para su cuenta. Haga clic en el Copiar icono al lado para copiar la clave a su portapapeles.
Una vez copiado, visite huggingface.co/spaces/TencentARC/VLog en tu navegador. Esta es la demostración de HuggingFace para Vlog. Ahora pegue la clave copiada en la esquina superior derecha del cuadro de texto titulado Ingrese la clave API de OpenAI y presione Entrar.
Como se sugiere, presione Entrar una vez que haya pegado la clave.
Ahora se enviará la clave y, si todo va bien, debería ver un mensaje para La clave OpenAI se envió correctamente (y).
A continuación, comience eligiendo un vídeo de ejemplo que desee convertir. Ejemplos a su derecha.
El vídeo ahora se mostrará debajo entrada de video a tu izquierda.
Hacer clic Generar documento de vídeo para convertir el vídeo en un documento.
Ahora se generará un documento para su video y se enviará automáticamente a ChatGPT.
Una vez hecho esto, escriba su consulta en chatbot y presione Entrar. Como usamos el video de Big Bang Theory para esta guía, veamos si ChatGPT puede ayudarnos a identificar los nombres mencionados en este video. Entonces nos hacemos la siguiente pregunta.
“Enumere todos los nombres mencionados en el video”
Una vez que ingrese su consulta, ChatGPT procesará la solicitud con un tiempo estimado que se muestra en la esquina superior derecha. Cuando se complete el proceso, se le mostrará una respuesta válida, que en nuestro caso es la siguiente.
Y así es como puedes probar la demostración de Vlog alojada en HuggingFace para tener una idea de las capacidades de la herramienta.
Método 2: instala Vlog localmente y analiza tu video
Si desea utilizar Vlog en su PC, aquí le mostramos cómo instalarlo y configurarlo. Usamos Ubuntu para esta guía, pero el proceso debería ser similar también en otras plataformas. Siga los pasos a continuación para ayudarlo con el proceso.
Nota: Le recomendamos que evite usar Vlog en Windows por ahora a menos que esté listo para solucionar problemas con la instalación de delectron2. Esta es una herramienta de reconocimiento de imágenes de Facebook utilizada por Vlog para identificar elementos en su video que actualmente no es compatible oficialmente con Windows.
Requisitos
- Una GPU Nvidia con los últimos controladores
- Linux (muy recomendable)
Una vez que pueda cumplir con estos requisitos, puede seguir los pasos a continuación para configurar y usar Vlog.
Paso 1: instalar Git
Primero necesitamos instalar Git en tu PC. Siga los pasos a continuación para ayudarlo a instalar Git en su PC con Windows.
En algunos casos, es posible que Git ya esté instalado en su PC con Linux. Inicie la Terminal presionando Ctrl + Alt + T en Ubuntu y use el siguiente comando para verificar si Git está instalado.
git –versión
Si se le informa el número de versión relevante, entonces Git ya está instalado. Sin embargo, si recibe un mensaje similar al siguiente, puede usar el siguiente comando para instalar primero las actualizaciones.
actualización sudo apta
Escriba su contraseña una vez que se le solicite.
Ahora use el siguiente comando para obtener e instalar Git.
sudo apto instalar git
Su sistema operativo ahora le pedirá permiso para instalar las dependencias necesarias. Tipo y y presione Entrar.
Git ahora se descargará e instalará en su PC. Esto puede llevar algún tiempo dependiendo del ancho de banda de red disponible. Una vez completado, use el siguiente comando para verificar si todo se ha configurado correctamente. Debería obtener a cambio el número de versión de Git actualmente instalada si todo funciona según lo previsto.
git –versión
¡Y eso es! Ahora podemos descargar y configurar las otras dependencias necesarias en su PC.
Paso 2: instale Wget
Ahora necesitamos instalar Wget. Esto nos ayudará a instalar Python 3.8, así como el modelo previamente entrenado requerido por Vlog. Siga los pasos a continuación para ayudarlo con el proceso.
Abra Terminal en su PC. Si estás en Ubuntu, puedes hacerlo presionando Ctrl + Alt + T en tu teclado. Una vez abierto, use el siguiente comando para verificar si Wget ya está instalado en su PC.
wget –versión
Si Wget ya está instalado, se le mostrará información al respecto; de lo contrario, puede usar el siguiente comando para instalarlo en su PC.
sudo apto instalar wget
Escriba su contraseña cuando se le solicite.
Wget ahora se instalará en su PC. Como puede ver, ya estaba presente por mi parte, por lo que no se ha instalado nada nuevo.
¡Y eso es! Ahora podemos instalar Python 3.8 siguiendo el siguiente paso en su PC.
Paso 3: instale Python 3.8
Ahora necesitamos instalar Python 3.8. Wget nos ayudará con este proceso. Siga estos pasos para instalar Python 3.8.
Abra Terminal en su PC. Si estás en Ubuntu, puedes usar el método abreviado de teclado Ctrl + Alt + T. Una vez iniciado, use el siguiente comando para verificar y actualizar todos los paquetes.
actualización sudo apta
Escriba su contraseña cuando se le solicite.
Ahora use el siguiente comando para instalar las dependencias necesarias.
sudo apt instalar build-essential zlib1g-dev libncurses5-dev libgdbm-dev libnss3-dev libssl-dev libsqlite3-dev libreadline-dev libffi-dev libbz2-dev
Ahora se instalarán las dependencias necesarias. Prensa y y luego Ingresar una vez que se le solicite.
Este proceso llevará algún tiempo dependiendo del ancho de banda de red disponible.
Una vez que todo esté instalado, use este comando para descargar el paquete Python 3.8.
wget https://www.python.org/ftp/python/3.8.0/Python-3.8.0.tgz
La versión de Python ahora se descargará en su PC. Una vez hecho esto, use el siguiente comando para extraer el paquete.
tar -xf Python-3.8.0.tgz
Ahora navegue hasta el directorio extraído usando el siguiente comando.
CDPython-3.8.0
Una vez hecho esto, use el siguiente comando para verificar y verificar si todo está configurado según lo previsto en su PC.
./configure –enable-optimizaciones
Una vez que se complete el proceso, use el siguiente comando para iniciar el proceso de compilación. Reemplazar [Count] con la cantidad de núcleos de CPU disponibles en su PC.
hacer -j [Count]
El proceso de compilación también llevará algún tiempo dependiendo de los recursos disponibles en su PC. Una vez finalizada la compilación, use el siguiente comando para instalarla en su PC.
sudo hacer altinstall
Una vez que se haya completado el proceso, use el siguiente comando para verificar si todo funciona según lo previsto.
python3.8 –versión
Ahora puede usar el siguiente comando para cerrar la Terminal en su PC.
salida
¡Y eso es! Ahora podemos continuar con el siguiente paso de instalar y configurar Anaconda en su PC.
Paso 4: Instale Anaconda
Así es como puedes instalar Anaconda en tu PC. Siga estos pasos para ayudarle con el proceso.
Primero, navegue hasta su Descargas carpeta usando el siguiente comando.
cd ~/Descargas
Abra Terminal en su PC usando el método abreviado de teclado Ctrl + Alt + T. Ahora descarga rizo usando el siguiente comando. Escriba su contraseña cuando se le solicite.
sudo apto instalar curl
A continuación, utilice el siguiente comando para descargar el script de instalación de Anaconda.
rizo https://repo.anaconda.com/archive/Anaconda3-2022.05-Linux-x86_64.sh -o Anaconda.sh
El script ahora se descargará en el Descargas carpeta. Esto puede llevar algún tiempo dependiendo de la velocidad de su red.
Una vez que se haya completado el proceso, use el siguiente comando para ejecutar el script de instalación.
bash ./Anaconda.sh
Ahora presione Enter para continuar según lo solicitado.
Presione Enter varias veces hasta que se le solicite que escriba Sí. Escribe lo mismo y presiona Enter.
Para instalar Anaconda en la ubicación predeterminada, presione Entrar. También puede optar por especificar una ubicación diferente si es necesario. Una vez completada la instalación, escriba Sí y presione Enter para inicializar Anaconda.
Anaconda ahora se inicializará. Ahora necesitamos agregar Anaconda a las variables de ruta. Utilice el siguiente comando para hacer lo mismo.
nano ~/.bashrc
Ahora use el siguiente comando para agregar Anaconda a las variables de ruta. Reemplazar [Path] con la ubicación donde instaló Anaconda. Si lo instaló en la misma ubicación, puede usar esta ruta “/home/[username]/anaconda3″. Asegúrese de reemplazar [username] con su nombre de usuario en su PC.
exportar RUTA=’$RUTA:[Path]/papelera’
Una vez que haya terminado, presione Ctrl + O en su teclado. Presione Entrar una vez que aparezca la ruta del archivo predeterminada.
Ahora presione Ctrl + X.
¡Y eso es! Ahora estamos listos para configurar y usar Vlog en su PC.
Paso 5: Configurar Vlog
Ahora que todo ha sido instalado y configurado, finalmente podemos configurar y usar Vlog en su PC. Siga los pasos a continuación para ayudarlo con el proceso.
Abra Terminal en su PC usando el método abreviado de teclado Ctrl + Alt + T. Una vez abierto, use el siguiente comando para desactivar Anaconda temporalmente.
conda desactivar
Ahora navegue hasta su directorio de descargas usando el siguiente comando.
cd ~/Descargas
A continuación, use el comando para clonar Vlog en sus Descargas.
clon de git https://github.com/showlab/VLog
Una vez clonado el proyecto, use el siguiente comando para navegar a su directorio.
cd blog
A continuación, utilice este comando para crear un nuevo directorio llamado puntos de control.
puntos de control mkdir
Ahora navegue al mismo directorio usando el siguiente comando.
puntos de control de cd
Finalmente podemos descargar el modelo previamente entrenado. Utilice este comando para descargar el modelo previamente entrenado.
wget -c https://datarelease.blob.core.windows.net/grit/models/grit_b_densecap_objectdet.pth
Espere a que se descargue el modelo. Este proceso puede llevar algún tiempo dependiendo de la velocidad actual de su red y del ancho de banda disponible.
Una vez que se haya completado el proceso, use el siguiente comando para ir nuevamente al directorio Vlog en su carpeta de Descargas.
cd ~/Descargas/Vlog
Ahora necesitamos activar Anaconda nuevamente. Utilice el siguiente comando para hacer lo mismo en su PC.
activar conda
Una vez activado, verás (base) en la siguiente línea. Aún deberías estar en el directorio de Vlog. Ahora use este comando para crear un nuevo entorno.
conda crear -n vlog python = 3.8
Ahora presiona y cuando se le solicite que confirme su elección.
Ahora se creará un nuevo entorno. Active el entorno recién creado usando el siguiente comando.
conda activar vlog
Una vez activado, lo mismo aparecerá en la siguiente línea. Ahora use el siguiente comando para instalar las dependencias necesarias.
instalación de pip -r requisitos.txt
Todos los requisitos ahora estarán instalados. Esto puede llevar algún tiempo ya que delectron2 es una de las dependencias que es un archivo bastante grande, así como otras dependencias como pytorch y más.
Nota: Si experimenta velocidades de descarga extremadamente lentas, use este comando “conda update -n base conda-package-handling” e inténtelo nuevamente. Esto ayudará a solucionar problemas de velocidad de descarga, especialmente con Pytorch. Además, pip puede descargar varias versiones de varias herramientas para encontrar aquellas que cumplan con otros requisitos. Esto es normal y no debes interrumpir este proceso.
Una vez que se haya completado el proceso, deberías ver algo como esto.
Ahora puede usar este comando para cerrar la terminal.
salida
¡Y eso es! Ahora estamos listos para convertir nuestro video en un documento para poder usarlo con ChatGPT.
Paso 6: use Vlog para generar el documento
Primero necesitamos obtener su clave Open API para poder usarla con Vlog. Siga los pasos a continuación para ayudarlo con el proceso.
Abra su navegador y visite plataforma.openai.com. Inicie sesión en su cuenta utilizando su método preferido.
Ahora haz clic en el avatar de tu perfil en la esquina superior derecha.
Haga clic en Ver claves API.
Ahora haga clic + Crear nueva clave secreta.
Asigne a su clave API un nombre fácilmente identificable. Para esta guía, simplemente lo llamaremos Prueba clave de vlog.
Hacer clic Crear clave secreta una vez hecho.
Ahora haga clic en el icono de copiar al lado de la clave una vez que se haya generado. No cierre la pestaña ni el cuadro de diálogo ya que la clave no volverá a ser visible. Alternativamente, puede anotar la clave en un lugar de fácil acceso.
Una vez copiado, abra la Terminal presionando Ctrl + Alt + T en su teclado. Una vez abierto, use el siguiente comando para activar el entorno Vlog que creamos en el paso anterior.
conda activar vlog
Una vez activado, navegue hasta el directorio de Vlog que creamos anteriormente en la carpeta Descargas usando el siguiente comando.
cd ~/Descargas/Vlog
Ahora escribe lo siguiente. Reemplazar [Key] con la clave OpenAI que generamos anteriormente y [Path] con la ruta al video que deseas convertir. Vlog viene con un video de ejemplo en la carpeta de ejemplos, así que simplemente lo usaremos para este ejemplo.
python principal.py –video_path [Path] –openai_api_key [key]
Una vez que haya terminado, presione Entrar.
Nota: Asegúrese de que el nombre de su video no tenga espacios. Si es así, recomendamos cambiarle el nombre antes de intentar ejecutar el comando anterior.
Su video ahora será procesado y convertido en un documento. Esto puede llevar algún tiempo dependiendo de la velocidad de su red y los recursos disponibles.
Una vez que se complete el proceso, su documento convertido se guardará en la misma ubicación que su video. Y así es como puedes convertir un video en un documento usando Vlog.
Paso 7: Usa el documento con ChatGPT
Como se mencionó anteriormente, el documento convertido ahora estará disponible en el mismo directorio que su video. Si juegas un poco con Vlog, también deberías poder chatear con ChatGPT directamente en la terminal. Por ahora, echemos un vistazo a cómo puede usar este documento convertido para enviarlo a ChatGPT en el futuro para que pueda continuar discutiendo el video.
Abra chat.openai.com en su navegador e inicie sesión en su cuenta si es necesario.
Una vez que haya iniciado sesión, copie y pegue el contenido del documento de video convertido seguido de su consulta y presione Entrar. Pidamos a ChatGPT que resuma el video de este ejemplo.
Como puede ver, ChatGPT ha resumido el video junto con las traducciones de los diálogos.
¡Y eso es! Cada vez que necesites información del vídeo en el futuro, simplemente puedes alimentar a ChatGPT con este documento en lugar de tener que convertirlo una y otra vez en tu PC localmente.
Esperamos que esta publicación te haya ayudado a convertir fácilmente un video en un documento para usarlo con ChatGPT. Si tiene algún problema o tiene más preguntas, no dude en comunicarse con nosotros mediante los comentarios a continuación.
