ChatRTX de Nvidia expande sus funciones con consultas de voz y modelos de IA mejorados

ChatRTX de Nvidia, el chatbot experimental diseñado para propietarios de GPU RTX, está experimentando importantes mejoras, convirtiéndolo en una herramienta más potente y versátil para el análisis de datos local. Esta aplicación innovadora, que se ejecuta directamente en PC con Windows, ahora cuenta con soporte para modelos adicionales de IA, incluidos Gemma de Google, ChatGLM3 y el modelo CLIP de OpenAI, para satisfacer diversas necesidades de los usuarios.

Originalmente presentado como "Chat with RTX" en febrero, ChatRTX aprovecha la potencia informática de las GPU RTX de la serie 30 o 40 con 8 GB de VRAM o más. Sirve como un servidor de chatbot local accesible a través de un navegador web, lo que permite a los usuarios analizar documentos personales e incluso videos de YouTube para capacidades de búsqueda exhaustivas, incluidos resúmenes y respuestas a consultas.

La inclusión del modelo Gemma de Google se alinea perfectamente con el objetivo de ChatRTX de simplificar la utilización de modelos de IA potentes en dispositivos locales. Al expandir su repertorio para incluir a Gemma, ChatRTX mejora su capacidad para procesar conjuntos de datos diversos de manera efectiva, ofreciendo a los usuarios un enfoque personalizado para el análisis de datos y las funcionalidades de búsqueda.

Además, ChatRTX ahora es compatible con ChatGLM3, un modelo de lenguaje grande y bilingüe (inglés y chino), lo que amplía aún más sus capacidades lingüísticas. Esta adición permite a los usuarios aprovechar el poder de los modelos de lenguaje para extraer ideas e información de datos de texto, trascendiendo las barreras del idioma para una experiencia más inclusiva.

La integración del modelo CLIP de OpenAI marca otro hito para ChatRTX, lo que permite a los usuarios interactuar con datos de fotos locales y entrenar al modelo para reconocer imágenes de manera efectiva. Esta función permite a los usuarios aprovechar la información visual para mejorar las capacidades de análisis de datos y búsqueda, desbloqueando nuevas posibilidades para tareas centradas en imágenes.

Además de estos avances, Nvidia introduce consultas de voz a ChatRTX, integrando Whisper, un sistema de reconocimiento de voz de IA. Con la funcionalidad de búsqueda habilitada para voz, los usuarios ahora pueden interactuar con sus datos utilizando un lenguaje natural, mejorando aún más la accesibilidad y la experiencia del usuario de ChatRTX.

Fuente: The Verge