Con la proliferación de chatbots disponibles en línea, seleccionar el adecuado puede convertirse en un desafío. Compararlos manualmente puede ser engorroso y requiere tiempo.

[adsenseyu1]

¿Qué es Chatbot Arena?

Chatbot Arena, creado por LMSYS Org, es una plataforma diseñada para evaluar distintos Modelos de Lenguaje de Gran Tamaño (LLM). Utiliza el sistema de puntuación Elo para clasificar estos modelos.

Modo de Batalla de Chatbot Arena

El modo de batalla de Chatbot Arena te permite comparar anónimamente LLMs. Por ejemplo, puedes enfrentar a ChatGPT (GPT 3.5) contra Claude. La plataforma selecciona dos modelos de lenguaje al azar, ocultando sus nombres, para que los compares.

Al ingresar tu primera consulta, Chatbot Arena muestra las respuestas de ambos modelos lado a lado. Puedes regenerar respuestas para ambos LLMs y borrar el historial para iniciar una nueva conversación. Puedes hacer más preguntas hasta que elijas un ganador claro.

Luego, seleccionas si el modelo A o B es mejor. Cuando eliges al ganador, Chatbot Arena revela los nombres de ambos bots. Este modo es excelente, ya que tu elección no se ve afectada por tu percepción previa o la popularidad de los modelos. Chatbot Arena también te permite ajustar parámetros como la temperatura, Top P y el número máximo de tokens de salida.

Modo de Comparación LLMs Seleccionados

Si deseas comparar dos LLMs específicos, puedes cambiar al modo de lado a lado de Chatbot Arena. Aparte de la capacidad de elegir los LLMs tú mismo, este modo funciona casi de la misma manera que el modo de batalla. Puedes ajustar parámetros, regenerar respuestas, borrar el historial y seleccionar un ganador al final.

Sin embargo, este modo tiene una selección limitada de LLMs. Puedes elegir entre diferentes versiones de Llama 2, Vicuna y ChatGLM. Aunque los populares LLMs como GPT-4, GPT-3.5, Claude 1, Claude 2, entre otros, no están disponibles en este modo por el momento, Chatbot Arena planea añadirlos en el futuro.

Comparar LLMs con Chatbot Arena

Ya sea que busques un chatbot adecuado para tus necesidades o simplemente desees probar diferentes Modelos de Lenguaje de Gran Tamaño, Chatbot Arena es una plataforma excepcional.

Proporciona una manera sencilla de comparar diferentes modelos de lenguaje uno al lado del otro. Y dado que mantiene un marcador basado en la retroalimentación de los usuarios, puedes ver directamente las clasificaciones de varios modelos sin necesidad de realizar las pruebas tú mismo.