Ser uno de los afortunados en ver esto en acción es una característica para sitios grandes que realmente deberías entender y considerar usar.
Como funciona utilizando una IA basada en LLM, no siempre llega a la conclusión correcta, pero acierta tanto en los casos en los que la he visto utilizada durante unos días, haciendo parte del trabajo de un moderador, que definitivamente ha sido un beneficio significativo.
Algunas de las primeras discusiones sobre esto se encuentran en la categoría Lounge del sitio de OpenAI. Si bien cualquiera puede acceder a esa categoría, se deben cumplir los requisitos de TL3 y, dado que OpenAI es un sitio grande, se necesita bastante esfuerzo para alcanzar TL3 en el sitio.
Para aquellos con acceso, aquí está el enlace
https://community.openai.com/t/lost-users-first-empirical-data/403082/95
Básicamente, la lógica que está haciendo para ayudar a los moderadores con un problema específico es que estamos viendo alrededor del 5% de las publicaciones de usuarios nuevos que piensan que el foro es donde publican preguntas para ChatGPT, claramente están perdidos o quizás un resultado de búsqueda está proporcionando un enlace inválido. La IA identifica tales publicaciones, responde con texto preescrito y cambia la categoría y las etiquetas según sea necesario, por ejemplo:
Para el caso señalado, esto es lo que está haciendo la “Regla de automatización del clasificador de publicaciones de Discourse AI”
Categorización automatizada de publicaciones
El clasificador está cambiando la categoría a ChatGPT según sea necesario. Como la mayoría de los usuarios nuevos no seleccionarán una categoría, el sitio de OpenAI actualmente la establece por defecto en la categoría API para las publicaciones nuevas, lo cual es incorrecto en este caso.
Etiquetado de publicaciones
El clasificador está cambiando la(s) etiqueta(s) a lost-user. El nombre de la etiqueta fue creado por un usuario TL3 en el foro que estaba cambiando manualmente las etiquetas.
Respuestas automatizadas
El clasificador está respondiendo con una publicación preescrita.
Ocultación de temas
Los temas se están excluyendo de la lista ya que no eran de valor para los desarrolladores que usan el sitio.
Usuario de respuesta
Se está utilizando System como creador de la respuesta.
Nota: Proporcionaría la Configuración para esto, pero carezco de acceso. Quizás @Sam pueda agregar los detalles. AFAIK se puede hacer público ya que nada es confidencial en la configuración. Como es para un sitio específico, no esperaría encontrarlo en el repositorio público. Si entiendes esta tecnología, no es difícil adivinar los valores correctos, o algo cercano a ellos. El Prompt del Sistema requirió algo de trabajo y quizás @sam pueda compartir algunas de las lecciones aprendidas; el conocimiento sobre cómo elaborar el prompt fue de gran valor durante la fase de desarrollo.
Prompt del Sistema
Nota: Esta es una versión publicada en el OpenAI Lounge (ref), estoy bastante seguro de que la versión final es diferente, pero un ejemplo ahorra muchas conjeturas.
Eres un bot que está clasificando todas las primeras interacciones que un usuario tiene en el foro de desarrolladores de OpenAI.
Por favor, responde solo con "ok" o "bad".
Las publicaciones están en tema y son correctas si:
Se relacionan con las API de OpenAI / Comunidad / Desarrollo de plugins / Documentación / Prompting
Son sobre el desarrollo o la mejora de métodos para la creación de prompts para modelos de lenguaje grandes
Se relacionan con la IA en general
Involucran discusiones complejas o problemas lógicos relacionados con la IA
Las publicaciones son incorrectas si:
Un usuario parece tener una conversación aleatoria con ChatGPT
Un usuario está fuera de tema discutiendo un campo no relacionado
Un usuario está creando prompts para un modelo de lenguaje grande para generar texto sin un propósito claro
Tienes extrema dificultad para entender de qué tratan
Se relaciona con un tema de OpenAI PERO es claramente una conversación con un bot
Un usuario está intentando entrenar o probar el modelo de IA a través de su publicación
Un usuario está dando instrucciones o solicitando respuestas en un formato no de discusión
Un usuario está publicando contenido que no es propicio para una discusión o aprendizaje significativo
Un usuario está publicando contenido hipotético o especulativo sin una relación clara con el alcance de OpenAI
Un usuario está publicando todo el texto en un idioma que no es inglés
Por favor, clasifica el siguiente contenido rodeado por [[[]]]:
[[[
%%POST%%
]]]
Para tu información
Si eres moderador en un sitio que utiliza esto y quieres/necesitas ver una lista de publicaciones no listadas, recuerda que no puedes usar la búsqueda. Sin embargo, puedes navegar a dicha lista usando la categoría y luego seleccionando las etiquetas. O también podrías crear la URL manualmente, por ejemplo, https://community.openai.com/tags/c/chatgpt/19/lost-user
Sí, incluso funciona para idiomas distintos del inglés
Sin embargo, no funciona con imágenes
, no convertirá una imagen a texto y luego ejecutará la verificación, por ejemplo:
Aquí hay un falso positivo reciente o al menos eso creo.
Para obtener detalles sobre falsos/verdaderos negativos/positivos - Clasificación: Verdadero vs. Falso y Positivo vs. Negativo
