Analista de Inteligencia para IA
Xperteez Technology busca un Analista de Inteligencia con experiencia para entrenar sistemas de IA de próxima generación. Tu conocimiento del dominio es clave para mejorar el aprendizaje y rendimiento de los modelos.
Sobre el puesto
En este rol, aplicarás tu experiencia para ayudar a entrenar sistemas de IA de próxima generación. Tu trabajo dará forma a cómo los modelos aprenden, razonan y se desempeñan a través de entradas de alta calidad y del mundo real. No se requiere experiencia previa en IA; tu conocimiento del dominio es lo que importa.
Qué harás
Desarrollar y mapear casos analíticos a taxonomías definidas en múltiples áreas de evaluación, asegurando una cobertura completa de escenarios de inteligencia relevantes.
Redactar casos de prueba complejos diseñados para evaluar el rendimiento del modelo en el manejo de fuentes, rigor analítico y expresión de incertidumbre matizada.
Evaluar y calificar las respuestas generadas por IA según criterios como razonamiento, uso de fuentes, reconocimiento de limitaciones y utilidad práctica.
Identificar y marcar instancias donde la exploración analítica legítima es excesivamente rechazada por el modelo, proporcionando documentación clara y retroalimentación.
Documentar casos extremos y desacuerdos analíticos, apoyando la mejora continua de las metodologías de evaluación.
Colaborar con los líderes del proyecto para refinar los procedimientos de evaluación de fuentes y asignación de niveles de confianza.
Aportar ideas para ayudar a calibrar los estándares analíticos y mejorar la calidad general de los puntos de referencia de los sistemas de IA.
Qué buscan
- Rigor analítico
- Manejo de fuentes
- Detección de sobre-rechazo
- Análisis de inteligencia de todas las fuentes
Se valora
Experiencia demostrada en análisis de todas las fuentes o profunda experiencia en una disciplina analítica específica, idealmente con experiencia en el IC civil.
Sólida competencia en la evaluación de fuentes, la asignación de niveles de confianza y los estándares analíticos establecidos.
Experiencia en enseñanza, mentoría o liderazgo de revisiones analíticas, con un historial de fomento del rigor analítico.
Habilidades excepcionales de comunicación escrita y verbal, con un enfoque en la claridad y la precisión.
Capacidad para identificar y articular limitaciones matizadas del modelo y escenarios de sobre-rechazo.
Familiaridad con técnicas analíticas estructuradas y estándares de inteligencia.
La participación previa en iniciativas de evaluación de IA o de modelos es una ventaja.
Qué ofrecen
Trabajo remoto.
Sobre la empresa
Xperteez Technology
Cómo postularte
Publicado originalmente en Himalayas
Oferta publicada originalmente en Himalayas. La empresa recibe las candidaturas en su web; Nexempleo solo la difunde.