Analista de Inteligencia
micro1 busca Analistas de Inteligencia para evaluar y mejorar sistemas de IA, aplicando tu conocimiento para entrenar modelos de próxima generación.
Sobre el puesto
micro1 está contratando Analistas de Inteligencia para contribuir a un proyecto centrado en la evaluación y el avance de las capacidades de inteligencia artificial. En este rol, aplicarás tu experiencia para ayudar a entrenar sistemas de IA de próxima generación. Tu trabajo dará forma a cómo los modelos aprenden, razonan y se desempeñan a través de aportes de alta calidad y del mundo real. No se requiere experiencia previa en IA; tu conocimiento del dominio es lo que importa.
Qué harás
Desarrollar y mapear casos analíticos a taxonomías definidas en múltiples áreas de evaluación, asegurando una cobertura completa de los escenarios de inteligencia relevantes.
Redactar casos de prueba complejos diseñados para evaluar el rendimiento del modelo en el manejo de fuentes, el rigor analítico y la expresión de incertidumbre matizada.
Evaluar y calificar las respuestas generadas por IA según criterios como el razonamiento, el uso de fuentes, el reconocimiento de limitaciones y la utilidad práctica.
Identificar y marcar instancias donde la exploración analítica legítima es excesivamente rechazada por el modelo, proporcionando documentación y retroalimentación claras.
Documentar casos extremos y desacuerdos analíticos, apoyando la mejora continua de las metodologías de evaluación.
Colaborar con los líderes del proyecto para refinar los procedimientos de evaluación de fuentes y asignación de niveles de confianza.
Aportar ideas para ayudar a calibrar los estándares analíticos y mejorar la calidad general de los puntos de referencia de los sistemas de IA.
Qué buscan
- Experiencia analítica de todas las fuentes demostrada o profunda experiencia en una disciplina analítica específica, idealmente con experiencia en el ámbito civil de inteligencia.
- Sólida competencia en la evaluación de fuentes, la evaluación de niveles de confianza y los estándares analíticos establecidos.
- Experiencia en enseñanza, mentoría o liderazgo de revisiones analíticas, con un historial de fomento del rigor analítico.
- Excepcionales habilidades de comunicación escrita y verbal, con un enfoque en la claridad y la precisión.
- Capacidad para identificar y articular limitaciones matizadas del modelo y escenarios de rechazo excesivo.
- Familiaridad con técnicas analíticas estructuradas y estándares de oficio de inteligencia.
Se valora
- Participación previa en iniciativas de evaluación de IA o valoración de modelos es una ventaja.
Sobre la empresa
micro1 está comprometida con la evaluación y el avance de las capacidades de inteligencia artificial.
Oferta publicada originalmente en Himalayas. La empresa recibe las candidaturas en su web; Nexempleo solo la difunde.