De un vistazo
- Tareas: Evalúa la calidad de interacciones personalizadas de IA y diseña prompts creativos.
- Empresa: Turing, líder mundial en investigación de IA con un ambiente dinámico.
- Beneficios: Trabajo remoto, flexibilidad horaria y oportunidades de desarrollo profesional.
- Otra información: Compromiso mínimo de 30 horas a la semana con opciones de horario flexible.
- Por qué este empleo: Contribuye a la evolución de la IA mientras trabajas desde cualquier lugar.
- Cualificaciones: Dominio del español y habilidades analíticas excepcionales.
El salario previsto está entre 45000 - 55000 € por año.
Basado en San Francisco, California, Turing es el principal acelerador de investigación del mundo para laboratorios de IA de vanguardia y un socio de confianza para empresas globales que implementan sistemas de IA avanzados. Turing apoya a los clientes de dos maneras: primero, acelerando la investigación de frontera con datos de alta calidad, pipelines de entrenamiento avanzados, además de los mejores investigadores de IA que se especializan en codificación, razonamiento, STEM, multilingüismo, multimodalidad y agentes; y segundo, aplicando esa experiencia para ayudar a las empresas a transformar la IA de prueba de concepto en inteligencia propietaria con sistemas que funcionan de manera confiable, entregan un impacto medible y generan resultados duraderos en el P&L.
Como Analista de Calidad de IA, evaluarás una nueva función de personalización para Gemini. Evaluarás qué tan bien el modelo utiliza información de tus conversaciones pasadas de Gemini, Gmail, Google Search y actividad de YouTube para hacer respuestas más relevantes y útiles. Este rol requiere una combinación única de creatividad y rigor analítico. Activa y creativamente diseñarás prompts desde la perspectiva de tus propias experiencias personales. Luego, utilizarás tus habilidades analíticas para evaluar la calidad de las respuestas personalizadas del modelo, evaluando dimensiones como Fundamentación, Integración y Utilidad.
Calificaciones Clave
- Competencia en Español: Capacidad para leer y escribir en español con un alto grado de competencia, ya que el español es el idioma focal para este proyecto.
- Uso de Cuenta Personal: Disposición para usar tu cuenta personal de Google (no una cuenta de prueba) y habilitar fuentes de datos personales para una evaluación genuina.
- Flexibilidad de Horario: Se requiere disponibilidad a tiempo completo en tu zona horaria local. Estamos formando un equipo de operaciones global de 24 horas.
- Pensamiento Analítico Excepcional: Demostrar capacidad para evaluar respuestas de IA matizadas y ambiguas, específicamente evaluando la calidad de la personalización.
- Ingeniería Creativa de Prompts: Experiencia en diseñar prompts creativos y de múltiples turnos basados en el contexto personal para probar a fondo las capacidades del modelo.
- Agudeza en Evaluación: Comprensión de conceptos de personalización, incluyendo la capacidad de identificar personalización incorrecta, inferencias pobres y conexiones forzadas.
- Atención Meticulosa al Detalle: Capacidad para revisar respuestas del modelo lado a lado (SxS) y detectar diferencias sutiles en naturalidad y sobre-narración.
- Comunicación Escrita Excelente: Superior capacidad para redactar racionales claros, concisos y estructurados para clasificaciones de modelos, haciendo referencia explícita a números de turno específicos.
- Retroalimentación: Capacidad para proporcionar retroalimentación constructiva y anotaciones detalladas.
- Comunicación: Excelentes habilidades de comunicación y colaboración.
- Independencia: Automotivado y capaz de trabajar de forma independiente en un entorno remoto.
- Configuración Técnica: Configuración de escritorio/portátil con una buena conexión a internet.
Descripción
En este rol, serás parte de un equipo dinámico enfocado en evaluar la calidad de las interacciones personalizadas de IA. Tu trabajo diario implicará:
- Diseñar y ejecutar prompts conversacionales de múltiples turnos (típicamente de 1 a 5 turnos) que requieran que la IA utilice tu información y experiencias personales.
- Evaluar las respuestas del modelo basadas en tu intención desde el prompt inicial, verificando si la personalización se aplicó adecuadamente.
- Analizar respuestas por problemas de Fundamentación, asegurando que las afirmaciones sobre ti estén respaldadas por evidencia y no por inferencias defectuosas o alucinaciones.
- Evaluar la calidad de la Integración para asegurar que los datos personales se entrelacen naturalmente en la respuesta sin
Remote AI Quality Analyst (Spanish) - 62133 empresa: Turing
Turing es un empleador excepcional que ofrece un entorno de trabajo flexible y remoto, ideal para aquellos que buscan crecer en el emocionante campo de la inteligencia artificial. Con proyectos de vanguardia y la oportunidad de colaborar con laboratorios líderes en IA, los empleados pueden desarrollar sus habilidades analíticas mientras contribuyen a soluciones críticas para empresas. Además, Turing fomenta una cultura de innovación y aprendizaje continuo, lo que permite a los analistas prosperar y asegurar su futuro en un mundo impulsado por la IA.