Especialista en evaluación de IA / Recién graduado - Remoto AI Evaluation Specialist/Recent Grad - Remote
- Remoto (EE. UU.)
- El empleador no indicó el salario
- Por contrato
- Publicado hace 8 horas
Se postulará en el sitio web original.
Sobre este empleo
Descripción del puesto: Especialista en evaluación / Recién graduado
Tipo de puesto: Contratista
Ubicación: Remoto
Resumen del puesto
Buscamos especialistas en evaluación y recién graduados motivados para contribuir a un proyecto de gran impacto enfocado en impulsar la inteligencia artificial. En este puesto, utilizarás tus habilidades de investigación, razonamiento analítico y redacción para desarrollar preguntas desafiantes y evaluar el desempeño de modelos de IA.
Crearás pares originales de preguntas y respuestas, realizarás investigaciones exhaustivas, verificarás información en varias fuentes y ofrecerás explicaciones claras respaldadas por citas confiables. No se requiere experiencia previa en IA. Los requisitos clave son sólidas habilidades de investigación, pensamiento crítico y conocimientos de la materia.
Alcance del trabajo
- Desarrollar pares originales y desafiantes de preguntas y respuestas diseñados para poner a prueba las capacidades de modelos avanzados de IA en diversas áreas temáticas.
- Realizar investigaciones exhaustivas y verificar la información con varias fuentes confiables para garantizar su precisión, integridad y respaldo sólido en evidencia.
- Crear preguntas de varios pasos que requieran razonamiento analítico, síntesis y pensamiento crítico, en lugar de una simple búsqueda de información.
- Probar las preguntas con modelos de IA, analizar sus respuestas y perfeccionar las preguntas para ajustar o aumentar su dificultad.
- Documentar los procesos de investigación y proporcionar citas, evidencia y explicaciones lógicas claras para respaldar cada respuesta.
- Revisar y mejorar el contenido según los comentarios de los revisores, garantizando el cumplimiento de las pautas del proyecto y los estándares de calidad.
- Mantener la coherencia, precisión y claridad en todas las tareas enviadas.
Calificaciones preferidas
- Sólida capacidad para realizar investigaciones independientes y evaluar críticamente información de varias fuentes.
- Excelentes habilidades de redacción en inglés, con un alto nivel de precisión y claridad. Se requiere fluidez en inglés, pero no es necesario que sea tu primer idioma.
- Capacidad para crear preguntas matizadas y bien estructuradas que evalúen una comprensión profunda y razonamientos complejos.
- Sólidas habilidades de pensamiento analítico, resolución de problemas y síntesis de información.
- Motivación propia, confiabilidad y responsabilidad al trabajar de forma independiente en un entorno remoto.
- Interés en las tecnologías emergentes de IA y en evaluar las capacidades y limitaciones de modelos avanzados de IA.
- La experiencia previa en capacitación de IA, evaluación de modelos, investigación o creación de contenido es una ventaja, pero no es obligatoria.
- Se aceptan recién graduados, personas con títulos de posgrado y candidatos con diversos antecedentes académicos o profesionales que demuestren sólidas habilidades de investigación y redacción.
Estructura de compensación
La compensación se basa en la cantidad de trabajo producido; se paga por las tareas que cumplan con las especificaciones y los requisitos de calidad del proyecto. El tiempo necesario para completar cada tarea puede variar según la experiencia y el flujo de trabajo. Se aplican requisitos mínimos para las entregas y se espera que los colaboradores completen una cantidad específica de tareas cada semana.
Plazo de inicio y disponibilidad
- Plazo de contratación: Por lo general, los puestos se cubren en un plazo de 48 horas.
- Disponibilidad: Los candidatos deben estar preparados para comenzar de inmediato.
- Inicio del proyecto: Se espera que los candidatos seleccionados comiencen sus primeras tareas dentro de las 24–48 horas posteriores a completar la incorporación.
Perfil del candidato ideal
El candidato ideal es una persona investigadora, atenta a los detalles y con pensamiento crítico, capaz de desarrollar preguntas desafiantes, verificar información compleja y comunicar sus hallazgos con claridad y precisión. Debe sentirse cómoda trabajando de forma independiente, adaptándose a los comentarios y manteniendo altos estándares de calidad mientras contribuye a la evaluación y mejora de sistemas avanzados de IA.
Publicado originalmente en Himalayas
Anuncio original en inglés
Job Description: Evaluation Specialist / Recent Graduate
Role Type: Contractor
Location: Remote
Job Summary
We are seeking motivated Evaluation Specialists and recent graduates to contribute to a high-impact project focused on advancing artificial intelligence. In this role, you will use your research, analytical reasoning, and writing skills to develop challenging questions and evaluate AI model performance.
You will create original question-and-answer pairs, conduct in-depth research, verify information across multiple sources, and provide clear explanations supported by reliable citations. No prior AI experience is required. Strong research abilities, critical thinking, and subject-matter knowledge are the key requirements.
Scope of Work
- Develop original, challenging question-and-answer pairs designed to test the capabilities of advanced AI models across diverse subject areas.
- Conduct in-depth research and cross-verify information using multiple reliable sources to ensure accuracy, completeness, and strong supporting evidence.
- Create multi-step questions that require analytical reasoning, synthesis, and critical thinking rather than simple information retrieval.
- Test questions against AI models, analyze their responses, and refine the questions to adjust or increase their difficulty.
- Document research processes and provide clear citations, evidence, and logical explanations to support each answer.
- Revise and improve content based on reviewer feedback while ensuring compliance with project guidelines and quality standards.
- Maintain consistency, accuracy, and clarity across all submitted tasks.
Preferred Qualifications
- Strong ability to conduct independent research and critically evaluate information from multiple sources.
- Excellent English writing skills, with a high level of precision and clarity. English fluency is required but does not need to be your first language.
- Ability to create nuanced, well-structured questions that assess deep understanding and complex reasoning.
- Strong analytical thinking, problem-solving, and information-synthesis skills.
- Self-motivation, reliability, and accountability when working independently in a remote environment.
- Interest in emerging AI technologies and evaluating the capabilities and limitations of advanced AI models.
- Previous experience in AI training, model evaluation, research, or content creation is an advantage but is not required.
- Open to recent graduates, advanced-degree holders, and candidates from diverse academic or professional backgrounds who demonstrate strong research and writing abilities.
Compensation Structure
Compensation is output-based, with payment provided for tasks that meet the project's specifications and quality requirements. The time required to complete each task may vary depending on experience and workflow. Minimum submission requirements apply, and contributors are expected to complete a specified number of tasks each week.
Start Timeline and Availability
- Hiring Timeline: Positions are typically filled within 48 hours.
- Availability: Candidates should be ready to begin promptly.
- Project Start: Selected candidates are expected to start their first tasks within 24–48 hours of completing onboarding.
Ideal Candidate Profile
The ideal candidate is a detail-oriented researcher and critical thinker who can develop challenging questions, verify complex information, and communicate findings with clarity and precision. They should be comfortable working independently, adapting to feedback, and maintaining high-quality standards while contributing to the evaluation and improvement of advanced AI systems.
Originally posted on Himalayas
Los empleadores en JOBUS nunca le pedirán pagar, comprar equipo ni compartir datos bancarios o de Seguro Social antes de una oferta formal. Confianza y seguridad