top of page
1 Carlos Ayala Logo Oficial Grande Con Contorno .png
LAS OPORTUNIDADES ESTÁN AQUÍ & ESTÁN PARA SER APROVECHADAS
¿LO HARÁS?
Before the interview
Ingeniero de control de calidad de IA (precisión y fiabilidad)

Tiempo Completo

Desarrollo de Negocios, Control de Calidad, Ingeniería

México

Rango Salarial: US$7,500.00 a US$10,000.00* Mensual

* Dependiendo de la experiencia, capacidades y desempeño

CA-IT-IA-1122

Descripción del trabajo

Este es un puesto pionero que se sitúa en la intersección del control de calidad tradicional y la ciencia de datos moderna. En el contexto de una red inmobiliaria nacional, un pequeño error en la proyección de alquileres de una IA o una mala interpretación de un término de préstamo pueden tener importantes consecuencias legales y financieras. Diseñarás y ejecutarás marcos de prueba complejos, creados específicamente para los modelos Claude de Anthropic. Dedicarás tu tiempo a simular conversaciones en casos extremos, evaluar la precisión de los sistemas de Generación Aumentada por Recuperación (RAG) (garantizando que la IA solo utilice los datos que proporcionamos) y crear scripts automatizados de "equipo rojo" para intentar engañar a la IA y que proporcione información incorrecta o sesgada. Colaborarás estrechamente con los equipos de Ingeniería de Prompt y Datos para identificar los fallos del modelo y proporcionar retroalimentación basada en datos para mejorar la fiabilidad del sistema en miles de listados de propiedades y diversas categorías de servicio.

Responsabilidades clave:

Pruebas automatizadas de API, verificación de la veracidad de los datos (Grounding) y pruebas de regresión.

  • Evaluación comparativa de precisión: Establecer y mantener conjuntos de datos de referencia (conjuntos de respuestas perfectas) que la IA debe igualar para garantizar que su calidad se mantenga constante.
  • Monitoreo de inconsistencias: Implementar sistemas para detectar cuando la IA inventa detalles de propiedades o términos financieros que no están presentes en las bases de datos de origen.
  • Pruebas de integración del sistema: Verificar que la transferencia de datos entre Claude y nuestras API internas (fuentes MLS, bases de datos de prestamistas) sea fluida y que los datos permanezcan intactos.
  • Auditoría de sesgos y seguridad: Auditar periódicamente las respuestas de la IA para garantizar que cumpla con los principios de la IA constitucional y las leyes de vivienda justa, previniendo cualquier resultado discriminatorio.
  • Informes: Traducir las métricas complejas de rendimiento de la IA en informes claros y prácticos para los equipos de Producto e Ingeniería.

Actividades Clave:

Creación de scripts de prueba e informe de errores en las integraciones de Claude.

  • Desarrollo de un conjunto de pruebas automatizadas: Escritura de scripts de Python (usando PyTest o similar) para ejecutar cientos de consultas simultáneas en la API de Claude.
  • Evaluación RAG: Uso de herramientas como RAGAS o TruLens para medir la fidelidad (¿la respuesta se basa en la documentación?) y la relevancia (¿responde a la pregunta del usuario?).
  • Pruebas de penetración manuales: Participación en conversaciones simuladas con la IA para encontrar vulnerabilidades en su lógica o mecanismos de seguridad.
  • Gestión del ciclo de vida de los errores: Identificación, documentación y seguimiento de errores específicos de la IA (por ejemplo, "el modelo es demasiado detallado", "cálculo incorrecto de la TIR", "discrepancia en los datos de la lista").
  • Colaboración: Asistencia a las reuniones diarias para aportar una perspectiva de calidad sobre la implementación de nuevas funcionalidades en los módulos de Gestión de Propiedades y Sindicación.

Habilidades académicas y calificaciones clave:

  • Licenciatura: Se requiere título en Ciencias de la Computación, Tecnologías de la Información, Matemáticas o un campo técnico relacionado.
  • Especialización en IA: Certificaciones o cursos especializados en Aprendizaje Automático, Procesamiento del Lenguaje Natural (PLN) o Operaciones de LLM (LLMOps).
  • Lógica y Lingüística: Una sólida formación académica en lógica formal o lingüística computacional es una gran ventaja, ya que ayuda a comprender cómo Claude procesa el significado semántico.
  • Conocimientos del sector inmobiliario: Si bien no es obligatorio, se valora mucho un conocimiento básico de la terminología inmobiliaria (fideicomiso, tasas de capitalización, sindicación) para diseñar mejor los casos de prueba.

Habilidades y calificaciones clave:

Selenium, PyTest, LLM Evaluation Frameworks (e.g., RAGAS).


  • Technical Proficiency: Advanced Python skills and experience with SQL for data verification.

  • AI Tooling: Experience with LLM evaluation frameworks (e.g., DeepEval, Giskard, or Promptfoo).

  • API Mastery: Deep understanding of RESTful APIs and how to test them (Postman, Insomnia).

  • Analytical Mindset: Exceptional attention to detail; the ability to spot a single incorrect digit in a complex financial projection.

  • Communication: The ability to explain to non-technical stakeholders why an AI model might be behaving unexpectedly and the steps needed to fix it.

  • Adaptability: Since AI tech moves fast, you must be a "lifelong learner" capable of mastering new Anthropic model updates (like new versions of Claude) the day they are released.

Experiencia laboral:

Más de 3 años de experiencia en ingeniería de control de calidad.

Horario de trabajo diario:

El horario laboral diario se ajustará al horario estándar de la empresa, normalmente de 9:00 a 17:00. Sin embargo, ocasionalmente podría ser necesario mostrar cierta flexibilidad para cumplir con los plazos de los proyectos o colaborar con miembros del equipo que trabajan a distancia.

¡Lo que ofrecemos!

En nuestra organización, trabajamos arduamente para establecer un ambiente acogedor que atraiga y retenga a personas excelentes. Somos conscientes de la importancia de un entorno laboral propicio para el éxito y la felicidad de nuestros empleados. Aquí hay un resumen de la cultura laboral ideal que ofrecemos para atraer a todos los aspirantes a empleo:
 

  1. Una cultura inclusiva y diversa es importante para nosotros porque creemos que diferentes puntos de vista y experiencias fomentan una mejor creatividad y resolución de problemas. Cada empleado se siente aceptado, valorado y empoderado para ofrecer sus pensamientos y experiencias especiales porque promovemos una atmósfera inclusiva.

  2. Alentamos trabajo en equipo y colaboración porque sabemos que cuando las personas trabajan juntas, normalmente obtienen los mejores resultados. Para crear un lugar de trabajo amigable y de apoyo, promovemos la comunicación abierta, el intercambio de ideas y la cooperación interfuncional.

  3. Oportunidades de Crecimiento y Desarrollo: Damos alta prioridad al desarrollo continuo de nuestros trabajadores. Para mejorar sus habilidades y experiencia, ofrecemos una variedad de programas de aprendizaje y desarrollo, oportunidades de tutoría y capacitación continua. Brindamos a los empleados una trayectoria profesional clara y los ayudamos a alcanzar sus objetivos profesionales.

  4. Equilibrio trabajo-vida: Somos conscientes de lo crucial que es mantener un equilibrio positivo entre la vida laboral y personal. Alentamos a los empleados a tomarse un tiempo libre para recuperarse y perseguir sus intereses personales y ofrecemos horarios de trabajo flexibles, oportunidades de trabajo remoto (cuando corresponda) y otros beneficios. Creemos que tener un equilibrio saludable entre el trabajo y la vida personal hace que las personas sean más felices y más eficaces.

  5. Reconocer y recompensar el trabajo duro y las contribuciones de los empleados es importante para nosotros. Ofrecemos beneficios y paquetes salariales atractivos que están en línea con los estándares de la industria, y tenemos un programa de reconocimiento estructurado que reconoce los logros excelentes.

  6. Apoyo al empleado: Damos una alta prioridad al apoyo y bienestar de nuestros empleados. Brindamos acceso a servicios para la salud física y mental, así como pólizas de seguro de salud integrales, iniciativas y programas de bienestar. Alentamos al personal a expresar sus inquietudes o pedir ayuda cuando sea necesario y mantenemos una política de puertas abiertas.

  7. Entorno para la Innovación y la Creatividad: Promovemos un ambiente para la innovación y la creatividad. Brindamos a los trabajadores la libertad, la autonomía y los recursos que necesitan para probar conceptos novedosos, ideas innovadoras y tecnologías de vanguardia. Apoyamos cuestionar el statu quo y realizar mejoras continuas en nuestros procedimientos y productos.

  8. Responsabilidad social y sostenibilidad son importantes para nosotros porque queremos tener una influencia beneficiosa tanto en las personas como en el medio ambiente. Ofrecemos oportunidades de voluntariado, programas de sustentabilidad y actividades de responsabilidad social corporativa para que los miembros del personal puedan apoyar causas valiosas y cambiar el mundo.

  9. Comunicación transparente: Apoyamos las líneas abiertas de comunicación y la educación del personal sobre nuevas iniciativas, objetivos y tácticas. Tenemos ayuntamientos regulares, reuniones de equipo y ofrecemos vías para comentarios y opiniones. Valoramos la conversación sincera y agradecemos las ideas y aportes de los empleados.

  10. Actividades divertidas y atractivas: Estamos comprometidos a fomentar un ambiente de trabajo positivo. Planificamos eventos sociales, ejercicios de formación de equipos y celebraciones conjuntas de hitos y logros. Apoyamos un ambiente optimista y acogedor donde florecen el humor y la creatividad.

Beneficios

Salud y bienestar

Acondicionamiento físico y recreación

insurance.png

Seguro de Gastos Médicos Mayores (SGMM)

healthcare.png

Seguro de vida

Educación continua

online-learning.png

Formación y educación general

education.png

Idioma extranjero

Familia

flexible.png

Programación flexible

baby.png

Cuidado de los niños

Finanzas

retirement.png

Plan de retiro

gift-card.png

Bonificación / Compensación

Tiempo Libre

day-off.png

Tiempo pagado por enfermedad

insurance.png

Baja por enfermedad

Beneficios para Oficiales,  Soldados y Marinos Retirados

venta.png

Descuentos Especiales

ensenanzas.png

Special Learning Programs

DISCLAIMER

Nos enorgullece fomentar un entorno laboral libre de discriminación. Creemos firmemente que la diversidad de experiencias, perspectivas y orígenes contribuye a un mejor ambiente para nuestros empleados y a un mejor producto para nuestros usuarios y creadores. Valoramos profundamente este aspecto y animamos a todos a unirse a nosotros para transformar el mundo.

IMPORTANTE: ganancias y renuncias legales Carlos Ayala es un profesional de seguridad y marketing en Internet y sus resultados no son los típicos. Tus experiencias no son una garantía de que ganarás dinero. Puedes hacer más, menos o lo mismo o nada en absoluto. Esto es puramente educativo. No se garantizan ingresos.

Solicite solo emprendedores serios y ambiciosos.

Los precios están sujetos a cambios sin previo aviso. No se permitirán reembolsos por boletos a cualquier nivel de precio. Si por alguna razón no puedes asistir a los eventos que se organizan, recibirás el crédito completo por tu inversión en mi tienda (iamcarlosayala.com). No hay ningún riesgo para su inversión conmigo hoy.

© Derechos de autor
© Copyright 2018 - 2024. Todos los derechos reservados | Gran parte del contenido de este sitio web pertenece a CAS y está protegido por leyes de derechos de autor. Los contenidos que no son propiedad de CAS se encuentran señalados en sus respectivos instrumentos legales.

© 2020 CAS  Tecnologías de formación.

bottom of page