Краткое описание позиции
В этой удаленной роли подрядчика с почасовой оплатой вы будете оценивать C++ код, сгенерированный ИИ, и разрабатывать сценарии, которые тестируют точность кодирования и качество рассуждений. Задачи могут включать:
- Оценка C++ кода, сгенерированного ИИ, на предмет правильности, эффективности, читаемости и соответствия реальным инженерным стандартам
- Выявление ошибок, логических ошибок, граничных случаев и антипаттернов в результатах работы ИИ, а также четкое письменное объяснение исправлений
- Применение структурированных оценочных рубрик для последовательного оценки качества кода в различных типах задач
- Разработка подсказок и тестовых случаев, которые проверяют точность ИИ в задачах программирования на C++, включая многоступенчатые задачи, основанные на реальных кодовых базах
- Оценка и сравнение решений, сгенерированных ИИ, на основе правильности, внутренней согласованности и соответствия подсказке
Требования к кандидату
- Предпочтителен опыт работы в области компьютерных наук, разработки программного обеспечения или тесно связанной с ними области
- Владение современным C++ (C++11 и выше), включая STL, управление памятью, шаблоны и низкоуровневое системное программирование
- Способность читать, писать и критически оценивать C++ код различной степени сложности
- Полное профессиональное владение английским языком
- Исключительное внимание к деталям
- Надежность и самостоятельность, с постоянным качеством результатов в удаленном, асинхронном рабочем процессе
Предпочтительный опыт
- 2+ года профессионального опыта разработки программного обеспечения на C++
- Предыдущий опыт обучения данных ИИ, аннотации или оценки моделей
О CNTXT AI
CNTXT AI создает продукты искусственного интеллекта и решения для данных с акцентом на обеспечение точности, безопасности и глобальной релевантности ИИ для достижения воздействия. Наша работа охватывает услуги в области данных, индивидуальные ИИ-решения и проприетарные ИИ-продукты, с глубокой экспертизой в области арабских и безопасных, суверенных решений.
