Senior Software Engineer, AI Training - CA

Мы ищем высококвалифицированного инженера-программиста (SR+) для оценки качества взаимодействия с современными кодовыми агентами, такими как OpenAI Codex и Claude Code.

Это не традиционная инженерная должность. Вы не будете писать производственный код. Вам предстоит оценивать нечто более сложное: насколько модель мыслит как отличный инженер.

Чем на самом деле занимается эта должность

Эта роль заключается в инженерном вкусе. Корректность синтаксиса — это легкая часть.

Что мы подразумеваем под «вкусом»

Вы будете оценивать, как ИИ-кодовые агенты ведут себя в реальных сценариях, уделяя особое внимание:

• Имеет ли смысл ответ

• Полезны ли преамбула и обоснование

• Отражает ли результат сильное инженерное суждение

• Ощущается ли взаимодействие правильным для опытного разработчика

• Оценивать сгенерированные ИИ коды взаимодействий от начала до конца

• Судить, являются ли результаты полезными, корректными на высоком уровне и соответствуют ли они тому, как мыслит сильный инженер

• Оценивать качество объяснений и рассуждений, а не только код

• Различать уровни качества ответов (что делает ответ 2, а не 4)

• Предоставлять четкую, аргументированную обратную связь в письменной форме о том, что сработало, что нет, и что показалось неправильным или вводящим в заблуждение

• Помогать определить, что такое «отлично» при работе с такими инструментами, как Cursor, Codex и Claude Code

Мы ищем инженеров, которые могут ответить на такие вопросы, как:

• Похоже ли это на то, что сказал бы сильный инженер?

• Полезно ли это объяснение, или оно просто технически корректно?

• Ведет ли модель пользователя хорошо, или просто выдает результат?

• Укрепит ли или подорвет ли это взаимодействие доверие?

Вы должны быть готовы выносить субъективные, но строгие суждения и четко их объяснять.

• Инженер уровня Senior, Staff или Principal (или эквивалентный опыт)

• Богатый опыт работы с TypeScript/JavaScript или Python

• Практический опыт работы как минимум с одним из OpenAI Codex, Claude Code или Cursor

• Глубокое знакомство с современными рабочими процессами разработки с использованием ИИ

• Способность оценивать код без его выполнения или проверки каждой строки

• Свободное владение письменным и устным английским языком (уровень B2 или выше). Вам предстоит писать подробные отзывы и записывать короткие видеообъяснения, поэтому это строгое требование

• Готовность давать прямую, аргументированную обратную связь

• Высокая планка того, как выглядит хорошая инженерия

Контракт | Удаленная работа, по всему миру | $100-$200/час в зависимости от опыта и местоположения | 10-20 часов/неделю

• Ставка: $100-$200/час в зависимости от опыта и местоположения

• Часы: 10-20 часов/неделя, гибкий график

• Продолжительность: бессрочно. Проекты длятся от двух недель до нескольких месяцев каждый, и мы предлагаем новые проекты оценщикам, которые хорошо себя зарекомендовали

• Начало: как только вы пройдете тестовое задание и в проекте появится свободное место

• Процесс: одно тестовое задание с записью walkthrough на Loom. Без собеседования