
Колесников Никита
Ищет работу
Опыт 5 лет 10 мес.
от 250.000 ₽ до 250.000 ₽

Колесников Никита
Ищет работу
Опыт 5 лет 10 мес.
от 250.000 ₽ до 250.000 ₽
Data annotation lead
О себе
Свой путь в разметке данных начал еще студентом, тогда довелось поучаствовать в проекте с оцифровкой данных и преобразованием в ГИС-карты. Позднее, начал работать с CVAT, сначала как специалист разметки, спустя время вырос до руководителя команды, на котором проработал несколько лет, решая как сложные моменты разметки, так и помогая ML-инженерам с оценкой моделей, подготовкой датасетов. После, сменил сферу разметки изображений, на разметку в музыкальном стриминге. Понял, что больше нравится и получается организовывать процессы, вырос из просто разметки.
Очень люблю прогресс, люблю учиться и развиваться. Работать с увлеченными людьми, у которых горят глаза - одно удовольствие. В нерабочее время - также постоянно в движении: скалолазание, туризм, сплавы, тусовки
Опыт работы
ООО 'Звук'
01.09-28.04 (7 месяцев и 3 недели)
Должность: Специалист по качеству поиска
Ключевые обязанности и достижения: Оценка качества и релевантности поиска: Проводил регулярную и ad-hoc оценку релевантности поисковой выдачи для музыкального и аудиоконтента (треки, артисты, альбомы, плейлисты, подкасты). Расширил область оценки качества на смежные функции: проводил оценку работы алгоритмов исправления опечаток ("опечаточника"), поисковых подсказок (саджестов) и системы распознавания музыки ("шазамилки"). Анализировал и сравнивал эффективность различных поисковых алгоритмов и моделей (включая стандартный движок и нейросетевые подходы типа Gigamix), выявлял сильные/слабые стороны и паттерны ошибок. Участвовал в анализе результатов A/B тестов поисковых гипотез. Разработка и управление процессами оценки: Сформировал и внедрил с нуля полный флоу оценки качества релевантности поиска: разработал подробные инструкции и критерии оценки, организовал подбор и взаимодействие с внешним подрядчиком (аутсорс-компанией) для выполнения разметки, выстроил процесс ревью и приемки оценок. Достиг и поддерживал высокую точность (96%) основной задачи по оценке релевантности благодаря четким инструкциям и контролю качества работы исполнителей. Управлял полным циклом работ по разметке данных для различных задач: определял цели и метрики (совместно с Product Owner'ами и аналитиками), формировал выборки, выбирал оптимальных исполнителей (инхаус, аутсорс, краудсорсинг). Ставил задачи исполнителям, контролировал качество и соблюдение сроков, проводил обучение и калибровочные сессии. Инициировал и участвовал в автоматизации процессов получения данных для оценки и отправки результатов разметки, что позволило минимизировать ручной труд и ускорить получение обратной связи по качеству поиска. Анализ данных и отчетность: Обрабатывал и анализировал результаты разметки, рассчитывал ключевые метрики качества поиска (средняя релевантность, Precision, Recall). Работал с большими объемами табличных данных в MS Excel на продвинутом уровне (ВПР/INDEX+MATCH, СЧЁТЕСЛИМН/СУММЕСЛИМН, сводные таблицы, агрегация). Готовил аналитические отчеты и презентации по результатам оценки, формулировал выводы и рекомендации по улучшению поисковых алгоритмов для продуктовых и технических команд. Взаимодействие в команде: Тесно сотрудничал с Product Owner'ами, менеджерами проектов, аналитиками данных и разработчиками в рамках цикла улучшения поиска и смежных функций. Ключевые навыки, полученные/примененные на данной позиции: Оценка качества поиска: Оценка релевантности (поиск, саджесты, опечаточники, распознавание музыки), анализ пользовательских интентов, сравнение алгоритмов, A/B тестирование. Управление разметкой данных: Построение процессов оценки с нуля, разработка инструкций, управление аутсорс-подрядчиками, инхаус и краудсорсинг, контроль качества (достижение 96% точности), опыт работы с крауд-платформами. Оптимизация процессов: Автоматизация рутинных задач в процессах оценки качества. Анализ данных в Excel: Продвинутое использование MS Excel для обработки и анализа данных. Метрики качества: Расчет и интерпретация базовых метрик качества (Precision, Recall, Average Relevance, Accuracy). Процессы и взаимодействие: Понимание цикла разработки, взаимодействие с продуктовыми и техническими командами. Личные качества: Критическое мышление, внимание к деталям, решение проблем, навыки планирования и организации, самостоятельность, инициативность.
ООО РТК
01.07-01.09 (2 года и 2 месяца)
Должность: Руководитель команды разметки
• Руководил командой аннотаторов, обеспечивая высокое качество аннотаций для датасетов компьютерного зрения. • Отвечал за балансировку датасетов, валидацию задач в CVAT, обучение новых сотрудников и разработку инструкций. • Проводил анализ и оценку производительности обученных нейронных сетей перед запуском их в прод. для решения задач компьютерного зрения. • Сформировал уникальный датасет для обучения модели обнаружения объектов (OD) на видео, который включал более 2,5 миллионов вручную размеченных объектов. Работа с таким объёмом данных предполагала большое количество источников данных, их структуризацию и усложняло правила разметки.
ООО 'НТЦ ОРИОН'
01.05-01.07 (3 года и 2 месяца)
Должность: Тестировщик ПО/Куратор разметки
• Руковожу командой аннотаторов, обеспечивая высокое качество аннотаций для датасетов компьютерного зрения. • Отвечаю за балансировку датасетов, валидацию задач в CVAT, обучение новых сотрудников и разработку инструкций. • Провожу анализ и оценку производительности обученных нейронных сетей перед запуском их в прод. для решения задач компьютерного зрения. • Сформировал уникальный датасет для обучения модели обнаружения объектов (OD) на видео, который включал более 2,5 миллионов вручную размеченных объектов. Работа с таким объёмом данных предполагала большое количество источников данных, их структуризацию и усложняло правила разметки.
ООО ЦСТ
01.06-01.12 (6 месяцев)
Должность: Картограф
Создание карт в ПО QGIS, курирование работы группы дешифровщиков.
Образование
Удмуртский государственный университет
01.09-01.06
Институт естественных наук, Картография и геоинформатика
Бакалавр