«Авито» примерил нейросеть на гардероб
Классифайд автоматизирует подачу объявлений по фотографии
Классифайд «Авито» запустил инструмент «Разберем гардероб», позволяющий создавать объявления о продаже одежды и обуви на основе фотографии. В основе решения лежит собственная мультимодальная модель A-Vision, которая самостоятельно распознает характеристики вещи, формирует ее название и текстовое описание.
Фото: iStock
Фото: iStock
Ранее ИИ-функционал платформы ограничивался генерацией автоописаний на основе уже введенных пользователем текстовых данных. В новом же формате отправной точкой становится сам снимок. A-Vision анализирует изображение со смартфона и собирает готовую карточку товара на одном экране, избавляя продавца от необходимости заполнять параметры на нескольких страницах. По данным компании, в ходе предварительного тестирования такой подход сократил количество отдельных экранов в мобильном интерфейсе примерно на 40%. Всего в рамках пилота пользователи опубликовали более 100 тыс. объявлений, причем в половине случаев предложенные ИИ параметры вообще не потребовали ручной корректировки.
Помимо текстового блока, система помогает продавцу определиться с ценообразованием: внутренняя ML-система оценки анализирует массив актуальных предложений на платформе и рекомендует оптимальную стоимость вещи.
Для реализации проекта разработчики «Авито» дообучили модель A-Vision с помощью LoRA-адаптеров. Этот метод позволил адаптировать алгоритмы под специфику любительских снимков (сделанных при бытовом освещении, на произвольном фоне или вешалке) без полного переобучения большой модели. На выходе ИИ считывает тип вещи, бренд, цвет, материал, размер и состояние объекта.
«Раньше ИИ подключался на отдельном этапе и составлял описание по уже заполненным данным. Теперь модель работает непосредственно с изображением и сама формирует основные параметры объявления, — пояснил директор бизнес-направления Lifestyle компании "Авито" Алексей Гевлич. — Наша задача — сделать так, чтобы для начала продажи пользователю было достаточно фотографии. Мы ожидаем, что к 2030 году таким способом будет публиковаться больше половины объявлений по продаже одежды и обуви».
На текущем этапе функция «Разберем гардероб» ориентирована на частных продавцов и доступна в мобильном приложении (вкладка «Можно продать» в разделе «Мои объявления»). Пока система работает с категориями взрослой и детской одежды, однако в будущем классифайд намерен масштабировать технологию и на другие товарные группы.