В России представили SplitLight для поиска сбоев и аномалий в данных для ИИ

Исследователи из Центра практического искусственного интеллекта Сбера и Института AIRI разработали общедоступное решение SplitLight, предназначенное для предварительной проверки наборов данных перед запуском процессов обучения нейросетей, об этом сообщает "Газета.Ru".

Продукт распространяется в открытом доступе и может функционировать как полноценная библиотека для языка Python либо как визуальный интерфейс, не требующий навыков программирования. Технология дает возможность специалистам обнаружить ошибки в структуре данных, выявлять повторяющиеся записи и находить расхождения во временных интервалах. Функционал SplitLight помогает выявлять аномалии, благодаря чему разработчики получают возможность оперативно корректировать процесс подготовки информации. Кроме того, разработка фиксирует итоги различных экспериментов и осуществляет верификацию обучающих выборок на предмет их достоверности.

SplitLight позволяет специалистам детально изучить данные и заранее выявить скрытые искажения. Для продуктовых команд в маркетплейсах, стримингах и медиа - это надежная защита перед дорогими экспериментами: быстрая проверка данных, выбор корректного сплита и подтверждение, что тест приближен к реальности, - говорит старший управляющий директор, директор по AI-трансформации Сбербанка Сергей Рябов.