Apple представила Glyph для описания и классификации столбцов данных

Apple Machine Learning Research представила Glyph — производственную систему, которая генерирует описания столбцов корпоративных данных и присваивает им классификационные метки. Для этих задач Glyph использует взаимодействующих LLM-агентов, организованных в графы с сохранением состояния.

Компонент Descriptor использует исходный код конвейера, создающего столбец. Tagger параллельно применяет три стратегии разметки, а затем объединяет результаты методом Reciprocal Rank Fusion; метки выбираются из онтологии классификации данных с 275 конечными категориями.

Авторы сообщают, что дообучение кодировщика MiniLM повысило NDCG@10 в задаче same-tag retrieval на отложенной выборке того же распределения с 0,55 до 0,92.