Palette: обучение небольшой модели созданию презентаций в вашем фирменном стиле
huggingface ·
Исследовательская группа IBM представила Palette — систему, которая дообучает открытую модель с 20 миллиардами параметров для создания презентаций в соответствии со специфическим корпоративным стилем. Чтобы преодолеть ограничения небольших моделей при работе со сложной геометрией макетов и редакторскими решениями, подход разделяет задачу на две роли: «дизайнер», создающий структурированное техническое задание в формате JSON, и «кодер», генерирующий код презентации. Обучающие данные синтезируются с помощью большой модели-наставника (teacher model) с использованием контрфактуального рассуждения, что позволяет обучать модель пониманию причин выбора тех или иных дизайнерских решений. Пользователи могут управлять результатом с помощью простых инструкций на английском языке, заключенных в квадратные скобки, обеспечивая точный контроль над такими элементами, как графики или временные шкалы. Ключевым компонентом является система проверки и исправления ошибок (check-and-repair harness), которая проверяет каждый слайд на наличие перекрытий или выхода за пределы границ и автоматически устраняет ошибки без снижения качества. В тестах PresentBench система Palette заняла первое место в категориях «Экономика» и «Образование» и второе место в общем зачете среди трех измеренных категорий. Этот метод позволяет организациям сохранять конфиденциальность данных и достигать визуальной согласованности, сопоставимой с возможностями передовых систем искусственного интеллекта.
huggingface