Inkling 2 Small умеет смотреть на результат и дорабатывать сайты и 3D-сцены. Но слово Small здесь обманчиво: это большая модель, а её веса пока нельзя просто скачать.
Модель, которая пишет код, и модель, которая замечает неудачный результат на экране, решают разные части задачи. Для создания сайта нужны обе: мало собрать элементы, хочется ещё увидеть, что получилось, и поправить конкретное место.
Thinking Machines Lab, компания Миры Мурати, 5 ноября представила Inkling 2 Small. В анонсе заметный акцент сделан именно на продолжительной работе с инструментами и обратной связью.
Это модель для работы с текстом и изображениями, программирования и задач с инструментами. Thinking Machines показывает создание интерактивного города, программного эмулятора компьютера и 3D-сцены с бумажными журавлями. Это демонстрации разработчика модели.
Симулятор города из демонстрации Thinking Machines Lab. Это пример разработчика модели, не наш проект. Источник.
Изображение может быть входными данными: например, модель получает визуальный результат и уточняет работу. При этом Inkling 2 Small не является самостоятельным видеоредактором или генератором речи. В ограничениях прямо сказано, что аудио не поддерживается.
Для дизайнера или разработчика интересен сам цикл: замысел, реализация, просмотр, исправление. В условной задаче с каталогом товаров мало попросить «сделай красиво». Полезнее задать, какие товары видны, как работает фильтр и что человек должен увидеть после выбора.
В Inkling 2 Small всего 594 млрд параметров, а на отдельном шаге используются около 17 млрд. Это архитектура с несколькими группами специалистов: для каждого фрагмента работы включается только часть системы.
Число активных параметров объясняет способ вычислений, но не означает, что для хранения всей модели достаточно памяти под эту небольшую часть. Название Small относится к линейке производителя, а не обещает лёгкий домашний запуск.
При выборе открытой нейросети вообще полезно разделять три вещи: можно ли скачать веса, разрешает ли лицензия нужное использование и на каком оборудовании модель реально работает. В этом выпуске первый вопрос ещё не закрыт.
На старте модель доступна через Tinker Playground и сервис Tinker для запросов и дополнительного обучения. В анонсе компания планирует опубликовать полные веса под Apache 2.0 на следующей неделе после завершения внешних проверок.
По состоянию на 7 ноября план публикации не стоит принимать за готовый файл для скачивания. Для пробы сейчас нужен маршрут, который описан в Tinker; окончательные условия будущего самостоятельного запуска нужно смотреть после выхода весов.
В самой компании признают и ограничения общения: модель бывает многословной, не всегда удачно оформляет ответы и выбирает инструменты. Поэтому таблица тестов не заменит небольшой задачи из вашей работы.
Хорошая первая проба — доработать один экран по понятным требованиям и посмотреть, что модель исправляет после замечания. Если важен готовый сайт, сравнивайте весь путь до публикации и дальнейших правок. В разборе сервисов для создания сайтов с ИИ показываем, из каких частей складывается этот выбор.
