Еволюція Snake Lab (2/4)

У попередньому дописі я налаштував локальну LLM на старій робочій станції HP Z440 й написав примітивний цикл розмови. Генерував випадкові числа, передавав їх мовній моделі та просив писати про них хайку.

Це працювало.

У моєму підвалі стояла машина, яка писала вірші про випадкові числа.

Природно, наступне запитання було таким: а що ще я можу змусити цю штуку робити?

Експериментуючи з моделлю, я виявив, що вона знала про дослід Патріка Лебера, у якому ШІ навчається грати в «Змійку». Це привернуло мою увагу, адже я добре знав цей експеримент: уже доволі давно працював із його кодом і змінював його.

І в мене виникла ідея.

А що, як замість прохання писати хайку передати LLM результати симуляції «Змійки»?

Я міг би передати конфігурацію, що дала ці результати, попросити модель проаналізувати їх, а потім запропонувати нову конфігурацію. Далі можна було б запустити її в симуляторі, зібрати результати, повернути їх до LLM і повторити цикл.

Інакше кажучи:

Чи можу я змусити одну LLM оптимізувати інший ШІ?

Згодом ця ідея перетворилася на Fr3d.

Але була проблема.

Старий проєкт AI Snake Lab

Я пройшов навчальний курс Патріка Лебера, а потім вирішив розвивати проєкт далі. Переніс його на Textual і замінив старі графіки Matplotlib вбудованими графіками Textual Plot. Застосунок розділився на окремі процеси клієнта та сервера, які спілкувалися через ZeroMQ. Результати симуляцій зберігалися в базі даних.

Клієнт Textual дозволяв налаштувати симуляцію, надіслати конфігурацію серверу, запустити експеримент і спостерігати за його перебігом.

Це вже було значно більше, ніж просто гра «Змійка».

Але все ще залишалося застосунком. Його архітектура виросла з припущення, що за клієнтом сидить людина, яка власноруч проводить експерименти.

Fr3d змінив це припущення.

Створення лабораторії

Я взяв наявний код гри та виокремив із нього новий незалежний проєкт: Snake Lab Server.

Основна ідея була проста: серверу Snake Lab має бути байдуже, хто саме проводить експеримент.

Клієнт надсилає JSON-конфігурацію через ZeroMQ. Сервер перевіряє її, ставить експеримент у чергу, запускає симуляцію, збирає метрики та зберігає результати в MariaDB.

Сам сервер працює як служба systemd.

Тепер ним могла користуватися LLM. Або сценарій Python. Або термінальний застосунок. Або щось таке, чого я ще навіть не вигадав.

Симулятору не потрібно цього знати.

Я також переніс свій клієнт Textual на нову систему. Мені, як і раніше, хотілося самостійно запускати експерименти, а головне — спостерігати за ними.

Є щось значно приємніше в тому, щоб бачити, як змійка рухається полем, ніж у спогляданні чисел, які пробігають у журналі.

Але тепер інтерфейс Textual був лише одним із клієнтів.

Це важлива відмінність.

Експеримент — це більше, ніж рекорд

Я також хотів, щоб Snake Lab Server досить суворо визначав, що вважати експериментом.

Перш ніж симуляцію буде прийнято, її конфігурацію перевіряють. Конфігурацію конкретного запуску зберігають. Результати теж зберігають. Метрики збирають протягом усієї симуляції, включно з даними для окремих ігор та епізодів.

Це важливо, тому що я хотів ставити не лише запитання:

Чи набрала ця змійка більше очок?

А й інше:

Що саме ми запускали й що в результаті сталося?

Якщо автоматизована система проводитиме сотні експериментів, відповідь має залишатися доступною ще довго після завершення кожного з них.

Інакше в мене була б не лабораторія.

А ігровий автомат.

Усе готово для дослідника

Так з’явився Snake Lab Server.

Це ще не був Fr3d.

Ще не існувало автономного дослідника на основі LLM, який аналізує результати, обмірковує конфігурації та сам вирішує, який експеримент провести далі. Цю частину ще належало створити.

Але тепер йому було де працювати.

Я почав зі штучного інтелекту, який учився грати в «Змійку». Потім він перетворився на клієнт-серверний застосунок для експериментів. А тепер застосунок еволюціонував ще раз — у службу, створену спеціально для того, щоб інше програмне забезпечення могло проводити контрольовані експерименти зі ШІ «Змійки».

Лабораторія була готова.

Тепер треба було створити дослідника.

Посилання

• Сайт проєкту Snake Lab Server
• Частина 1/4 цієї серії
• Частина 2/4 — ця стаття
• Частина 3/4 цієї серії

• 2026 19
• 2025 16
• 2024 2