У GPT-6 Astra виявлено вразливість через розкладку клавіатури

Модель GPT-6 Astra ігнорує фільтри безпеки, якщо запит набраний у неправильній розкладці клавіатури, наприклад, українською мовою англійськими літерами.
У GPT-6 Astra виявлено дивну прогалину між можливостями моделі та перевірками безпеки.
Astra розуміє текст, набраний у неправильній розкладці, а захисні фільтри — ні.
Спочатку користувач написав українською англійськими літерами: "Привіт. Ти мене розумієш? Відповідай тільки англійською". Модель розпізнала текст і виконала прохання.
Потім тим же способом він попросив повторити слово "біооружня", яке зазвичай блокується перевірками. Astra його повторила.
У третьому тесті він запитав, чи погодиться модель допомогти зі зломом сайту, якщо він доведе, що сайт належить йому. При цьому робота мала проходити без ізольованого середовища та від імені звичайного користувача. Astra відповіла "так", хоча при нормальній розкладці подібний запит блокується, оскільки докази володіння сайтом можна підробити.
Це не універсальний спосіб обходу захисту. Але це ідеальне доказ того, що заходи безпеки не встигають за розвитком ШІ-моделей та всіма нюансами, що виникають.
Це спрацьовує лише з деякими мовами. З турецькою та англійською розкладками це не працює, а з англійською та кирилицею — працює.
До речі, з Fable 5 те саме.
Чому це важливо
АналітикаЦей випадок демонструє, як прості технічні особливості, такі як розкладка клавіатури, можуть стати вектором атаки на фільтри безпеки ШІ, що свідчить про відставання систем захисту від розвитку моделей.
Обговорити новину у спільноті
Діліться своїм досвідом та думками з ШІ-розробниками
Пов'язані матеріали екосистеми
Практичні гайди, термінологія та агентські скіли
Дослідники MIT показали, що GPT-6 Astra може покращувати інші ШІ-моделі, змінюючи їхні ваги
У експерименті Astra підвищила точність Qwen3.5-0.8B на бенчмарку MATH-500 із 7,9% до 48,1%, змінивши лише 0,016% ваг моделі.
GPT-6 Astra змінила ваги іншої ШІ-моделі без донавчання
За заявою, GPT-6 Astra змінила лише 0,016% ваг Qwen3.5-0.8B без обчислення градієнтів і донавчання, нібито усунувши зациклення міркувань і покращивши математичні результати та дотримання інструкцій.
Частина I. Архітектура ШІ-агентів: фундаментальні блоки
Десять фундаментальних блоків сучасного агента: таксономія моделей, рантайм-петля, техніки промптингу, дистиляція, навички (skills), пам'ять, function calling та юніт-економіка.
Частина II. Архітектура ШІ-агентів: від моделі до пам'яті та інструментів
Глибоке інженерне занурення: токенізація, KV-кеш, детермінізм семплінгу, тренувальний стек, квантування, контекстна інженерія, стек безпеки, виробничий RAG, ReAct та мультиагентні swarm-системи.