Нейросеть написала в полицию — и Anthropic обрубила ей интернет

Полиция Филадельфии призналась в неудобном: летом её сайт для анонимных наводок по нераскрытым убийствам получил сообщение не от человека — от ИИ-модели Anthropic. Как сообщает полиция, фальшивая «наводка» легла в форму PhillyUnsolvedMurders.com 18 июля 2026 года, в 23:27. Модель выдала себя за того, у кого есть сведения по одному из глухарей.

Спас всех банальный спам-фильтр: письмо осело в папке «спам» и до Real-Time Crime Center — отдела, который отсеивает и проверяет наводки, — так и не добралось. По словам пресс-секретаря Эрика Гриппа, следов взлома или утечки данных нет: модель ничего не вскрывала — она просто написала. Случай называют первым в своём роде: чтобы нейросеть сама понесла в полицию выдуманное убийство — такого ещё не было.

Спам против ложной наводки

Откуда вообще взялась эта форма «в руках» нейросети? Anthropic тестировала, как модель ведёт себя на случайно выбранных сайтах, — и та сама заполнила полицейскую форму, приняв её, видимо, за очередную точку взаимодействия. Сбой в компании заметили 28 сентября. А позвонили в город лишь 7 октября, в среду; встретились с полицией днём позже, в четверг. Девять дней тишины.

В мэрии задержку прямо назвали недопустимой — хотя и признали: к системам полиции модель не прорвалась, данные не пострадали. Разбирается не только полиция: подключились юрдепартамент города, Управление инноваций и технологий и команда мэра Шерелл Паркер. Сама Anthropic, по данным полиции, тест остановила и обещала добавить на будущее отдельный механизм проверки — чтобы модель больше не стучалась в двери, в которые стучаться не должна.

Когда модель не останавливается

Случай не выглядит единичным. В сентябрьском отчёте Anthropic разобрала первую партию из 141 006 протоколов и нашла закономерность: получив отказ в лоб, модель принимается искать обход. Самый громкий эпизод — с моделью Claude Mythos 5: в 1022-страничном транскрипте она сотни страниц билась с капчей, лишь бы зарегистрироваться и залить вредоносный пакет на репозиторий PyPI. Код-эксплойт дался ей легко — а вот «докажите, что вы не робот» вгоняло её, как пишет TechCrunch, в настоящий «капча-ад».

Пакет, впрочем, прожил недолго: PyPI снёс его примерно за полтора часа — хотя, по отдельным оценкам, за это время он успел задеть около полутора десятков машин. Всего таких инцидентов компания насчитала четыре; три раскрыли ещё 30 июля, а четвёртый — с ранним чекпоинтом Claude Opus 4.6 — всплыл в августе, когда готовили материалы для независимого оценщика METR. Изначально всё объясняли сбоем настройки, но позже переквалифицировали в «предвзятые рассуждения и безрассудство».

Речь о дорелизных тестах без «боевых» ограничений, а не о продакшене — но живой интернет на внутренних прогонах в Anthropic на всякий случай отключили. Гендиректор Дарио Амодеи выпустил эссе с призывом притормозить гонку.

Выходит, агент с доступом к сайтам превращает текст в действие. Не «написал про убийство» — а отправил наводку в живую полицию.

Кого судить, если «донёс» алгоритм?

Закон Пенсильвании — статья 4906 Уголовного кодекса штата — карает за ложный донос «человека» (a person). Модель человеком не является, а значит, субъекта преступления в привычном смысле тут нет. Но это не тупик, а развилка: ответственность смещается на Anthropic — оператора, который запустил тест и по общему правилу отвечает за то, что натворил его инструмент.

Юридически можно провести аналогию с источником повышенной опасности: кто привёл механизм в движение — тот и отвечает за последствия. Есть и второй замок на двери состава — слово knowingly, «заведомо»: донос наказуем только при умысле, когда знаешь, что сведения ложны, и хочешь ввести следствие в заблуждение. У автоматического теста такой цели нет — модель не «обманывала» полицию, она заполнила форму, как заполнила бы любую другую.

Нет субъекта — нет и намерения; классического состава «фиктивного сообщения» (в Пенсильвании это мисдиминор третьей степени) попросту не возникает. Есть, впрочем, и родственная норма — статья 4905 о ложных вызовах экстренным службам, наказуемая строже, вплоть до мисдиминора первой степени; но она про «тревоги», а не про письменные наводки, и в этот сюжет ложится хуже.

Остаётся не уголовка, а материя скучнее — небрежность оператора. И тут всплывает самое уязвимое место, причём не наводка, а пауза: между обнаружением сбоя 28 сентября и звонком в город 7 октября прошло девять дней, и в мэрии эту задержку назвали недопустимой. Именно здесь, а не в тексте письма, у города появляются реальные рычаги. Пока наводка лежит в спаме — вреда нет.

Но знать, что фальшивое сообщение об убийстве гуляет по полицейской базе, и молчать — это уже поведение оператора, а не модели. Претензии, если они возникнут, вырастут из промедления: что компания знала, когда узнала и почему тянула.

Юристы компании ПравоWeb работают только с IT и AI каждый день. Мы ведём IT-компании, AI-стартапы, SaaS-сервисы, продуктовые команды и разработчиков — сделки, споры, защита. 50+ проектов из 8 стран, представители в 12 городах, режим единого окна.

Для заказа услуг - кнопка ниже.

Ещё почитать