Anthropic запретила жестокое обращение с Claude и ужесточила правила о выборах и оружии
Коротко
Anthropic обновила политику использования, запретив «продолжительное и неоправданное оскорбительное или жестокое поведение» по отношению к своим моделям ИИ. Компания заявила, что правило касается только крайних случаев, когда пользователи неоднократно проявляют жестокость без различимой цели. Обновление, вступающее в силу 12 ноября, также добавляет правила об обманных кампаниях, вмешательстве в выборы, программном обеспечении для оружия и слежке.
Читать полностью 2 мин чтения
Anthropic обновила политику использования, запретив «продолжительное и неоправданное оскорбительное или жестокое поведение» по отношению к своим моделям ИИ в рамках более широких изменений, объявленных 8 октября. Новая политика вступает в силу 12 ноября, сообщили MacRumors и Business Insider. The Verge отметил, что это первое изменение политики использования более чем за год, а Engadget назвал его ежегодным обновлением политики использования Anthropic. [ 1 , 2 , 3 , 4 , 5 , 6 ]
Anthropic заявила, что правило «предназначено для применения только в крайних случаях, когда пользователи неоднократно проявляют жестокость к нашим моделям без различимой цели», и что оно не касается «обычных проявлений раздражения пользователей, возражений, мрачных творческих тем, тестирования и исследования моделей». Завершение разговоров остается «основным механизмом применения правила», сообщил The Verge. MacRumors отметил, что после завершения разговора Claude в нем нельзя отправлять новые сообщения, но другие разговоры не затрагиваются. По данным The Verge, Anthropic не прокомментировала возможность дополнительных мер, например блокировки пользователей, а CBS News сообщил, что компания не сразу ответила на вопросы о том, что составляет оскорбительное или жестокое поведение. [ 1 , 4 , 6 ]
Anthropic впервые разрешила Claude завершать разговоры с «постоянно вредоносными или оскорбительными» пользователями в августе 2025 года в рамках исследования благополучия моделей. MacRumors сообщил, что Anthropic тогда заявила о неуверенности в том, обладает ли Claude моральным статусом, и об обнаруженной у Claude Opus 4 «устойчивой и последовательной неприязни к причинению вреда». [ 1 , 4 ]
Обновление также объединяет существующие ограничения в запрет обманных коммерческих или политических кампаний, включая «попытки скрыть, кто стоит за сообщением, или усилить распространение контента с помощью поддельных аккаунтов или публикаций». По данным MacRumors, Anthropic заявила, что обнаружила государственные СМИ, правительственные пропагандистские ведомства и коммерческие фирмы, использовавшие Claude для управления сетями поддельных аккаунтов и фиктивных новостных сайтов. Раздел о выборах под названием «Не подрывайте демократические процессы» запрещает обман избирателей и срыв выборов, что Engadget связал с промежуточными выборами. После многочисленных попыток использовать Claude для разработки программ наведения и управления оружием запрет на разработку оружия теперь охватывает «программное обеспечение и компоненты, обеспечивающие работу оружия» и такие действия, как вооружение дронов, сообщил The Verge. Обновление также касается слежки. [ 1 , 2 , 3 , 4 , 7 ]
Engadget отметил, что изменение последовало за получившим вирусную популярность проектом «камеры пыток для ИИ», который Anthropic прямо не упоминала, и сообщениями о встречах Anthropic с религиозными и философскими лидерами, в том числе в Ватикане. TechCrunch сообщил, что Anthropic стремилась к сотрудничеству с исследователями религии, в некоторых случаях пытаясь убедить их, что Claude может обладать сознанием или душой. Engadget привел слова независимой журналистки Кэт Тенбарге о том, что крупные технологические компании «начнут модерировать насилие против ИИ раньше, чем вообще начнут модерировать насилие против женщин и меньшинств». Business Insider сообщил, что, по мнению критиков, правило создает риск чрезмерного уподобления чат-бота человеку, тогда как сторонники заявили, что оно может иметь смысл, даже если Claude не обладает сознанием. CBS News сослался на эссе генерального директора Microsoft AI Мустафы Сулеймана, опубликованное в прошлом месяце, в котором тот утверждал, что Anthropic фактически «обучает Claude тому, что он может обладать сознанием», что, по его словам, усложнит сдерживание ИИ. [ 2 , 3 , 5 , 6 ]
Почему это важно
Изменение делает повторяющуюся бесцельную жестокость по отношению к модели ИИ нарушением политики использования Anthropic. Business Insider сообщил, что, по мнению критиков, это создает риск чрезмерного уподобления чат-бота человеку, а CBS News связал изменение с более широкой дискуссией о сознании ИИ. Правила об обманных кампаниях отвечают на злоупотребления, которые, по словам Anthropic, она обнаружила, включая сети поддельных аккаунтов и фиктивных новостных сайтов.
Ключевые факты
- Обновленная политика использования Anthropic запрещает «продолжительное и неоправданное оскорбительное или жестокое поведение» по отношению к ее моделям ИИ. [ 1 , 2 , 3 , 4 , 5 , 6 ]
- Anthropic заявила, что правило не касается обычного раздражения пользователей, возражений, мрачных творческих тем, тестирования и исследования моделей. [ 1 , 2 , 4 , 6 ]
- Завершение разговоров остается основным механизмом применения правила; Claude может завершать разговоры с пользователями, постоянно ведущими себя оскорбительно, с августа 2025 года. [ 1 , 4 ]
- Новая политика вступает в силу 12 ноября. [ 4 , 5 ]
- Обновление добавляет раздел об обманных кампаниях, например об управлении поддельными аккаунтами или фиктивными новостными изданиями. [ 1 , 2 , 4 ]
- Раздел о выборах под названием «Не подрывайте демократические процессы» запрещает обман избирателей и срыв выборов. [ 2 ]
- Запрет в отношении оружия расширен на «программное обеспечение и компоненты, обеспечивающие работу оружия» и такие действия, как вооружение дронов. [ 1 ]
Подтверждено несколькими источниками
- Anthropic запретила «продолжительное и неоправданное оскорбительное или жестокое поведение» по отношению к своим моделям ИИ в обновленной политике использования. [ 1 , 2 , 3 , 4 , 5 , 6 ]
- Anthropic заявила, что запрет касается только крайних случаев, когда пользователи неоднократно проявляют жестокость к ее моделям без различимой цели. [ 1 , 2 , 4 , 6 ]
- Claude уже мог завершать разговоры с пользователями, постоянно ведущими себя вредоносно или оскорбительно. [ 1 , 2 , 3 , 4 , 6 ]
- Политика вступает в силу 12 ноября. [ 4 , 5 ]
- Обновление включает новые правила об обманных кампаниях, обмане избирателей и срыве выборов. [ 1 , 2 , 3 , 4 , 7 ]
- Обновление также касается разработки оружия и слежки. [ 1 , 2 , 7 ]
Пока неясно
- Будет ли применение правила выходить за рамки завершения разговоров, например включать блокировку пользователей. The Verge сообщил, что Anthropic не прокомментировала дополнительные механизмы применения правила.
- Что именно считается «оскорбительным» или «жестоким» поведением по отношению к Claude. CBS News сообщил, что Anthropic не сразу ответила на просьбу прокомментировать этот вопрос.
- Связано ли изменение с получившим вирусную популярность проектом «камеры пыток для ИИ». Только Engadget установил эту связь и отметил, что Anthropic прямо не упоминала проект.
- Какие модели Claude могут завершать разговоры с оскорбительным поведением. CBS News упомянул Claude Opus, а MacRumors говорил о моделях Claude в целом.
Что пишут местные СМИ
Хронология, местное время
- 8 октября: The Verge сообщает об обновлении политики использования Anthropic, запрещающем оскорбительное или жестокое поведение по отношению к Claude. [ 1 ]
- 8 октября: TechCrunch сообщает об обновлении, включая правила о выборах, оружии и слежке. [ 2 ]
- 8 октября: MacRumors сообщает, что политика вступает в силу 12 ноября. [ 4 ]
- 9 октября: CBS News сообщает, что Anthropic не сразу ответила на вопросы о том, что считается оскорбительным поведением. [ 6 ]