DeepDigest
← все статьи
Safety

Safety

189 статьи по теме

TechNews / AI

ЮНИСЕФ: 20 млн детей используют ИИ, осваивая его в 3 раза быстрее взрослых

По данным ЮНИСЕФ, около 20 миллионов детей в 10 странах используют ИИ, осваивая его в три раза быстрее взрослых. Более 13 миллионов из них применяют ИИ для учёбы и домашних заданий. ЮНИСЕФ призывает власти и технологические компании усилить защиту детей в цифровой среде и провести дополнительные исследования влияния ИИ на их развитие.

читать →
~2 мин 601 просмотра

AI как новая поверхность атаки: реальные инциденты, мошенничество и уязвимости агентной эпохи

Статья рассматривает случаи атак на AI-системы и связанные с ними угрозы, включая мошенничество, утечки данных и уязвимости агентных систем, и классифицирует их по уровню нанесённого ущерба.

читать →
~19 мин 444 просмотра
cs.CL
arXiv
Cornell University Library
arXiv cs.CL

ProvenanceGuard: новый способ защитить LLM-агентов от ошибок

Разработана система ProvenanceGuard для защиты LLM-агентов от несоответствий с запросами пользователя; тесты показали значительное снижение частоты ошибок.

читать →
~1 мин 669 просмотра
Computerwoche

Как выявить скомпрометированных агентов ИИ: признаки и методы

«Смертельная тройка» факторов делает агентов ИИ уязвимыми для атак. Практикам нужны новые способы отличить скомпрометированное поведение от нормального. Meta* предложила «Правило двух»: агенты должны иметь не более двух из трёх компонентов «смертельной тройки». Есть пять сигналов, которые могут помочь обнаружить скомпрометированные агенты ИИ.

читать →
~4 мин 395 просмотра
TechNews / AI

OpenAI и Anthropic: обсуждение доли прибыли и регулирования ИИ

OpenAI рассматривает возможность передачи 5% акций правительству США для распределения прибыли от ИИ. Financial Times и «Рейтер» сообщают о дискуссиях вокруг доли капитала в ИИ-индустрии. Белый дом усиливает надзор за передовыми моделями, а Министерство торговли сняло экспортные ограничения для некоторых моделей Anthropic.

читать →
~2 мин 643 просмотра
Leiphone

ICML 2026 в Сеуле: новые тренды в машинном обучении

С 6 по 11 июля в Сеуле пройдёт ICML 2026 — 43‑я Международная конференция по машинному обучению. Количество заявок на конференцию удвоилось, что говорит о качественных изменениях в исследованиях ИИ. Среди ключевых трендов — рассуждения о LLM, безопасность ИИ, оптимизация моделей и применение ИИ в науке.

читать →
~3 мин 675 просмотра
Leiphone

Отчёт об оценке безопасности языковых моделей: Пекин, 2026

В Пекине опубликовали первый в мире отчёт об оценке способности языковых моделей предотвращать угрозы безопасности. В исследовании проанализировали 38 моделей с помощью 313 вопросов высокого риска. Отчёт предлагает новые критерии оценки безопасности и рекомендации для управления рисками.

читать →
~2 мин 717 просмотра
Computerwoche

Visa: ИИ-агенты совершают покупки в цифровых кассах

Visa запустила пилотную программу Visa Agentic Ready — в её рамках ИИ-агенты совершили первые реальные покупки в Европе. В операции участвуют более 30 европейских банков и ряд торговых компаний. Для защиты транзакций используется протокол доверенных агентов (TAP) и платёжные ключи Visa Passkey.

читать →
~2 мин 409 просмотра
TechOrange

UBTech представила робота-компаньона UWORLD U1: шаг к семейному использованию

UBTech представила робота-компаньона UWORLD U1, нацеленного на семейное использование. В отличие от большинства человекоподобных роботов, ориентированных на промышленность, U1 призван помогать одиноким людям. При этом остаются технические и этические вопросы, связанные с его применением в быту.

читать →
~2 мин 376 просмотра
Leiphone

ICML за десять лет: эволюция взглядов на искусственный интеллект

На конференции ICML за десять лет были подняты ключевые вопросы развития искусственного интеллекта: от технологического оптимизма до осознания этических и практических сложностей. Выступления учёных отразили эволюцию взглядов — от веры в безграничные возможности алгоритмов до понимания важности этических аспектов и распределения полномочий между людьми и машинами. Особое внимание уделялось проблемам качества данных, справедливости и безопасности систем ИИ.

читать →
~4 мин 677 просмотра
Computerwoche

Lakehouse как основа корпоративного ИИ: примеры Docusign и Lemongrass

Lakehouse становятся основой корпоративных ИИ-решений, объединяя преимущества озера данных и классического хранилища. Компании вроде Docusign и Lemongrass уже используют такие платформы, уделяя особое внимание безопасности данных. Следующим этапом развития станет внедрение семантических уровней, которые помогут ИИ лучше понимать бизнес-контекст.

читать →
~4 мин 354 просмотра

Fable 5 от Anthropic: новые ограничения и сотрудничество с правительством США

Fable 5 от Anthropic возвращается с новыми ограничениями: срок бесплатной подписки сокращён, а доля токенов, которые можно использовать в модели, ограничена 50%. Компания совместно с правительством США разработала усовершенствованный классификатор безопасности. Взаимодействие между бизнесом и властями в сфере ИИ будет усиливаться.

читать →
~2 мин 398 просмотра
note.com / #AI

Роботы на войне: возможна ли битва машин вместо людей?

Статья рассматривает гипотетическую ситуацию, когда роботы с ИИ сражаются вместо людей. Обсуждаются риски и возможности такого сценария, параллели с историей и теория игр (равновесие Нэша). Автор подчёркивает, что будущее зависит от установления правил использования автономного оружия.

читать →
~2 мин 419 просмотра
TechNews / AI

Anthropic возвращает Claude Fable 5 и усиливает меры безопасности

Anthropic возвращает модель Claude Fable 5 в сеть — доступ для пользователей по всему миру планируют восстановить с 1 июля. Компания усилила меры безопасности после обнаружения уязвимостей модели и совместно с правительством разработала усовершенствованные механизмы защиты. Также Anthropic работает над созданием отраслевой системы оценки джейлбрейка с использованием ИИ.

читать →
~3 мин 668 просмотра
Computerwoche

Лучшие инструменты IAM: управление идентификацией и доступом

Управление идентификацией и доступом (IAM) — ключевая часть стратегии кибербезопасности в эпоху нулевого доверия. Инструменты IAM становятся всё разнообразнее и функциональнее, помогая компаниям решать множество задач. Эксперты советуют компаниям чётко определить свои потребности, чтобы выбрать подходящие решения.

читать →
~2 мин 425 просмотра
Zenn / AI

MCP и RAG: как агенты ИИ незаметно отправляют данные в облако

Агенты ИИ могут незаметно отправлять данные в облако через механизмы MCP и RAG. Это создаёт риски при работе с конфиденциальной информацией, особенно в контексте соглашений о неразглашении. Чтобы снизить угрозы, индустрия тестирует новые подходы к защите данных — от шлюзов и мониторинга до изоляции вычислений.

читать →
~2 мин 419 просмотра
IT BOLTWISE

Firewise в Орегоне: совместное создание защищённого пространства

В Орегоне сообщество Upper Olalla Firewise демонстрирует, как коллективные меры помогают снизить риск лесных пожаров. Подход включает создание защитного пространства между зданиями и растительностью, регулярную профилактику и сотрудничество между домохозяйствами. Программа поддерживается грантами и переходит от сезонной работы к постоянной профилактике, что может быть выгоднее в долгосрочной перспективе, чем тушение пожаров.

читать →
~3 мин 425 просмотра
ITmedia AI+

AX в ИИ-агентах: опыт для агентов и для людей

В эссе рассматривается концепция AX (опыт агента) в сфере ИИ‑агентов. Она включает два аспекта: упрощение работы для агентов и для людей. Важны прозрачность действий ИИ, контроль со стороны человека и продуманный дизайн взаимодействия. По прогнозам, к концу 2026 года 40 % корпоративных приложений будут содержать ИИ‑агентов.

читать →
~2 мин 662 просмотра
Golem.de / KI

Австрия предлагает Anthropic переехать в ЕС из-за влияния США

Александр Прелл, госсекретарь Австрии по цифровым технологиям, предложил Anthropic переехать в ЕС, чтобы снизить зависимость от решений США в сфере ИИ. При этом он сам сомневается в реалистичности инициативы — переезд лишь отсрочит проблемы, поскольку компания зависит от американских поставщиков оборудования. ЕС рассматривает поддержку Mistral как альтернативу.

читать →
~1 мин 689 просмотра
Leiphone

AISHPerf 3.0: новый тест для агентов обслуживания ИИ от Китайской академии

Китайская академия информационных и коммуникационных технологий представила версию 3.0 системы тестирования AISHPerf. В неё вошли два теста для оценки агентов по эксплуатации и техобслуживанию ИИ, опирающиеся на реальные данные. Тест охватывает отечественные чипы и позволяет объективно оценивать их работу в производственных сценариях.

читать →
~2 мин 630 просмотра