Cisco розкрила новий метод захисту від "токсичних" нейромереж: Model Provenance Kit як щит корпоративної безпеки

0
28

Процес аналізу цифрової структури нейромережі Чистота коду в епоху відкритих моделей: новий інструмент від Cisco на GitHub. Джерело: AI

Епоха цифрової невизначеності

У світі, де мільйони нейромережевих моделей вільно circulating в інтернеті, Cisco представила революційний інструмент кібербезпеки – Model Provenance Kit. Цей програмний «ДНК-тест» дозволяє організаціям захистити себе від потенційно небезпечних чи компрометованих штучних інтелектів.

Чому походження моделі важливе?

Сучасні платформи на кшталт Hugging Face перетворили обмін нейромережами на справжній конвеєр. Розробники копіюють, модифікують і redistribute моделі зі швидкістю, при якій втрачається прозорість їх походження. Ризики очевидні: від випадкових помилок до умисних кібератак.

Технологія цифрової forensics

Model Provenance Kit аналізує моделі за кількома ключовими параметрами:

  • Унікальні метадані
  • архітектурні особливості
  • Характеристики токенізаторів
  • Геометрія ембедінгів
  • Енергетичні профілі

Два режими захисту

Інструмент пропонує два принципові режими роботи:

Порівняти: Пряме зіставлення моделей для виявлення несанкціонованих змін

сканування: Масштабний пошук збігів у базі «цифрових відбитків», що дозволяє реконструювати геногеографію моделі

Що далі?

Проект вже доступний на GitHub і може стати стандартом безпеки для компаній, які використовують відкриті нейромережі. Це принципово новий підхід до управління ризиками в епоху демократизованого AI.

НОВИНИ ПАРТНЕРІВ

БІЛЬШЕ НОВИН