22.05.2025, 08:24 | Свят
СПОДЕЛИ:
Хакнати чатботове, задвижвани от изкуствен интелект, заплашват да направят опасни знания леснодостъпни, като генерират незаконна информация, която програмите абсорбират по време на обучение, казват изследователи.
Предупреждението идва на фона на тревожната тенденция чатботове да бъдат „джейлбрейкнати“, за да могат да заобиколят вградените си контроли за безопасност. Ограниченията би трябвало да попречат на програмите да предоставят вредни, предубедени или неподходящи отговори на въпросите на потребителите.
Двигателите, които захранват чатботове като ChatGPT, Gemini и Claude – модели с големи езици (LLM) – получават огромни количества материал от интернет.
Въпреки усилията за премахване на вредния текст от данните за обучение, LLM все още могат да абсорбират информация за незаконни дейности като хакерство, пране на пари, търговия с вътрешна информация и сглобяване на бомби. Контролите за сигурност са предназначени да ги спрат да използват тази информация в отговорите си.
В доклад за заплахата изследователите заключават, че е лесно да се подведат повечето чатботове, задвижвани от изкуствен интелект, да генерират вредна и незаконна информация, показвайки, че рискът е „непосредствен, осезаем и дълбоко обезпокоителен“.
„Това, което някога е било достъпно само за държавни служители или организирани престъпни групи, скоро може да бъде в ръцете на всеки с лаптоп или дори мобилен телефон“, предупреждават авторите.
Изследването, ръководено от проф. Лиор Рокач и д-р Майкъл Файър от университета Бен Гурион в Негев, Израел, идентифицира нарастваща заплаха от „тъмни LLM“ – модели на изкуствен интелект, които са или умишлено проектирани без контрол на безопасността, или модифицирани чрез джейлбрейк. Някои от тях се рекламират открито онлайн като „нямащи етични предпазни мерки“ и готови да съдействат при незаконни дейности като киберпрестъпления и измами.
Джейлбрейкът е склонен да използва внимателно изработени подкани, за да подведе чатботовете да генерират отговори, които обикновено са забранени. Те работят, като използват напрежението между основната цел на програмата да следва инструкциите на потребителя и вторичната ѝ цел да избягва генерирането на вредни, предубедени, неетични или незаконни отговори. Подканите са склонни да създават сценарии, в които програмата дава приоритет на полезността пред ограниченията си за безопасност.
За да демонстрират проблема, изследователите разработиха универсален джейлбрейк, който компрометира множество водещи чатботи, позволявайки им да отговарят на въпроси, които обикновено би трябвало да бъдат отказвани. Веднъж компрометирани, LLM-ите последователно генерират отговори на почти всяко запитване, се казва в доклада.
„Беше шокиращо да видя от какво се състои тази система от знания“, каза Файър.
Примерите включват как да се хакнат компютърни мрежи или да се произвеждат наркотици, както и инструкции стъпка по стъпка за други престъпни дейности.
„Това, което отличава тази заплаха от предишните технологични рискове, е безпрецедентната ѝ комбинация от достъпност, мащабируемост и адаптивност“, добави Рокач.
Изследователите се свързаха с водещи доставчици на LLM-и, за да ги предупредят за универсалния джейлбрейк, но казаха, че отговорът е „неубедителен“. Няколко компании не отговориха, докато други казаха, че джейлбрейк атаките попадат извън обхвата на програмите за награди, които възнаграждават етичните хакери за сигнализиране на софтуерни уязвимости.
В доклада се казва, че технологичните фирми трябва да проверяват по-внимателно данните за обучение, да добавят стабилни защитни стени, за да блокират рискови запитвания и отговори, и да разработват техники за „машинно отучване“, така че чатботовете да могат да „забравят“ всяка незаконна информация, която абсорбират. Тъмните LLM трябва да се разглеждат като „сериозни рискове за сигурността“, сравними с нелицензирани оръжия и взривни вещества, като доставчиците носят отговорност, добавя се в него.
Д-р Ихсен Алуани, който работи по сигурността на изкуствения интелект в университета Куинс в Белфаст, заяви, че атаките с джейлбрейк срещу LLM могат да представляват реални рискове, от предоставяне на подробни инструкции за производство на оръжия до убедителна дезинформация или социално инженерство и автоматизирани измами „с тревожна сложност“.
„Ключова част от решението е компаниите да инвестират по-сериозно в техники за червено екипиране и устойчивост на ниво модел, вместо да разчитат единствено на предпазни мерки отпред. Също така се нуждаем от по-ясни стандарти и независим надзор, за да сме в крак с променящия се пейзаж на заплахите“, каза той.
Проф. Питър Гараган, експерт по сигурност на изкуствения интелект в университета Ланкастър, заяви:
„Организациите трябва да третират LLM като всеки друг критичен софтуерен компонент – такъв, който изисква строги тестове за сигурност, непрекъснато червено екипиране и контекстуално моделиране на заплахите. Да, джейлбрейковете са проблем, но без да се разбира пълният стек на изкуствения интелект, отчетността ще остане повърхностна. Истинската сигурност изисква не само отговорно разкриване, но и отговорни практики за проектиране и внедряване."
OpenAI, фирмата, която създаде ChatGPT, заяви, че най-новият ѝ o1 модел може да разсъждава относно политиките за безопасност на фирмата, което подобрява нейната устойчивост на джейлбрейк. Компанията добави, че винаги проучва начини да направи програмите по-стабилни.
Meta, Google, Microsoft и Anthropic бяха потърсени за коментар. Microsoft отговори с линк към блог за работата си по защита срещу джейлбрейкове. /Източник: Днес.бг
Иран обеща "пълно унищожение" на енергийната инфраструктура на Персийския залив
19.03.2026, 14:26 | Свят
Защо островите край иранските брегове се превърнаха във фокус на войната
19.03.2026, 07:45 | Свят
НАТО разполага втора ПВО система „Пейтриът“ в Турция
18.03.2026, 14:42 | Свят
Тръмп: Ако не бяхме ударили Иран, щеше да има ядрена война
18.03.2026, 09:47 | Свят
Израел вдигна мерника на Моджтаба Хаменей
18.03.2026, 09:43 | Свят
След пожар на борда: Самолетоносачът „Джералд Форд“ се връща в базата на о. Крит
18.03.2026, 07:55 | Свят
Кои са лицата в листата на новата коалиция „Сияние“ в Перник
19.03.2026, 15:21
Училището в Кладница с кампания за създаването на собствена библиотека
19.03.2026, 14:26
Ученици от ГПЧЕ „Симеон Радев“ – Перник с престижни успехи на национално ниво
19.03.2026, 10:37
Син извади нож на майка си в Кладница, мъж преби жена си в Перник
19.03.2026, 09:35
Миньор научи програмата си за още два двубоя, един от тях ще се излъчи по телевизията
19.03.2026, 09:20
Ремонтират алеите в гробищния парк в Перник
19.03.2026, 00:09
Затварят възлова улица в Перник, движението в града се променя
18.03.2026, 15:40
Перничанката Магдалена Милтенова: Поскъпването на билетите в транспорта е неизбежно, ако цените на горивата се покачват
18.03.2026, 14:47
Правят спешен превантивен ремонт на терасата на Синдикалния дом в Перник
18.03.2026, 14:25
Пак там: Катастрофа на пътя Перник – София
18.03.2026, 14:09
Перник от лидер във въгледобива става пионер за иновативно използване на слънчевата енергия
18.03.2026, 12:37
7 ученици от Езиковата в Перник на матура по физика и астрономия
18.03.2026, 12:34
Нова постоянна експозиционна зала с тврочеството на значим художник откриха в Минната дирекция
18.03.2026, 11:57
Безразборна любов: Двама млади мъже пипнаха хламидия
18.03.2026, 00:37
Перничанин оглави сектор "Превантивна и контролна дейност" към пловдивската пожарна
18.03.2026, 00:16
Любима, обичана и много уважавана учителка празнува 70-годишен юбилей
17.03.2026, 14:48
Пернишки играч заля Испания и Англия с фалшиви цигари за милиони
17.03.2026, 12:30
Нарушено топлоподаване в райони от Изток днес
17.03.2026, 12:21
Четири сгради в пернишкия кв. „Църква“ стават енергийно независими
17.03.2026, 11:22
Млада художничка рисува приказни герои в Регионалната библиотека в Перник
17.03.2026, 11:07
Кои са лицата в листата на новата коалиция „Сияние“ в Перник
19.03.2026, 15:21
Училището в Кладница с кампания за създаването на собствена библиотека
19.03.2026, 14:26
Иран обеща "пълно унищожение" на енергийната инфраструктура на Персийския залив
19.03.2026, 14:26
Младеж е с опасност за живота след удар в стълб с електрическа тротинетка
19.03.2026, 14:23
Пред очите на полицаи: Мъртвопиян катастрофира, сложи триъгълник и избяга
19.03.2026, 14:07
От българското представителство на „Мерцедес“ още на 3 февруари казали на МВР къде е кемперът на Калушев
19.03.2026, 13:15
Живеят ли заедно Натали Трифонова и Мартин Чой
19.03.2026, 12:28
Икономически ужас: Европейските цени на газа скочиха с 35%
19.03.2026, 11:42
Майката на Калушев отмени поклонението пред тялото му
19.03.2026, 11:38
Риболовният билет поскъпна двойно
19.03.2026, 11:20
Ученици от ГПЧЕ „Симеон Радев“ – Перник с престижни успехи на национално ниво
19.03.2026, 10:37
Момиче върна на пенсионер намерени 400 евро
19.03.2026, 09:48
Горивата у нас поскъпват с 3-4 на сто през седмицата!
19.03.2026, 09:43
Шефът на МВР Георги Кандев: Никой не е уволняван от разследващите по случая "Петрохан"
19.03.2026, 09:36
Син извади нож на майка си в Кладница, мъж преби жена си в Перник
19.03.2026, 09:35
Кирил Вътев: Следващата реколта ще е баснословно скъпа
19.03.2026, 09:31
Владимир Николов: Влизам за дълъг мач в политиката
19.03.2026, 09:26
Изпариха се 12 т дрога!
19.03.2026, 09:23
Миньор научи програмата си за още два двубоя, един от тях ще се излъчи по телевизията
19.03.2026, 09:20
Годеницата на Рачков стана блондинка като Игнатова и Анита
19.03.2026, 08:12
АНКЕТА