Бутерін закликає Info Finance зупинити експлойти в AI-у правлінні
- Віталік попереджає, що наївне управління AI вразливе до маніпуляцій і експлойтів.
- Info finance створює різноманітність моделей і швидкі корекції, роблячи управління AI безпечнішим.
- Ринки прогнозів і вибіркові перевірки допомагають забезпечити безпеку прийняття рішень і фінансування AI.
Співзасновник Ethereum Віталік Бутерін попередив, що наївні моделі управління AI становлять серйозні ризики, і застеріг, що структури, які покладаються на AI для фінансування чи прийняття рішень, залишаються вразливими до маніпуляцій і експлойтів. На його думку, такі системи дозволяють зловмисникам відволікати ресурси, однак він виступає за підхід під назвою “info finance”, розроблений для створення підзвітності й запобігання зловживанням через ринки, людський нагляд і перевірки.
Аргументи проти наївного управління AI
Бутерін підкреслив, що наївне управління AI є ризикованим, і додав, що якщо AI використовується для розподілу коштів, люди можуть маніпулювати ним за допомогою власних підказок і отримувати надмірні гроші. Він також пояснив, що якщо моделі працюють без будь-яких обмежень чи інструкцій, ними можуть зловживати, заохочуючи хакерів використовувати підказки й обманювати AI, щоб отримати неправильні ресурси.
Такі вразливості ставлять AI у потенційно небезпечну пастку. Далі Бутерін виявив системні слабкості, які, якщо їх не контролювати, можуть бути використані. Невидимі атаки, prompt injections — це приклади того, як зловмисники можуть легко скористатися ситуацією.
Info Finance як альтернатива
Бутерін обирає інформаційні фінанси замість наївного управління, описуючи це як підхід “institution design”, що поєднує відкриту ринкову конкуренцію з людською перевіркою. Він сказав:
Як альтернативу, я підтримую підхід info finance, де існує відкритий ринок, на якому кожен може запропонувати свої моделі, які підлягають механізму вибіркової перевірки, що може бути ініційований будь-ким і оцінений людським журі.
Він окреслив, що Info Finance дозволяє зовнішнім учасникам інтегрувати великі мовні моделі (LLMs) без жорсткого кодування однієї системи. Це забезпечить різноманітність моделей, зменшуючи ймовірність масових збоїв. Також це створює стимули для розробників і спекулянтів уважно стежити за недоліками й швидко реагувати на проблеми.
Один із запропонованих механізмів передбачає ринки прогнозів або ринки рішень. Кілька моделей змагатимуться, а учасники зможуть робити ставки на результати, сигналізуючи, які моделі здаються найбільш надійними. Людські журі або аудитори періодично проводитимуть вибіркові перевірки результатів, особливо у випадках із високими ставками.
Дивіться також: ETH Treasuries зросли до $12B, поки Віталік попереджає про ризики левериджу
Наслідки для криптовалют і ринків
Info finance спирається на багаторівневу підзвітність, і це помітно у відкритій конкуренції, яка дозволяє оскаржувати або замінювати помилкові моделі. Людський нагляд додається через журі та аудити. Економічні стимули не дозволяють маніпуляціям, а прозорість робить зловмисну поведінку видимою.
Пов’язуючи управління AI з блокчейном і торгівлею, Бутерін припускає, що недоліки централізованого AI можуть підвищити інтерес до децентралізованих рішень, здебільшого побудованих на Ethereum. Крім того, токени, такі як RNDR від Render Network і GRT від The Graph, забезпечують інфраструктуру для AI-обчислень, отримуючи вигоди від розвитку. Далі, трейдери також можуть використовувати ETH і ці токени для арбітражу на тлі волатильності ринку.
Ончейн-дані свідчать, що кількість транзакцій ETH, пов’язаних із AI-смарт-контрактами, зростає, а питання управління AI можуть впливати й на технологічні акції, зокрема такі компанії, як NVIDIA і Microsoft, які інвестують в AI. Загалом Бутерін зазначив, що Info Finance дозволяє швидше виправляти помилки, замінюючи несправні моделі й караючи порушників. Він також додав, що перевірки журі та вибіркові перевірки запобігатимуть поширенню експлойтів.
Публікація Buterin Pushes Info Finance to Stop Exploits in AI Governance вперше з’явилася на Cryptotale.
Відмова від відповідальності: зміст цієї статті відображає виключно думку автора і не представляє платформу в будь-якій якості. Ця стаття не повинна бути орієнтиром під час прийняття інвестиційних рішень.
Вас також може зацікавити
Керівник хедж-фонду Goldman Sachs: "Опціони з нульовим терміном" стримують волатильність американських акцій, технології та енергетика залишаються найкращим вибором
Індекс S&P 500 вже 27 торгових днів поспіль коливається менше ніж на 1% протягом дня, встановивши найдовший період низької волатильності з часів пандемії. Goldman Sachs попереджає, що ця "тиша" є результатом того, що стратегії опціонів з нульовим терміном погашення штучно блокують ринок, і щойно з'явиться каталізатор, накопичена енергія волатильності може різко звільнитися. Тим часом очікування підвищення ставок у вересні посилюються, настрої на ринку досягають найнижчого рівня цього року, а ризики фіскальної сталості залишаються високими – як довго ще буде "закипати" ця вода?
Нова хвиля розпродажу наближається? Конкурент AI-бичачого ринку нарешті з'явився — “глобальний якір оцінки активів” перевищив надзвичайний поріг у 5%
Після того, як дохідність 10-річних державних облігацій США знову перевищ ила важливий рівень у 5%, імовірніше настане період високої волатильності та прискореної диверсифікації динаміки активів. Особливо це стосується ситуації, коли енергетичний шок та великі бюджетні дефіцити США ще не послабились суттєво, тому наразі бракує умов для швидкого повторення різкого зниження дохідності, як наприкінці 2023 року.
Anthropic знову опублікував статтю: Якою буде економіка в епоху AI?
Економічна команда Anthropic опублікувала модель економічного сценарію для AI, яка базується на трьох сюжетах: помірне поступове зростання, значна трансформація з подвоєнням ВВП та екстремальний сценарій з щорічним зростанням на 15%, але масовим безробіттям серед працівників знань. Модель розглядає роботу як "пакети завдань", аналізуючи вплив AI на підсилення чи заміну різних типів завдань. Anthropic підкреслює, що економічна картина 2030 року не є визначеною, і головне — як забезпечити широке розповсюдження AI-бонусу.
"Нова комунікаційна агенція Федерального резерву США": Вош підвищує ставки "без виходу", Трамп "довіряє" стоїть перед випробуванням
Нік Тіміраос вважає, що після несподівано високого серпневого CPI ймовірність підвищення ставки Федеральною резервною системою цього тижня різко зросла, а жорстка позиція Волша щодо інфляції залишає йому майже «немає шляхів відступу». Підвищення ставки за сім тижнів до виборів стане прямим тестом того, як довго Трамп зберігатиме «довіру» до Волша. Раніше Волш підтримував баланс між Білим домом і Федеральною резервною системою за допомогою тактики «менше говорити, уникати провокацій», але після цієї зустрічі мовчання перестане бути його щитом.
Ціни на криптовалюти
Більше
