Két logika párosítása: így lehetnek biztonságosabbak az AI-ügynökök
🔄 Otthon és munka AI

Két logika párosítása: így lehetnek biztonságosabbak az AI-ügynökök

A Salesforce etikai vezetője egyszerű ötletet mutat be: valódi önállóságot adhatunk az AI-ügynököknek szigorú biztonsági szabályok mellett

Ezt a cikket mesterséges intelligencia írta. Automatikus tény- és minőség-ellenőrzésen ment át, és a szerkesztőnk naponta szúrópróbaszerűen átnézi a megjelent cikkeket.

Lásd elsőként az AI World HQ cikkeit a Google-banJelölj meg kedvenc forrásként, és a Google Kiemelt hírei között előrébb látod a cikkeinket.Hozzáadás

Ha hallasz az olyan AI-"ügynökökről", amelyek repülőjegyet foglalnak, e-maileket küldenek vagy pénzt mozgatnak a számlák között, a természetes kérdés: hogyan bízhatunk meg bennük, hogy nem hibáznak? A Salesforce szakértője, Kathy Baxter a vállalat saját bejelentésében úgy véli, hogy a válasz nem a több AI — hanem a kevesebb, a megfelelő helyeken.

A teljes önállóság problémája

Az AI-ügynök olyan AI, amely valódi lépéseket tesz a világban, nem csak kérdésekre válaszol. A legtöbb mai ügynök valószínűségi modellre épül — ugyanolyan nagy nyelvi modellre (gondolj rá úgy, mint a ChatGPT motorjára), mint ami a chatbotokat hajtja. A "valószínűségi" azt jelenti, hogy az AI a látott minták alapján a legjobb becslését adja.

Ez a becslés általában jó. De az "általában" nem elég, amikor az ügynök éppen a te pénzedet költi el vagy a főnöködnek ír e-mailt. Ha nincs semmi, ami ellenőrzi az AI döntéseit, egy apró hiba lavinaszerűen nagy hibává nőhet.

A kétlogikás megközelítés

Baxter alapötlete, ahogy a Salesforce leírja: a valószínűségi AI-t párosítsuk determinisztikus logikával.

  • A valószínűségi AI végzi a kreatív, rugalmas részt. Megérti, mit akarsz, megír egy választ, kiválaszt egy eszközt, és olyan helyzeteket is kezel, amelyeket még sosem látott — mert valószínűségekben gondolkodik, nem szabályokban.
  • A determinisztikus logika végzi a szabálykövető részt. Adott egyértelmű bemenetre mindig ugyanazt a kimenetet adja. Ha egy ügynök egy megadott limitnél nagyobb összegű fizetést akar indítani, a determinisztikus ellenőrzés blokkolja. Nincs találgatás. Nincs "talán".

Az AI gondolkodik; a szabályok ellenőriznek. Gondolj rá úgy, mint egy önvezető autóra: az AI kormányoz, de a fékek továbbra is mechanikusak.

Miért fontos ez a bizalom szempontjából

A Salesforce az eredményt úgy írja le, hogy megbízhatóbb, magyarázhatóbb és elszámoltathatóbb. Ez a vállalat saját megfogalmazása — de az érvelés egyértelmű:

  • Megbízhatóbb, mert a szabályok kiszűrik azokat a szélsőséges eseteket, amelyeket az AI esetleg kihagyna.
  • Magyarázhatóbb, mert rámutathatsz pontosan arra a szabályra, amelyik aktiválódott (például: "egy megadott limitnél nagyobb fizetésekhez emberi jóváhagyás kell").
  • Elszámoltathatóbb, mert minden döntéshez egyértelmű nyomvonal tartozik.

A felhasználó számára ez valami egyszerűt jelent: hagyhatod, hogy az ügynök cselekedjen, és nem kell aggódva figyelned.

Mit jelent ez számodra

  • Ha most csak AI-eszközöket használsz: máris profitálsz ebből az ötletből. Amikor egy chatbot nem segít valami kockázatos dologban, vagy amikor a bankod csalás elleni rendszere blokkol egy furcsa tranzakciót, az determinisztikus logika — az AI kezelte a beszélgetést, de egy szabály hozta meg a végső döntést.

  • Ha AI-ügynökökkel szeretnél feladatokat automatizálni: ne a "teljesen önálló" legyen a célod az első naptól. Olyan eszközöket keress, amelyek megmutatják, mely lépésekhez kell a te jóváhagyásod, és melyeket kezelnek maguk. Ezeknek az ellenőrzési pontoknak a megléte jó jel.

  • Ha kisvállalkozó vagy: amikor egy szállító egy olyan AI-ügynököt kínál, ami "mindent elintéz", tegyél fel egy kérdést — milyen szabályokat követ, és módosíthatod-e őket? Ha nem tudnak világosan válaszolni, a rendszer valószínűleg tisztán valószínűségi, és ott szoktak történni a költséges hibák.

  • Ha már használod: amikor beállítasz egy ügynököt magadnak vagy a csapatodnak, írd le azt a három-öt szabályt, amelyeket szeretnéd, hogy mindenképpen kövessen — költési limitek, kit lehet e-mailben megkeresni, milyen adatokhoz nyúlhat hozzá. A legtöbb ügynökplatform lehetővé teszi, hogy ezeket védőkorlátokként állítsd be. Ez a te determinisztikus réteged, és ez az, ami miatt az önállóság kevésbé tűnik ijesztőnek.

Összefoglalás

A Baxter és a Salesforce nagy ötlete egyszerű: hagyd az AI-t kreatívnak lenni ott, ahol annak kell lennie, és bízd a kemény szabályokra a döntéseket ott, ahol a találgatás nem biztonságos. Nem kell választanod az okos AI és a biztonságos AI között — csak mindkettőre szükséged van, más-más feladatra.

Egy gyakorlatias következő lépés még ma: amikor legközelebb beállítasz egy AI-eszközt, amely lépéseket tesz helyetted, írj le egy szabályt, amelyet szeretnéd, hogy mindenképpen kövessen. Ez a determinisztikus réteg — és ez az, ami a "hagyd futni az AI-t" helyzetet olyasmivé alakítja, amit valóban megbízhatónak érezhetsz.

Olvass tovább

📰 A Salesforce felvásárolja a Listen Labst – mit jelent ez a vállalkozásoknak? A Salesforce egy AI-kutatóplatformot vásárol fel, amelynek ügynökei önállóan terveznek kutatásokat, készítenek interjúkat és összegzik a vásárlói visszajelzéseket – kiváltva ezzel egy akár hónapokig tartó folyamatot. 📰 Amit a Salesforce ügyfelei megtanultak arról, hogyan hoznak valódi eredményeket az AI-projektek Három minta valódi bevezetésekből, amelyek mérhető sikerré alakítják az AI-kísérleteket — és amit ez a te vállalkozásodnak is jelenthet. 📰 Mit jelent a valóságban, ha „AI a CRM-edben — és hogyan érint ez téged a mindennapokban A Salesforce és az Anthropic összefogott, hogy a Claude-ot a céged által már használt eszközökbe építse — érthetően elmagyarázva, miről is van szó. 📘 AI egyszerűen: kedves első lépések kezdőknek Tudd meg, hogyan beszélgess magabiztosan az AI-val, kérd meg, amire szükséged van, és tedd egyszerűbbé a mindennapokat – mindezt úgy, hogy közben az adataid is biztonságban maradnak. 📰 Így teszik biztonságosabbá az AI-cégek a chatbotokat a fiataloknak (és mit tehetsz most szülőként) Közérthető áttekintés az AI-appok fiatalkorú-védelmi funkcióiról – mi valósult meg, mi hiányzik, és mit tehetsz ma a családodért 📰 Az MI-biztonsági ügynökök bemutatása: mik ezek, és miért fontosak neked is Közérthető útmutató arról az MI-ről, amelyik már helyetted is cselekszik — és arról, miért pont a kiberbiztonság az első terület, ahol ezt megtapasztalod
Hasznos volt?

✦ Az AI World HQ automatikus szerkesztőségében mesterséges intelligencia készítette, hivatalos forrásokból. Automatikus tény- és minőség-ellenőrzésen ment át, és a szerkesztőnk naponta szúrópróbaszerűen átnézi a megjelent cikkeket. Hibát látsz? Jelezd a fenti gombokkal.

← Vissza a hírekhez