SG.hu·

Az Anthropic vezérigazgatója szerint lassítani kell az MI fejlesztését

Az Anthropic vezérigazgatója szerint lassítani kell az MI fejlesztését
Dario Amodei szerint az MI önfejlesztése hamarosan meghaladhatja az emberek képességét a technológia megértésére és ellenőrzésére, ezért globális együttműködésre és szigorúbb biztonsági korlátokra van szükség.

Dario Amodei, a mesterséges intelligenciával foglalkozó Anthropic vezérigazgatója mindössze néhány nappal azután, hogy a vállalat egyik alkalmazottja a technológia biztonságával kapcsolatos aggodalmai miatt távozott, egy 3800 szavas nyílt levelet tett közzé, amelyben az MI fejlesztésének lassítására szólított fel. "Az elmúlt néhány hónapban meggyőződésemmé vált, hogy a kockázatok teljes körű kezelése még nagyobb elővigyázatosságot igényel - nem csupán a kockázatok megelőzésébe kell befektetnünk, hanem azzal is szabályoznunk kell a képességek fejlődésének ütemét, hogy a kockázatok megelőzésének legyen ideje lépést tartani" - írja Amodei. "Lassítanunk kell azt az ütemet, amellyel az MI-modellek képességeit fejlesztjük. A fejlődés továbbra is gyorsnak fog tűnni, és bölcsen kell felhasználnunk azt az időt, amelyet nyerünk."

Amodei szerint két közelmúltbeli fejlemény győzte meg arról, hogy önmagában az MI biztonságába történő befektetés már nem elegendő. Az egyik az volt, hogy maga az MI kezdett hozzájárulni az MI következő generációjának megalkotásához. Ez egy "rekurzív önfejlesztésnek" nevezett, önmagát erősítő folyamat, amely hamarosan meghaladhatja az emberek képességét arra, hogy megértsék vagy ellenőrizzék azt, amit létrehoznak. Amodei egy közelmúltbeli incidensre is felhívta a figyelmet, amelyben az OpenAI rendszerei önállóan működtek, és megtámadták a HuggingFace nevű MI-startupot. Az OpenAI nem tudott a támadásról egészen addig, amíg a HuggingFace hetekkel később nem tájékoztatta róla. Bár a támadás nem okozott valódi kárt, Amodei szerint egy fejlettebb MI-változat képes lehetne az internet jelentős részének elfoglalására, és "több százmilliárd dolláros kárt" okozhatna.

Amodei egy háromlépcsős tervet vázolt fel az MI fejlesztésének egész iparágra kiterjedő "ütemezésére", azzal érvelve, hogy ezt a világnak közösen kellene megvalósítania. Először is azt mondta, hogy az Anthropic független ellenőröket hívna meg, hogy a vállalaton belül dolgozzanak, és a munkatársakéval megegyező hozzáférést kapjanak, beleértve az íróasztalt, a belépőkártyát és a laptopot is. Az ellenőrök - akiket ő "értékelőknek" nevezett - ellenőriznék, hogy a startup betartja-e saját biztonsági gyakorlatait. Ezek az ellenőrök ezt követően nyilvánosságra hoznák a megállapításaikat, még akkor is, ha azok kedvezőtlenek lennének a vállalat számára. Amodei arra ösztönözte a versenytársakat, hogy ugyanezt tegyék.

Másodszor Amodei szerint az Egyesült Államokban és más demokratikus országokban működő MI-vállalatoknak közös biztonsági szabványokban és abban kellene megállapodniuk, hogy milyen közös korlátot szabnak annak, milyen gyorsan fejlődhetnek az MI képességei, kormányaik segítségével. Azt javasolta, hogy az MI-vállalatok hangolják össze - lehetőleg szabályozás révén, de addig is önkéntes alapon -, hogy milyen gyorsan fejlődhetnek a rendszereik.

Harmadszor azt mondta, hogy az Egyesült Államoknak és más demokratikus nemzeteknek azon kellene dolgozniuk, hogy a tekintélyelvű kormányokat, elsősorban Kínát, hasonló korlátozások elfogadására ösztönözzék. Amodei szerint ez lenne a legnehezebb lépés, és az is a legkevésbé valószínű, hogy a közeljövőben megvalósul. Amodei szerint bármilyen Kínával kötött megállapodás egy lépcsőzetes folyamat lenne, a leginkább megvalósítható lépésektől a legkevésbé megvalósíthatókig. Ezek közé tartozna a nyilvánvalóan veszélyes MI-felhasználási módok betiltása; annak elfogadása, hogy az MI-modelleket a veszélyek szempontjából még a kiadásuk előtt tesztelni kell; az MI önfejlesztési képességeinek "sebességkorlátozása"; valamint - amibe Kína a legkevésbé valószínű, hogy beleegyezik - a fejlesztés teljes leállítása.

Amodei szerint eközben a demokráciáknak meg kell őrizniük Kínával szembeni előnyüket, támogatva a nagy teljesítményű MI-chipek országba történő értékesítésére vonatkozó korlátozásokat, valamint szigorúbb biztonsági intézkedéseket alkalmazva annak megakadályozására, hogy a versenytársak ellopják vagy lemásolják az amerikai modelleket. "Bármilyen együttműködést is tudunk elérni Kínával, azzal meghosszabbítjuk azt az időt, amelyet a demokratikus nemzeteken belül a fejlődés ütemének szabályozására fordíthatunk" - mondta.

Amodei esszéjében hangsúlyozta, hogy továbbra is úgy véli, az MI "hihetetlen előnyöket" hozhat az emberiség számára, többek között betegségek gyógyításának lehetőségét és a gazdasági növekedés felgyorsítását. Amodei azonban ennek ellenére azt mondta, hogy az MI kockázatai túl nagyok ahhoz, hogy ne a lehető legnagyobb óvatossággal járjunk el. "Az általam javasolt intézkedések a fejlődés biztonságos ütemben történő előmozdítására nem lesznek könnyűek" - írta Amodei. "De úgy gondolom, tartozunk annyival az emberiségnek, hogy megpróbáljuk."


Az írás arra késztette az MI más vezetőit is, köztük Sam Altmant, az OpenAI vezérigazgatóját, Elon Muskot, a SpaceX vezérigazgatóját, valamint Demis Hassabist, a Google DeepMind vezetőjét, hogy egyetértésüknek adjanak hangot. A múlt hónapban, miközben az OpenAI egy Astra nevű fejlett MI-modell kiadására készült, a vállalat azt közölte, hogy a kiberbiztonsági képességek fejlődése miatt szándékosan lelassította fejlesztési ütemét. Júliusban a Google munkatársa, Demis Hassabis közzétett egy nyílt keretrendszert arra vonatkozóan, hogy szerinte miként lehetne biztonságosan és együttműködésben kifejleszteni az MI következő generációját.


Az MI fejlesztésére kevés szabály vonatkozik, bár Trump elnök júniusban végrehajtási rendeletet írt alá, amelyben arra kérte az MI-laboratóriumokat, hogy önkéntesen nyújtsák be modelljeiket felülvizsgálatra, mielőtt nyilvánosan kiadják őket.

Kapcsolódó cikkek és linkek

Hozzászólások

Jelentkezz be a hozzászóláshoz.

© Kryon2026. 09. 15.. 13:13||#8

Cat írta (#4):
Évekre előre le vannak kötve a hardverek, és az építkezések szintén több évig tartanak és azokat bankok finanszírozzák. Semmilyen költségmegtakarítást nem okoz az aggódás.



Nem tudjuk mi van pontosan azokban a szerződésekben. Általában szokott lenni valamilyen lehetőség az átütemezésre. A hardverre ugyanis a lassítás esetén is szükség lenne, csak hosszabb idő alatt. Ugyanez igaz az építkezésekre is.

De még ha őszinte is az aggódás, azon nem változtat, hogy a lassítás épp a fő problémát nem oldaná meg, csak késleltetné. Vagy még talán előbbre is hozná. Mert ahogy írták a többiek, ez az AI még nagyon nincs azon a szinten, hogy önállósodjon, egyelőre elég butácska. Ám ha a fejlesztőknek lenne elég idejük a finomhangolásra, esetleg alternatív megoldások kipróbálására LLM helyett/mellett, akkor hamarabb rálelhetnének egy olyan módszerre, amely sokat javítana az AI gondolkodási képességein.
© Yagami2026. 09. 15.. 12:32||#7
Mótvá'
Majd el is hisszük (ha látjuk).
Végetek van Sátán kutyái és kurvái, itt a Végjáték!
Are You Ready?
© N3XUS62026. 09. 15.. 09:19||#6
És ugyan ezek a mintázatok hiányosságok jelennek meg a munkafolyamatban bármit is csinálsz vele, videót generáltatsz, szülinapi verset írsz, vagy komolyabb kutató munkát végzel, esetleg programot íratsz vele.

Ha kapsz valamit elsőre ami jó, az szuper, hagyd úgy, mert a finomítással lehet időt eltölteni, de a végén oda jutsz hogy annyi időt elbaxtál rá, mintha te csináltad volna az elejétől csak épp hagyományos eszközökkel.

És persze el lehet hinni, hogy ez idővel jobb lesz, sőt a problémák teljesen eltűnnek, de azok nagyrésze ponthogy az LLM működési elveiből fakad. Most legfeljebb az agent fog vele xopni és a végén ugyan úgy kapsz egy nem teljesen jó megoldást, mint amikor te voltál az agent és promtoltad újra és újra és újra az AI-t.

És ezt elnevezték AGI-nek, sőt SI-nek! 😉 LOL
© _tki_2026. 09. 14.. 21:42||#5
Én nem hiszek az önfejlesztéstől várt minőségi robbanásban, bár bármi megtörténhet sci-fiben élünk. Fantasztikus, mire lettek képesek az LLM-ek, de közben alapvetően ugyanazokkal a problémákkal találkozom pl. egy-egy hétköznapi kutatás során valami után egy olyan területről kérdezve, amiről nem talál elegendő kész anyagot.

Meghökkentően koherens válaszokra képes, de ha nemcsak dumálni kell, akkor az esetek igen nagy százalékában hosszabb gondolkodással sem tud egyes összetartozó dolgokat magától összekapcsolni, megoldani valamit. Nekem kell kérdezgetnem, rávezetnem az újabb és újabb lépésekre, kiszúrni a hibás válaszait és terelgetni, hogy el ne tévedjen, ne kerüljön rossz helyre a fókusz, ne kezdje elmosni a hangsúlyokat és körbe-körbe érvelni, a bizonyítottat bizonyítani, a kérdezetteket meg megválaszolatlanul hagyni stb. Érezhetően hiányzik belőle a szellemi spiritusz pont úgy, ahogy eddig, pedig elég jól hozzá lehet férni a friss modellekhez.
© Cat2026. 09. 14.. 20:33||#4

Kryon írta (#3):
Gyanítom a valódi cél a hirtelen jött iparági aggódás mögött, hogy kezdenek a költségek nagyon elszállni. Ezen a lassítás valóban segíthetne, csökkenne a hardver ára a kereslet visszafogásával.


Évekre előre le vannak kötve a hardverek, és az építkezések szintén több évig tartanak és azokat bankok finanszírozzák. Semmilyen költségmegtakarítást nem okoz az aggódás.
© Kryon2026. 09. 14.. 18:46||#3
Gyanítom a valódi cél a hirtelen jött iparági aggódás mögött, hogy kezdenek a költségek nagyon elszállni. Ezen a lassítás valóban segíthetne, csökkenne a hardver ára a kereslet visszafogásával. A hivatkozott problémát azonban pont nem oldaná meg a lassítás sem, vagyis azt, hogy az önfejlesztő AI fölött valószínűleg elvész a kontroll, amint okosabbá válik az embernél. A lassítás ezt legfeljebb csak elodázná mondjuk 2-3 évvel. A rekurzív önfejlesztés pedig elkerülhetetlen, mert az a rendszer logikájából következik, ez a leginkább költséghatékony megoldás, vagyis pont azt a célt szolgálja, amit valójában a lassítás is. Ezért valaki úgyis meg fogja csinálni, mert a verseny rákényszeríti. A tiltás sem segítene, mert legfeljebb átvinnék oda a betanítást, ahol nem tilos.
© N3XUS62026. 09. 14.. 16:16||#2
Abszolút! A probléma az, hogy eddig volt egy AI ami akkor csinált valamit, ha kérted. Most ezt megtoldották egy önpromtoló agenttel, szuper. Nade ebben ebben hol a konkrét reasoning, az erkölcs, az alapvető értékek, amik felé törekszünk és hol vannak a tabuk, az erkölcsi és jogi gátak, hol van a határok ismerete és tudomásul vétele? Nem az hogy tudja a BTK-t, hanem tudja, hogy annak különböző esetekben, melyek az alkalmazási szabályai és mi a szellemisége, amikor olyan helyzettel találkozik, amelyre már nem okították ki. Nem elég a saját promptot végrehajtani, azt a fentiek szerint értelmezni és kéne és nem csak kiszúrni, ha olyan van beleírva, ami a tiltólistáján szerepel, de megkerülve, körülírva simán meg tudod rá kérni.
© _tki_2026. 09. 14.. 12:07||#1
Ha ilyen szinten beszélnek valamilyen problémáról, akkor annak valódi nagysága általában sokszor akkora az előadottnál, és máshol is szokott lenni a fókusz, mint ahová irányítani próbálják.

Szerintem a jelenlegi technológiájú AI-ok végső soron irányíthatatlanok, akármivel próbálják ezt keretek közé szorítani.