A Microsoft OpenAI partnerség a Google irigységéből született

Kiderült, hogy a mai mesterséges intelligencia a félelemre, a féltékenységre és az intenzív kapitalista ambícióra vezethető vissza. Először az igazságügyi minisztérium Google elleni trösztellenes ügyében feltárt e-mailek említett által Érdekel a kereskedelem, a Microsoft vezetői bosszúságukat és irigységüket fejezik ki a Google mesterséges intelligencia terén elért fejlődése miatt. Ez katalizálta azt a sürgősséget, ami miatt a Windows gyártója kezdetben egymilliárd dollárt fektetett be ma már nélkülözhetetlen partnerébe, az OpenAI-ba.

A „Gondolatok az OpenAI-ról” című, erősen szerkesztett 2019-es e-mail-sorozatban Satya Nadella, a Microsoft vezérigazgatója hosszú levelet küld Kevin Scott műszaki igazgatótól Amy Hood pénzügyi igazgatónak. „Nagyon jó e-mail, amely elmagyarázza, miért akarom, hogy ezt tegyük… és azt is, miért biztosítjuk majd, hogy infrastrukturális személyzetünk ezt tegye” – írta Nadella.

Scott azt írta, hogy „mélyen aggódik” a Google gyorsan növekvő mesterséges intelligencia-képességei miatt. Azt mondja, hogy kezdetben elutasította a cég „izgalmas játékmenetét”, valószínűleg a Google AlphaGo modelljeire utalva. Egyikük 2017-ben legyőzte a világbajnok Go Ke Jiet, ami akkoriban lenyűgöző teljesítmény volt. (A későbbi Google-modellek túlmutattak ezen a modellen, és teljesen kiküszöbölték az emberi képzés szükségességét.)

De Scott szerint hiba volt figyelmen kívül hagyni a Google fejlődését a játék terén. „Amikor átvették az összes infrastruktúrát, amit építettek [natural language] „Azok a modellek, amelyeket nem tudtunk könnyen lemásolni, elkezdték komolyabban venni a dolgokat” – írta Scott. „Amikor mélyebbre ástam magam, és megpróbáltam megérteni, hol van a Google és köztünk lévő képességbeli szakadék a moduláris képzés tekintetében, nagyon-nagyon aggódtam.”

Scott elmeséli, hogy a Microsoft hogyan küzdött a Google nagy BERT-modelljének lemásolásával, az AI-modell, amely dekódolja a szavak jelentését és kontextusát egy mondatban. Scott a versenytárs infrastrukturális ugrását okolta, amit a Microsoft nem tett meg.

„Kiderült, hogy a nagy BERT-modell egyszerű lemásolása nem volt könnyű számunkra. „Bár a modell a helyén volt, körülbelül 6 hónapig tartott a modell betanítása, mert az infrastruktúránk nem volt megfelelő a feladathoz” – mondta a Microsoft műszaki igazgatója. írta: „A Google előtt legalább hat hónapig rendelkezett a BERT-tel, tehát az idő alatt, amíg összetörtük a 340 milliós paraméterű modell kiképzésének képességét, egy év állt rendelkezésükre, hogy kitalálják, hogyan vigyék be a termelésbe, és haladjanak tovább. szélesebb, érdekesebb modellekre.

Csodálatát és irigységét is kifejezte a Google Gmail automatikus kiegészítési képességei iránt, mondván, ezek „ijesztően jók lettek”. Megjegyezte, hogy a Microsoft „több évvel lemaradt a versenytársakhoz képest… [machine learning] Kötet.” Megjegyezte az OpenAI, a DeepMind és a Google Brain „érdekes” növekedését.

Scott dicsérte a Microsoft „nagyon okos” embereit a gépi tanulási csapatokban, de azt mondta, hogy ambícióikat megfékezték. „De a mélytanulási alapcsoportok mindegyik nagy csapaton belül nagyon kicsik, és az ambícióik is korlátozottak, ami azt jelenti, hogy még akkor is, ha elkezdjük táplálni őket erőforrásokkal, akkor is át kell menniük egy tanulási folyamaton a munka méretezéséhez.” Scott írta. „És több évvel le vagyunk maradva a versenytársakhoz képest a gépi tanulási skálát illetően.”

Miután Hood sürgette, hogy Scott aggályai a következők voltak: „miért akarom, hogy ezt tegyük”, nevezetesen az OpenAI-ba való befektetés, a vállalat teljesítette vezérigazgatója kívánságát. A Microsoft 1 milliárd dollárt fektetett be a Sam Altman vezette startupba 2019-ben, a többi pedig gyorsan változó történelem. (Most 13 milliárd dollárt fektetett be.) Ez egy olyan technológia, amely hihetetlen dolgokat művel, de a munkaerőpiac tönkretételével fenyeget, és a prédikátoroknak az eddigi leghatékonyabb eszközt nyújtja a már burjánzó félretájékoztatás korszakában.