Společnost Imbue získala 200 milionů dolarů na vytvoření modelů umělé inteligence

Mezi účastníky jsou mimo jiné Astera Institute, Nvidia, generální ředitel Cruise Kyle Vogt a spoluzakladatel Notion Simon Last.

Je jen o něco málo za AI21 Labs (283 milionů dolarů), firmou se sídlem v Tel Avivu, která vyvíjí řadu nástrojů pro generování textu pomocí AI, a také za dodavateli generativní AI, jako jsou Cohere (445 milionů dolarů) a Adept (415 milionů dolarů).

„Toto nejnovější financování urychlí náš vývoj systémů umělé inteligence, které umí uvažovat a kódovat, takže nám mohou pomoci dosáhnout větších cílů ve světě,“ napsal Imbue v příspěvku na blogu zveřejněném dnes ráno. „Náš cíl zůstává stejný: vytvořit praktické agenty AI, kteří mohou dosáhnout větších cílů a bezpečně pro nás pracovat v reálném světě.“

Společnost Imbue zahájila svou činnost v říjnu loňského roku s ambiciózním cílem: zkoumat základy lidské inteligence, které strojům v současné době chybí. Její plán, jak byl tehdy představen, spočíval v tom, že se „základy“ promění v řadu úloh, které je třeba vyřešit, a že se navrhnou různé modely umělé inteligence a otestuje se jejich schopnost naučit se tyto úlohy řešit v komplexních 3D světech, které tým Imbue vybudoval.

Zdá se, že od té doby se přístup společnosti poněkud změnil. Imbue říká, že spíše než na 3D světy se zaměřuje na vývoj modelů, které považuje za „interně užitečné“, včetně modelů, které umí kódovat (à la GitHub Copilot a Amazon CodeWhisperer).

Spousta modelů umí kódovat. Ty od Imbue se však odlišují schopností „robustního uvažování“, jak tvrdí společnost.

„Domníváme se, že hlavní překážkou efektivních agentů umělé inteligence je uvažování,“ napsal Imbue v příspěvku na blogu. „Robustní uvažování je nezbytné pro efektivní jednání. Zahrnuje schopnost vypořádat se s nejistotou, vědět, kdy změnit svůj přístup, klást otázky a shromažďovat nové informace, přehrávat scénáře a činit rozhodnutí, vytvářet a zavrhovat hypotézy a obecně se vypořádat s komplikovanou, těžko předvídatelnou povahou reálného světa.“

Společnost Imbue také věří, že kód je důležitým případem použití, který jejímu týmu umožňuje vytvářet aplikace s umělou inteligencí ve velkém měřítku. V příspěvku na blogu společnost uvádí, že kód může zlepšit uvažování a je jedním z efektivnějších způsobů, jak mohou modely provádět akce na stroji.

„Agent, který napíše dotaz SQL, aby vytáhl informace z tabulky, má mnohem větší šanci uspokojit požadavek uživatele než agent, který se snaží sestavit stejné informace bez použití kódu,“ napsala společnost. „Trénink na kódu navíc pomáhá modelům naučit se lépe uvažovat; zdá se, že trénink bez kódu vede k modelům, které uvažují špatně.“

Je to filozofie, která se neliší od filozofie společnosti Adept, jejímž cílem je vytvořit umělou inteligenci, která dokáže automatizovat jakýkoli softwarový proces. Společnost Google DeepMind také zkoumala přístupy, jak naučit umělou inteligenci ovládat počítače, jako například nechat umělou inteligenci sledovat příkazy klávesnice a myši od lidí, kteří plní počítačové úkoly „podle instrukcí“, jako je rezervace letu.

Společnost Imbue říká, že její modely jsou „šité na míru“ pro uvažování v tom smyslu, že jsou trénovány na datech, aby „posílily dobré vzorce uvažování“, a používají techniky, které „během inference spotřebují mnohem více výpočetního času“, aby dospěly k „robustním závěrům a opatřením“.

Společnost Imbue konkrétně trénuje „velmi velké“ modely – modely s více než 100 miliardami parametrů – optimalizované tak, aby dosahovaly dobrých výsledků v interních referenčních testech pro uvažování. („Parametry“ jsou části modelu naučené z trénovacích dat a v podstatě definují dovednosti modelu při řešení problému, jako je generování textu nebo kódu). Tento trénink probíhá na výpočetním klastru, na jehož návrhu se podílela společnost Nvidia a který obsahuje 10 000 grafických procesorů Nvidia řady H100.

Společnost Imbue také investuje do budování vlastních nástrojů pro umělou inteligenci a strojové učení, jako jsou prototypy AI pro ladění a vizuální rozhraní nad modely AI. A provádí výzkum zaměřený na pochopení procesu učení ve velkých jazykových modelech.

Společnost Imbue nemá v úmyslu produkovat mnoho z toho, na čem v současné době pracuje. Tyto nástroje a modely považuje spíše za způsob, jak zlepšit budoucí, univerzálnější umělou inteligenci a vytvořit základy platformy, kterou budou moci lidé používat k vytváření vlastních modelů.

„Když vytváříme agenty umělé inteligence, vytváříme vlastně počítače, které dokáží pochopit naše cíle, proaktivně komunikovat a pracovat pro nás na pozadí,“ pokračoval Imbue v příspěvku na blogu. „Nakonec doufáme, že vydáme systémy, které umožní komukoli vytvořit robustní, vlastní agenty AI, díky nimž bude mít každý na dosah ruky produktivní sílu AI… Toto nejnovější financování urychlí náš vývoj systémů AI, které umí uvažovat a kódovat, takže nám mohou pomoci dosáhnout větších cílů ve světě.“