Další modely umělé inteligence Llama společnosti Meta se trénují na clusteru GPU „větší než cokoliv jiného“

Správa takové obrovské řady čipů pro vývoj Llama 4 bude pravděpodobně představovat jedinečné technické výzvy a bude vyžadovat obrovské množství energie. Vedení společnosti Meta se ve středu vyhnulo otázce analytiků ohledně omezení přístupu k energii v některých částech USA, která brzdí snahy společností vyvinout výkonnější AI.

Podle jednoho odhadu by shluk 100 000 čipů H100 vyžadoval 150 megawattů energie. Největší národní laboratorní superpočítač ve Spojených státech, El Capitan, naopak vyžaduje 30 megawattů energie. Meta očekává, že letos utratí až 40 miliard dolarů kapitálu na vybavení datových center a další infrastruktury, což je nárůst o více než 42 procent od roku 2023. Společnost očekává v příštím roce ještě prudší růst těchto výdajů.

Celkové provozní náklady Meta letos vzrostly asi o 9 procent. Ale celkové tržby – převážně z reklam – vzrostly o více než 22 procent, takže společnost má tučnější marže a větší zisky, i když nalévá miliardy dolarů do úsilí Llama.

Mezitím OpenAI, která je považována za současného lídra ve vývoji špičkové umělé inteligence, pálí peníze, přestože vývojářům účtuje přístup k jejím modelům. To, co zatím zůstává neziskovým podnikem, řeklo, že trénuje GPT-5, nástupce modelu, který v současnosti pohání ChatGPT. OpenAI řekl, že GPT-5 bude větší než jeho předchůdce, ale neřekl nic o počítačovém clusteru, který používá pro trénink. OpenAI také uvedla, že kromě rozsahu bude GPT-5 zahrnovat další inovace, včetně nedávno vyvinutého přístupu k uvažování.

Generální ředitel Sam Altman řekl, že GPT-5 bude „významným skokem vpřed“ ve srovnání s jeho předchůdcem. Minulý týden Altman reagoval na novinovou zprávu, v níž uvedl, že další hraniční model OpenAI bude vydán do prosince tím, že napsal na X, „falešné zprávy mimo kontrolu“.

V úterý generální ředitel společnosti Google Sundar Pichai uvedl, že nejnovější verze společnosti Gemini z rodiny generativních modelů umělé inteligence je ve vývoji.

Otevřený přístup Meta k AI se občas ukázal jako kontroverzní. Někteří odborníci na umělou inteligenci se obávají, že volně dostupné výrazně výkonnější modely umělé inteligence by mohly být nebezpečné, protože by to mohlo pomoci zločincům zahájit kybernetické útoky nebo automatizovat konstrukci chemických nebo biologických zbraní. Přestože je Llama před vydáním doladěna tak, aby omezovala špatné chování, je poměrně triviální tato omezení odstranit.

Zuckerberg zůstává optimistický ohledně strategie open source, i když Google a OpenAI prosazují proprietární systémy. „Zdá se mi docela jasné, že open source bude cenově nejefektivnější, přizpůsobitelná, důvěryhodná, výkonná a nejsnáze použitelná možnost, která je vývojářům k dispozici,“ řekl ve středu. „A jsem hrdý na to, že Llama v tom vede cestu.“

Zuckerberg dodal, že nové schopnosti Llama 4 by měly být schopny pohánět širší škálu funkcí napříč službami Meta. Dnes je nabídkou podpisů založených na modelech Llama chatbot podobný ChatGPT známý jako Meta AI, který je dostupný na Facebooku, Instagramu, WhatsAppu a dalších aplikacích.

Více než 500 milionů lidí měsíčně používá Meta AI, řekl Zuckerberg. V průběhu času Meta očekává, že bude generovat příjmy prostřednictvím reklam v této funkci. „Bude se rozšiřovat sada dotazů, pro které to lidé používají, a příležitosti k monetizaci budou existovat v průběhu času, jak se tam dostaneme,“ řekla finanční ředitelka Meta Susan Li ve středečním hovoru. S potenciálem příjmů z reklam by Meta mohla být schopna dotovat Llamu pro všechny ostatní.