Vývojáři říkají, že GPT-5 je smíšená taška

Někteří vývojáři tvrdí, že dosud měli do značné míry pozitivní zkušenosti s GPT-5. Jenny Wang, inženýr, investor a tvůrce osobního stylingového agenta Alta, řekla Wired, že model se zdá být lepší při plnění komplexních úkolů kódování v jednom výstřelu než jiné modely. Srovnala to s OpenAI O3 a 4o, které často používá pro generování kódu a přímým opravám „jako formátování, nebo pokud chci vytvořit koncový bod API podobný tomu, co již mám,“ říká Wang.

Ve svých testech GPT-5 Wang říká, že požádala model, aby vygeneroval kód pro tiskovou stránku pro webové stránky své společnosti, včetně konkrétních designových prvků, které by odpovídaly zbytku estetiky webu. GPT-5 dokončila úkol v jednom, zatímco v minulosti by Wang musel během procesu revidovat své výzvy. Byla však jedna významná chyba: „Halucinovala to halucinované adresy URL,“ říká Wang.

Další vývojář, který hovořil o stavu anonymity, protože jejich zaměstnavatel je nepovolil, aby hovořili s tiskem, říká GPT-5 při řešení hlubokých technických problémů.

Současný projekt vývojáře je psaní programového nástroje pro analýzu sítě, který by pro účely zabezpečení vyžadoval izolaci kódu. „V podstatě jsem představil svůj projekt a některé cesty, které jsem zvažoval, a GPT-5 to všechno vzal a vrátil několik doporučení spolu s realistickou časovou osou,“ vysvětluje vývojář. „Jsem ohromen.“

Hrstka podnikových partnerů a zákazníků OpenAI, včetně kurzoru, windsurf a představy, veřejně zaručila pro dovednosti kódování a uvažování GPT-5. (OpenAI zahrnoval mnoho z těchto poznámek do svého vlastního blogového příspěvku oznamující nový model). Představa také sdílela na X, že je to „rychlá, důkladná a zpracovává komplexní práci o 15 procent lepší než jiné modely, které jsme testovali.“

Ale během několika dnů od vydání GPT-5 někteří vývojáři vážili online se stížnostmi. Mnoho z nich uvedlo, že kódovací schopnosti GPT-5 se zdály být za křivkou pro to, co mělo být nejmodernějším, ultra schopným modelem od nejzadnější společnosti na světě.

„Openai’s GPT-5 je velmi dobrý, ale zdá se, že by to bylo vydáno před rokem,“ říká Kieran Klassen, vývojář, který staví asistenta AI pro e-mailové doručené poště. „Jeho schopnosti kódování mi připomínají sonet 3.5,“ dodává s odkazem na antropický model, který byl spuštěn v červnu 2024.

Amir Salihefendić, zakladatel startovací společnosti, uvedl v příspěvku na sociálních médiích, že používal GPT-5 v kurzoru a zjistil, že je „docela ohromující“ a „je to zvláště špatné v kódování“. Řekl, že vydání GPT-4 se cítilo jako „lama 4 moment“, odkazující na Meta’s AI model, který také zklamal některé lidi v komunitě AI.

Na X, vývojář McKay Wrigley napsal, že GPT-5 je „fenomenální model každodenního chatu“, ale pokud jde o kódování: „Stále budu používat Claude Code + Opus.“

Jiní vývojáři popisují GPT-5 jako „vyčerpávající“-v době užitečné, ale často dráždivé v jeho dlouhodobé. Wang, který byl celkově celkově potěšen projektem frontend kódování, který přidělila GPT-5, říká, že si všimla, že model je „redundantní. (Kapoor poukazuje na to, že výřečnost GPT-5 lze upravit, aby uživatelé mohli požádat o méně chatrné nebo dokonce méně odůvodnění výměnou za lepší výkon nebo levnější ceny.)