Novinka je aktualizáciou septembrového modelu V4.1 Flash. DeepSeek pri jej predstavení vyzdvihol prácu na celých projektoch, od písania kódu po tvorbu 3D scén. Váhy modelu sprístupnil pod licenciou MIT a cez vlastné API ho ponúka pod názvom deepseek-flash.
Podľa výsledkov zverejnených DeepSeekom stúpla úspešnosť modelu v teste Terminal-Bench 4.0 z 31,2 na 42,3 percenta a v teste ProgramBench z 20,3 na 29,1 percenta. Sú to výsledky meraní firmy, ktorá model vyvinula; samy osebe neurčujú, ako sa bude správať pri konkrétnom projekte používateľa.
Nezávislá hodnotiaca spoločnosť Artificial Analysis zaznamenala pri novšej verzii lepší výsledok v jej teste Terminal-Bench 4.0: 34 percent oproti 27 percentám pri septembrovej verzii. V jej meraní však dokončenie úlohy trvalo novému modelu približne 321 sekúnd, zatiaľ čo staršiemu približne 313 sekúnd. Výsledky tak podporujú zlepšenie schopností pri vybraných úlohách, nie všeobecné tvrdenie, že aktualizácia vždy pracuje rýchlejšie.
Praktický test služby Atomic Agent ukazuje ďalšiu hranicu porovnávania. Všetky tri spustenia nového modelu splnili jej programátorskú úlohu; priemer bol 27 sekúnd a približne 1,6 centa za úlohu. V tomto konkrétnom teste však bola septembrová verzia o niečo rýchlejšia aj lacnejšia. Tri opakovania jednej úlohy nestačia na záver o výkone pri všetkých typoch práce.
DeepSeek si za milión vstupných tokenov účtuje 0,30 dolára v špičke a 0,15 dolára mimo nej. Milión výstupných tokenov stojí 1,20, respektíve 0,60 dolára; vstupy načítané z vyrovnávacej pamäte majú osobitnú, nižšiu cenu. Sadzba za token je preto len jednou časťou nákladov na AI agenta, ktorý môže pri riešení zadania vykonať viacero krokov a pokusov.
Pre vývojárov je užitočné sledovať, koľko model stojí na úspešne dokončenú úlohu, ako dlho pri nej pracuje a či výsledok prejde kontrolou. Doterajšie merania naznačujú, že V4.1 Flash 1017 môže pri niektorých náročnejších zadaniach priniesť lepší výsledok za vynaložené peniaze. Výber modelu však závisí od druhu úlohy a spôsobu, akým ho AI agent používa.
