Kujutage ette triljonparameetrilist tehisintellekti, mis ei tööta Lääne graafikaprotsessoritel, vaid Hiinas valmistatud riistvaral. See kõlab nagu tehnoloogiline ümberkirjutus ja just seda püüab DeepSeek saavutada oma järgmise põlvkonna mudeliga.
Raportid viitavad sellele, et DeepSeek V4 töötab eksklusiivselt Huawei uusimate Ascend-kiipide peal. See ei ole väike pöördepunkt. See peegeldab laiemat jõupingutust siduda arenenud mudeleid kodumaiste pooljuhtidega, kuna ekspordikontrollid raskendavad Hiina arendajate ligipääsu Nvidia H-seeria kiipidele.
Miks see muutus? Osaliselt seetõttu, et skaleerumine nõuab nüüd tihedat koordineerimist mudeli arhitektuuri ja seda kandva kiibi vahel. DeepSeek plaanib juurutada ligikaudu triljon parameetrit ning eeldatavasti kasutab idufirma sihtjärelduskiiruste ja -mahu saavutamiseks sadu tuhandeid Ascend 950PR protsessoreid. Eesmärk on umbes 1,8-kordne järelduskiiruse kasv, kontekstiaken, mis läheneb miljonile tokenile, ning tõhususe paranemine Engram-tüüpi optimeeringute abil.
See viimane detail on oluline. Engram-meetodid ümber kujundavad, kuidas mudelid salvestavad ja meenutavad infot, vähendades mälukoormust, säilitades samal ajal mõtlemise ja järeldamise sügavuse. V4 suurusega mudeli puhul teevad sellised võtted vahe reaalse ja utoopilise vahel. Teatavasti on DeepSeek veetnud kuid põhisüsteemi koodi ümberkirjutades ning läbi viinud jõudlusteste koos Huawei ja Cambriconi inseneridega, et uues tehnoloogiapinust maksimumi välja pigistada.
Teised Hiina tehnoloogiahiiglased panustavad sarnaselt. Alibaba, ByteDance ja Tencent on tellinud suuri koguseid Ascend 950PR pooljuhte, mis annab märku, et kodumaine kiibiekooskus muutub kiiresti suuremate AI-projektide põhiplatvormiks Hiinas. Sel määral on DeepSeeki samm nii strateegiline kui praktiline.
Siin on ka ajastuslik aspekt. Nvidia H20 kiibid on sattunud rangema ekspordi järelvalve alla, mis survestab idufirmasid ja pilveteenuse pakkujaid kiirendama migratsiooni kohalikult toodetud kiirendajatele. DeepSeek oli varasemates mudelites juba kasutanud Ascend-variatsioone, seega täielik üleminek Huawei-kesksele infrastruktuurile on olemasoleva töö laiendus, mitte järsk hüpe.
Funktsionaalselt rõhutab V4 väidetavalt täiustatud kodeerimisvõimekust ja paranenud mitmeastmelist järeldamist. Lihtsamalt öeldes: parem keerukate programmide kirjutamisel, parem pikaajalise vestluse hoidmisel ning parem loogika kokkupanemisel suurte tekstikogumite ulatuses. Teatavasti on arenduses veel kaks V4 varianti, mis on kohandatud teiste Hiinas valmistatud kiipide jaoks ja võivad ilmuda enne aasta lõppu.
Siit on suurem järeldus. AI-võistlus killustub riistvaraökosüsteemideks, millest igaüks on kohandatud oma kompilaatorite, käituskeskkondade ja optimeerimisnippide virnale. Selliste idufirmade nagu DeepSeek jaoks võib tee tipptasemel jõudlusele nüüd kulgeda kodumaiste pooljuhtide kaudu sama palju kui algoritmilise uuenduse kaudu.
Kas see lähenemine end õigustab sõltub sellest, kui hästi tarkvaratiimid suudavad tooresid kiipe suruda kasutatavatesse ja usaldusväärsetesse teenustesse ning kui kiiresti muutub ülemaailmne AI-riistvaramaastik.
"Minu huvi tehnoloogia vastu algas lapsepõlvest. Tänapäeval püüan kirjutada nii, et ka keerulised teemad oleksid kõigile arusaadavad."
Arutelu
Jäta kommentaar
Kommentaarid
Kommentaare veel pole. Ole esimene.