Massiivinen avoimen lähdekoodin perustamallin koulutus avaa @_xjdr XJDR on hullu tiedemies, joten kesti muutaman kierroksen ymmärtääkseni sen kunnolla, enkä ehkä vieläkään täysin arvosta koko lopputulosta. Normaalisti, jos haluat kouluttaa täysin uuden perusmallin alusta alkaen, tarvitset paljon GPU:ita saadaksesi kunnon harjoituskierroksen. Se on kallista. Yksi vaikeimmista koulutustyypeistä on DeepSeek-tyylinen asiantuntijan yhdistelmä. Se on tehokas, mutta reititysjärjestelmä ja harjoitusjärjestelmä ovat niin hankalia, että pienimuotoiset testit usein hajoavat. Joten tarvitset ison klusterin oppiaksesi mitään, ja kun peli epäonnistuu, et voi sanoa, oliko ideasi väärin vai oliko asennus vain rikki, joten tutkimus kuolee etkä opi mitään XJDR on avoimen lähdekoodin NMOE, valmiin käyttöön tarkoitettu koulutustehdas, joka on johdotettu asiantuntijan tavalla, erityisesti siksi, että tätä malliluokkaa voidaan kouluttaa ja tutkia yhdellä koneella ilman jatkuvaa rikkoutumista. Pienet kokeet käyttäytyvät kuin oikeaa koulutusta, joten voit saada puhtaan kyllä tai ei vastauksen ennen kuin käytät kahdeksannumeroisia ja kuukausia aikaa. Todellisuudessa ihmiset voivat järjestää halpoja, nopeita kokeiluja, joissa muutetaan yksi asia kerrallaan, kuten miten mallin reitit toimivat asiantuntijoiden välillä, miten se oppii (koulutusresepti), mitä dataa syötät ja miten saat enemmän laatua per dollari. Käytännössä testaat uusia ideoita paremmista perusmalleista samalla tavalla kuin A/B-testaat tuotetta, mutta voit tehdä sen myös ison laboratorion ulkopuolella. Nettovaikutus on nopeampi iterointi ja merkittävät kustannussäästöt, ja useammat tiimit voivat realistisesti rakentaa uusia perustusmalleja. Se voi tarkoittaa parempaa DeepSeek-luokkamallia, täysin uusia erikoismalleja sekä paljon enemmän kilpailua ja avointa tutkimusta, koska osallistumismaksut laskevat jyrkästi ja yhä useammat läpimurrot tapahtuvat julkisilla paikoilla Pysy kuulolla, hän on suurimman osan avoimesta lähdekoodista! Onnittelut @_xjdr. Olemme erittäin iloisia voidessamme tukea sinua ja olla pieni osa tarinaasi