Keresés

Új hozzászólás Aktív témák

  • ddekany

    veterán

    válasz Pikari #10 üzenetére

    Az nekem szinte kizártak tűnik, hogy az NN-ek (az "AI") eltűnnek, mint megannyi hype. Most talán jön egy csalódás szakasz, amikor az átlagemberek a kezükbe kapják a csodát, és rájönnek, hogy valójában még nem nagyon használható. De maga az alapelv úgy néz ki működik, szóval ez már szvsz marad, csak lassabban és fokozatosabban jön, mint egyesek állítják.

    Hogy az nVidia marad-e a vezető ebben... AMD-nek van ez a Instinct MI szériája, Intel is most igérgeti a "Falcon Shores"-t. De mintha ők csak üldözők lennének most. Ezek mind szerverbe szánt dolgok jelenleg, és egy sok milliárd paraméteres modell nem fog egyhamar otthoni gépen futni. Azaz ha egy kisebb be is kerül később az áltag gépekbe, akkor is hatalmas igény lesz a szerveren futtatásra, a nagy modellek esetén (és belátható időn belül). Ehhez képest lényegtelen, hogy egy die-ra megy a CPU-val, vagy csak egy tokozásba chiplet formájában, vagy külön tokozásba. (Egyik esetben se nevezném a CPU részének mérnöki szempontból.)

    Aztán vannak a radikálisabb megoldások, rakás startup, pl. Tenstorrent. De nem láttam egyenlőre bizonyítékot (mint rendes benchmark-ot), hogy ezeket valóban akkorát odacsapnának az nVidia tradicionálisabb megoldásának teljesítményben. Meg gondolom az nVidia sem ül babérjain, ha látja, hogy fennforgás van.

  • Busterftw

    veterán

    válasz Pikari #13 üzenetére

    Minden? A Tegrán kívül nem nagyon volt más, a Grace pedig teljesen új ARM cucc, amit a gyorsítókkal együtt tolnak AI szerverekbe.

    Microsoft, Google, Meta, Softbank már bejelentkezett.
    Itt most nem a kis desktop PC piacra kell gondolni, hanem ahol a nagy lóvé van.

Új hozzászólás Aktív témák