Hamarosan: NVIDIA Tesla P40, 24 GB VRAM

PyTorch GPU VPS

Vonat és futtatás PyTorch modellek NVIDIA Tesla P40 (24 GB VRAM, Pascal architektúra), teljes gyökér hozzáférés. GPU szerverek még nem rendelhető; lépjen kapcsolatba velünk, hogy értesítést, amikor azok.

$ pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124
# Példa telepítési parancs

Mi az a {név} a GPU VPS-en?

A PyTorch széles körben használt mélytanulási keret. A legtöbb modellnél a GPU szerver a PyTorch képzését és a GPU-n való következtetéseket végzi, ami sokkal gyorsabb, mint a CPU-n.

PyTorch egy VPS.org GPU szerveren

A CUDA stack telepítése

Az NVIDIA meghajtót, a CUDA-t és a PyTorch-ot telepíti. Ellenőrizze, hogy a PyTorch-építménye még támogatja-e a Pascal GPU-kat (kompute képesség 6.1).

24 GB VRAM

Kis méretű és közepes méretű modellek, LoRA finomhangoló és közepes gyártási méretek.

Jupyter

Futtassa Jupyter notebooks a szerver interaktív munka a GPU.

Teljes gyökér-hozzáférés

A környezet beállítása a projekt igényeinek megfelelően.

Népszerű {név} Esetek használata

Neurális hálózati képzés
Számítógépes látásmodellek
NLP- és transzformátormodellek
Generatív MI-kutatás
Finomhangoló modell
Termelési következtetés

Tervezett GPU előírások

GPUNVIDIA Tesla P40
VRAM24 GB GDDR5
CUDA magok3,840
FP3212 TFLOPS
INT847 TOPS
BW memória346 GB/s
ÉpítészetPascal (GP102)
ÁthaladásPCIe passz through

Gyakran ismételt kérdések

Mi az a PyTorch egy GPU VPS-en?

+

A PyTorch egy NVIDIA GPU segítségével felgyorsíthatja a munkáját. VPS.org GPU szerverek még nem rendelhetők; lépjen kapcsolatba velünk, hogy mikor halljuk őket. PyTorch egy edzés / finomhangoló munka. Terv hosszú távú munkák: pillanatfelvétel a VPS rendszeresen, és tartsa a másolatot a képzett súlyokat kívül VPS.org.

Hogyan állítok fel PyTorch-at egy GPU VPS-re?

+

GPU szerverek még nem érhetők el. Ma már futtathatod a PyTorch-t egy rendszeres CPU terven, ahol sokkal lassabban működik, mint a GPU-n: SSH in and run pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124.

Mennyi VRAM kell a PyTorch-hoz?

+

A VRAM képzését az optimalizáló állapot és az aktiválások uralják. A 7B LLM teljes finomhangolása körülbelül 24-48 GB-ot igényel; a LoRA / QLoRA 8-16 GB-ban illeszkedik.

Mennyibe kerülne egy GPU szerver a PyTorch-ért?

+

A GPU árazása akkor kerül közzétételre, amikor a GPU szerverek rendelhetők. Lépjen velünk kapcsolatba, ha azt szeretné hallani, amikor ez megtörténik.

Lefuttathatok más szerszámokat is a PyTorch mellett?

+

Igen. Minden VPS.org szerver teljes gyökér-hozzáféréssel rendelkezik, így más eszközöket is futtathat a PyTorch mellett a szerver RAM-ján és tárolóján belül.

Teljes rootot kapok a PyTorch GPU VPS-en?

+

Minden VPS.org szerver teljes gyökér SSH hozzáféréssel rendelkezik, így telepítheti a illesztőprogramokat, könyvtárakat és PyTorch-t, bármennyire is kell.

Vajon a VPS.org preinstall CUDA a PyTorch?

+

Nem. Nincs szerver jön egy CUDA runtime vagy NVIDIA vezérlő előre telepített, és GPU szerverek még nem érhető el, hogy rendeljen. Telepíteni a verziók PyTorch szüksége van magad.

Az én PyTorch GPU VPS-em továbbra is tart az ülések között?

+

Igen. A VPS.org szerverek állandó virtuális gépek, nem pedig efemerális esetek: PyTorch modellek, konfigok és adatok maradnak a szerver SSD-tárolójában, amíg nem törli őket.

Hol kell tárolni adatokat a PyTorch munkateher?

+

A PyTorch futtatások során a szerver SSD-jén tárolt adatok megőrzése a gyors hozzáférés érdekében, valamint a kész tárgyak (súlyok, generációk, beágyazódások) másolása a VPS.org-en kívüli tárolóba; a fényképek és biztonsági másolatok ugyanazon a tárolóhalmazon maradnak.

Megmérhetem a PyTorch GPU VPS-t később?

+

A VPS.org szervereket a vezérlőpanelről egy nagyobb tervre frissítheted; az átméretezés újraindítja és a PyTorch telepítése továbbviszi. A GPU szerverek még nem állnak rendelkezésre.

Van tartalék a GPU VPS-emhez?

+

Igen. A biztonsági mentések fizetett kiegészítő (napi +30%-a a terv ár, tartott 7 nap; heti +20%, tartott 28 nap) és pillanatfelvételek ingyenesek, ami hasznos, mielőtt hosszú PyTorch fut. Mindkettő maradjon ugyanabban a tároló klaszterben, mint a szerver.

Kaphatok visszatérítést?

+

Kapcsolatfelvételi támogatás az első vásárlás után 30 napon belül, hogy visszatérítést kérjen. GPU szerverek még nem értékesített, így GPU megrendelés nem szerepel.

Szeretné futtatni a PyTorch egy GPU szerver?

A GPU kapacitása korlátozott. Meséljen a munkaterheléséről, és a rendelkezésre állás és az árak segítségével válaszolunk.