Uskoro: NVIDIA Tesla P40, 24 GB VRAM

PyTorch GPU VPS

Trenirajte i pokrenite PyTorch modele na NVIDIA Tesla P40 (24 GB VRAM, Pascal arhitektura), sa punim root pristupom. GPU serveri još nisu dostupni za narudžbu; kontaktirajte nas da biste bili obaviješteni kada budu dostupni.

$ pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124
# Primjer naredbe za instaliranje

Šta je {ime} na GPU VPS-u?

PyTorch je široko korišten framework za dubinsko učenje.GPU server pokreće PyTorch trening i zaključivanje na GPU-u, koji je mnogo brži nego na CPU-u za većinu modela.

PyTorch na VPS.org GPU serveru

Instaliraj CUDA stak

Instalirajte NVIDIA driver, CUDA i PyTorch build koji vam trebaju. Provjerite da li vaša PyTorch build još uvijek podržava Pascal GPU-ove (računarske mogućnosti 6.1).

24 GB VRAM

Prostor za male i srednje modele, LoRA fino podešavanje i umjerene veličine serija.

Jupiter

Pokrenite Jupyter notepads na serveru za interaktivni rad na GPU.

Puni pristup rootu

Konfiguriraj okolinu tačno onako kako ti projekt treba.

Popularni PyTorch slučajevi upotrebe

Neuron Neuron
Kompjuterski vid
NLP i transformacijski modeli
Generativna AI istraživanja
Model fino podešavanje
Produkcija

Planirane specifikacije GPU-a

GPUNVIDIA Tesla P40
VRAM24 GB GDDR5
CUDA boje3,840
FP3212 TFLOPS
INT847 TOPS
Memorija346 GB/s
ArhitekturaPascal (GP102)
ProlazBare metal PCIe

Često postavljana pitanja

Šta je PyTorch na GPU VPS?

+

PyTorch može koristiti NVIDIA GPU da ubrza svoj rad. VPS.org GPU serveri još nisu dostupni za narudžbu; kontaktirajte nas da saznate kada će biti dostupni. PyTorch je za trening / fino podešavanje radnog opterećenja. Planirajte za dugotrajne poslove: redovito snimajte VPS i držite kopiju treniranih težina izvan VPS.org.

Kako postavim PyTorch na GPU VPS?

+

GPU serveri još nisu dostupni za narudžbu. Danas možete pokrenuti PyTorch na redovnom CPU planu, gdje radi mnogo sporije nego na GPU: SSH u i pokrenite pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124.

Koliko VRAM-a trebam za PyTorch?

+

VRAM za trening je dominiran od strane optimizera stanja plus aktivacije. Puna fino podešavanje 7B LLM treba otprilike 24 do 48 GB; LoRA / QLoRA stane u 8 do 16 GB.

Koliko bi koštao GPU server za PyTorch?

+

Cijene GPU-a će biti objavljene kada se GPU serveri mogu naručiti. Kontaktirajte nas ako želite čuti kada se to dogodi.

Mogu li pokrenuti druge alate pored PyTorch?

+

Svaki VPS.org server ima potpuni root pristup, tako da možeš pokrenuti druge alate pored PyTorch u RAM-u servera i pohrani.

Da li mogu dobiti potpuni root na PyTorch GPU VPS?

+

Svaki VPS.org server dolazi sa punim root SSH pristupom, tako da možete instalirati drivere, biblioteke i PyTorch kako god vam treba.

Da li VPS.org unaprijed instalira CUDA za PyTorch?

+

Ne. Nijedan server ne dolazi s CUDA runtimeom ili NVIDIA driverom unaprijed instaliranim, a GPU serveri još nisu dostupni za narudžbu. Sami instalirajte verzije koje PyTorch treba.

Da li moj PyTorch GPU VPS traje između sesija?

+

Da. VPS.org serveri su trajne virtualne mašine, a ne efemerne instance: PyTorch modeli, konfiguracije i podaci ostaju na SSD pohrani servera dok ih ne izbrišete.

Gdje da pohranim podatke za moj PyTorch?

+

Zadržavanje radnih podataka na SSD-u servera za brz pristup tokom PyTorch pokretanja, i kopiranje gotovih artefakata (težina, generacije, ugradnje) u pohranu izvan VPS.org; snimke i sigurnosne kopije ostaju na istom clusteru za pohranu.

Mogu li kasnije skalirati svoj PyTorch GPU VPS?

+

Možete nadograditi bilo koji VPS.org server na veći plan iz kontrolne ploče; promjena veličine ga ponovo pokreće i vaša PyTorch instalacija se prenosi. GPU serveri još nisu dostupni.

Da li su rezervne kopije dostupne za moj GPU VPS?

+

Da. Sigurnosne kopije su plaćen dodatak (dnevno +30% od cijene plana, čuva se 7 dana; sedmično +20%, čuva se 28 dana) i snimke su besplatne, što je korisno prije dugih PyTorch pokretanja. Oba ostaju na istom klasteru pohrane kao i server.

Mogu li dobiti povrat novca?

+

Kontaktirajte podršku u roku od 30 dana od prve kupnje da biste zatražili povrat novca. GPU serveri još nisu prodani, tako da nema narudžbe GPU-a.

Želite li pokrenuti PyTorch na GPU serveru?

Kapacitet grafičkog procesora je ograničen. Recite nam o svom opterećenju i odgovorit ćemo s dostupnošću i cijenama.