Uskoro dolazi: NVIDIA Tesla P40, 24 GB VRAM

PyTorch GPU VPS

Vlak i pokreni PyTorch modele na NVIDIA Tesla P40 (24 GB VRAM, Pascal arhitektura), s punim pristupom rootu. GPU poslužitelji još nisu u redu; kontaktirajte nas da se obavijesti kada su.

$ pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124
# Naredba

Što je {ime} na GPU VPS?

PyTorch je široko korišteni okvir dubokog učenja. GPU server pokreće PyTorch trening i zaključak na GPU, koji je daleko brži nego na CPU za većinu modela.

PyTorch na VPS.org GPU poslužitelja

Instaliraj svoj CUDA stack

Instalirate NVIDIA vozač, KUDA i PyTorch izgradnju koju trebate. Provjerite da li vaša PyTorch izgradnja još uvijek podržava Pascal GPUs (komputna sposobnost 6.1).

24 GB VRAM

Soba za male i srednje veličine modeli, LoRA fino uglađuju i umjerene veličine serije.

Jupiter

Pokreni Jupyter bilješke na poslužitelju za interaktivni rad na GPU.

Pun pristup root-u

Podesite okoliš točno kako vam projekt treba.

Popularne {ime} Slučaji korištenja

Osposobljavanje za neuralne mreže
Modeli računalnog vida
NLP & transformator modeli
Generativno istraživanje AI
Uzorak finog uklapanja
Zaključak o proizvodnji

Planirane GPU specifikacije

GPUNVIDIA Tesla P40
VRAM24 GB GDDR5
CUDA jezgre3,840
FP3212 TFLOPS
INT847 TOPS
Memorija BW346 GB/s
ArhitekturaPascal (GP102)
ProlazPCIe prolaz

Česta pitanja

Što je PyTorch na GPU VPS?

+

PyTorch može koristiti NVIDIA GPU za ubrzavanje rada. VPS.org GPU serveri još nisu dostupni za narudžba; kontaktirajte nas da čujemo kada su. PyTorch je trening / fino uklapanje radnog mjesta. Plan za dugotrajne poslove: snimanje VPS redovito i čuvanje kopije obučenih težina izvan VPS.org.

Kako da postavim PyTorch na GPU VPS?

+

GPU poslužitelji još nisu dostupni za naručivanje. Danas možete pokrenuti PyTorch na redoviti CPU plan, gdje radi daleko sporije nego na GPU: SSH in i pokrenuti pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124.

Koliko VRAM trebam za PyTorch?

+

VRAM-u dominira optimatorsko stanje plus aktivacije. Potpuno uklapanje LLM-a 7B treba otprilike 24 do 48 GB; LoRA / QLoRA uklapa se u 8 do 16 GB.

Koliko bi GPU poslužitelj za PyTorch koštao?

+

GPU cijena će biti objavljena kada GPU poslužitelji mogu biti naručiti. Kontaktirajte nas ako želite čuti kada se to dogodi.

Mogu li pokrenuti drugi alat uz PyTorch?

+

Da. Svaki VPS.org poslužitelj dolazi s punim pristupom rootu, tako da možete pokrenuti druge alate uz PyTorch unutar RAM-a i pohrane poslužitelja.

Mogu li dobiti pun korijen na PyTorch GPU VPS?

+

Svaki VPS.org poslužitelj dolazi s punom root SSH pristup, tako da možete instalirati vozače, biblioteke i PyTorch kako god vam je potrebno.

Da li VPS.org preinstalirati GUDA za PyTorch?

+

Ne. Nijedan poslužitelj ne dolazi s CUDA runtime ili NVIDIA drajver unaprijed instaliran, a GPU poslužitelji još nisu dostupni za naručivanje. Instalirate verzije PyTorch treba sebe.

Da li je moje PyTorch GPU VPS i dalje između seansi?

+

Da. VPS.org poslužitelji su stalni virtualni strojevi, a ne efemeralni primjerci: PyTorch modeli, konfiguracije i podaci ostaju na pohrani SSD poslužitelja dok ih ne izbrišete.

Gdje da spremim podatke za PyTorch radnih mjesta?

+

Nastavite raditi na SSD poslužitelja za brz pristup tijekom PyTorch pokrenutih, i kopirati završene artefakte (teže, generacije, ugrađivanja) u pohranu izvan VPS.org; snimke i sigurnosne kopije ostaju na istom pohranjivaču klastera.

Mogu li kasnije proći preko PyTorch GPU VPS-a?

+

Možete nadograditi svaki VPS.org poslužitelj na veći plan iz kontrolnog panela; reorganizacija ga ponovno pokreće i vaš PyTorch install nosi preko. GPU poslužitelji još nisu dostupni.

Jesu li rezervne kopije dostupne za moj GPU VPS?

+

Da. Rezervne kopije su plaćeni dodatak (dnevno +30% cijene plana, čuvan 7 dana; tjedan +20%, čuvan 28 dana) i snimke su besplatne, što je korisno prije dugog PyTorch trčanje. Oba ostaju na istom pohranjivaču klastera kao i poslužitelj.

Mogu li dobiti povrat novca?

+

Kontaktna podrška u roku od 30 dana od vaše prve kupnje zatražiti povrat novca. GPU poslužitelji još nisu prodani, tako da nema GPU narudžbe.

Želite li pokrenuti PyTorch na GPU poslužitelj?

GPU kapacitet je ograničen. Recite nam o svom radnom vremenu i odgovorit ćemo s raspoloživošću i cijenama.