Drīz nāk: NVIDIA Tesla P40, 24 GB VRAM

PyTorch GPU VPS

Vilciens un palaist PyTorch modeļus uz NVIDIA Tesla P40 (24 GB VRAM, Pascal architecture), ar pilnu root access. GPU serveri vēl nav pasūtāmi; sazinieties ar mums, lai saņemtu paziņojumu, kad tie ir.

$ pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124
# Piemēru instalēšanas komanda

Kas ir {nosaukums} uz GPU VPS?

PyTorch ir plaši izmantotais dziļo mācību sistēma. GPU serveris darbojas PyTorch apmācības un iejaukšanās par GPU, kas ir daudz ātrāk nekā uz CPU vairumam modeļu.

PyTorch uz VPS.org GPU servera

Instalēt CUDA kaudze

Jūs instalējat NVIDIA draiveri, CUDA un PyTorch veidot jums nepieciešams. Pārbaudiet, ka jūsu PyTorch veidot joprojām atbalsta Pascal GPU (kombinācijas iespējas 6.1).

24 GB VRAM

Istaba maziem un vidēja lieluma modeļiem, LoRA, kas precizē un mēreni izmēra partijas.

Jupyter

Palaist Jupyter piezīmju grāmatas uz servera interaktīva darba GPU.

Pilnīga root piekļuve

Konfigurēt vidi tieši tā, kā jūsu projekts nepieciešams.

Populārs {nosaukums} Lietot gadījumus

Neurālo tīklu mācības
Datora redzamības modeļi
NLP & transformatoru modeļi
Ģeneratīvā AI pētniecība
Parauga precizēšana
Ražošanas ietekme

Plānotās GPU specifikācijas

GPUNVIDIA Tesla P40
VRAM24 GB GDDR5
CUDA kodoli3,840
PP3212 TFLOPS
INT847 TOPS
Atmiņa BW346 GB/s
ArhitektūraPascal (GP102)
CaurlaidībaPCIe caurlaidība

Bieži uzdoti jautājumi

Kas ir PyTorch uz GPU VPS?

+

PyTorch can use an NVIDIA GPU to speed up its work. VPS.org GPU servers are not available to order yet; contact us to hear when they are. PyTorch is a training / fine-tuning workload. Plan for long-running jobs: snapshot your VPS regularly and keep a copy of trained weights outside VPS.org.

Kā izveidot PyTorch GPU VPS?

+

GPU serveri vēl nav pieejami pasūtīt. Šodien jūs varat palaist PyTorch uz regulāra CPU plāna, kur tas darbojas daudz lēnāk nekā GPU: SSH iekšā un palaist pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124.

Cik daudz VRAM man vajag PyTorch?

+

Mācības VRAM dominē optimizatora stāvoklī plus aktivācijas. Pilnīga 7B LLM regulēšana nepieciešama aptuveni 24 līdz 48 GB; LoRA / QLora ietilpst 8 līdz 16 GB.

Cik daudz GPU serveris maksā PyTorch?

+

GPU tarifikācija tiks publicēta, kad GPU serveri varēs pasūtīt. Sazinieties ar mums, ja vēlaties dzirdēt, kad tas notiks.

Vai es varu palaist citus instrumentus līdzās PyTorch?

+

Jā. Katrs VPS.org serveris nāk ar pilnu root piekļuvi, lai jūs varētu palaist citus rīkus blakus PyTorch ietvaros servera RAM un glabāšanu.

Vai es saņemu pilnu sakni par PyTorch GPU VPS?

+

Katrs VPS.org serveris nāk ar pilnu root SSH piekļuvi, lai jūs varētu instalēt draiveri, bibliotēkas un PyTorch tomēr jums ir nepieciešams.

Vai VPS.org iepriekš instalēt CUDA priekš PyTorch?

+

Nē. Neviens serveris nāk ar CUDA darba laiku vai NVIDIA draiveris instalēts, un GPU serveri nav pieejami, lai pasūtītu vēl. Jūs instalēt versijas PyTorch ir nepieciešams pats.

Vai starp sesijām pastāv mans PyTorch GPU VPS?

+

Jā. VPS.org serveri ir pastāvīga virtuālās mašīnas, nevis ephemmeral instances: PyTorch modeļi, konfigurācijas un dati palikt uz servera SSD glabāšanas līdz jūs tos dzēst.

Kur man jāglabā dati par savu PyTorch darba slodzi?

+

Saglabāt servera SSD darba datus ātrai piekļuvei PyTorch paužu laikā, un kopēt pabeigtos artefaktus (svarus, paaudzes, iegultos datus) uz glabāšanu ārpus VPS.org; momentuzņēmumus un rezerves kopijas palikt uz tā paša datu glabāšanas klastera.

Vai es varu samazināt savu PyTorch GPU VPS vēlāk?

+

Jūs varat uzlabot jebkuru VPS.org serveri uz lielāku plānu no vadības paneļa; mainot izmēru, tas tiek atjaunots, un jūsu PyTorch instalācija pārpilda vairāk. GPU serveri vēl nav pieejami.

Vai ir pieejami dublējumi maniem GPU VPS?

+

Jā. Backups ir apmaksāts papildmaksa (dienas +30% no plāna cenas, saglabāts 7 dienas; iknedēļas +20%, saglabāts 28 dienas) un fotogrāfijām ir bezmaksas, kas ir noderīga, pirms ilgi PyTorch iet. Abi palikt uz tā paša glabāšanas klasterī kā serveris.

Vai varu saņemt kompensāciju?

+

Kontaktu atbalsts 30 dienu laikā pēc pirmā pirkuma pieprasīt kompensāciju. GPU serveri vēl netiek pārdoti, tāpēc nav iesaistīts GPU pasūtījums.

Vai vēlaties palaist PyTorch uz GPU servera?

GPU jauda ir ierobežota. Pastāsti mums par savu darba slodzi, un mēs atbildēsim ar pieejamību un cenu noteikšanu.