Σύντομα: NVIDIA Tesla P40, 24 GB VRAM

PyTorch GPU VPS

Τρένο και να εκτελέσετε PyTorch μοντέλα σε NVIDIA Tesla P40 (24 GB VRAM, Pascal αρχιτεκτονική), με πλήρη πρόσβαση ρίζα. Οι διακομιστές GPU δεν είναι ακόμα παραγγελία; επικοινωνήστε μαζί μας για να ειδοποιηθείτε όταν είναι.

$ pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124
# Παράδειγμα εντολής εγκατάστασης

Τι είναι το {όνομα} σε GPU VPS;

Ένας διακομιστής GPU εκτελεί την εκπαίδευση PyTorch και το συμπέρασμα για την GPU, η οποία είναι πολύ πιο γρήγορη από ό, τι σε μια CPU για τα περισσότερα μοντέλα.

PyTorch σε έναν εξυπηρετητή GPU VPS.org

Εγκαταστήστε το στοίβα CUDA σας

Μπορείτε να εγκαταστήσετε τον οδηγό NVIDIA, CUDA και την κατασκευή PyTorch που χρειάζεστε. Ελέγξτε ότι η κατασκευή PyTorch σας υποστηρίζει ακόμα Pascal GPUs (compute ικανότητα 6.1).

24 GB VRAM

Χώρος για μικρά και μεσαίου μεγέθους μοντέλα, LORA λεπτή ρύθμιση και μέτρια μεγέθη παρτίδων.

Τζούπιτερ

Εκτελέστε τα σημειωματάρια Jupyter στον εξυπηρετητή για διαδραστική εργασία στην GPU.

Πλήρης πρόσβαση στις ρίζες

Ρύθμιση του περιβάλλοντος ακριβώς όπως χρειάζεται το έργο σας.

Δημοφιλής {όνομα} Χρήση περιπτώσεων

Εκπαίδευση στο δίκτυο Neural
Μοντέλα όρασης υπολογιστή
Μοντέλα NLP & μετασχηματιστή
Γενετική έρευνα AI
Υπόδειγμα εξομάλυνσης των βραχυχρόνιων διακυμάνσεων της ρευστότητας
Συνέδρια παραγωγής

Σχεδιασμένες προδιαγραφές GPU

GPUNVIDIA Tesla P40
VRAM24 GB GDDR5
CUDA Cores3,840
ΠΠ3212 TFLOPS
INT847 TOPS
BW μνήμης346 GB/s
ΑρχιτεκτονικήPascal (GP102)
Πέρασμα@ title: windowPCIe passthrough

Συχνές Ερωτήσεις

Τι είναι το PyTorch σε GPU VPS;

+

PyTorch μπορεί να χρησιμοποιήσει μια NVIDIA GPU για να επιταχύνει την εργασία της. zqx0qz GPU διακομιστές δεν είναι ακόμα στη διάθεση σας να παραγγείλετε? επικοινωνήστε μαζί μας για να ακούσετε πότε είναι. PyTorch είναι μια εκπαίδευση / λεπτής ρύθμισης φόρτο εργασίας. Σχέδιο για τις θέσεις εργασίας: στιγμιότυπο VPS σας τακτικά και να κρατήσει ένα αντίγραφο των εκπαιδευμένων βαρών έξω από VPS.org.

Πώς μπορώ να ρυθμίσω PyTorch σε μια GPU VPS;

+

Σήμερα μπορείτε να εκτελέσετε PyTorch σε ένα κανονικό σχέδιο CPU, όπου λειτουργεί πολύ πιο αργά από ό, τι σε μια GPU: SSH μέσα και να εκτελέσετε pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124.

Πόσα VRAM χρειάζομαι για PyTorch;

+

Η εκπαίδευση VRAM κυριαρχείται από την κατάσταση βελτιστοποίησης συν ενεργοποιήσεις. Πλήρης ρύθμιση ενός 7B LLM χρειάζεται περίπου 24 έως 48 GB; LoRA / QLORA ταιριάζει σε 8 έως 16 GB.

Πόσο θα κόστιζε ένας διακομιστής GPU για PyTorch;

+

Η τιμολόγηση της GPU θα δημοσιευθεί όταν οι διακομιστές GPU μπορούν να παραγγελθούν. Επικοινωνήστε μαζί μας αν θέλετε να ακούσετε πότε συμβαίνει αυτό.

Μπορώ να τρέξω άλλα εργαλεία δίπλα στο PyTorch;

+

Ναι. Κάθε διακομιστής VPS.org έχει πλήρη πρόσβαση στις ρίζες, ώστε να μπορείτε να εκτελέσετε άλλα εργαλεία παράλληλα με PyTorch εντός της RAM και αποθήκευσης του διακομιστή.

Μπορώ να πάρω πλήρη ρίζα για το PyTorch GPU VPS;

+

Κάθε διακομιστής VPS.org έρχεται με πλήρη πρόσβαση SSH ρίζας, ώστε να μπορείτε να εγκαταστήσετε οδηγούς, βιβλιοθήκες και PyTorch, όπως χρειάζεστε.

Μήπως VPS.org preinstall CUDA για PyTorch;

+

No. No server comes with a CUDA runtime or NVIDIA driver preinstalled, and GPU servers are not available to order yet. You install the versions PyTorch needs yourself.

Επιμένει το PyTorch GPU VPS μου ανάμεσα στις συνεδρίες;

+

Ναι. Οι διακομιστές VPS.org είναι επίμονες εικονικές μηχανές, όχι εφήμερες περιπτώσεις: μοντέλα PyTorch, ρυθμίσεις και δεδομένα παραμένουν στην αποθήκευση SSD του διακομιστή μέχρι να τις διαγράψετε.

Πού πρέπει να αποθηκεύσω δεδομένα για το PyTorch φόρτο εργασίας μου;

+

Κρατήστε τα δεδομένα εργασίας για SSD του διακομιστή για γρήγορη πρόσβαση κατά τη διάρκεια PyTorch τρέχει, και αντιγράψτε τελικά αντικείμενα (βάρη, γενιές, κτερίσματα) για την αποθήκευση έξω από VPS.org; στιγμιότυπα και αντίγραφα ασφαλείας παραμένουν στην ίδια ομάδα αποθήκευσης.

Μπορώ να κλιμακώσω το PyTorch GPU VPS μου αργότερα;

+

Μπορείτε να αναβαθμίσετε οποιοδήποτε διακομιστή VPS.org σε ένα μεγαλύτερο σχέδιο από τον πίνακα ελέγχου; η αλλαγή μεγέθους επανεκκινεί και σας PyTorch εγκατάσταση μεταφέρει πάνω.

Είναι διαθέσιμα αντίγραφα ασφαλείας για το GPU VPS μου;

+

Ναι. Οι εφεδρικές συσκευές είναι ένα επιπλέον ποσό (καθημερινά +30% της τιμής του σχεδίου, διατηρείται 7 ημέρες; εβδομαδιαία +20%, διατηρούνται 28 ημέρες) και οι φωτογραφίες είναι δωρεάν, το οποίο είναι χρήσιμο πριν από την εκτέλεση του μεγάλου PyTorch. Και οι δύο παραμένουν στην ίδια ομάδα αποθήκευσης με τον διακομιστή.

Μπορώ να έχω μια επιστροφή χρημάτων;

+

Υποστήριξη επικοινωνίας εντός 30 ημερών από την πρώτη αγορά σας για να ζητήσετε επιστροφή χρημάτων. Οι διακομιστές GPU δεν πωλούνται ακόμα, έτσι δεν υπάρχει εντολή GPU.

Θέλετε να εκτελέσετε PyTorch σε ένα διακομιστή GPU;

Η ικανότητα GPU είναι περιορισμένη. Πείτε μας για το φόρτο εργασίας σας και θα απαντήσουμε με διαθεσιμότητα και τιμολόγηση.