Prochainement: NVIDIA Tesla P40, 24 Go VRAM

TensorFlow GPU VPS

Exécutez la formation TensorFlow et Keras et l'inférence sur une NVIDIA Tesla P40 (24 GB VRAM, architecture Pascal). Les serveurs GPU ne sont pas encore disponibles; contactez-nous pour être avertis quand ils le sont.

$ pip install tensorflow[and-cuda]
# Exemple de commande d'installation

Qu'est-ce que {nom} sur un VPS GPU?

TensorFlow est le cadre d'apprentissage automatique open-source de Google. Sur un serveur GPU, TensorFlow exécute ses opérations sur le GPU via CUDA.

TensorFlow sur un serveur GPU VPS.org

Accélération du GPU

TensorFlow utilise le GPU via CUDA une fois que vous installez un pilote correspondant et la version CUDA.

Keras

Construisez des modèles avec l'API Keras en plus du moteur GPU.

TensorBoard

Surveillez la formation avec TensorBoard sur votre propre serveur.

TF Service

Servir des modèles formés avec TensorFlow Serving.

Cas d'utilisation populaires {nom}

Classification des images
Détection d'objets
Traitement des langues naturelles
Systèmes de recommandation
Prévisions des séries chronologiques
Production d'oléoducs ML

Spécifications prévues du GPU

GPUNVIDIA Tesla P40
VRAM24 GB GDDR5
Noyaux de la CUDA3,840
FP3212 TFLOPS
INT847 TOPS
Mémoire BW346 GB/s
ArchitecturePascal (GP102)
PasséPCIe à barres métalliques

Foire aux questions

Qu'est-ce que TensorFlow sur un VPS GPU?

+

TensorFlow peut utiliser un GPU NVIDIA pour accélérer son travail. Les serveurs GPU VPS.org ne sont pas encore disponibles pour commander; contactez-nous pour entendre quand ils sont. TensorFlow est une charge de travail d'entraînement / réglage fin. Planifiez pour les tâches de longue durée: snapshot your VPS régulièrement et conservez une copie des poids formés à l'extérieur de VPS.org.

Comment configurer TensorFlow sur un VPS GPU?

+

Les serveurs GPU ne sont pas encore disponibles pour commander. Aujourd'hui, vous pouvez exécuter TensorFlow sur un plan CPU régulier, où il fonctionne beaucoup plus lentement que sur un GPU: SSH et exécuter pip install tensorflow[and-cuda].

Combien de VRAM ai-je besoin pour TensorFlow?

+

L'entraînement VRAM est dominé par l'état optimal plus les activations. Le réglage complet d'un 7B LLM nécessite environ 24 à 48 Go; LoRA / QLora s'adapte en 8 à 16 Go.

Combien coûterait un serveur GPU pour TensorFlow?

+

Les prix GPU seront publiés lorsque les serveurs GPU pourront être commandés. Contactez-nous si vous voulez savoir quand cela se produit.

Puis-je utiliser d'autres outils aux côtés de TensorFlow?

+

Oui. Chaque serveur VPS.org est livré avec un accès root complet, vous pouvez donc exécuter d'autres outils à côté de TensorFlow dans la mémoire vive et le stockage du serveur.

Est-ce que j'obtiens la pleine racine sur le TensorFlow GPU VPS?

+

Chaque serveur VPS.org est livré avec un accès SSH racine complète, de sorte que vous pouvez installer les pilotes, les bibliothèques et TensorFlow comme vous le souhaitez.

Est-ce que VPS.org préinstalle CUDA pour TensorFlow?

+

Non. Aucun serveur n'est livré avec un pilote d'exécution CUDA ou NVIDIA préinstallé, et les serveurs GPU ne sont pas encore disponibles pour commander. Vous installez les versions TensorFlow vous-même.

Mon TensorFlow GPU VPS persiste-t-il entre les sessions?

+

Oui. Les serveurs VPS.org sont des machines virtuelles persistantes, pas des instances éphémères : les modèles TensorFlow, les configs et les données restent sur le stockage SSD du serveur jusqu'à ce que vous les supprimiez.

Où dois-je stocker les données pour ma charge de travail TensorFlow?

+

Continuez à travailler sur le SSD du serveur pour un accès rapide pendant les exécutions de TensorFlow, et copiez les artefacts finis (poids, générations, embarquations) au stockage extérieur de VPS.org ; les instantanés et sauvegardes restent sur le même groupe de stockage.

Puis-je faire une échelle de mon TensorFlow GPU VPS plus tard?

+

Vous pouvez mettre à niveau n'importe quel serveur VPS.org vers un plan plus grand depuis le panneau de contrôle ; la redimensionnement le redémarre et votre installation TensorFlow se déplace. Les serveurs GPU ne sont pas encore disponibles.

Est-ce que des sauvegardes sont disponibles pour mon GPU VPS?

+

Oui. Les sauvegardes sont un add-on payant (par jour +30% du prix du forfait, gardé 7 jours; hebdomadaire +20%, gardé 28 jours) et les instantanés sont gratuits, ce qui est utile avant de longues TensorFlow. Les deux restent sur le même groupe de stockage que le serveur.

Je peux obtenir un remboursement?

+

Assistance de contact dans les 30 jours suivant votre premier achat pour demander un remboursement. Les serveurs GPU ne sont pas encore vendus, donc aucune commande GPU n'est en cause.

Vous voulez exécuter TensorFlow sur un serveur GPU?

La capacité de GPU est limitée. Parlez-nous de votre charge de travail et nous répondrons avec disponibilité et prix.