近日公開: NVIDIA Tesla P40、24 GB VRAM

PyTorch GPU VPS

NVIDIA Tesla P40 (24GB VRAM, Pascal architecture) 上で PyTorch モデルを訓練し、フル root アクセスで実行します。GPU サーバはまだ注文できません。注文したら連絡してください。

$ pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124
# 例えば、インストールコマンド

GPU VPS 上の PyTorch は何ですか?

グラフィックサーバは PyTorch の訓練と推論を GPU 上で実行します。GPU は CPU よりも速く、多くのモデルで実行できます。

PyTorch on a VPS.org GPU server

CUDA スタックをインストール

NVIDIA ドライバ、CUDA、必要な PyTorch ビルドをインストールします。 PyTorch ビルドが Pascal GPU (計算能力 6.1) をサポートしているか確認します。

24GB VRAM のみ

小型・中型モデル,LoRA微調整,中程度のバッチサイズのためのスペース。

木星

サーバ上で Jupyter ノートを実行し、GPU 上で対話的に作業します。

完全なルートアクセス

プロジェクトの必要に応じて環境を設定します。

よく使われる PyTorch ユースケース

ニューラルネットワーク訓練
コンピュータビジョンモデル
トランスフォーマー
生成的AI研究
モデルフィニッシュ
生産推論

計画中のGPU仕様

グラフィックプロセッサNVIDIA Tesla P40
仮想メモリ24 GB GDDR5
CUDA コア3,840
FP3212 TFLOPS
INT847 TOPS
メモリBW346 GB/s
建築Pascal (GP102)
パッススルーPCIeパススルー

よくある質問

グラフィックカードのVPSでのPyTorchは何ですか?

+

PyTorch は NVIDIA GPU を使って作業を高速化できます。VPS.org GPU サーバはまだ注文できません。注文するときは、我々に連絡してください。PyTorch は訓練/微調整ワークロードです。長期間のジョブの計画:VPS のスナップショットを定期的に取って、訓練された重みのコピーを VPS.org の外に保持してください。

PyTorchをGPU VPSで設定するには?

+

グラフィックサーバはまだ注文できません。現在、PyTorchは通常の CPU プランで実行できます。そこでは、GPU よりも遅く動作します。SSH で入力し、pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124を実行します。

PyTorchにはどれくらいのVRAMが必要ですか?

+

7B LLMの完全な微調整には約24から48GBが必要で、LoRA/QLoRAは8から16GBで十分である。

PyTorchのGPUサーバは いくらかかる?

+

GPU サーバが注文可能になったときに GPU 価格が公開されます。その時に知りたい場合は、我々に連絡してください。

PyTorchと同時に他のツールを実行できますか?

+

ああ、すべてのVPS.orgサーバはフルルートアクセスを持ってる だから、他のツールをPyTorchと共に サーバのRAMとストレージ内で動かすことができる

PyTorch GPU VPS でフルルートを取得できますか?

+

すべてのVPS.orgサーバはフルルートSSHアクセスを持ち、ドライバ、ライブラリ、PyTorchを必要に応じてインストールできます。

VPS.org は PyTorch のために CUDA をプリインストールしますか?

+

No. No server comes with a CUDA runtime or NVIDIA driver preinstalled, and GPU servers are not available to order yet. You install the versions PyTorch needs yourself.

PyTorch GPU VPS はセッション間で保持されますか?

+

はい。VPS.orgサーバは永続的な仮想マシンであり、短期間のインスタンスではありません。PyTorchモデル、コンフィギュレーション、データは、削除されるまでサーバのSSDストレージに残ります。

PyTorch ワークロードのデータをどこに保存すればよいか?

+

実行中のデータはサーバのSSDに保持し,PyTorchの実行中の高速アクセスを可能にし,完成したアーティファクト(重み,生成,埋め込み)をVPS.org以外のストレージにコピーする。

PyTorch GPU VPS を後で拡張できますか?

+

コンピュータの制御パネルからどの VPS.org サーバでもより大きなプランにアップグレードできます。サイズ変更で再起動され、PyTorch のインストールが引き継がれます。GPU サーバはまだ利用できません。

バックアップは可能ですか?

+

バックアップは有料アドオン (プラン価格の日々+30%、7日間保持、週間+20%、28日間保持) であり、スナップショットは無料で、長期PyTorchの実行前に役立ちます。両方ともサーバと同じストレージクラスタに残ります。

返金はできますか?

+

初回購入後30日以内にサポートに連絡して返金を要求してください。GPUサーバはまだ販売されていませんので、GPUの注文は含まれません。

GPU サーバ上で PyTorch を実行しますか?

GPU 容量は制限されています。ワークロードを教えてください。利用可能性と価格を返信します。