ਜਲਦੀ ਹੀ: NVIDIA Tesla P40, 24 GB VRAM

PyTorch GPU VPS

NVIDIA Tesla P40 (24 GB VRAM, Pascal architecture) ਉੱਤੇ ਪੂਰੀ root ਪਹੁੰਚ ਨਾਲ PyTorch ਮਾਡਲ ਨੂੰ ਟਰੇਨ ਕਰੋ ਅਤੇ ਚਲਾਓ। GPU ਸਰਵਰ ਹੁਣ ਤੱਕ ਆਰਡਰ ਨਹੀਂ ਕੀਤੇ ਜਾ ਸਕਦੇ ਹਨ; ਜਦੋਂ ਉਹ ਆਰਡਰ ਕੀਤੇ ਜਾਣ ਤਾਂ ਸਾਨੂੰ ਸੂਚਿਤ ਕਰਨ ਲਈ ਸੰਪਰਕ ਕਰੋ।

$ pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124
# ਉਦਾਹਰਨ ਇੰਸਟਾਲ ਕਮਾਂਡ

GPU VPS ਉੱਤੇ PyTorch ਕੀ ਹੈ?

ਪਾਈਟੋਰਕ ਇੱਕ ਵਿਆਪਕ ਤੌਰ ਉੱਤੇ ਵਰਤਿਆ ਜਾਂਦਾ ਡੂੰਘਾ ਸਿੱਖਣ ਫਰੇਮਵਰਕ ਹੈ । ਇੱਕ GPU ਸਰਵਰ GPU ਉੱਤੇ ਪਾਈਟੋਰਕ ਟਰੇਨਿੰਗ ਅਤੇ ਅੰਦਾਜ਼ਾ ਲਗਾਉਂਦਾ ਹੈ, ਜੋ ਕਿ CPU ਨਾਲੋਂ ਬਹੁਤ ਤੇਜ਼ ਹੈ ।

VPS.org GPU ਸਰਵਰ ਉੱਤੇ PyTorch

ਆਪਣਾ CUDA ਸਟੈਕ ਇੰਸਟਾਲ ਕਰੋ

ਤੁਸੀਂ NVIDIA ਡਰਾਇਵਰ, CUDA ਅਤੇ ਪਾਈਟੋਰਕ ਬਿਲਡ ਇੰਸਟਾਲ ਕੀਤਾ ਹੈ, ਜੋ ਕਿ ਲੋੜੀਦਾ ਹੈ। ਜਾਂਚ ਕਰੋ ਕਿ ਤੁਹਾਡੀ ਪਾਈਟੋਰਕ ਬਿਲਡ ਪਾਸਕਲ GPUs (ਗਣਨਾ ਸਮਰੱਥਾ 6.1) ਲਈ ਸਹਾਇਕ ਹੈ।

24 ਜੀਬੀ VRAM

ਛੋਟੇ ਅਤੇ ਦਰਮਿਆਨੇ ਆਕਾਰ ਦੇ ਮਾਡਲਾਂ, LoRA fine- tuning ਅਤੇ ਮੱਧਮ ਬੈਚ ਆਕਾਰ ਲਈ ਕਮਰਾ ਹੈ।

ਭੂਮੀ

GPU ਉੱਤੇ ਇੰਟਰਐਕਟਿਵ ਕੰਮ ਲਈ ਸਰਵਰ ਉੱਤੇ ਜੂਪੀਟਰ ਨੋਟਬੁੱਕ ਚਲਾਓ ।

ਪੂਰੀ ਰੂਟ ਪਹੁੰਚ

ਵਾਤਾਵਰਣ ਨੂੰ ਆਪਣੇ ਪ੍ਰੋਜੈਕਟ ਦੀਆਂ ਲੋੜਾਂ ਮੁਤਾਬਕ ਸੰਰਚਨਾ ਕਰੋ ।

ਪ੍ਰਸਿੱਧ PyTorch ਵਰਤੋਂ ਕੇਸ

ਨਿਊਰਲ ਨੈੱਟਵਰਕ ਟਰੇਨਿੰਗ
ਕੰਪਿਊਟਰ ਦ੍ਰਿਸ਼ ਮਾਡਲ
NLP ਟਰਾਨਸਫਾਰਮਰ ਮਾਡਲ( t)
ਜਨਰੇਟਿਵ AI ਖੋਜ
ਮਾਡਲ ਫਿਨ- ਟੂਨਿੰਗ
ਉਤਪਾਦਨ

ਪਲਾਨ GPU ਵੇਰਵਾ

GPUNVIDIA Tesla P40
VRAM24 GB GDDR5
CUDA ਰੰਗ3,840
FP3212 TFLOPS
INT847 TOPS
ਮੈਮੋਰੀ BW346 GB/s
ਆਰਕੀਟੈਕਚਰPascal (GP102)
ਪਾਸਥਰੂPCIe ਪਾਸਥਰੂ

ਅਕਸਰ ਪੁੱਛੇ ਜਾਂਦੇ ਸਵਾਲ

GPU VPS ਉੱਤੇ PyTorch ਕੀ ਹੈ?

+

PyTorch ਆਪਣੇ ਕੰਮ ਨੂੰ ਤੇਜ਼ ਕਰਨ ਲਈ NVIDIA GPU ਵਰਤ ਸਕਦਾ ਹੈ । VPS.org GPU ਸਰਵਰ ਅਜੇ ਤੱਕ ਆਰਡਰ ਲਈ ਉਪਲੱਬਧ ਨਹੀਂ ਹਨ; ਜਦੋਂ ਉਹ ਹੋਣ ਤਾਂ ਸਾਨੂੰ ਪਤਾ ਲਗਾਉਣ ਲਈ ਸੰਪਰਕ ਕਰੋ । PyTorch ਇੱਕ ਟਰੇਨਿੰਗ / ਫਾਈਨ- ਟੂਨਿੰਗ ਵਰਕਲੋਡ ਹੈ । ਲੰਬੇ ਸਮੇਂ ਲਈ ਚੱਲਣ ਵਾਲੇ ਕੰਮਾਂ ਲਈ ਯੋਜਨਾ ਬਣਾਓ: ਆਪਣੇ VPS ਨੂੰ ਨਿਯਮਤ ਤੌਰ ਉੱਤੇ ਸਕੈਨ ਕਰੋ ਅਤੇ VPS.org ਤੋਂ ਬਾਹਰ ਟਰੇਨ ਕੀਤੇ ਭਾਰ ਦੀ ਇੱਕ ਕਾਪੀ ਰੱਖੋ ।

ਮੈਂ GPU VPS ਉੱਤੇ PyTorch ਕਿਵੇਂ ਸੈੱਟਅੱਪ ਕਰਾਂ?

+

GPU ਸਰਵਰ ਹੁਣ ਤੱਕ ਆਰਡਰ ਕਰਨ ਲਈ ਉਪਲੱਬਧ ਨਹੀਂ ਹਨ । ਅੱਜ ਤੁਸੀਂ PyTorch ਨੂੰ ਇੱਕ ਨਿਯਮਤ CPU ਪਲਾਨ ਉੱਤੇ ਚਲਾ ਸਕਦੇ ਹੋ, ਜਿੱਥੇ ਕਿ ਇਹ GPU ਨਾਲੋਂ ਬਹੁਤ ਹੌਲੀ ਕੰਮ ਕਰਦਾ ਹੈ: SSH ਵਿੱਚ ਅਤੇ pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124 ਚਲਾਓ ।

ਕਿੰਨੀ VRAM PyTorch ਲਈ ਲੋੜੀਦੀ ਹੈ?

+

ਟਰੇਨਿੰਗ VRAM ਨੂੰ optimer state plus activation ਦੁਆਰਾ ਨਿਯੰਤਰਿਤ ਕੀਤਾ ਜਾਂਦਾ ਹੈ । 7B LLM ਦੀ ਪੂਰੀ fine- tuning ਲਈ ਲਗਭਗ 24 ਤੋਂ 48 GB ਦੀ ਲੋੜ ਹੁੰਦੀ ਹੈ; LoRA / QLoRA 8 ਤੋਂ 16 GB ਵਿੱਚ ਫਿੱਟ ਹੁੰਦਾ ਹੈ ।

PyTorch ਲਈ GPU ਸਰਵਰ ਦੀ ਕੀਮਤ ਕਿੰਨੀ ਹੋਵੇਗੀ?

+

GPU ਕੀਮਤਾਂ ਤਾਂ ਹੀ ਜਾਰੀ ਕੀਤੀਆਂ ਜਾਣਗੀਆਂ, ਜਦੋਂ GPU ਸਰਵਰਾਂ ਦੀ ਆਰਡਰ ਕੀਤੀ ਜਾ ਸਕੇ। ਜੇਕਰ ਤੁਸੀਂ ਜਾਣਨਾ ਚਾਹੁੰਦੇ ਹੋ ਕਿ ਕੀ ਇਹ ਕਦੋਂ ਹੋਵੇਗਾ ਤਾਂ ਸਾਡੇ ਨਾਲ ਸੰਪਰਕ ਕਰੋ।

ਕੀ ਮੈਂ PyTorch ਦੇ ਨਾਲ ਹੋਰ ਟੂਲ ਚਲਾ ਸਕਦਾ ਹਾਂ?

+

ਹਾਂ। ਹਰ VPS.org ਸਰਵਰ ਪੂਰੀ root ਅਧਿਕਾਰ ਨਾਲ ਆਉਂਦਾ ਹੈ, ਇਸ ਲਈ ਤੁਸੀਂ ਸਰਵਰ ਦੀ RAM ਅਤੇ ਸਟੋਰੇਜ਼ ਵਿੱਚ PyTorch ਦੇ ਨਾਲ ਹੋਰ ਟੂਲ ਚਲਾ ਸਕਦੇ ਹੋ।

ਕੀ ਮੈਨੂੰ PyTorch GPU VPS ਉੱਤੇ ਪੂਰਾ ਰੂਟ ਮਿਲਦਾ ਹੈ?

+

ਹਰ VPS.org ਸਰਵਰ ਪੂਰੀ root SSH ਪਹੁੰਚ ਨਾਲ ਆਉਂਦਾ ਹੈ, ਇਸ ਲਈ ਤੁਸੀਂ ਡਰਾਇਵਰ, ਲਾਇਬਰੇਰੀਆਂ ਅਤੇ PyTorch ਇੰਸਟਾਲ ਕਰ ਸਕਦੇ ਹੋ, ਜਿਵੇਂ ਕਿ ਤੁਹਾਨੂੰ ਲੋੜ ਹੈ ।

ਕੀ VPS.org PyTorch ਲਈ CUDA ਪਹਿਲਾਂ- ਇੰਸਟਾਲ ਕਰਦਾ ਹੈ?

+

ਨਹੀਂ, ਕੋਈ ਸਰਵਰ CUDA ਰਨਟਾਈਮ ਜਾਂ NVIDIA ਡਰਾਇਵਰ ਨਾਲ ਪਹਿਲਾਂ ਇੰਸਟਾਲ ਨਹੀਂ ਹੈ, ਅਤੇ GPU ਸਰਵਰ ਹੁਣ ਤੱਕ ਆਰਡਰ ਲਈ ਉਪਲੱਬਧ ਨਹੀਂ ਹਨ । ਤੁਸੀਂ PyTorch ਲੋੜੀਦੇ ਵਰਜਨ ਆਪਣੇ ਆਪ ਇੰਸਟਾਲ ਕਰੋ ।

ਕੀ ਮੇਰਾ PyTorch GPU VPS ਸ਼ੈਸ਼ਨਾਂ ਵਿੱਚ ਸਥਿਰ ਹੈ?

+

ਹਾਂ । VPS.org ਸਰਵਰ ਸਥਿਰ ਵੁਰਚੁਅਲ ਮਸ਼ੀਨਾਂ ਹਨ, ਨਾ ਕਿ ਥੋੜ੍ਹੇ ਸਮੇਂ ਲਈ ਮੌਜੂਦ: PyTorch ਮਾਡਲ, ਸੰਰਚਨਾ ਅਤੇ ਡਾਟਾ ਸਰਵਰ ਦੇ SSD ਸਟੋਰੇਜ ਉੱਤੇ ਰਹਿਣਗੇ, ਜਦੋਂ ਤੱਕ ਤੁਸੀਂ ਉਨ੍ਹਾਂ ਨੂੰ ਹਟਾ ਨਹੀਂ ਦਿੰਦੇ ।

ਮੈਂ ਆਪਣੇ PyTorch ਵਰਕਲੋਡ ਲਈ ਡਾਟਾ ਕਿੱਥੇ ਸਟੋਰ ਕਰਨਾ ਚਾਹੀਦਾ ਹੈ?

+

PyTorch ਚਲਾਉਣ ਦੌਰਾਨ ਤੇਜ਼ ਪਹੁੰਚ ਲਈ ਸਰਵਰ ਦੇ SSD ਉੱਤੇ ਕੰਮ ਡਾਟਾ ਰੱਖੋ ਅਤੇ VPS.org ਤੋਂ ਬਾਹਰ ਸਟੋਰੇਜ਼ ਲਈ ਮੁਕੰਮਲ ਆਰਟੀਫਿਕਟ (ਵਜ਼ਨ, ਜਨਰੇਸ਼ਨ, ਇੰਬੈੱਡਿੰਗ) ਦੀ ਕਾਪੀ ਕਰੋ; ਸੈਂਪਲ ਅਤੇ ਬੈਕਅੱਪ ਇੱਕੋ ਸਟੋਰੇਜ਼ ਕਲਾਸਟਰ ਉੱਤੇ ਰਹਿਣਗੇ।

ਕੀ ਮੈਂ ਆਪਣੇ PyTorch GPU VPS ਨੂੰ ਬਾਅਦ ਵਿੱਚ ਸਕੇਲ ਕਰ ਸਕਦਾ ਹਾਂ?

+

ਤੁਸੀਂ ਕੰਟਰੋਲ ਪੈਨਲ ਤੋਂ ਕਿਸੇ ਵੀ VPS.org ਸਰਵਰ ਨੂੰ ਵੱਡੇ ਪਲਾਨ ਲਈ ਅੱਪਗਰੇਡ ਕਰ ਸਕਦੇ ਹੋ; ਮੁੜ- ਸਾਈਜ਼ ਕਰਨ ਨਾਲ ਇਹ ਮੁੜ- ਚਾਲੂ ਹੋ ਜਾਵੇਗਾ ਅਤੇ ਤੁਹਾਡੀ PyTorch ਇੰਸਟਾਲੇਸ਼ਨ ਨੂੰ ਲਿਜਾਏਗਾ । GPU ਸਰਵਰ ਹੁਣ ਉਪਲੱਬਧ ਨਹੀਂ ਹਨ ।

ਕੀ ਮੇਰੇ GPU VPS ਲਈ ਬੈਕਅੱਪ ਉਪਲੱਬਧ ਹੈ?

+

ਹਾਂ। ਬੈਕਅੱਪ ਇੱਕ ਭੁਗਤਾਨਯੋਗ ਐਡ- ਆਨ ਹੈ (ਦਿਨ ਪ੍ਰਤੀ +30% ਪਲਾਨ ਕੀਮਤ,7ਦਿਨ ਰੱਖੀ; ਹਫ਼ਤਾਵਾਰੀ +20%, 28 ਦਿਨ ਰੱਖੀ) ਅਤੇ ਸਨੈਪਸ਼ਾਟ ਮੁਫ਼ਤ ਹਨ, ਜੋ ਕਿ ਲੰਬੇ PyTorch ਚਲਾਉਣ ਤੋਂ ਪਹਿਲਾਂ ਲਾਭਦਾਇਕ ਹਨ। ਦੋਵੇਂ ਸਰਵਰ ਵਾਂਗ ਇੱਕੋ ਸਟੋਰੇਜ਼ ਕਲਾਸਟਰ ਉੱਤੇ ਰਹਿਣਗੇ।

ਕੀ ਮੈਨੂੰ ਮੁਆਵਜ਼ਾ ਮਿਲ ਸਕਦਾ ਹੈ?

+

ਤੁਹਾਡੀ ਪਹਿਲੀ ਖਰੀਦ ਤੋਂ 30 ਦਿਨਾਂ ਦੇ ਅੰਦਰ-ਅੰਦਰ ਮੁੜ-ਭੁਗਤਾਨ ਲਈ ਸਹਿਯੋਗ ਨਾਲ ਸੰਪਰਕ ਕਰੋ। GPU ਸਰਵਰ ਹੁਣ ਤੱਕ ਵੇਚੇ ਨਹੀਂ ਗਏ ਹਨ, ਇਸ ਲਈ ਕੋਈ GPU ਆਰਡਰਾਂ ਸ਼ਾਮਲ ਨਹੀਂ ਹਨ।

ਕੀ ਤੁਸੀਂ GPU ਸਰਵਰ ਉੱਤੇ PyTorch ਚਲਾਉਣਾ ਚਾਹੁੰਦੇ ਹੋ?

GPU ਸਮਰੱਥਾ ਸੀਮਿਤ ਹੈ । ਸਾਨੂੰ ਆਪਣੇ ਵਰਕਲੋਡ ਬਾਰੇ ਦੱਸੋ ਅਤੇ ਅਸੀਂ ਉਪਲੱਬਧਤਾ ਅਤੇ ਕੀਮਤ ਨਾਲ ਜਵਾਬ ਦੇਵਾਂਗੇ ।