Huấn luyện và chạy các mô hình PyTorch trên NVIDIA Tesla P40 (24 GB VRAM, kiến trúc Pascal), với quyền truy cập root đầy đủ. Các máy chủ GPU chưa được đặt hàng; liên hệ với chúng tôi để được thông báo khi chúng được đặt hàng.
$ pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124
# Lệnh cài đặt ví dụ
PyTorch là một khung học sâu được sử dụng rộng rãi. Một máy chủ GPU chạy PyTorch huấn luyện và suy luận trên GPU, nhanh hơn nhiều so với CPU cho hầu hết các mô hình.
You install the NVIDIA driver, CUDA and the PyTorch build you need. Check that your PyTorch build still supports Pascal GPUs (compute capability 6.1).
Phòng cho các mô hình nhỏ và trung bình, LoRA điều chỉnh và kích thước hàng loạt trung bình.
Chạy các cuốn sổ Jupyter trên máy chủ cho công việc tương tác trên GPU.
Cấu hình môi trường chính xác như dự án của bạn cần.
PyTorch có thể dùng GPU NVIDIA để tăng tốc công việc của nó. Máy chủ GPU VPS.org chưa có sẵn để đặt hàng; liên hệ với chúng tôi để biết khi nào chúng có sẵn. PyTorch là một tải tập luyện/ điều chỉnh. Kế hoạch cho các công việc chạy lâu: chụp ảnh VPS của bạn thường xuyên và giữ một bản sao của trọng lượng tập luyện bên ngoài VPS.org.
Các máy chủ GPU chưa có sẵn để đặt hàng. Ngày nay bạn có thể chạy PyTorch trên một gói CPU thông thường, nơi nó hoạt động chậm hơn nhiều so với trên GPU: SSH vào và chạy pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124.
VRAM huấn luyện được thống trị bởi trạng thái tối ưu hóa cộng với các hoạt động. Điều chỉnh hoàn chỉnh của một 7B LLM cần khoảng 24 đến 48 GB; LoRA / QLoRA phù hợp trong 8 đến 16 GB.
Giá GPU sẽ được công bố khi máy chủ GPU có thể được đặt hàng. Liên hệ với chúng tôi nếu muốn biết khi điều đó xảy ra.
Mỗi máy chủ VPS.org đều có quyền truy cập root, vì vậy bạn có thể chạy các công cụ khác cùng với PyTorch trong RAM và bộ nhớ của máy chủ.
Mỗi máy chủ VPS.org có quyền truy cập root SSH đầy đủ, vì vậy bạn có thể cài đặt driver, thư viện và PyTorch bất cứ khi nào bạn cần.
Không. Không máy chủ nào có trình điều khiển CUDA runtime hay NVIDIA được cài đặt sẵn, và máy chủ GPU chưa có sẵn để đặt hàng. Bạn tự cài đặt các phiên bản PyTorch cần.
Có. Máy chủ VPS.org là máy ảo bền vững, không phải là các trường hợp ngắn hạn: các mô hình PyTorch, configs và dữ liệu vẫn ở trong bộ nhớ SSD của máy chủ cho đến khi bạn xóa chúng.
Giữ dữ liệu làm việc trên SSD của máy chủ để truy cập nhanh trong khi chạy PyTorch, và sao chép các tác phẩm hoàn thành (nặng, thế hệ, nhúng) để lưu trữ bên ngoài VPS.org; snapshots và bản sao lưu vẫn ở trên cùng một cụm lưu trữ.
Bạn có thể nâng cấp bất kỳ máy chủ VPS.org nào lên một kế hoạch lớn hơn từ bảng điều khiển; kích thước thay đổi khởi động lại nó và cài đặt PyTorch của bạn sẽ được chuyển sang. Các máy chủ GPU chưa có sẵn.
Có. Bảo vệ là một bổ sung trả phí (mỗi ngày +30% giá kế hoạch, giữ 7 ngày; hàng tuần +20%, giữ 28 ngày) và snapshot miễn phí, hữu ích trước khi chạy PyTorch dài. Cả hai đều ở trên cùng một cụm lưu trữ như máy chủ.
Liên hệ hỗ trợ trong vòng 30 ngày sau khi mua lần đầu để yêu cầu trả lại tiền. Các máy chủ GPU chưa được bán, vì vậy không có đơn đặt hàng GPU liên quan.
Khả năng GPU bị giới hạn. Hãy nói cho chúng tôi biết về tải trọng của bạn và chúng tôi sẽ trả lời với khả năng và giá cả.