Sắp tới: NVIDIA Tesla P40, 24 GB VRAM

TensorFlow GPU VPS

Chạy TensorFlow và Keras huấn luyện và suy luận trên NVIDIA Tesla P40 (24 GB VRAM, kiến trúc Pascal). GPU servers are not yet available; contact us to be notified when they are.

$ pip install tensorflow[and-cuda]
# Lệnh cài đặt ví dụ

TensorFlow trên một GPU VPS là gì?

TensorFlow là một khung học máy nguồn mở của Google. Trên một máy chủ GPU, TensorFlow chạy các hoạt động của nó trên GPU thông qua CUDA.

TensorFlow trên máy phục vụ GPU VPS.org

Gia tốc GPU

TensorFlow sử dụng GPU thông qua CUDA khi bạn cài đặt một trình điều khiển tương ứng và phiên bản CUDA.

Cứng

Xây dựng các mô hình với API Keras trên đỉnh của GPU backend.

TensorBoardName

Kiểm tra luyện tập với TensorBoard trên máy chủ của bạn.

TF phục vụ

Chăm sóc các mô hình được huấn luyện với TensorFlow Serving.

TensorFlow dùng phổ biến

Phân loại ảnh
Phát hiện vật thể
Xử lý ngôn ngữ tự nhiên
Hệ thống khuyến nghị
Dự báo chuỗi thời gian
Đường ống ML sản xuất

Đặc điểm GPU dự kiến

GPUNVIDIA Tesla P40
RAM VRAM24 GB GDDR5
Màu CUDA3,840
FP3212 TFLOPS
INT847 TOPS
Bộ nhớ đen trắng346 GB/s
Kiến trúcPascal (GP102)
Đường đi quaPCIe kim loại thô

Câu hỏi thường gặp

TensorFlow là gì trên GPU VPS?

+

TensorFlow có thể dùng GPU NVIDIA để tăng tốc công việc của nó. Máy chủ GPU VPS.org chưa có sẵn để đặt hàng; liên hệ với chúng tôi để biết khi nào chúng có sẵn. TensorFlow là một tải tập luyện/ điều chỉnh. Kế hoạch cho các công việc chạy lâu: chụp ảnh VPS của bạn thường xuyên và giữ một bản sao của trọng lượng tập luyện bên ngoài VPS.org.

Làm thế nào để tôi cài đặt TensorFlow trên một GPU VPS?

+

Các máy chủ GPU chưa có sẵn để đặt hàng. Ngày nay bạn có thể chạy TensorFlow trên một gói CPU thông thường, nơi nó hoạt động chậm hơn nhiều so với trên GPU: SSH vào và chạy pip install tensorflow[and-cuda].

Tôi cần bao nhiêu VRAM cho TensorFlow?

+

VRAM huấn luyện được thống trị bởi trạng thái tối ưu hóa cộng với các hoạt động. Điều chỉnh hoàn chỉnh của một 7B LLM cần khoảng 24 đến 48 GB; LoRA / QLoRA phù hợp trong 8 đến 16 GB.

Một máy chủ GPU cho TensorFlow sẽ tốn bao nhiêu?

+

Giá GPU sẽ được công bố khi máy chủ GPU có thể được đặt hàng. Liên hệ với chúng tôi nếu muốn biết khi điều đó xảy ra.

Tôi có thể chạy các công cụ khác cùng với TensorFlow không?

+

Mỗi máy chủ VPS.org đều có quyền truy cập root, vì vậy bạn có thể chạy các công cụ khác cùng với TensorFlow trong RAM và bộ nhớ của máy chủ.

Tôi có thể root toàn bộ trên TensorFlow GPU VPS không?

+

Mỗi máy chủ VPS.org có quyền truy cập root SSH đầy đủ, vì vậy bạn có thể cài đặt driver, thư viện và TensorFlow bất cứ khi nào bạn cần.

Có phải VPS.org cài đặt trước CUDA cho TensorFlow?

+

Không. Không máy chủ nào có trình điều khiển CUDA runtime hay NVIDIA được cài đặt sẵn, và máy chủ GPU chưa có sẵn để đặt hàng. Bạn tự cài đặt các phiên bản TensorFlow cần.

VPS GPU TensorFlow của tôi có còn tồn tại giữa các phiên chạy không?

+

Có. Máy chủ VPS.org là máy ảo bền vững, không phải là các trường hợp ngắn hạn: các mô hình TensorFlow, configs và dữ liệu vẫn ở trong bộ nhớ SSD của máy chủ cho đến khi bạn xóa chúng.

Tôi nên lưu dữ liệu cho TensorFlow ở đâu?

+

Giữ dữ liệu làm việc trên SSD của máy chủ để truy cập nhanh trong khi chạy TensorFlow, và sao chép các tác phẩm hoàn thành (nặng, thế hệ, nhúng) để lưu trữ bên ngoài VPS.org; snapshots và bản sao lưu vẫn ở trên cùng một cụm lưu trữ.

Tôi có thể nâng cấp TensorFlow GPU VPS của tôi sau này không?

+

Bạn có thể nâng cấp bất kỳ máy chủ VPS.org nào lên một kế hoạch lớn hơn từ bảng điều khiển; kích thước thay đổi khởi động lại nó và cài đặt TensorFlow của bạn sẽ được chuyển sang. Các máy chủ GPU chưa có sẵn.

Có thể sao lưu cho GPU VPS của tôi không?

+

Có. Bảo vệ là một bổ sung trả phí (mỗi ngày +30% giá kế hoạch, giữ 7 ngày; hàng tuần +20%, giữ 28 ngày) và snapshot miễn phí, hữu ích trước khi chạy TensorFlow dài. Cả hai đều ở trên cùng một cụm lưu trữ như máy chủ.

Tôi có thể được trả lại không?

+

Liên hệ hỗ trợ trong vòng 30 ngày sau khi mua lần đầu để yêu cầu trả lại tiền. Các máy chủ GPU chưa được bán, vì vậy không có đơn đặt hàng GPU liên quan.

Muốn chạy TensorFlow trên máy chủ GPU không?

Khả năng GPU bị giới hạn. Hãy nói cho chúng tôi biết về tải trọng của bạn và chúng tôi sẽ trả lời với khả năng và giá cả.