Удахгүй: NVIDIA Tesla P40, 24 GB VRAM

TensorFlow график процессор

NVIDIA Tesla P40 (24GB VRAM, Pascal architecture) дээр TensorFlow болон Keras-ийг сургах, тооцоолох үйлдлийг гүйцэтгэнэ. ГПҮ серверүүд одоогоор захиалах боломжгүй байна. Хэрэв захиалах боломжгүй бол бидэнтэй холбоо барина уу.

$ pip install tensorflow[and-cuda]
# Жишээ суурилуулах команд

GPU VPS дээрх TensorFlow гэж юу вэ?

TensorFlow бол Google-ийн нээлттэй эхийн машин суралцах систем юм. ГПХ сервер дээр TensorFlow нь CUDA-г ашиглан ГПХ дээр үйлдлээ гүйцэтгэнэ.

TensorFlow нь VPS.org график сервер дээр

График хурдсуулга

TensorFlow нь тохирох драйвер болон CUDA хувилбарыг суулгасны дараа CUDA-г ашиглан график процессорыг ашиглана.

Хэцүү

График процессорын доод хэсэгт Keras API-тай загваруудыг бүтээх.

Тензор

Өөрийн сервер дээр TensorBoard-ийн сургалтыг хянах.

TF-ийн үйлчилгээ

TensorFlow-ийн үйлчилгээгээр сургасан загваруудыг хүргэх.

TensorFlow түгээмэл хэрэглээний тохиолдол

Зургийн ангилал
Бүтээгдэхүүнийг илрүүлэх
Хэлний боловсруулалт
Шалгуурын систем
Цаг хугацааны дараалал
Үйлдвэрлэлийн ML хоолой

График процессорын тодорхойлолт

График процессорNVIDIA Tesla P40
ВРАМ24 GB GDDR5
Цагаан3,840
FP3212 TFLOPS
INT847 TOPS
Цэнхэр дурсамж346 GB/s
АрхитектурPascal (GP102)
ДараахPCIe дамжуулалт

Заримдаа асуудаг асуултууд

TensorFlow нь GPU VPS дээр юу вэ?

+

TensorFlow нь NVIDIA график процессор ашиглан ажлаа хурдасгаж болно. VPS.org график серверүүд одоогоор захиалах боломжгүй байна; хэзээ захиалах боломжтой болохыг бидэнтэй холбоо барина уу. TensorFlow нь сургалт / тохируулах ажлын ачаалал юм. Хэт удаан үргэлжлэх ажлуудыг төлөвлөх: VPS- ийнхээ зурагнуудыг тогтмол авч, зqx0xqz- аас гадуур бэлтгэсэн жингийн хуулбарыг хадгал.

Би хэрхэн TensorFlow-ийг GPU VPS дээр тохируулах вэ?

+

ГПХ серверүүд одоогоор захиалах боломжгүй байна. Одоо та TensorFlow-ийг GPU-оос хамаагүй удаан ажилладаг зүгээр л CPU-ийн төлөвлөгөөнд ашиглаж болно: SSH-ээр орж pip install tensorflow[and-cuda]-ийг ажиллуулна.

TensorFlow-д хэдий хэмжээний VRAM хэрэгтэй вэ?

+

Сургалтын VRAM нь оптимизаторын байдал ба идэвхжүүлэлтээр удирдагддаг. 7B LLM-ийн бүрэн тохируулгад 24-48 ГБ шаардлагатай; LoRA / QLoRA-д 8-16 ГБ багтана.

TensorFlow-ийн GPU серверийн үнэ хэд вэ?

+

ГП серверүүд захиалагдсан үед ГП-ийн үнэлгээний мэдээллийг нийтлүүлнэ. Хэрэв та энэ мэдээллийг авахыг хүсвэл бидэнтэй холбоо барина уу.

Би TensorFlow-тай хамт өөр хэрэгслийг ажиллуулж болох уу?

+

Тийм. Бүх VPS.org серверүүд root эрхтэй байдаг, ингэснээр та серверийн RAM болон хадгалах санд TensorFlow-тэй хамт бусад хэрэгслийг ажиллуулж болно.

Би TensorFlow GPU VPS дээр бүрэн root болох уу?

+

Бүх VPS.org серверүүд root SSH-ийн бүрэн эрхтэй байдаг, ингэснээр та драйвер, сан болон TensorFlow-ийг өөрийн хэрэгцээнд тохируулан суулгаж болно.

VPS.org нь TensorFlow-ийн CUDA-г өмнө нь суулгасан уу?

+

Үгүй. CUDA-ийн гүйцэтгэх хугацаа эсвэл NVIDIA-ийн драйвер суулгасан сервер байхгүй, мөн GPU серверүүд одоогоор захиалах боломжгүй байна. Та TensorFlow-ийн шаардлагатай хувилбаруудыг өөрсдөө суулгах хэрэгтэй.

Миний TensorFlow GPU VPS нь сеанс хооронд хадгалагдах уу?

+

Тийм ээ. VPS.org серверүүд нь тогтвортой виртуал машинууд, нэн ховор тохиолдол биш: TensorFlow загварууд, тохиргоо, мэдээллийг устгахгүй бол серверийн SSD хадгалах газарт үлдэнэ.

Миний TensorFlow ажлын ачааллыг хаана хадгалах вэ?

+

Keep working data on the server's SSD for fast access during TensorFlow runs, and copy finished artifacts (weights, generations, embeddings) to storage outside VPS.org; snapshots and backups stay on the same storage cluster.

Би TensorFlow GPU VPS-ээ дараа нь өргөжүүлэх боломжтой юу?

+

Та зVPS.org серверийг удирдлагын самбараас илүү том төлөвлөгөөнд шинэчилж болно. хэмжээг өөрчлөхөд дахин эхлүүлж, TensorFlow суулгалтыг хадгална. ГПҮ серверүүд одоогоор байхгүй.

Миний GPU VPS-ийн хувьд хадгалах боломж байна уу?

+

Тийм ээ. Нууцлалын нөөц нь төлбөртэй нэмэлт (өдөр бүр +30% төлөвлөгөөний үнэ, 7хоногийн турш хадгална; долоо хоног бүр +20%, 28хоногийн турш хадгална) ба зураг нь үнэгүй, TensorFlow удаан ажиллахаас өмнө тохиромжтой. Хоёр нь сервертэй ижил хадгалах кластерт үлдэнэ.

Би буцааж авах уу?

+

Эхний худалдан авалтаас хойш 30 хоногийн дотор дэмжлэгт хандаж буцаан олголт авахыг хүснэ. ГПҮ серверүүд одоогоор зарагдаагүй байгаа тул ГПҮ захиалга байхгүй.

График сервер дээр TensorFlow-ийг ажиллуулах уу?

График процессорын хүчин чадал хязгаарлагдсан. Таны ажлын ачаалал, боломжит үнэ, үнэлгээний талаар бидэнд мэдэгдээрэй.