Em breve: NVIDIA Tesla P40, 24 GB VRAM

TensorFlow GPU VPS

Executar treinamento TensorFlow e Keras e inferência em uma NVIDIA Tesla P40 (24 GB VRAM, arquitetura Pascal). Os servidores GPU ainda não são ordenáveis; entre em contato conosco para ser notificado quando eles estão.

$ pip install tensorflow[and-cuda]
# Exemplo de comando de instalação

O que é {nome} em um GPU VPS?

TensorFlow é o framework de aprendizado de máquina de código aberto do Google. Em um servidor GPU, o TensorFlow executa suas operações na GPU através da CUDA.

TensorFlow num servidor de GPU VPS.org

Aceleração da GPU

TensorFlow usa a GPU através da CUDA uma vez que você instalar um driver e versão CUDA correspondente.

Keras

Construa modelos com a API Keras no topo do mecanismo GPU.

TensorBoard

Monitore treinamento com o TensorBoard no seu próprio servidor.

TF Serve

Servir modelos treinados com TensorFlow Serving.

Processos de uso populares {nome}

Classificação das imagens
Detecção de objetos
Processamento de língua natural
Sistemas de recomendação
Previsão das séries horárias
Oleodutos de produção ML

Especificações do GPU previstas

GPUNVIDIA Tesla P40
VRAM24 GB GDDR5
Núcleos CUDA3,840
FP3212 TFLOPS
INT847 TOPS
Memória BW346 GB/s
ArquiteturaPascal (GP102)
PassagemPCIe passa-passagem

Perguntas Frequentes

O que é TensorFlow em um VPS GPU?

+

TensorFlow pode usar uma NVIDIA GPU para acelerar seu trabalho. VPS.org servidores GPU ainda não estão disponíveis para encomendar; contate-nos para ouvir quando eles são. TensorFlow é uma carga de trabalho treinador / ajuste fino. Planeie para trabalhos de longa duração: instantâneo seu VPS regularmente e mantenha uma cópia de pesos treinados fora de VPS.org.

Como é que eu configuro TensorFlow em um GPU VPS?

+

Os servidores GPU ainda não estão disponíveis para encomendar. Hoje você pode executar TensorFlow em um plano de CPU regular, onde funciona muito mais lentamente do que em uma GPU: SSH e executar pip install tensorflow[and-cuda].

Quanto preciso de VRAM para TensorFlow?

+

Treinamento VRAM é dominado pelo estado otimizador mais ativações. Full-tuning de um LLM 7B necessita de aproximadamente 24 a 48 GB; LoRA / QLoRA se encaixa em 8 a 16 GB.

Quanto custaria um servidor GPU para TensorFlow?

+

O preço da GPU será publicado quando os servidores da GPU podem ser encomendados. Contacte-nos se quiser ouvir quando isso acontecer.

Posso executar outras ferramentas ao lado de TensorFlow?

+

Sim. Cada servidor VPS.org vem com acesso completo à raiz, para que você possa executar outras ferramentas ao lado do TensorFlow dentro da RAM e armazenamento do servidor.

Tenho toda a raiz no VPS de TensorFlow GPU?

+

Todos os servidores VPS.org vem com acesso SSH completo root, para que você possa instalar drivers, bibliotecas e TensorFlow, como você precisa.

VPS.org preinstalar CUDA para TensorFlow?

+

Não. Nenhum servidor vem com um tempo de execução CUDA ou driver NVIDIA pré-instalado, e servidores GPU ainda não estão disponíveis para encomendar. Você instala as versões TensorFlow precisa de si mesmo.

O meu TensorFlow GPU VPS persiste entre sessões?

+

Sim. os servidores VPS.org são máquinas virtuais persistentes, não instâncias efemerais: modelos TensorFlow, configurações e dados permanecer no armazenamento SSD do servidor até que você os exclua.

Onde devo armazenar dados para a minha carga de trabalho TensorFlow?

+

Continue trabalhando dados sobre o SSD do servidor para acesso rápido durante as correções TensorFlow e copie artefatos acabados (pesos, gerações, encaixamentos) para armazenamento fora do VPS.org; instantâneos e backups permanecem no mesmo cluster de armazenamento.

Posso escalar o meu TensorFlow GPU VPS mais tarde?

+

Você pode atualizar qualquer servidor VPS.org para um plano maior do painel de controle; a redimensionamento reinicia-o e sua instalação TensorFlow carrega sobre. Os servidores GPU ainda não estão disponíveis.

Os backups estão disponíveis para o meu GPU VPS?

+

Sim. Os backups são um add-on pago (diaria +30% do preço do plano, mantidos 7 dias; semanalmente +20%, mantidos 28 dias) e instantâneos são gratuitos, o que é útil antes de longos TensorFlow funciona. Ambos permanecem no mesmo cluster de armazenamento do servidor.

Posso obter um reembolso?

+

Apoio de contato no prazo de 30 dias a contar da sua primeira compra para solicitar um reembolso. Os servidores GPU ainda não estão vendidos, por isso não está envolvida nenhuma ordem GPU.

Quer executar TensorFlow em um servidor GPU?

A capacidade da GPU é limitada. Fale-nos sobre sua carga de trabalho e nós responderemos com disponibilidade e preços.