Qual é atualmente a melhor GPU para o aprendizado profundo?

Atualização para Junho de 2020: Eu recomendo o posto da Lambda: Escolhendo a melhor GPU para aprendizado profundo em 2020.

O RTX 2080 Ti é a melhor GPU para aprendizado profundo para quase todos. Apesar de ser uma marca de "cartão de jogo" de grau de consumidor, continua a ser o cavalo de batalha da pesquisa de ponta entre estudantes e professores de todas as universidades (mesmo em escolas com orçamentos relativamente grandes, como o MIT).

RTX 2080 Ti speed compared to other GPUs

1. | GPU | Price | FP32 | FP16 | VRAM | 
2. |-----------------|--------|-------|-------|-------| 
3. | RTX 2080 Ti | $1,200 | 1.00x | 1.00x | 11 GB | 
4. | RTX 2080 | $729 | 1.37x | 1.32x | 8 GB | 
5. | 1080 Ti | $749 | 1.35x | 1.72x | 11 GB | 
6. | Titan Xp | $950 | 1.22x | 1.59x | 12 GB | 
7. | Titan V | $2,295 | 0.96x | 0.81x | 12 GB | 
8. | Titan RTX | $2,500 | 0.87x | 0.71x | 24 GB | 
9. | Tesla V100 | $9,000 | 0.73x | 0.55x | 32 GB | 

• Read this table as follows: O RTX 2080 Ti é 1,37x mais rápido que o RTX 2080 para FP32 e 1,32x mais rápido que o RTX 2080 para FP16.>
• li>Muitos investigadores de IA usam FP32, embora isto esteja a mudar.números nas colunas FP32 e FP16 são obtidos dividindo a velocidade do RTX 2080 Ti pela velocidade da GPU que está sendo comparada naquela linha.<

Graphs

Benchmarks dessas GPUs são mostrados abaixo. Estes gráficos mostram o # de imagens que cada GPU é capaz de processar por segundo enquanto treina várias redes neurais populares (por exemplo, ResNet50, VGG16, AlexNet). Este é um método padrão para medir a performance de aprendizado da máquina de uma GPU.

Source: RTX 2080 Ti Deep Learning Benchmarks com TensorFlow - 2019