Barrapunto

Las GPUs todavía son muy inflexibles, hace relativamente poco que pueden hacer "jumps", la comunicación entre memorias locales/buses es limitada, y el repertorio de instrucciones es muy pobre (pues es para algo muy concreto). El siguiente paso intuyo que será similar a lo que hizo IBM/Toshiba/Sony con el Cell [wikipedia.org], inspirado en el Emotion Engine [wikipedia.org] que incorporó la Playstation 2 en 1999 (cualquiera que haya programado los dos sabrá a lo que me refiero).

Juntar 8 GPUs, pongamos que puedan manejar 500 hilos de ejecución sencillos en memorias locales, es impresionante, pero su ámbito de aplicación es limitado. Para hacerse una idea de la complejidad de hacer posible el propósito general con tantas unidades funcionales, aun con 50 buses circulares, supondría gastar la mitad del área del chip sólo en interconexionado... aunque quizá sea viable a medio-largo plazo.

No tengo ni idea de lo que me estás hablando, pero supongo que te estás refiriendo a una generación anterior de tarjetas gráficas. Las últimas (las que tienen el chip G80 y se programan con CUDA) puedes implementar cualquier código por complicado que sea. De facto, CUDA es un extensión del lenguaje C y sirve para compilar tanto la CPU como la GPU.

Salvando el diseñar un código que se ajuste lo más posible a la arquitectura de las GPUs, lo realmente complicado es diseñar un código para que se ejecute en paralelo en varios miles de threads.

La única limitación es que todavía funcionan con precisión simple, pero ya está anunciado que la próxima generación tendrá precisión doble y además seguramente traerá alguna que otra sorpresa.

Las GPUs todavía son muy inflexibles, hace relativamente poco que pueden hacer "jumps"

Nah... casi cinco años... Y por cierto, los saltos en el Cell son una puta mierda. Como metas un par se acabó lo que se daba.

Juntar 8 GPUs, pongamos que puedan manejar 500 hilos de ejecución

UNA GPU como las que lleva ese equipo puede manejar del orden de 10000 hilos concurrentemente. Y la tasa de transferencia CPU-GPU es de 3.2GB/s y la de GPU-GPU de más de 100 GB/s, lo que deja al Cell en bragas.

pero su ámbito de aplicación es limitado.

Sí. Y es exactamente el mismo ámbito que el de Cell. Las aplicaciones para las que Cell es apto son las mismas para las que lo es una GPU (como las que han montado en ese equipo). No hay ninguna aplicación que encaje bien en Cell y mal en GPUs, lo contrario no siempre es cierto (de las GPUs podemos sacar partido extra de funcionalidades como el rasterizador hardware, que es algo que un Cell hace terriblemente mal).