Lo bueno era raspar el contenido del sitio web usando Node.js. Me gustaría construir algo muy, muy rápido que pueda ejecutar búsquedas al estilo de kayak.com, donde se envía una consulta a varios sitios diferentes, los resultados se raspan y se devuelven al cliente a medida que están disponibles.

Supongamos que este script solo debe proporcionar los resultados en formato JSON, y podemos procesarlos directamente en el navegador o en otra aplicación web.

Algunos puntos de partida:

Utilizando node.js y jquery para raspar sitios web

¿Alguien tiene ideas