Cómo rechazar las páginas de búsqueda de robots.txt
Necesito rechazarhttp://example.com/startup?page=2 búsqueda de páginas de ser indexadas.
quierohttp://example.com/startup para ser indexado pero nohttp://example.com/startup?page=2 y page3 y así sucesivamente.
Además, el inicio puede ser aleatorio, por ejemplo,http://example.com/XXXXX?page