Rastreador web ¿Analiza enlaces PHP / Javascript?
Actualmente estoy usando el paquete de agilidad HTML en C # para un rastreador web. He logrado evitar muchos problemas hasta ahora (URI inválidos, como "/extra/url/to/base.html" y "#" enlaces), pero también necesito procesar PHP, Javascript, etc. Me gusta para algunos sitios, los enlaces están en PHP, y cuando mi rastreador web intenta navegar a estos, falla. Un ejemplo es una página de enlace de acordeón PHP / Javascript. ¿Cómo haría para navegar / analizar estos enlaces?