Como combinar scrapy e htmlunit para rastrear URLs com javascript

Estou trabalhando no Scrapy para rastrear páginas, no entanto, não consigo lidar com as páginas com javascript. As pessoas sugerem que eu use a unidade html, então eu a instalei, mas não sei como usá-la. Alguém pode dar um exemplo (scrapy + htmlunit) para mim? Muito obrigado.