Proxy do Node.js, lidando com o gzip DEcompression
Atualmente, estou trabalhando em um servidor proxy, no qual, neste caso, precisamos modificar os dados (usando o regexp) que enviamos por eles.
Na maioria dos casos, funciona bem, exceto em sites que usam gzip como codificação de conteúdo (eu acho), encontrei um módulo chamadocomprimir e tentei empurrar os pedaços que eu recebo através de um fluxo de descompactação / gunzip, mas não está saindo como eu esperava. (veja abaixo o código)
achei que eu postaria algum código para dar suporte ao meu prob, esse é o proxy que é carregado com o mvc (express):
module.exports = {
index: function(request, response){
var iframe_url = "www.nu.nl"; // site with gzip encoding
var http = require('http');
var httpClient = http.createClient(80, iframe_url);
var headers = request.headers;
headers.host = iframe_url;
var remoteRequest = httpClient.request(request.method, request.url, headers);
request.on('data', function(chunk) {
remoteRequest.write(chunk);
});
request.on('end', function() {
remoteRequest.end();
});
remoteRequest.on('response', function (remoteResponse){
var body_regexp = new RegExp("<head>"); // regex to find first head tag
var href_regexp = new RegExp('\<a href="(.*)"', 'g'); // regex to find hrefs
response.writeHead(remoteResponse.statusCode, remoteResponse.headers);
remoteResponse.on('data', function (chunk) {
var body = doDecompress(new compress.GunzipStream(), chunk);
body = body.replace(body_regexp, "<head><base href=\"http://"+ iframe_url +"/\">");
body = body.replace(href_regexp, '<a href="#" onclick="javascript:return false;"');
response.write(body, 'binary');
});
remoteResponse.on('end', function() {
response.end();
});
});
}
};
na parte do corpo var, quero ler o corpo e, por exemplo, neste caso, remover todos os hrefs, substituindo-os por um #. O problema aqui, é claro, é que, quando temos um site codificado / compactado com gzip, é tudo bobagem e não podemos aplicar os regexps.
agora eu já estou cansado de mexer com o módulo node-compress:
doDecompress(new compress.GunzipStream(), chunk);
que se refere a
function doDecompress(decompressor, input) {
var d1 = input.substr(0, 25);
var d2 = input.substr(25);
sys.puts('Making decompression requests...');
var output = '';
decompressor.setInputEncoding('binary');
decompressor.setEncoding('utf8');
decompressor.addListener('data', function(data) {
output += data;
}).addListener('error', function(err) {
throw err;
}).addListener('end', function() {
sys.puts('Decompressed length: ' + output.length);
sys.puts('Raw data: ' + output);
});
decompressor.write(d1);
decompressor.write(d2);
decompressor.close();
sys.puts('Requests done.');
}
Mas ele falha nele, já que a entrada do chunk é um objeto, então tentei fornecê-lo como um chunk.toString () que também falha com dados de entrada inválidos.
Eu queria saber se eu estou indo na direção certa?