node.js helmet nodejs encoding using request



node js request post json (2)

Ich versuche, die korrekte Kodierung mit der Anfrage zu bekommen.

request.get({
    "uri":'http://www.bold.dk/tv/',
    "encoding": "text/html;charset='charset=utf-8'"
  },
  function(err, resp, body){    
    console.log(body);
  }
);

Egal was ich mache, die Kodierung der dänischen Zeichen stimmt nicht.

Irgendwelche Gedanken?


Answer #1

Sie können iconv (lite) verwenden, um dies zu konvertieren. Sie müssen der Anforderung auch mitteilen, dass die Codierung nicht standardmäßig auf UTF-8 gesetzt wird, indem Sie die Eigenschaft encoding auf null setzen. Deshalb solltest du Folgendes tun:

var iconv = require('iconv-lite');
request.get({
    uri:'http://www.bold.dk/tv/',
    encoding: null
  },
  function(err, resp, body){    
    var bodyWithCorrectEncoding = iconv.decode(body, 'iso-8859-1');
    console.log(bodyWithCorrectEncoding);
  }
);

Answer #2

Vielleicht liegt Ihr Problem in 'Accept-Encoding' Kopfzeile 'Accept-Encoding' . Nehmen wir an, Sie haben Header wie 'Accept-Encoding': 'gzip,deflate'

Wenn es so ist, haben Sie 2 Möglichkeiten, dies zu beheben:

  1. Entfernen Sie diese Kopfzeile
  2. Verwenden Sie den folgenden Code zum Entpacken der Daten:

    const req = request(options, res => {
        let buffers = []
        let bufferLength = 0
        let strings = []
    
        const getData = chunk => {
            if (!Buffer.isBuffer(chunk)) {
                strings.push(chunk)
            } else if (chunk.length) {
                bufferLength += chunk.length
                buffers.push(chunk)
            }
        }
    
        const endData = () => {
            let response = {code: 200, body: ''}
            if (bufferLength) {
                response.body = Buffer.concat(buffers, bufferLength)
                if (options.encoding !== null) {
                    response.body = response.body.toString(options.encoding)
                }
                buffers = []
                bufferLength = 0
            } else if (strings.length) {
                if (options.encoding === 'utf8' && strings[0].length > 0 && strings[0][0] === '\uFEFF') {
                    strings[0] = strings[0].substring(1)
                }
                response.body = strings.join('')
            }
            console.log('response', response)
        };
    
        switch (res.headers['content-encoding']) {
            // or, just use zlib.createUnzip() to handle both cases
            case 'gzip':
                res.pipe(zlib.createGunzip())
                    .on('data', getData)
                    .on('end', endData)
                break;
            case 'deflate':
                res.pipe(zlib.createInflate())
                    .on('data', getData)
                    .on('end', endData)
                break;
            default:
                res.pipe(zlib.createInflate())
                    .on('data', getData)
                    .on('end', endData)
                break;
        }
    });




encoding