Node.js 的编码错误

我正在用node.js 重写一个小的python 脚本。原来的脚本是这样工作的：

# -*- coding: utf-8 -*-
import urllib
import httplib
import json

def rpc(url, args = { }):
  try:
    post_data = json.dumps({'args': args})
    f = urllib.urlopen(url, post_data)
    if not f or f.code != 200:
      return { 'result': 1, 'error': 'urlopen returned error' }
    data = f.read()
    js_data = json.loads(data)
  except Exception, e:
    return { 'result': 2, 'error': e }
  else:
    return { 'result': 0, 'data': js_data }

print rpc('http://server.local/rpc', {'x': u'тест'})

I use request https://github.com/mikeal/request在 Node.js 中执行相同操作：

var request = require('request')

request.post('http://server.local/rpc', {
    json: {'x': 'тест'}
}, function(err, result) {
    console.log(err, result.body)
})

它可以工作，但是 unicode 数据是乱码，所以我得到ÑеÑÑ代替тест查询回数据时。 这看起来很奇怪，因为 python 和 node.js 都应该发送 utf8 编码的数据。

顺便说一句，我认为服务器是用 perl 编写的，但这就是我所知道的:(

此外，服务器在其他查询上返回 unicode 数据，因此它is能够做到这一点。

更新。我的控制台可以很好地打印 unicode 字符。

更新。重写我的代码以使用node.jshttp module:

var http = require('http')

var options = {
  hostname : 'server.local',
  path     : '/rpc',
  method   : 'POST'
}    
var req = http.request(options, function (res) {
  res.setEncoding('utf8');
  res.on('data', function (chunk) {
    console.log('BODY: ' + chunk);
  });
});    
var body = JSON.stringify({'x': 'тест'})    
req.setHeader('Content-length', body.length)    
// python sends data with this header
req.setHeader('Content-type', 'application/x-www-form-urlencoded')

req.on('error', function (e) {
  console.log('problem with request: ' + e);
});    
req.end(body, 'utf8');

遗憾的是结果是一样的。在两个不同的安装（我的个人 MBA 和生产 Debian 服务器）上也有相同的行为。所以这似乎确实与 Node.js 表示 unicode 数据的方式有关。

这是 python 脚本发出的请求：

POST / HTTP/1.0
Content-Type: application/x-www-form-urlencoded
Content-Length: 43
Host: localhost:1234
User-Agent: Python-urllib/1.17

{"args": {"x": "\u0442\u0435\u0441\u0442"}}

这是 Node.js 服务器发出的请求：

POST /rpc HTTP/1.1
Host: localhost:1234
Content-length: 12
Content-type: application/x-www-form-urlencoded
Connection: keep-alive

{"x":"тест"}

您看到问题了吗？ JSON.stringify 将数据编码为 utf8 字符串，但 python 将其编码为 ascii。

如果您的 rpc 服务器不支持 utf8，您可以使用外部库对 json 进行编码。例如，这可以工作：

var request = require('request');
var jju = require('jju');

request.post({
   uri: 'http://localhost:8080/rpc',
   body: jju.stringify({args: {x: "тест"}}, {
       mode: 'json',
       indent: false,
       ascii: true,
   }),
}, function(err, res, body) {
    console.log(body);
});

使用上面的代码，请求将如下所示：

POST /rpc HTTP/1.1
host: localhost:8080
content-length: 41
Connection: keep-alive

{"args":{"x":"\u0442\u0435\u0441\u0442"}}

这与 python 所做的类似。