Google app engine 子类化db.TextProperty以将python dict存储为JSON并将默认编码设置为除ASCII以外的任何内容
使用GoogleAppEngine（python SDK），我创建了一个自定义JSONProperty（），作为db.TextProperty（）的子类。我的目标是将python dict动态存储为JSON并轻松检索。我遵循了通过Google找到的各种示例，设置自定义属性类和方法非常简单 但是，我的一些dict值（字符串）是用utf-8编码的。将模型保存到数据存储中时，我遇到了一个可怕的Unicode错误（对于数据存储文本属性，默认编码为ASCII）。子类化db.BlobProperty无法解决此问题 基本上，我的代码执行以下操作：将资源实体存储到数据存储中（URL作为StringProperty，POST/GET有效负载作为JSONProperty存储在dict中），稍后获取它们（不包括代码）。我选择不使用pickle来存储有效负载，因为我是一个JSON怪胎，无法存储对象 自定义JSONProperty：Google app engine 子类化db.TextProperty以将python dict存储为JSON并将默认编码设置为除ASCII以外的任何内容,google-app-engine,unicode,utf-8,google-cloud-datastore,Google App Engine,Unicode,Utf 8,Google Cloud Datastore,使用GoogleAppEngine（python SDK），我创建了一个自定义JSONProperty（），作为db.TextProperty（）的子类。我的目标是将python dict动态存储为JSON并轻松检索。我遵循了通过Google找到的各种示例，设置自定义属性类和方法非常简单 但是，我的一些dict值（字符串）是用utf-8编码的。将模型保存到数据存储中时，我遇到了一个可怕的Unicode错误（对于数据存储文本属性，默认编码为ASCII）。子类化db.BlobProperty无法解决
class JSONProperty(db.TextProperty):
def get_value_for_datastore(self, model_instance):
value = super(JSONProperty, self).get_value_for_datastore(model_instance)
return json.dumps(value)
def make_value_from_datastore(self, value):
if value is None:
return {}
if isinstance(value, basestring):
return json.loads(value)
return value
res = Resource()
res.init_payloads()
res.url = "http://www.somesite.com/someform/"
res.param = { 'name': "SomeField", 'default': u"éàôfoobarç" }
res.put()
更新：添加了代码和stacktrace。下面是一个将unicode字符串从字典移动到序列化JSON字符串再移动到TextProperty的最小示例：
class Thing(db.Model):
json = db.TextProperty()
class MainHandler(webapp.RequestHandler):
def get(self):
data = {'word': u"r\xe9sum\xe9"}
json = simplejson.dumps(data, ensure_ascii=False)
Thing(json=json).put()
>>> u = u"ąęćźż"
>>> s = u.encode('utf-8')
>>> unicode(u) # fine
>>> unicode(s, 'utf-8') # fine
>>> unicode(s) # blows up (try's ascii) (on my interpreter)
>>> return unicode(json.dumps(...), 'utf-8')
设置，docstring for unicode表示默认为当前默认编码，您的默认编码为utf-8，gae的默认编码为ascii。请添加代码示例和堆栈跟踪。特别是，我想确认UnicodeError是在您尝试存储TextProperty时发生的，而不是在您尝试将Python字典序列化为JSON时发生的。更新了问题，添加了代码和堆栈跟踪。您好，谢谢，我没有考虑查看dumps（）方法。然而，我仍然在prod上获得相同的堆栈跟踪。在dev上运行良好。这令人困惑！