python處理json和redis hash的坑

1、使用MySQLdb讀取出來的數據是unicode字符串，如果要寫入redis的hash中會變成

"{u'eth0_outFlow': 2.5, u'eth1_inFlow': 3.44}"

無法使用json.loads，需要提前將unicode轉成str:

 str(eth0_outFlow)

2、單引號包圍的key不是規范的json格式

"{'eth0_outFlow': 2.5, 'eth1_inFlow': 3.44}"

需要轉成規范的格式才能使用json.loads()

replace('\'', '"')   =>   '{"eth0_outFlow": 2.5, "eth1_inFlow": 3.44}'

3、None寫入redis的hash是直接變成 'None'，需要轉成'null' 才能使用 json.loads()

"{'eth0_outFlow': None, 'eth1_inFlow': None}"

replace('\'', '"').replace("None", "null")   =>  '{"eth0_outFlow": null, "eth1_inFlow": null}'

4、json.loads()會把key的類型從str轉成unicode，之后寫進redis后就變成了

"{u'eth0_outFlow': None, u'eth1_inFlow': None}"

需要將其轉成str的key才能寫進redis

value = json.loads(cache)
items = value.iteritems()
value = {k.encode('utf8'): v for k, v in items}
redisCli.hmset(key, value)

 5、json.loads如果要保持字典的順序則可以使用

from collections import OrderedDict
json.loads(data, object_pairs_hook=OrderedDict)

6、json.dumps中文亂碼解決方法

>>> js = json.loads('{"haha": "哈哈"}') 
>>> print json.dumps(js)
{"haha": "\u54c8\u54c8"}
>>> print json.dumps(js, ensure_ascii=False)   
{"haha": "哈哈"}

7、解碼出錯，使用json.loads會報錯 'utf8' codec can't decode byte ...則使用忽略錯誤的方法

json.loads(unicode( str, errors='ignore'))

8、redis hash在存入redis后所有key都會變成字符串

9、使用redis的時候盡量減少網絡IO操作，有時候可以使用hash代替 key-value字符串，會得到事半功倍的效果

10、redis最大內存 maxmemory達到設置的最大值時會隨機刪除設置了expire時間的key，這個讓我調試了幾個鍾