Как сохранить порядок ключей JSON с Python 3 json.dumps?

Question

Я заметил некоторое странное поведение при реализации Python 3 json.dumps, а именно: порядок ключей изменяется каждый раз, когда я выгружаю один и тот же объект из исполнения в исполнение. Googling не работал, так как я не забочусь о сортировке ключей, я просто хочу, чтобы они остались прежними! Ниже приведен пример сценария:

import json 

data = { 
    'number': 42, 
    'name': 'John Doe', 
    'email': 'john.doe@example.com', 
    'balance': 235.03, 
    'isadmin': False, 
    'groceries': [ 
     'apples', 
     'bananas', 
     'pears', 
    ], 
    'nested': { 
     'complex': True, 
     'value': 2153.23412 
    } 
} 

print(json.dumps(data, indent=2)) 

Когда я запускаю этот скрипт я получаю разные выходы каждый раз, когда, например:

$ python print_data.py 
{ 
    "groceries": [ 
    "apples", 
    "bananas", 
    "pears" 
    ], 
    "isadmin": false, 
    "nested": { 
    "value": 2153.23412, 
    "complex": true 
    }, 
    "email": "john.doe@example.com", 
    "number": 42, 
    "name": "John Doe", 
    "balance": 235.03 
} 

Но потом запустить его снова, и я получаю:

$ python print_data.py 
{ 
    "email": "john.doe@example.com", 
    "balance": 235.03, 
    "name": "John Doe", 
    "nested": { 
    "value": 2153.23412, 
    "complex": true 
    }, 
    "isadmin": false, 
    "groceries": [ 
    "apples", 
    "bananas", 
    "pears" 
    ], 
    "number": 42 
} 

Я понимаю, что словари представляют собой неупорядоченные коллекции и что порядок основан на хеш-функции; однако в Python 2 - порядок (независимо от того, что он есть) фиксирован и не изменяется для каждого исполнения. Трудность здесь состоит в том, что это затрудняет выполнение моих тестов, потому что мне нужно сравнить вывод JSON двух разных модулей!

Любая идея, что происходит? Как это исправить? Обратите внимание, что я бы хотел избежать использования OrderedDict или выполнения любой сортировки, и важно то, что строковое представление остается неизменным между исполнениями. Также это предназначено только для тестирования и не влияет на реализацию моего модуля.

Answer 1

Python словари и объекты JSON: неупорядоченный. Вы можете спросить json.dumps() сортировать ключи на выходе; это предназначено для облегчения тестирования. Используйте параметр sort_keys для True:

print(json.dumps(data, indent=2, sort_keys=True)) 

См Why is the order in Python dictionaries and sets arbitrary?, почему вы видите различный порядок каждый раз.

Вы можете установить PYTHONHASHSEED environment variable на целочисленное значение, чтобы «заблокировать» порядок словаря; используйте это только для запуска тестов, а не для производства, так как цель хэш-рандомизации состоит в том, чтобы предотвратить атакующую от тривиальной DOS-программы.

Answer 2

История такого поведения this Уязвимость. Чтобы предотвратить это, одинаковые хэш-коды на одном ПК должны отличаться друг от друга.

Python 2, вероятно, отключил это поведение (хеш-рандомизация) по умолчанию из-за совместимости, поскольку это, например, приведет к расколу. Вероятно, Python 3 (предположение) не нуждался в компиляции.