Интенсивное добавление к файлу JSON в Loop

Question

Есть ли способ добавить отдельные объекты JSON в json-файл, находясь в цикле for в python. Я бы предпочел не хранить все свои данные в одном гигантском объекте json и выгружать его все сразу, так как я планирую выполнить миллионы запросов API. Я хотел бы сделать один запрос API, выгрузить результат в файл JSON, а затем перейти к следующему запросу API и сбросить его в тот же файл JSON.

Приведенный ниже код перезаписывает файл JSON, я ищу что-то, что добавляет.

for url in urls: 
    r = sesh.get(url) 
    data = r.json() 

    with open('data.json', 'w') as outfile: 
     json.dump(data, outfile) 

Такой, что:

with open('data.json') as outfile: 
    data = json.load(data, outfile) 

type(data) 
>> dict 

r.json выглядит примерно так:

{'attribute1':1, 'attribute2':10} 

Answer 1

Update

Ну так как я не имею доступа к API Я просто разместил несколько ответов образца в формате, который вы предоставили, внутри массива.

import json 

urls = ['{"attribute1":1, "attribute2":10}', '{"attribute1":67, "attribute2":32}', '{"attribute1":37, "attribute2":12}']; 
json_arr = [] 

for url in urls: 
    data = json.loads(url) 
    json_arr.append(data) 
    with open('data.json', 'w') as outfile: 
     json.dump(json_arr, outfile) 

В основном мы храним массив и добавляем каждый ответ API к этому массиву. Затем мы можем записать накопительный JSON в файл. Также, если вы хотите обновить один и тот же JSON-файл при разных исполнениях кода, вы можете просто прочитать существующий выходной файл в массиве в начале кода, а затем продолжить с моим примером.

---

---

режим записи изменений, чтобы добавить

Попробуйте изменить это:

with open('data.json', 'w') as outfile: 

к этому:

with open('data.json', 'a') as outfile: