Как сохранить и обработать твиты, сохраненные как JSON в Python

Question

Я новичок в Python, и я пишу фрагмент кода для сбора твитов от двух соседей, сохраняя их в формате JSON и обрабатывая некоторые данные. Есть ли у вас какое-либо предложение о том, как извлечь дату и время твита, или на ho, как подсчитать количество твитов для соседа? Другими словами, каков наилучший способ изолировать различную переменную .txt с данными JSON во что-то грандиозное?

Большое спасибо!

from twitter import * 

import sys 
import os.path 
import simplejson as json 
import tweepy 
import csv 

#log into Twitter 
OAUTH_TOKEN = 'XXX' 
OAUTH_SECRET = 'XXX' 
CONSUMER_KEY = 'XXX' 
CONSUMER_SECRET = 'XXX' 

t = Twitter(auth=OAuth(OAUTH_TOKEN, OAUTH_SECRET, CONSUMER_KEY, CONSUMER_SECRET)) 
auth = tweepy.OAuthHandler(CONSUMER_KEY, CONSUMER_SECRET) 

#I consider A to be a 2km radius circle 
result_A = t.search.tweets(query="kaffe",geocode="55.662610,12.604074,1.24mi",result_type='recent') 
with open('data_A.txt', 'w') as outfile: 
    json.dump(result_A, outfile) 

#Similarly, B is a 2km radius circle 
result_B = t.search.tweets(query="kaffe",geocode="55.694700,12.548283,1.24mi",result_type='recent') 
with open('data_B.txt', 'w') as outfile: 
    json.dump(result_B, outfile) 

Answer 1

Если вам нужны более расширенные функциональные возможности работы с электронными таблицами в Python, вы можете захотеть взглянуть на http://manns.github.io/pyspread/.

Кроме того, SQLite3 встроен в модуль sqlite3: просто создайте БД и SQL в памяти.

Однако, вот несколько примеров о том, как сделать основной материал в чистом Python:

import json 
import urllib 
from datetime import datetime 

data = urllib.urlopen('https://dl.dropboxusercontent.com/u/2684973/data_A.txt').read() 
data = json.loads(data) 

tweets = data['statuses'] 

def parse_created(timestamp): 
    _, m, d, t, _, y = timestamp.split(' ') 
    return datetime.strptime('%s %s %s %s' % (m, d, t, y), '%b %d %H:%M:%S %Y') 

tweets_data = [(x['user']['name'], x['text'], parse_created(x['created_at'])) 
       for x in tweets] 

tweets_data теперь содержит «стол» из этих столбцов, если вам это нужно в таком формате (например, для черчения) ; или:

erik_tweets = [x for x in tweets 
       if x['user']['name'] == 'Erik Allik'] 

или:

erik_tweets_before_today = [ 
    x for x in tweets 
    if x['user']['name'] == 'Erik Allik' 
    and x['created_at'].date() < datetime.date.today() 
]