Как конвертировать для преобразования pandas DataFrame в байты и наоборот?

Question

Я пытаюсь отправить dataframe с использованием программирования сокетов. Для этого мне нужно знать, как закодировать dataframe в байтах на клиенте, а затем декодировать его в dataframe на сервере.

Answer 1

Вы можете использовать модульили pickle.

Первый сериализовать dataframe:

>>> df 
    A B 
0 1 3 
1 2 4 
>>> df_bytes = cPickle.dumps(df) 

Отправить содержание df_bytes каким-то образом, то десериализации:

>>> df2 = cPickle.loads(df_bytes) 
>>> df2 
    A B 
0 1 3 
1 2 4 

---

Эти два модуля действительно ввести потенциальные проблемы безопасности, поскольку они позволяют выполнить произвольный код во время десериализации. Лучшим решением было бы написать dataframe в строку JSON:

df_string = df.to_json() 

И восстановить его потом:

df_again = pandas.read_json(df_string) 

Другие форматы, такие как csv также доступны, соответствующие функции DataFrame.to_csv() и pandas.read_csv(). См. this и this для получения полного списка связанных функций.