создать большой набор данных с использованием Python

Question

Я хочу создать большой набор данных (который соответствует данной схеме) с использованием Python. Есть ли хороший способ указать схему (datatype & длина каждого из полей), и пусть Python создает для меня около 100 000 наблюдений? Какие-нибудь хорошие инструменты уже есть?

Я знаком с Python ... поэтому хотел бы придерживаться его. если вы используете Bash или каким-либо другим способом, сообщите мне об этом.

Спасибо! PD.

Answer 1

Возможно, вы должны проверить комплект fake-factory.

Answer 2

Пожалуйста, посмотрите на это: -

https://github.com/sanju51/Generate-large-Dataset-dynamically-in-Python

SPEED: - 100000 записей в 5 секунд (10 колонок) ПРИМЕНЕНИЕ: - питон generate_dataset.py -i -f Metadata.csv образца. csv -nrec 100000 -d ',' -hdr Y