Сгладить кортеж неизвестной длины

Question

У меня есть кортеж, созданный Спарком после присоединения. Он имеет ключ, два столбца в кортеже, а затем остальные столбцы из второй таблицы. Я не обязательно знаю, сколько столбцов находится во второй таблице.

Так, например:

(2324234534, (('23213','2013/03/02'), 12.32, 32.4, 45)) 

я смог отделить кортеж, если есть один столбец после молнии, дата кортежа, как это в PySpark:

x.map(lambda p: (p[0], (p[1][0][0], p[1][0][1], p[1][1]))) 

в Python:

map(lambda p: (p[0], (p[1][0][0], p[1][0][1], p[1][1])), x) 

Это производит вывод Ищу:

(2324234534, ('23213','2013/03/02', 12.32)) 

Если я хочу больше, чем один столбец после молнии, дату, то у меня есть этот код:

x.map(lambda p: (p[0], (p[1][0][0], p[1][0][1], p[1][1:]))) 

Однако он производит этот выход:

(2324234534, ('23213','2013/03/02', (12.32, 32.4, 45))) 

В любом случае, мой текущий метод хакки и не дает результата, который я ищу. Мне интересно, может быть, узнать, как сгладить кортежи вообще (другие темы, которые я нашел в этой теме, меняют кортежи в списки, что не на 100%, что я ищу)

Answer 1

Если я понимаю ваши цели правильно, я считаю, что это делает то, что вы хотите:

In [11]: a = (2324234534, (('23213','2013/03/02'), 12.32, 32.4, 45)) 

In [12]: a[:1] + (a[1][0] + a[1][1:],) 
Out[12]: (2324234534, ('23213', '2013/03/02', 12.32, 32.4, 45))