почему объединенный столбец Pyspark превращается в нулевые значения?

Просто для полноты вы также можете использовать:

let x = 10.description

или любое другое значение, которое поддерживает описание.