C ++ std :: atomic vs. Boost atomic

Просто отвечая на вопрос Джона Конли и немного приукрашивая его и предоставляя полный код (используемый в Jupyter PySpark), поскольку я нашел его ответ чрезвычайно полезным.

from hdfs import InsecureClient
client = InsecureClient('http://localhost:50070')

import posixpath as psp
fpaths = [
  psp.join("hdfs://localhost:9000" + dpath, fname)
  for dpath, _, fnames in client.walk('/eta/myHdfsPath')
  for fname in fnames
]
# At this point fpaths contains all hdfs files 

parquetFile = sqlContext.read.parquet(*fpaths)


import pandas
pdf = parquetFile.toPandas()
# display the contents nicely formatted.
pdf
28
задан Peter Mortensen 5 February 2016 в 16:42
поделиться