[问题] pandas dataframe 转 spark dataframe 出现null值 zeus83157 PTT批踢踢实业坊

[问题] pandas dataframe 转 spark dataframe 出现null值

楼主: zeus83157 (zeus83157) 2018-07-14 19:53:10

from pyspark import SparkContext
from pyspark.sql import SQLContext
.
.
.
sc = SparkContext()
sqlContext = SQLContext(sc)
.
.
.
people1 = sqlContext.createDataFrame(people1)
.
.
.
其中people是pandas的dataframe
https://imgur.com/a/ebzMO7Z
图中左边是spark的dataframe，右边是pandas的dataframe
可以看到黄色圆圈处，明明pandas的有东西，转过去spark就不见了
有人遇过这种状况吗?

继续阅读

[问题] SQLite3 将资料存在数据库中xy210742 [问题] groupby之后怎么存到excel不同sheetBrahms5566 [问题] 想学习机器学习的架构wang19980531 [新闻] Python之父宣布永久卸下“仁慈的独裁者…winter0128 [征求]1-2小时python家教Curl419 [问题] 关于使用OpenCv连续拍照的问题st40182 [问题] 用BeautifulSoup解析的网页码与原本不同ponwar87123 [问题] heroku django 重新导向问题Liliummy [问题] selenium模拟登入信箱但帐密不同页waterlovers [问题] 时间复杂度分析sean72