ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

通过集合构建RDD或者DataFrame

2020-06-30 14:01:35  阅读:13  来源: 互联网

标签:SparkSession DataFrame RDD 构建 c2 dict spark config c1


利用字典构建dataframe。

from pyspark.sql import SparkSession,Row

spark = SparkSession.builder.appName("get_app_category").enableHiveSupport().config("spark.driver.host", "localhost").config("spark.debug.maxToStringFields", "100").getOrCreate()

dict=[{'c1':'a','c2':'b'},{'c1':'c','c2':'d'}]
spark.createDataFrame(dict).show()

 

标签:SparkSession,DataFrame,RDD,构建,c2,dict,spark,config,c1
来源: https://www.cnblogs.com/muyue123/p/13213375.html

专注分享技术,共同学习,共同进步。侵权联系[admin#icode9.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有