java調用so動態庫，spark加載數據的方式

2023-11-16 阅读 15 评论 0

摘要：spark.read.load是加載數據的通用方法對不同格式文件采用不同的format方式SparkSQL的默認數據源為Parquet格式，Parquet是一種能夠有效存儲嵌套數據的列示存儲格式。 hbase是海量數據的存儲方式，對于統計分析是非常便利的數據源是Parquet的時候，SparkSQ

spark.read.load是加載數據的通用方法
對不同格式文件采用不同的format方式SparkSQL的默認數據源為Parquet格式，Parquet是一種能夠有效存儲嵌套數據的列示存儲格式。
hbase是海量數據的存儲方式，對于統計分析是非常便利的
數據源是Parquet的時候，SparkSQL可以方便的執行所有的操作，不需要使用format。修改配置項spark.sql.sources.default,可以修改默認數據源格式

原文链接：https://hbdhgg.com/5/173814.html

上一篇：延長乘車區間新規定，處理價格區間

下一篇：scala不是內部或外部命令，//變量在scala中沒有自增自減的操作