在windows上執行的時候,option(“timestampFormat”, “yyyy/MM/dd HH:mm:ss ZZ”)必須帶上,不然報錯:
Exception in thread "main" java.lang.IllegalArgumentException: Illegal pattern component: XX。
使用比如:
val df1 = spark.read.format("json").option("timestampFormat", "yyyy/MM/dd HH:mm:ss ZZ").load("hdfs://192.168.137.141:9000/data/people.json")
df1.show()