您只需要一点点额外的代码就可以识别日期格式的类型。
例如，假设您的数据是以下格式-data = [("2008-05-01",1),("2018-01-01",2),("03/14/2017",3),("01/01/2018",4)]
df = spark.createDataFrame(data,schema=['date','key'])
df.show()
公司名称：
^{pr2}$
公司名称：from pyspark.sql.functions import *
from pyspark.sql.types import *
# udf that recognise pattern and return list of year,month and day
def splitUDF(row):
if "/" in row:
mm,dd,yyyy = row.split("/")
elif "-" in row:
yyyy,mm,dd = row.split("-")
return [yyyy,mm,dd]
datSplitterUDF = udf(lambda row : splitUDF(row),ArrayType(StringType()))
df\
.select(datSplitterUDF(df.date).alias("dt"))\
.withColumn('year',col('dt').getItem(0).cast('int'))\
.withColumn('month',col('dt').getItem(1).cast('int'))\
.withColumn('day',col('dt').getItem(2).cast('int'))\
.show()
输出：+       +  +  -+ -+
|            dt|year|month|day|
+       +  +  -+ -+
|[2008, 05, 01]|2008|    5|  1|
|[2018, 01, 01]|2018|    1|  1|
|[2017, 03, 14]|2017|    3| 14|
|[2018, 01, 01]|2018|    1|  1|
+       +  +  -+ -+

日期数据在SQL表达式中的应用 在SQL表达式运算符条件中，要查询日期和时间类型的数据，需要在数据值两端加上井字符号(#)以表示日期类型。 日期可以有多种表示方式，最符合中国人的习惯是“年-月-日”或“年/月/日”的表示方式。也就是说年月日之间的分隔符可以用“-”或“/”。 例如表示2018年3月15日 可以采用以下表达式：
年月日 #2018-03-15#
年日月 #2018-15-03#
年月日 #2018/03/15#
日月年 #15/13/2018/#
月日年 #15/03/2018#
以表达式在系统无错识别最高的应该是 月/日/年 #03/15/2018# 本例将采用“月/日/年”的写法
源数据：
查询内容
筛选出2018年3月15日的数据：
SQL = "SELECT * FROM [日期$A1:C19] WHERE 日期=#15/03/2018#"
结果如下图：
筛选出二个日期的数据：
SQL = "SELECT * FROM [日期$A1:C19] WHERE 日期=#15/03/2018# or 日期=#18/03/2018# "
结果如下图：
注意事项：
表达式是分别是“#5/1/2018#和#1/5/2018#” 2018年1月5日 “#1/5/2018#”和“#5/1/2018#”就会发生混淆。系统默认是月在日前。应该采用"月/日/年"或“年/月/日”的写法，避免系统不能识别，导致查询结果错误。
VBA+ADO+SQL语句，小试牛刀。
SQL 查询语句-WHERE
私信 SQL 可以获取SQL代码的Excel文件
私信 视频 可以获取54集VBA入门视频
私信 VBA或 vba 可以获取文章中含VBA代码的Excel文件

日期数据在SQL表达式中的应用 在SQL表达式运算符条件中，要查询日期和时间类型的数据，需要在数据值两端加上井字符号(#)以表示日期类型。 日期可以有多种表示方式，最符合中国人的习惯是“年-月-日”或“年/月/日”的表示方式。也就是说年月日之间的分隔符可以用“-”或“/”。 例如表示2018年3月15日 可以采用以下表达式：
年月日 #2018-03-15#
年日月 #2018-15-03#
年月日 #2018/03/15#
日月年 #15/13/2018/#
月日年 #15/03/2018#
以表达式在系统无错识别最高的应该是 月/日/年 #03/15/2018# 本例将采用“月/日/年”的写法
源数据：
查询内容
筛选出2018年3月15日的数据：
SQL = "SELECT * FROM [日期$A1:C19] WHERE 日期=#15/03/2018#"
结果如下图：
筛选出二个日期的数据：
SQL = "SELECT * FROM [日期$A1:C19] WHERE 日期=#15/03/2018# or 日期=#18/03/2018# "
结果如下图：
注意事项：
表达式是分别是“#5/1/2018#和#1/5/2018#” 2018年1月5日 “#1/5/2018#”和“#5/1/2018#”就会发生混淆。系统默认是月在日前。应该采用"月/日/年"或“年/月/日”的写法，避免系统不能识别，导致查询结果错误。
VBA+ADO+SQL语句，小试牛刀。
SQL 查询语句-WHERE
私信 SQL 可以获取SQL代码的Excel文件
私信 视频 可以获取54集VBA入门视频
私信 VBA或 vba 可以获取文章中含VBA代码的Excel文件

一、mysql时间字段类型

有三种：年月日时分秒（datetime），年月日(date)， 时间戳(timestamp)



2、区分时间戳和datetime类型的区别

时间戳





可以看出时间戳存储在数据库中是以整形存储的。但是我们存储时还要以-分开存储，就像datetime一样。

3、对于datetime类型

存储时可以是任意分隔符的日期：



也支持两位年份，但是尽量不要使用



二、Time类型

由于Date类型和DateTime类型差不多，因此不多说。主要是Time类型

1、Time类型表示的意义：



2、Time类型表示的时间范围



大概是35天

3、使用sql语句存储Time类型



由此可见可以用：作为分隔符，也可以不用分隔符。



也可以在前面加一个小于35的天数表示时间间隔。

三、Year类型





只能在1901到2155年因为：只有一个字节，一个字节只能有8位。2的8次方。

做开发时，我们操作的是java语言而不是数据库，我们一般获取电脑的整形时间戳存到数据库中。