spark sql 数据类型转换_SparkSql 数据类型转换

1、SparkSql数据类型

1.1数字类型

ByteType：代表一个字节的整数。范围是-128到127

ShortType：代表两个字节的整数。范围是-32768到32767

IntegerType：代表4个字节的整数。范围是-2147483648到2147483647

LongType：代表8个字节的整数。范围是-9223372036854775808到9223372036854775807

FloatType：代表4字节的单精度浮点数 DoubleType：代表8字节的双精度浮点数

DecimalType：代表任意精度的10进制数据。通过内部的java.math.BigDecimal支持。BigDecimal由一个任意精度的整型非标度值和一个32位整数组成

StringType：代表一个字符串值

BinaryType：代表一个byte序列值

BooleanType：代表boolean值

Datetime类型：

TimestampType：代表包含字段年，月，日，时，分，秒的值

DateType：代表包含字段年，月，日的值

1.2复杂类型

ArrayType(elementType, containsNull)：代表由elementType类型元素组成的序列值。containsNull用来指明ArrayType中的值是否有null值

MapType(keyType, valueType, valueContainsNull)：表示包括一组键 - 值对的值。通过keyType表示key数据的类型，通过valueType表示val