spark sql map():_*函数

需求想计算hive中每个字段的长度
或者想将hive表中每个字段的类型都转化为Double时，怎么办呢？

一种方法可能是for循环
另一种方法是spark sql的map函数可以解决

1. for循环

val colNames = df.columns
var df1 = df

for (colName <- colNames) {

  df1 = df1.withColumn(colName, col(colName).cast(DoubleType))

}

df1.show()

2. 通过map():_*
   上面的方法效率较低，发现scala有array:_*这样的传参语法，而df的select方法也支持这样传，因此可以有如下的写法：

case1: 将df中的字段类型都转化为double

val colNames = df.columns
val cols = colNames.map(f => col(f).cast(DoubleType))

df.select(cols: _*).show()

case2: 计算df中字段的长度

val strLen = udf((entity_id:String) => (entity_id.length))
val fe_list = Array("entity_id", "rule")
spark.sql("select * from vc.ad_rule_result where day='2020-11-10'")
.select(fe_list.map(c=>strLen(col(c))):_*).show(100)

case3: 对指定的列进行加密

def encode(col: S