spark sql内置函数

在Spark 1.5.x版本,增长了一系列内置函数到DataFrame API中,而且实现了code-generation的优化。与普通的函数不一样,DataFrame的函数并不会执行后当即返回一个结果值,而是返回一个Column对象,用于在并行做业中进行求值。Column能够用在DataFrame的操做之中,好比select,filter,groupBy等。函数的输入值,也能够是Column。w
相关文章
相关标签/搜索