Spark sql实现数组取并集操作

今天用spark sql的时候碰到了一个需求：根据id进行聚合，如果遇到数组，那么就取数组的并集，一开始a56爆大奖在线娱乐寻思i应该挺简单的，但是紧接着就碰到了问题：数组聚合用什么函数 a56爆大奖在线娱乐在spark sql官方提供的文档里面是没有找到类似的函数的，a56爆大奖在线娱乐第一个想法就是自己写一个，很遗憾失败了，可能因为a56爆大奖在线娱乐个人水平有限