南方某公司数分面经

先说说开窗函数是个啥吧。简单点讲，开窗函数（Window Function）是Hive SQL里一种特殊的函数，它能在不改变数据行数的情况下，对一组相关的数据行进行计算。啥意思呢？就是说，普通的聚合函数比如SUM、AVG啥的，用了之后会把多行数据聚合成一行结果，但开窗函数不会，它会保留每一行的原始数据，同时还能基于某个“窗口”（也就是一组相关的行）做计算。为啥说它在大数据处理中重要呢？大数据的特点就是量大、维度多、逻辑复杂。咱们在分析数据的时候，经常会遇到一些场景，比如要对用户行为数据按时间排序后计算累计值，或者要给每个部门的员工排名，或者要找出每个分组里的前N个记录啥的。这些需求如果用传统的...