小药药_数开实习_一面

- 腾讯会议,开摄像头
- 手撕的sql是面试官当场搜出来问的,有点坑,没撕出来

## 项目

- 简单介绍一下你的项目
- 你这个数据做好以后,他就是需求方是怎么用到的?
- 这个数据你存在这个你这是存在hive里吗?
- 介绍整个项目的流程
- 介绍项目的数据域和业务的总线矩阵
- 我有做过数据治理吗
- 有过hive性能优化的经验吗
- 你们是用的是什么建模?
- 维度建模中那个缓慢维度变化为都有哪几种应对方式?
- 我的拉链表是怎么查看历史数据的

## 八股

- yarn的基础架构和基本角色
  - 分享了一个spark任务提交的过程
- 分别讲讲yarn的资源调度策略
  - 我们用的什么资源调度器
- 用的开源Yarn还是CDH yarn

## 手撕

```sql
有 msg_time,from,to, msg等字段,计算聊天两轮(用户消息一来一回表示一轮)以上的用户。
msg_time               from    to
2021-11-24 21:23:00    1    2
2021-11-24 21:23:01    2    1
2021-11-24 21:23:02    1    2
2021-11-24 21:23:03    2    1
2021-11-24 21:23:04    2    1
2021-11-24 21:23:01    3    1
2021-11-24 21:23:02    1    3
2021-11-24 21:23:03    3    1
2021-11-24 21:23:04    1      3
```
全部评论

相关推荐

1. 基本情况方向:数据工程,时间:40分钟结束、16:00开始,无手撕,多场景2. 自我介绍3. 一些能够回忆起来的(或许有不正确的地方):(1)提问R:你这个项目是课程作业还是什么?R:那你说说Hive和ClickHouseR:你谈到了OLAP,那和OLTP有啥区别?R:没了?ClickHouse适合那种场景?R:可以用作实时数仓吗?R:课程中有数据库相关的吗?只有数据结构与算法?R:MySQL系统学习过吗?R:数据怎么导入到ClickHouse的?R:直接到ClickHouse?R:数仓分层?四层讲讲。R:那为什么要分层呢?DWS已经差不多了为什么还需要ADS呢?R:场景题:在你的表上新...
牛客861513826号:A场景题:数量统计不说了;退货平均时间:先沟通清楚,月平均退货时间算不算上不退货的用户,不算的话,就只计算退货用户;一个用户的退货时间减去到货时间拿到这件商品的退货时间,然后计算每个退货用户的退货时间,AVG开窗partition by月份,计算出每个月的平均退货时间。如果要算上不退货的用户,也就是让这个用户的退货时间是0,然后对所有用户计算AVG同上。 B场景题:结合下面他提示你再想想数据倾斜,其实这道题是想靠你数据倾斜怎么解决;本来是一个商品购买信息表,记录商品信息和购买者信息,如果给购买者信息加上性别,要求算出每个商品不同性别的购买人数。百分之八十女性用户,所以如果单纯对表进行分组聚合,会产生数据倾斜问题,由分组聚合产生。五种办法可以解决,两种hive参数,三种SQL,往SQL方向聊,以防他追问参数底层,参数这种东西最难聊了,别给自己挖坑
点赞 评论 收藏
分享
评论
1
1
分享

创作者周榜

更多
牛客网
牛客企业服务