字节跳动大数据开发岗位三面凉经

早上十点开始的面试
一面:
自我介绍,
一开始问的忘记了。。
编程题有道是n个有序数组求TopK
问了下实习的内容
介绍下Kafka,巴拉巴拉一顿说
问Spark的shuffle过程,然后问了下普通shuffle存在的问题,答了会出现很多磁盘文件
然后说了下用consoiderPartition,可以减少文件数。
然后问使用这个是解决了上面的什么问题,一开始答说是磁盘IO,后面追问确定是磁盘IO么,
想了下,说shuffle过程产生了大量文件,可能操作系统不支持打开太多文件。
一面大致就是这样,有些记不太清楚了

二面
自我介绍
问了下实习相关的
HTTP传输层用了什么协议
介绍下TCP和UDP,巴拉巴拉扯了两者区别,拥塞控制什么的
HTTP的Header都有哪些
有没有去试着改下header的内容
算法题:leetcode买股票问题
给定每天股票的价格,只允许一次买和一次卖,求最大收益
解决了上面那个问题后,问允许多次买卖,求最大收益
问了下Spark遇到数据倾斜怎么办,这里讲了很久,讲到后面面试官说大概就到这里把,然后就问有什么想了解的,
然后二面就结束了

三面
自我介绍
问下实习相关内容
有没有了解过一些流式处理的框架
说了flink、sparkstreaming、strom
然后问了下三者的区别
看我简历写了Spark,问了Spark不少东西,把Spark的相关概念都问了个遍,RDD、task、Stage、executor等等
还有彼此之间的关系也问了个遍
进程间通信方式有哪些,答了管道、消息队列、共享内存
继续追问,还有其他的么
答曰记不住了,然后问了下这三者的区别
说完后又继续追问,还有没有其他的
说了下socket,嘴抽说了句socket一般用于不同机器之间的进程通信
追问那在同一台机器的进程就不能用socket么
答应该可以把,把Socket的IP设置成localhost应该可以,问能不能设置成其他的,emm 设置成127.0.0.1应该也行
问设置成本机真实IP行不行?emm 应该可以。追问,那设置成这三者的区别是什么。
后面给了一个Spark相关的工程题目,给定hive表,存储着关于文章的信息,字段如下(文章ID,userId,action,date(分区字段))
其中的action包括了:点赞,评论,不喜欢,展示,可以根据公司内部提供的一个rpc,传入文章ID得到文章的类别ID,
问如何实现得到每个类别的热点文章的Top1000。
一开始围绕着如何确定文章的热点谈了很久,如何对action字段进行量化,哪些action对分数的影响权值比较大,如何分配权值等等
然后面试官给了一个方法fun(点赞数,评论数,不喜欢数,展示数,date),该方法可以返回每篇文章的最终分数
然后叫我根据上面hive表存储的信息以及这个方法,把每个类别的热点文章Top1000给求出来
这里写了很久没能搞定,最后就凉了。。。


#字节跳动##面经##大数据开发工程师##校招#
全部评论
请问投的是头条的哪个部门啊,北京还是上海的
点赞 回复 分享
发布于 2019-09-06 17:28
楼主咱俩一面三面应该都是一样的面试官😅
点赞 回复 分享
发布于 2019-09-02 10:28
太牛逼了吧,大佬都能回答出来
点赞 回复 分享
发布于 2019-09-01 21:03
面试感觉还是蛮简单的  楼主多准备把233
点赞 回复 分享
发布于 2019-09-01 20:20

相关推荐

07-13 20:10
门头沟学院 Java
2025.7.5时长:1h20min1. String ,string builder和string buffer它们的区别是什么2. 都适用于什么场景?或者你在开发时候什么场景使用3. 深拷贝和浅拷贝4. 深拷贝怎么实现5. jvm内存模型中,方法区,堆以及这个本地方法栈程序计数器他们的各自作用是什么?6. jvm内存管理的工作过程7. hashset和hashmap区别?如何处理哈希冲突8. concurrentHashMap在jdk1.7和1.8的实现区别9. 有看过具体的代码实现吗10. 进程间通信方式。包括线程间通信11. 进程和线程的区别12. 一个进程可以有多少个线程13. 物理内存和虚拟内存的区别14. 32位CPU架构对它的一个进程的虚拟内存是多大?15. redis就它的这个缓存穿透击穿和雪崩这个概念是什么意思?怎么去解决这几个问题?16. redis持久化机制17. 怎么去选择呢项目:1. 介绍一下大概做的这个周期,以及整体你在这里面这个架构的设计,包括中间遇到一些问题如何解决的,以及最后的一个结果怎么样。2. 过程中有遇到什么问题和挑战?算法:1. 链表反转2. 极大值字符串相减(要处理减数比被减数小的情况)其他:1. 平时的一个学习方法,学习方式什么样?2. ai这块有关注吗3. 为什么大二就想出来实习4. 面试准备了多久反问:你认为有什么可以在进步的地方或者或者不足的地方?(面试官叫我自己评价一下,还要我给自己打分)进入后主要负责哪一块(然后面试官问我对安卓了解多少,还问go了解吗?说具体要再和一二面面试官对接一下)
查看25道真题和解析
点赞 评论 收藏
分享
评论
4
61
分享

创作者周榜

更多
牛客网
牛客网在线编程
牛客网题解
牛客企业服务