有两张表一张有1000W条数据一张有1000条数据

突然记起前两天做笔试有一道选择则悌不会 题目大概就是  有两张表一张有1000W条数据一张有1000条数据 要联合查询 该怎么优化？？
求大佬详解。。
全部评论
使用Hive的map join机制，将小表中的数据添加到内存中，在Map阶段进行表间连接，节省shuffle阶段的数据传输。
点赞 回复 分享
发布于 2017-09-10 10:09
1000条放左边
点赞 回复 分享
发布于 2017-09-10 10:05
HIVE吗？小表放在前面，还有可以加个hint，使用mapjoin
点赞 回复 分享
发布于 2017-09-10 09:58
1000条数据的表放前面
点赞 回复 分享
发布于 2017-09-10 09:49
每次查询是基于主表每一列去右表搜索匹配行的，所以数据量小的做主表效果更好。
点赞 回复 分享
发布于 2017-09-10 09:46

相关推荐

05-27 22:04
曼伦商贸_电商运营(准入职员工)
上海曼伦内推-滴露内推
神仙小众快消外企，杜蕾斯＆滴露的母公司曼伦26届暑期实习启动啦~26杜蕾斯暑期实习|销售岗(18.7W-20.3W/年)一、杜蕾斯线下销售 | 专业不限 全国外派1、面向人群：本科及硕士应届毕业生（港澳台&海外留学生毕业证时间为2024年9月1日-2025年8月31日），销售岗位欢迎本科及以上学历同学投递~2、曼伦正在积极拓展中国台湾及东南亚的生意市场，为补充多样化的人才，我们非常欢迎台湾籍同学加入，未来将有机会获得更多的中国台湾及东南亚工作和发展的机会二、薪资待遇诚意满满的薪酬福利，让你的可能性无忧释放：薪资：本硕校招生入职年薪约18.7w-20.3w 晋升加薪最高可达30%，每年都...
投递曼伦商贸等公司6个岗位 >
点赞 评论 收藏
分享
05-28 13:39
门头沟学院 运营
实习不满意，可以直接拎包就走吗？
划重点：根据《劳动合同法》的规定，实习生与用人单位建立的是非全日制用工关系，所以实习生可以随时通知单位解除劳动合同。不过，为了避免影响用人单位的正常工作，建议提前几天通知。 🤔【实习期离职需要注意哪些事项?】一、离职流程与手续提前沟通时间：至少提前1-2周告知直属上级，体现职业态度。方式：优先口头沟通，再通过邮件或公司系统提交正式离职申请。工作交接清单整理：列出负责的任务、项目进展、文档资料、待办事项等。对接人：与上级确认交接对象，安排会议说明细节，确保无缝衔接。文件归档：清理电脑文件，将工作资料分类保存至公司共享盘。办理手续物品归还：门禁卡、电脑、钥匙、工牌等，需签字确认。财务结算：结清未...
康纳RK800：实习生居然也要离职证明吗，学到了，不过如果真的是临时有事不能继续实习，不能提前一到两周通知mt该怎么做
职场新人生存指南
点赞 评论 收藏
分享
04-15 19:00
太原理工大学 C++
点赞 评论 收藏
分享
05-03 11:27
Johns Hopkins University 算法工程师
哈哈离谱
    
野猪不是猪🐗：我assume that你must技术aspect是solid的，temperament也挺good的，however面试不太serious，generally会feel style上不够sharp
面试吐槽bot
点赞 评论 收藏
分享
05-28 21:31
Java
点赞 评论 收藏
分享
评论
点赞
收藏
分享

全站热榜

更多

创作者周榜

更多
正在热议
更多
# 写给毕业5年后的自己 #
5806次浏览 112人参与
# 机械制造秋招总结 #
50861次浏览 493人参与
# 华泰证券Fintech星战营 #
171082次浏览 202人参与
# 职场捅娄子大赛 #
326917次浏览 3310人参与
# 机械人春招想让哪家公司来捞你？ #
337487次浏览 3059人参与
# 一人一个landing小技巧 #
62608次浏览 983人参与
# 你的论文盲审过了没？ #
102815次浏览 1467人参与
# 硬件应届生薪资是否普遍偏低？ #
69845次浏览 505人参与
# 你的秋招第一场笔试是哪家 #
127575次浏览 1386人参与
# 毕业后不工作的日子里我在做什么 #
172876次浏览 1523人参与
# 如果再来一次，你还会学硬件吗 #
122899次浏览 1400人参与
# 考公VS就业，你怎么选？ #
58410次浏览 390人参与
# 国央企笔面经互助 #
130181次浏览 1082人参与
# 毕业季等于分手季吗 #
19907次浏览 253人参与
# 好好告别我的学生时代 #
52449次浏览 944人参与
# 海信求职进展汇总 #
65649次浏览 363人参与
# 美的求职进展汇总 #
275054次浏览 1955人参与
# 大学最后一个寒假，我想…… #
38903次浏览 501人参与
# 晒一下我的毕业照 #
36691次浏览 415人参与
# HR问：你期望的薪资是多少？如何回答 #
40888次浏览 527人参与
# 记录实习开销 #
34011次浏览 215人参与
牛客网
牛客企业服务