有两张表一张有1000W条数据一张有1000条数据

突然记起前两天做笔试有一道选择则悌不会 题目大概就是  有两张表一张有1000W条数据一张有1000条数据 要联合查询 该怎么优化？？
求大佬详解。。
全部评论
使用Hive的map join机制，将小表中的数据添加到内存中，在Map阶段进行表间连接，节省shuffle阶段的数据传输。
点赞 回复 分享
发布于 2017-09-10 10:09
1000条放左边
点赞 回复 分享
发布于 2017-09-10 10:05
HIVE吗？小表放在前面，还有可以加个hint，使用mapjoin
点赞 回复 分享
发布于 2017-09-10 09:58
1000条数据的表放前面
点赞 回复 分享
发布于 2017-09-10 09:49
每次查询是基于主表每一列去右表搜索匹配行的，所以数据量小的做主表效果更好。
点赞 回复 分享
发布于 2017-09-10 09:46

相关推荐

11-04 12:38
蓝禾技术_电商事业部_电商运营管培生(准入职员工)
蓝禾科技内推，蓝禾科技内推码
面经：蓝禾的流程推得很快，基本上投完两天就接到了hr的初试电话，直接进行了初试。初试全程大概三十分钟，hr小哥态度很和善。主要问了实践经历获奖的情况最有成就感的事情对电商运营的理解选择公司的标准等，都是比较常规的问题。禾你一起，做不可能的事 | 蓝禾26届校招启动啦公司介绍：蓝禾2008年成立于深圳，是一家集产品、设计、研发、品牌、营销、大数据运营于一体的创新型科技公司，旗下拥有图拉斯TORRAS、锐舞RANVOO、卡斯酷CASEKOO等多个品牌招聘岗位：运营(国内)、运营(国外)、营销、设计、研发技术、职能工作地点：深圳内推链接：https://lanhevip.jobs.feishu.cn...
点赞 评论 收藏
分享
11-06 18:42
江苏网商精益管理软件有限公司_工程部_后端开发(实习员工)
北京-字节跳动-大数据后端开发工程师-数据平台-一面-技术面
自我介绍实习拷打数据预热优化方案设计、技术调研、整个流程是什么样子的？AsyncTool 开源中间件针对 CompletableFuture 进行了哪些扩展呢？如何实现？问到底层了AsyncTool 如果任务执行失败，怎么处理的？是否可以提供重试？成功率是否影响？可用性支付工具埋点监控做了什么？数据上下文模型，怎么做的？有什么用？成员变量是如何设计？这样直接设计，是否线程安全的？如果有两个线程同时访问一个成员变量，如何保证线程安全？73ms 是否还有存在优化空间？缓存问题：key 和 Value 是如何设置的？以会话ID作为key的话，后续会复用多少次？用户维度和商品维度缓存？缓存过多，Red...
查看22道真题和解析
点赞 评论 收藏
分享
09-17 11:50
华中科技大学 Java
点赞 评论 收藏
分享
10-13 17:04
广东工业大学 Java
点赞 评论 收藏
分享
11-07 09:04
厦门大学 驱动开发
HR总是话中有话,面试HR黑话大解析！
前言：如题:HR黑话大合集 让我们 质疑 HR 理解HR 成为HR从HR的话中听出他的真正的意思,别被HR的三言两语迷惑。前一秒沉浸在满手OFFER的幻想,后一秒HR 反手秒挂,我觉得很多人有这种经历包括我,想想还是当时太年轻,每个HR都是老油条，不容小觑。提问：你来XX几年啦，有没有女朋友/有没有男朋友真实含义：别多想HR这个问题就是想看看你有没有不稳定因素,异地在HR眼里会有扣分提问：你之前做过哪些工作，为什么离职？真实含义：注意注意！送命题来了！你是否可以长期稳定的待在我们公司，你之前的离职原因，会不会在我们公司出现？提问：你之前的薪资是多少，你期望多少？真实含义：你的薪资既定我心里已经...
点赞 评论 收藏
分享
评论
点赞
收藏
分享

全站热榜

更多

创作者周榜

更多
正在热议
更多
# 你在职场上见过哪些“水货”同事 #
1558次浏览 10人参与
# 2025秋招体验点评 #
1950次浏览 34人参与
# 联影求职进展汇总 #
60801次浏览 417人参与
# 什么样的公司千万别去 #
306次浏览 4人参与
# 说说你知道的学历厂 #
360255次浏览 1296人参与
# 从mentor身上学到了__ #
222次浏览 2人参与
# 京东开奖 #
491386次浏览 2736人参与
# 简历无回复，你会继续海投还是优化再投？ #
106171次浏览 829人参与
# 校招薪资来揭秘 #
8496次浏览 38人参与
# 外包能不能当跳板？ #
49597次浏览 249人参与
# 联影医疗求职进展汇总 #
15854次浏览 117人参与
# 秋招什么时候开投比较合适？ #
113706次浏览 817人参与
# 距离放假还有_天，我已经…… #
29042次浏览 321人参与
# 本机械人被这些公司泡过池子 #
39032次浏览 186人参与
# 腾讯工作体验 #
522387次浏览 3573人参与
# 机械只有转码才有出路吗？ #
147830次浏览 1638人参与
# 面试线索爆料 #
2494次浏览 28人参与
# 提前批过来人的忠告 #
136765次浏览 1318人参与
# CVTE求职进展汇总 #
24995次浏览 323人参与
# 中核求职进展汇总 #
30210次浏览 193人参与
# 比亚迪工作体验 #
66240次浏览 241人参与
牛客网
牛客网在线编程
牛客网题解
牛客企业服务