BAT数据工程师面试原题.docx

SQL面试题1. 用一条SQL 语句 查询出每门课都大于80 分的学生姓名（5分）name kecheng fenshu 张三 语文 81张三 数学 75李四 语文 76李四 数学 90王五 语文 81王五 数学 100王五 英语 90答案：2.按照分数对数据进行排序 （5分）表名 scoresnumnamescore111tom100114nick89112rouse95113jery89116miss83排序结果：namescoreranktom1001rouse952nick893jery893miss835答案：3.hive表tmp_row_num, 按muid分组,然后同muid组内按muid,time排序 （10分）muidchannelostime242443391Y1android20150319242443391Y2iOS201503202443391Y1android201503192443391Y3ios201503212423391Y1android201503192423391Y4ios20150311预期结果：channelmuidtimerankY12423391201503191Y42423391201503112Y42424430391201503231Y22424430391201503222Y12424430391201503123Y2242443391201503201Y1242443391201503192答案：4. 请说明hive中 Sort By，Order By，Cluster By，Distrbute By各代表什么意思（5分）5. hive一行变多行 （5分）表名 tb_splitdateAB20141018aa7|8|520141019bb9|10|11预期结果：dateAB20141018aa720141018aa820141018aa520141019bb920141019bb1020141019bb11答案：6.自动统计分布：（10分）table :包含订单id和每个订单的预估时长（eta）单位minorder_id eta1234 102455 151355 30实现结果：得到订单的eta分布且左边的eta的分段按照大小排列，分段要求小于30分钟按照每5min间隔分段=30min&=300分钟:结果： 0， 5) 订单数 5， 10) 订单数. 30， 40) 订单数. 60， 90 ) 订单数. 300， + 订单数7. group by ,WithROLLUP,WithCUBE有什么作用 （10分）8. 按比例抽样 抽样10% 抽样50% （10分）1. 怎么理解皮尔逊相关系数2. 什么是辛普森悖论，怎么避免辛普森悖论？3. 什么是闵科夫斯基距离，怎么理解4. 什么是：协同过滤、n-grams, map reduce、余弦距离?每个人的发展都是动态的，但也各自核心的特质。就我来说，我最大的性格特点是稳重，包容性强，积极主动。我相信人的不断进步是通过不断突破自己的安全边界来实现的。日常生活中我一直对周围环境保持着好奇与开放的态度，乐于与不同领域的人交流学习，不管是出租车司机还是教授，与不同领域的人交流后产生的思想火花经常会为我打开一个看待世界的新角度。同时在处理日常问题时，我倾向于以宏观的思维来提前预估事物可能的发展趋势与不同风险，在有一定把握后再进行实施。而且一旦我认准了一件事，