京东内部-揭电商大数据实质教学课件

京东内部PPT-揭电商大数据实质46、寓形宇内复几时，曷不委心任去留。47、采菊东篱下，悠然见南山。48、啸傲东轩下，聊复得此生。49、勤学如春起之苗，不见其增，日有所长。50、环堵萧然，不蔽风日；短褐穿结，箪瓢屡空，晏如也。京东内部PPT-揭电商大数据实质京东内部PPT-揭电商大数据实质46、寓形宇内复几时，曷不委心任去留。47、采菊东篱下，悠然见南山。48、啸傲东轩下，聊复得此生。49、勤学如春起之苗，不见其增，日有所长。50、环堵萧然，不蔽风日；短褐穿结，箪瓢屡空，晏如也。BIGDATA3W互朕闷深度精选微信cstudywww京东大数据平台从无到有,从集中式到分布式,从Oracle数据仓库到JDW20,在演变过程中一直在思考的两个问题1、如何建设电商特有的复杂业务的数据仓库?2、如何在保障安全的情况下降低使用数据的成本?从下面的内容中似乎能够看到这些问题的答案。一、引言想要吸取孔子仁智统一思想的精华，还的从他的仁学思想说起。“仁”是孔子思想中最核心的问题，也是其全部哲学的基础。《论语》是研究孔子哲学思想的主要材料，其中有50余章谈到了仁，并且好多语义和思想都同“仁”有着千丝万缕的联系。近人在研究孔子思想过程中，对“仁”的内涵与外延有着不同的理解，许多学者见仁见智地提出或感性或理性或深刻或系统的阐述。归纳之，不外乎有以下两种内容，一是关于社会伦理关系的实践方面，一是关于道德品质的修养方面。孔子的仁智统一思想是孔子指导思想的核心，仁中有智，智中有仁，仁为本，智为知，回答了什么是仁和怎样为仁这两个关键性的问题，体现了人道原则和理性原则的统一，体现了人的全面发展的要求。自古以来，它激励着多少仁人志士为了国家和民族的生死存亡而抛头颅洒热血，谱写了无数可歌可泣的壮丽诗篇；召唤着亿万中华儿女为精心打造和铸就民族之魂而前仆后继，奏响了一曲又一曲寓职业道德、家庭美德、社会公德于一体的道德乐章；尊重人民群众的首创精神，崇尚科学知识，不断为中华民族的伟大复兴增添新力量而调动了一切积极因素。二、结合孔子的仁智统一思想，针对当前未成年人思想道德的现状，笔者提出如下看法1.加强道德品质教育，积极引导未成年人不断的成长为21世纪的合格建设者和接班人孔子教育的目的是培养从政治国的人才，而从政治国需要各种本领。他认为学习的次序、本末都要顾及到“道”。“志于道，据于德，依于仁，游于艺。”《述而》他认为一个人的目标在于实现“天下有道”的“道”。本质在于“德”，即德治是治国的基础，而要作到德治，具体要体现到“仁政”上，因为“仁”包括一切修身的内容，但“仁”又不是一句空话，最终还是要落到“六艺”之中。孔子培养人的目标是君子、成人。朱熹说，成人者完人也。孔子认为做一个“成人”，智、仁、勇这三德缺一不可。人民教育家陶行知先生认为，智、仁、勇是人才幼苗必须具备的教养。智是文化知识和学以致用的能力；仁是伦理道德，解决人生问题；勇是强健的体魄和勇敢的思想行为，仁是伦理道德，解决人生问题。勇是强健的体魄和勇敢的思想行为。由此可知，孔子注重三育并举。他所倡导的“勇”，不仅在体格上进行锻炼，而且还在人格意志上激励学生做捍卫道义的勇士。“勇者不惧。”《宪问》“见义不为，无勇也。”《为政》揭示了“勇”是一种卫道的优良品德，包含着见义勇为的思想和勉励行道的精神；刚强坚毅的意志力；不同流合污的气节；勇挑重担、见危授命的品行；为正义而赴汤蹈火在所不辞的品质等。这些优良的道德品行正是中华民族数千年来一直在追求培养社会所需要的合格人才的目标，也正是孔子重视独立人格培养的具体体现，开了我国教育培养埋头苦干，拼命硬干，为民请命，见义勇为的“中国脊梁”使我国成为一个富有独立人格教养的国家，人民成为胸怀国家和民族利益之人的信念，道德品质，文化知识关系着祖国的前途命?\，因而切实加强他们的思想道德教育，使他们成长为有理想、有道德、有文化、有纪律的有用人才是我国政府和人民的当务之急。2.陶冶高雅情趣，努力培养未成年人不断完善和健全心理品德结构孔子不主张把学生聚纠囿苑之中读死书，死读书，而在讲学之余亲自带领学生郊游、登山，在登山和郊游中领略大自然的乐趣和征服者的快乐，从而陶冶学生的高雅情趣。至于比赛，他说：“君子无所争，必也射乎，揖让而升，下而饮，其争也君子。”《八佾》说的是，品德高尚的人，对其它事情是没有必要去争的，但对于射箭必须要争，而且还要争出个高低你我来。参加比赛要注意道德修养，上场比赛前应相互揖让，比赛终了之后还应相互敬酒，胜者揖让，不胜者升之，出言恭逊友好。这样的竞赛才算得上正当竞争，“君子”之争。这种对待比赛和竞争的思想出现在两千多年之前的教育中，其积极意义是相当深远的，这种“友谊第一，比赛第二”的德育思想在对抗性竞争中个人与个人之间，集体与集体之间，个人和集体发生着情绪和行动上的激烈交锋，不时会出现对参加者和观看者思想品德的严峻考验，无疑对那些在竞争中骄傲自大、斤斤计较、弄虚作假违反规则，动辄恶语伤人，寻衅闹事者起到了教化作用。人都是有情绪的，情绪既可以改变人的行为的活动方式，又可以改变人的脏腑机能状态，从而导致心理或生理方面的变化。孔子很早的注意到了养生之道必须重视道德教养，贵在情志调摄。他在《中庸》中指出；“修身以道，修道以仁。”“大德必得其寿。”一般说来，情操高尚的人心胸豁达开朗，富于开拓创造性，具有积极的责任性和高涨的热情。这些人的情绪可以强化思维能力，提高工作效率，保持肌体健康从而以良好的道德情操对峙人生和社会。在教育教学中，孔子力求培养学生具有“乐而不淫，衰而不伤”《八佾》的情感，引导学生掌握“礼之用，和为贵”《学而》的原则，以“中和”的态度为人处事，以达到息养身心的目的。随着社会主义市场经济的日臻完善，在德育实践过程中我们更应该注重对未成年的心理和生理教育，注重培养他们的公平竞争意识，效率优先意识，身心健康意识，不断健全他们的心理品质和高尚的个性品质。3.充分发挥示范引导作用，使未成年人不断地养成社会所需要的品德行为习惯孔子坚持学行结合，说到做到，不发空论，不许空愿，力求言行一致，表里如一。他说：“先行其言而后从之。”《里仁》“听其言观其行。”《公治长》可见，孔子在对弟子教育时，他自己能够做到身体力行，同时也说明了实践是检验认识的标准。孔子很早地发现了教师的人品、智慧、个性品质、世界观等都会给学生产生巨大的影响，对学生起到潜移默化的作用，其现实意义不言而喻。他还说：“其身正，不令则行；其身不正，虽令不从。”《子路》则强调教师的榜样示范是学生最直接的表率，是引导和规范学生成才不可缺少的手段。真可谓，德高为师，身正称范。古人尚能如此，作为新世纪的教育工作者，我们十分有理由在未成年人的思想道德教育中充分发挥榜样示范作用，积极引导他们在学习实践，生产劳动，社会公益事业，文化科技体育等活动和交往中，深化认识，经历情感体验，磨练意志，增强毅力，养成社会所需的品德行为习惯。1.创设问题情境，激发学生的主动性传统教育的弊端告诫我们：教育应以学生为本.面对当今新时期的青少年，服务于这样一种充满生气、有真挚情感、有更大可塑性的学习活动主体，教师绝不可以越俎代庖，以知识的讲授替代主体的活动.情境教学就是把学生的主动参与具体化，在优化的情境中产生动机、充分感受、主动探究.如在复习函数这节课时，教师可以创设以下的教学情境：“我”在徐家汇购物，甲商厦提出的优惠销售方法是所有商品按九五折销售，而乙商厦提出的优惠方法是凡一次购满500元可领取九折贵宾卡.请同学们帮老师出出主意，“我”究竟该到哪家商厦购物得到的优惠更多？问题提出后，学生们十分感兴趣，纷纷议论，连平时数学成绩较差的学生也跃跃欲试.学生们学习的主动性很好地被调动了起来.思维定式形成，学生们在不知不觉中运用了分类讨论的思想方法.曾有人说：“数学是思维的体操”.数学教学是思维活动的教学.学生的思维活动有赖于教师的循循善诱和精心的点拨和启发.因此，课堂情境的创设应以启发学生思维为立足点.心理学研究表明：不好的思维情境会抑制学生的思维热情，所以，课堂上不论是设计提问、幽默，还是欣喜、竞争，都应考虑活动的启发性，孔子曰：“不愤不启，不悱不发”，如何使学生心理上有愤有悱，正是课堂情境创设所要达到的目的.2.运用多媒体，指导学生主动探索数学知识比较抽象、枯燥，有的知识点在理解上也存在一定的难度，也就是说抽象与具体、逻辑与直观是永恒的矛盾.太简单的例子不能说明问题，生动有趣的实例又因表达的困难而不易讲清，于是造成了理性与感性、理论与应用的脱节.因此，在指导学生探索方法、培养学生创新意识的过程中，我们必须首先将抽象的问题形象化，庞杂的问题明晰化，静态的问题动态化，而这些目标的达成，是靠运用电教媒体来实现的，特别是CAI，可以闪烁、变色、平移、翻折、旋转和透视等，还可以设计问题模型和供学生探试的情境，这既为帮助学生掌握内在规律，完成知识的建构打下基础，也为指导学生的探索方法，开辟了崭新的天地.例如，在教学“等腰三角形三线合一”时，传统教学因较难展现其发现过程，从而造成学生对其不好理解.利用多媒体可以在屏幕上作出三个完全相等的等腰三角形ABC，并分别作出其内角A的平分线（红色）、BC边的垂直平分线（黄色）和中线A（绿色）之后用鼠标在屏幕上拖动三角形，使三个三角形完全重合，利用软件功能，此时△ABC和“三线”在保持依存关系的前提下随之发生变化，在移动的过程中，学生会直观地发现存在这样的点D，使得角平分线、垂直平分线和中线三线重合.这样利用多媒体把抽象的教学知识以直观的形式展现出来，能更好地帮助学生思考知识间的联系，促进新的认知结构的形成.多媒体的动态变化可以将形与数有机结合起来，把运动和变化展现在学生面前，使学生由形象的认识提高为抽象的概括，并且在教学过程中逐步地学会研究、探索问题的方法，自觉养成自我探索的习惯，这是使学生终身学习、终身受益的能力，同时这也是现代教学中培养学生创造精神的前提.3.将现实问题引入课堂，诱导学生主动思考数学教学中将开放式问题带入课堂是对素质教育的一种探索，也是当前数学教育的发展潮流.数学开放式问题的显著特点是其思考空间广阔，思维活动的自由度较大，学生的思维活动易于展开，在思考中能提出更多的问题，解决问题的途径也更多，它具有与传统封闭型题不同的特点.因此，在数学教学中有其独特的效果.数学开放式问题的教学为学生提供了更多的交流与合作的机会，能促进学生思考，引导学生的思维向纵深发展，为充分发挥学生的主体作用创造了条件，有利于培养学生“开放式”的数学思维和开拓进取精神.例如，初中《几何》教材中有这样一道题目：已知圆的直径为13cm，如果直线和圆心距的距离为①4.5cm；②6.5cm；③8cm，那么直线和圆有几个公共点？为什么？这是一道常规性题目，教学中，我们可以将这个问题改造为一道开放式问题：据气象部门预报，一台风中心在直径是60千米的某城市正南50千米处，以北偏东30°方向前进，问该城市是否会遭受台风的袭击？并说明理由.通过这样的改造，常规性题目便具备了开放题的形式，更加具有挑战性.当然此题还可以进一步变换条件，让学生思维朝纵深发展.如该城市遭台风袭击的时间有多长？等等.4.鼓励学生合作学习，充分发挥学生的主体性《数学课程标准》中明确指出：“有效的数学学习活动不能是单纯地依赖模仿与记忆，动手实践、自主探索与合作交流应当是学生学习数学的重要方式.”合作学习技能指导与训练是小学数学课堂教学中重要的一环.技能是完成某种任务的一种活动方式，学习活动由学习技能构成，每一种学习活动往往包含一系列的具体技能.如果不具备一定的学习技能，学习是难以进行的.要提高“小组合作学习”的有效性，必须培养学生的合作学习技能.在初中数学小组活动中，让学生掌握合作规则，学会倾听，学会讨论，学会表达与交流意见，学会组织和评价，是小组合作学习的主要技能与方法，要坚持不懈地引导学生掌握合作学习的方法，并形成必要的合作学习技能.BIGDATA3W互朕闷深度精选微信cstudywww京东大数据平台从无到有,从集中式到分布式,从Oracle数据仓库到JDW20,在演变过程中一直在思考的两个问题1、如何建设电商特有的复杂业务的数据仓库?2、如何在保障安全的情况下降低使用数据的成本?从下面的内容中似乎能够看到这些问题的答案。商业思维面临的挑战FnxeJd.Com京东中国电子商务市2011-2017年中国电子商务市场交易规模227%198场依然在快速增22262160805200000844542长,“红利”时5397801254530代还在延续6401778217945000020132014m电子高务交易额(亿元)一增长率(%)电商的人员构成(传统+互联网)电商的组织架构(业务主导VS数据支持)电商的商业目标(GMVVSData-Driven)商业智能面临的挑战FnxeJd.Com京东传统BI大数据时代的BI结构化数据·非结构化数据+结构化数据关系型数据厍·集群数据规模一般TB级数据规模从数十TB到PB级集中式,数据向计算靠近分布式,计算向数据靠近批处理为主支持流式计算离线计算实时分析+离线计算报表展示智能决策统计分析自动化分析使用算法深度应用算法看数据解读数据大数据分析/挖掘的方向JD.COM京东AnalyticVisualizations√可视化分析√数据挖掘算法√预测性分析能力√语义引擎√数据质量和数据管理√数据来源多样化SemanticEngines算法实践FnxeJd.Com京东KMeans3ARMA预测掉法FuzzyKmeansARMAX.GARCHIA聚类算法cmpKMeansSpectral习数据降维机森林隐马横型分类算法KNN主题模型机器学习算法神经网增SVDSlop-one矩阵分解子的群体识别于5v心的于KMeans于RBM深度学习]5Q一FR-最优化方法用户画像FnxeJd.Com京东收入基本属性购物类型购买能力星座评价关注程度颜色偏好·身高家电的在购买需求家中是否有孕妇促销敏感度社交孩子年龄网络购物忠诚度是否有孩子心理孩子性别肖费信用水平是否有车用户的关系网所属购实群体是否有兴趣爱好用户分群FnxeJd.Com京东用户分群O数碍潮人电脑达人家庭用有房网购达人海海犹