阿里云大数据技术介绍

1、阿里云大数据技术介绍总览全域赋能智慧全球全域赋能，智慧全球，驱动中国数字产业阿里云大数据产品一览差计算引擎、研发体系、应用生态全域赋能，助力企业高速发展计算引擎、研发体系、应用生态全域赋能，助力企业高速发展强大高效的计算引擎MaxCompute 流计算分析型数据库 E-MapReduceData Lake Analytics便捷开放的研发体系大数据研发平台 DataWorks 机器学习平台 PAI专业丰富的应用生态Elasticsearch Opensearch 推荐引擎企业图谱 智能语音交互人脸识别自然语言处理 印刷文字识别MaxCompute2.0性能进一步提升，降低企业大数据成本突破多项

2、大数据Benchmark指标100TB首个100TB测试通过的引擎 The first engine passed 100TBBigbench verification8200QPM首个达到7000分的引擎 The first engine reaches 7000+首个基于公共云服务的Benchmark The first BigBench verification run onpublic cloud预付费包1月价格 Pre-paid for 1month按需后付费价格 Post paid by usage预付费包3年价格 Pre-paid for 3yrs$12.3/QP M$2.1/Q

3、P M$354.7/QP MDataWorks一站式大数据云研发平台一站式研发开箱即用，极大降低 数据研发的门槛，快 速上手大数据。满足 数据、AI、数据服务 开发需要。高效上云支持任意位置、任意 网络环境下的400+对 数据源之间的数据同 步。数据治理提供数据质量、运维 监控、资产管理、数 据血缘的治理体系。 通过一体化产品能力 降低数据中心的管理 运营成本。安全保障多租户隔离，数据安 全等级设定，数据脱 敏，安全审计。帮助 企业安全可控的使用 大数据，符合法务法 规需要。ODPSRDSEMRADS图计算Blink离线数据同步实时数据采集互联网数据采集端采集IOT采集元数据中心工作流开发代码

4、编辑器数据建模预编译代码仓库持续集成DEBUG调度配置工作流运维智能监控报警基线管理运维大盘分析展示数据权限安全打标数据审计数据脱敏智能数据探查代码规则校验离线/实时数据变更通知数据校验故障预警数据集成平台管理租户公安大脑应用市场行业方案城市大脑工业大脑B医I 疗大脑金融大脑数据开发监控运维数据资产管理数据地图成本管理资产报告维表管理数据质量数据安全数据治理数据汇聚数据服务234实时分析5678资产门户数据目录数据研发BI大屏AI服务推荐生态元数据上报同步数据填报账号权限计量计费安全交换区服务流式任务开发版本管理发布管理协同开发实时报表引擎数据计算组件机器 学习 PAI11开放共享阿里云流计算

5、历经阿里巴巴双十一磨练的实时计算引擎472M events/secsub-second latency流计算独享模式正式发布流计算 不止于流流计算独享模式特点开放UDF等更底 层的API，满足 用户的业务需求无缝对接用户VPC，且用户可 自主控制访问权 限网络联通支持多种机型适 配，包括GPU、FPGA等Data Lake场景的 数据清洗数据同步数据分析UDX开放硬件适配Data Lake大规模场景下，成本直支持20+上下游系统对一个产品，更多功能降30%接流式计算数据同步数据清洗数据分析30%120+提供基于X-Pack的节点间 数据传输加密、数据存储 加密、数据可视化、数据 字段级权限管理

6、等能力。 并计划在6.3版本提供APM、SQL等功能。基于Elasticsearch的运维 经验和数据，提供智能交 互式白屏运维能力，动态 智能的给出集群运维建议。即将上线。基于阿里云IaaS服务，提 供平滑、弹性的扩容、升 级、备份、恢复服务，屏 蔽机器层面的操作逻辑。X-Pack商业插件Eyou智能运维Elastic弹性伸缩阿里云Elasticsearch兼容开源的云上elasticsearch托管服务提供全量、增量数据indexing能力，支持ODPS、RDS、API推送数据源， 并提供数据写入之前的Join、Filter、Transfer功 能。提供丰富的分词模板及个 性化分词能力，对

7、搜索场 景下强需求的下拉提示、 查询表达式意图分析、召 回内容二次排序提供强大 的干预能力。基于阿里内部的搜索算法 沉淀，提供个性化的搜索 服务、理解用户查询表达 式中的意图进行数据“精 准”召回。Indexing数据预处理Searching数字单位Algorithm数字单位“智能”的开放搜索基于淘宝搜索场景的技术和算法沉淀，赋能云上搜索客户商品榜单主题视频文章个性化推荐淘宝电商、小说、视频、导购等众多场景下的个性化推荐能力透出用户A用户B商品A商品B商品C商品D商品E商品F人以类聚，物以群分购买相似相似用户C用户AC相似，A买过的商品B会推荐给用户C商品AE相似，A买过商品A，商品E会推荐给

8、用户A领先，从AI的基石开始数据计算力10000台单集群能力全球最完整的AI异构计算家族算法KITTI 2018 UU_ROAD-公开测试集UU_ROAD分类取得第一KITTI 2018 URBAN_ROAD 自动驾驶计算机视觉测试集第一2017ACM多媒体大会大规模视频分类比赛（LSVC）大规模视频分类比赛冠军 SQuAD 机器阅读理解挑战赛-准确率首次超 越人类EB级的海量数据湖BigBench全球首次达 到100TBAI已经彻底改变了阿里经济体的商业效率“见远” 图像检测IDC运维“天巡” 运维机器人工业设计物流家居生活“鹿班” 智能设计师“菜鸟小G” 物流机器人天猫精灵让所有企业都具备

9、阿里的AI能力机 器 学 习 PAI 平 台 NUI 自然交互平台视觉智能诊断“见远”平台 ALiIE平台ALiNLP平台 阿里翻译平台机器人工厂平台ALiGenie语音开放平台ALiGenie AR开放平台面向开发者的AI开发平台阿里云机器学习平台 PAI商业化、国际化PAI平台将为企业提供算法定制服务100+种算法组件，拖拽式极简体验 回归、分类、聚类、文本分析、关系挖掘深度学习框架及GPU分布式计算，飞一般极致性能支持Tensorflow、MXNet、Caffee、pyTorch高性能弹性在线预测服务EAS，即将登场NLP：自然的语言，自然的人机交互ALiNLP平台用于230+种业务场景

10、每天超过2000亿次API调用搜索推荐人机 交互机器 翻译广告舆情 监控物流金融客服司法 文书产品应用的场景智能语音交互自然语言处理计算机视觉人机交互 语音人机对话 关键词唤醒车载语音交互电视远场语音交互 多模态远场语音交互语音合成文字转写语音 快速人声定制阿里云AI产品家族75个产品，适用于300多个场景录音文件识别 实时语音识别 一句话识别用户自定义热词 语音关键字检测语音合成 人机对话 智能问答通用领域对话人脸识别 人脸属性识别 人脸检测定位身份验证1：N 身份验证1：1交互式活体检测 非交互式活体检测视频视频智能审核 视频视频分类 视频标签识别 视频人脸识别 视频语音识别 视频文字识别

11、 视频智能首图 视频摘要视 频 GIF 视频DNA视频新闻拆条 视频实时字幕实时多目标检测跟 踪身份证识别 驾驶证识别 银行卡识别 表格识别 名片识别 行驶证识别营业执照类识别 护照识别vin码识别通用文字识别文档小说图片文字识别电商图片文字识别 发票识别车牌识别火车票识别网络UGC图片文字识别社区贴吧图片文字识别视频文字识别 实体标识识别机器翻译文本翻译 语音翻译 图像翻译知识图谱知识建模 知识获取 逻辑推理 知识融合 知识赋能运筹优化 车辆规划 库存管理预测和异常检测智能图像 图像打标 场景识别 图像鉴黄3D建模 脚部建模 场景建模AR技术智能美妆NLP多语言分词 词性标注 命名实体 情感分析商品评价解析 地址分析内容安全 信息抽取 分类打标 意图识别智能司法解决方案将语音识别、OCR文本识 别、同案类推和司法大数据 融合传媒视频直播解决方案 实时监控敏感图像，给出等