实验8-11数据可视化

实验8-11数据可视化一、实验目的掌握使用superset进行数据可视化的方法。二、数据导出在分析完核心指标之后，需要将指标数据导出到mysql数据库中，便于可视化。ApacheSqoop是在Hadoop生态体系和RDBMS体系之间传送数据的一种工具。来自于Apache软件基金会提供。Hadoop生态系统包括：HDFS、Hive、Hbase等RDBMS体系包括：Mysql、Oracle、DB2等Sqoop可以理解为：“SQL到Hadoop和Hadoop到SQL”。Superset是一款开源的现代化企业级BI。它是目前开源的数据分析和可视化工具中比较好用的，功能简单但可以满足我们对数据的基本需求，支持多种数据源，图表类型多，易维护，易进行二次开发。丰富的数据可视化集易于使用的界面，用于浏览和可视化数据可提供身份验证三、实训内容步骤（一）Sqoop启动验证#进入Sqoop安装目录cd/export/server/sqoop-1.4.7#验证sqoop是否工作bin/sqooplist-databases\--connectjdbc:mysql://00:3306/\--usernameroot\--password1234562.MySQL建表1:mysql创建目标数据库和目标表#创建目标数据库createdatabaseifnotexistsapp_didi;#创建订单总笔数目标表createtableifnotexistsapp_didi.t_order_total(order_datedate,countint);导出订单总笔数表数据/export/server/sqoop-1.4.7/bin/sqoopexport\--connectjdbc:mysql://00:3306/app_didi\--usernameroot\--password123456\--tablet_order_total\--export-dir/user/hive/warehouse/app_didi.db/t_order_total/month=2020-042.在mysql中创建目标表createtableifnotexistsapp_didi.t_order_subscribe_name_count(date_valdatecomment'日期',subscribe_namevarchar(20)comment'预约和非预约名字',total_cntintcomment'订单数');sqoop导出/export/server/sqoop-1.4.7/bin/sqoopexport\--connectjdbc:mysql://00:3306/app_didi\--usernameroot\--password123456\--tablet_order_subscribe_name_count\--export-dir/user/hive/warehouse/app_didi.db/t_order_subscribe_name_count/month=2020-04#创建不同时段订单统计目标表--1:在mysql创建目标表createtableifnotexistsapp_didi.t_order_timerange_total(order_datedate,timerangevarchar(20),countint);--2：sqoop导出/export/server/sqoop-1.4.7/bin/sqoopexport\--connectjdbc:mysql://00:3306/app_didi\--usernameroot\--password123456\--tablet_order_timerange_total\--export-dir/user/hive/warehouse/app_didi.db/t_order_timerange_total/month=2020-04#创建不同地域订单统计目标表--1:在mysql创建目标表createtableifnotexistsapp_didi.t_order_province_total(order_datedate,provincevarchar(20),cityvarchar(20),countint);--2：sqoop导出/export/server/sqoop-1.4.7/bin/sqoopexport\--connectjdbc:mysql://00:3306/app_didi\--usernameroot\--password123456\--tablet_order_province_total\--export-dir/user/hive/warehouse/app_didi.db/t_order_province_total/month=2020-04#创建不同年龄段，不同时段订单目标表--1:在mysql创建目标表createtableifnotexistsapp_didi.t_order_age_and_time_range_total(order_datedate,age_rangevarchar(20),order_time_rangevarchar(20),countint);--2:sqoop导出/export/server/sqoop-1.4.7/bin/sqoopexport\--connectjdbc:mysql://00:3306/app_didi\--usernameroot\--password123456\--tablet_order_age_and_time_range_total\--fields-terminated-by'\t'\--export-dir/user/hive/warehouse/app_didi.db/t_order_age_and_time_range_total/month=2020-04（二）Superset数据可视化1.启动supersetrun-h00-p8099--with-threads--reload--debugger2.访问地址:00:80993.Superset建立数据源连接Mysql数据库mysql的url地址:mysql+pymysql://root:123456@00/app_didi?charset=utf84.分析指标可视化-订单总笔数可视化选择表数据源，添加表连接，设置表连接相关参数，设置图表参数5.分析指标可视化-预