课堂笔记监控键盘单词统计

1、1. 知识回顾 1. 知识回顾 cDriver 给定，但是 ReduceActor Driver 把数据发送到MapperActor，按本地的算法对数据进行加工，MapperActor ReduceActor， akka框架编程过程：DriverDriver中配置的算法，将MapperActor，MapperAcotor就按传递过来的算法来加工传递过来的数据 。， MapperActor akka框架编程过程：DriverDriver中配置的算法，将MapperActor，MapperAcotor就按传递过来的算法来加工传递过来的数据 。， MapperActor 将加工完数据和规定的算法一同

2、再传递给 据。 dsparksparka.）StandAlone上b.）apachemesose)sparkStandAlone spark可以按ip地址也可以按hostname进f) StandAlone ，Executor g1）jpsnamenode，namenodetmp2）datanode启动不了。把所有的/tmp/hadoop-rootrmrftmp/hadoop-root。重新格式化formathjob 把所有的/tmp/hadoop-rootrmrftmp/hadoop-root。重新格式化formathjob spark-submit方式来执行spark-submit-cla

3、ssscala工程，写一个执行类，要有一个main函数，指定它的jarvalconf=newjar valsc=newjob/root/result，hadoop file:/root/resultHDFShbasehadoop spark hdfs2spark-SQL，foxpro baseIII，SQLServer 2000,2005,2008,2012，SyBase , Oracle 6i sql程 SQLshar（ hadoopsparkhivespark-sql，spark2.0 hadoopsparkhivespark-sql，spark2.0重点优spark-sql，1.5.2

4、sql92，95 标准。2.0 完全支持。spark-sqlhivespark3. 总结spark-sqlspark-sql 4. Spark-SQL常2）SQLSQL语句） 9VGXQ操作对象SparkSQLDataFrame，DF对象，DFRDDSparkStreamingDStream 9VGXQ操作对象SparkSQLDataFrame，DF对象，DFRDDSparkStreamingDStreamRDDSparkMLLib机器学习，操作对象 YVGXQ 中的对象scalascalavallist=list:=List(1,2,3,4,RDD scalavalrdd=ParallelCollectionRDD0atmakeRDDatSparkSqlDataFramescalavaldf= YVGXQYWR 直接支持数据txt 注意，要把txtRDDjson 底层采用）json，oracle8. 中文乱码utf-8格式utf-8 格式来存放， 因为，utf-8 编码文件长度远远大于常规文件长度，在海量数据中，物理节点之间传递。如9. 表类型+|8. 中文乱码ut