概述 这是一个用于spark项目的spark模板项目,结合了以前同事(杜,杨,刘等童鞋)的一些代码 承接1.0.0版本,结合在工作或者其它项目中学习到的一些自己觉得有用,记录在这个项目里,也是对自己的一个积累 总体上应该是写得不好 😅 终究是能力有限 client目录 数据库,连接池,HDFS等客户端 core目录 核心接口 job目录 根据业务需求编写spark任务 listener目录 各种监听器 model目录 各种实例 udf目录 各种Spark UDF utils目录 各种工具对象 script目录 这个工程中spark-submit,小文件合并的一些shell脚本