utils4s
utils4s copied to clipboard
scala、spark使用过程中,各种测试用例以及相关资料整理
utils4s
公众号:
-
utils4s
- scala语法学习
- common库
-
BigData库
-
Spark
- Spark core
- Spark Streaming
- Spark SQL
- Spark 机器学习
- Spark Zeppelin
- Spark 其它
- ES
-
Spark
- 贡献代码步骤
- 贡献者
Issues 中包含我们平时阅读的关于scala、spark好的文章,欢迎推荐
utils4s包含各种scala通用、好玩的工具库demo和使用文档,通过简单的代码演示和操作文档,各种库信手拈来。
同时欢迎大家贡献各种好玩的、经常使用的工具库。
QQ交流群 432290475(已满),请加530066027
或者点击上面gitter图标也可以参与讨论
微博:jacksu_
scala语法学习
说明:scala语法学习过程中,用例代码都放在scala-demo模块下。
利用IntelliJ IDEA与Maven开始你的Scala之旅
快学scala电子书(推荐入门级书)
scala初学者指南(这可不是初学者可以理解的欧,还是写过一些程序后再看)
scala学习用例
scala/java 通过maven编译(Mixed Java/Scala Projects)
common库
日志操作(log4s)
单元测试(scalatest)
日期操作(lama)(注:只支持日期操作,不支持时间操作)
日期时间操作(nscala-time)(注:没有每月多少天,每月最后一天,以及每年多少天)
json解析(json4s)
resources下文件加载用例
文件操作(better-files)
单位换算(squants)
线性代数和向量计算(breeze)
分布式并行实现库akka(akka)
Twitter工具库(twitter util)
日常脚本工具
BigData库
Spark
Spark core
[spark远程调试源代码](http://hadoop1989.com/2016/02/01/Spark-Remote-Debug/)aliyun-spark-deploy-tool---Spark on ECS
Spark Streaming
Spark Streaming使用Kafka保证数据零丢失
spark streaming测试用例
基于spark streaming的聚合分析(Sparkta)
Spark SQL
spark DataFrame测试用例
Hive Json加载
Spark 机器学习
KeyStoneML KeystoneML is a software framework, written in Scala, from the UC Berkeley AMPLab designed to simplify the construction of large scale, end-to-end, machine learning pipelines with Apache Spark.
spark TS
Spark zeppelin
Z-Manager--Simplify getting Zeppelin up and running
zeppelin--a web-based notebook that enables interactive data analytics. You can make beautiful data-driven, interactive and collaborative documents with SQL, Scala and more.
helium--Brings Zeppelin to data analytics application platform
Spark 其它
spark学习知识总结
Spark library for doing exploratory data analysis in a scalable way