上QQ阅读APP看书,第一时间看更新
2.3 小结
Intellij IDEA是目前常用的Java和Scala程序设计以及框架处理软件,它拥有较好的自动架构、辅助编码和智能控制等功能,目前有极大的趋势取代Eclipse的使用。
在Windows上对Spark进行操作,解决了大部分学习人员欠缺大数据运行环境的烦恼,便于操作和研究基本算法,这对真实使用大数据集群进行数据处理有很大的帮助。在后面的章节中,笔者将着重介绍基于Windows单机环境下Spark的数据处理方法和内容,这种单机环境下相应程序的编写,与集群环境下运行时的程序编写基本相同,部分程序稍作修改即可运行在集群中,这点请读者不用产生顾虑。