大数据处理学期总结

在本学期的开始，我们接触了一门新兴的课程—大数据可视化。数据可视化，是关于数据视觉表现形式的科学技术研究。其中，这种数据的视觉表现形式被定义为，一种以某种概要形式抽提出来的信息，包括相应信息单位的各种属性和变量。在开始学习之前，我已经对该项课程有过了解了，在参加比赛的过程中，有时候会涉及到数据的可视化。以前的我认为可视化就是简单的吧获取到的数据整合然后使用代码编写出一系列的图片。但是，当我真正开始学习这门课程时，我发现他不是我认为的那样。在这门课程开始的时候，我接触到了自己以前没使用过的Spark、Scala，在课程的循序渐进中，我开始对Spring框架有了更加深入的了解。
本学期的Spark、Scala学习，也可以算是打了一个比较好的基础，但是也不算很精通，有些复杂的问题还是不能很好地解决掉，还是需要进行知识点的巩固，和思维的训练。经过了一学期的学习我感觉自己没有很活跃的思维，脑子不能再遇到问题时第一时间分析出问题类型，以及寻找到解决方法。所以，我觉得在以后编写代码时，应该多多分析问题的前因后果，不能只是一味的看代码，更应该分析代码思想。这门课程主要是帮助我们学会使用Spark做SQL数据库源，将数据库里的数据通过页面展现出来，虽然讲的比较基础，但是万变不离其宗，只有基础扎实了以后才能做的更好。
通过这门课学会了Spark、scala、Echarts 、mybatis 、RDD、的基本使用。
学习技术的道路上是永无止境的，我们必须不断学习才不会被时代所淘汰