【企业沙龙】第十期：Spark与性能优化

3月5日晚，启明学院企业沙龙第十期——Spark与性能优化在启明学院305室举行。海智网聚公司team leader翟士丹、架构师杨松鹰向大家分享了有关spark与性能优化的通用知识。

时至今日，大数据早已不是新鲜概念，相关技术已趋向成熟，大数据的社区规模在不断扩大，越来越多的企业也在采用大数据技术解决自身的业务难题。Spark作为大数据生态圈中的一个重量级数据处理平台，非常易于使用，相比Hadoop MR具有性能优势，能够很好的与其他大数据框架相结合，并极大的降低了大数据开发的门槛，轻松地为大数据应用企业带来理想的投资回报。

翟士丹从大数据相关生态入手，介绍了大数据的相关框架和技术，涉及分布式文件系统、批量计算、流式计算、资源管理系统等。同时对spark进行了展开讲解，对比了spark和hadoop的区别，spark解决了hadoop的什么问题等，通过案例讲解了spark的基本用法。

架构师杨松鹰与大家分享了性能优化的技巧。他强调了在大数据分析处理过程中性能的重要性，以及如何提升大数据分析处理过程中的性能。

本次讲座为众多对spark和大数据感兴趣的同学提供了很好的学习交流平台。