平台简介

      大数据应用与开发平台是为本科院校人工智能、大数据等专业核心课程—《大数据技术》提供大数据开发与应用实践的开放性平台。该软件平台包括：大数据处理框架Hadoop、大数据计算引擎Spark、大数据开源流计算框架Storm和Spark Streaming，分布式文件系统、分布式数据库、大数据运算、流计算、图计算、数据可视化等各种大数据技术应用开发案例，以及相关测试数据等。本平台主要解决《大数据技术》课程工程化案例教学及实践问题，真正培养学生具有大数据思维，掌握大数据开发主要框架的使用，掌握大数据开发流程及各个技术模块等。

软件配置

1、Hadoop大数据处理框架、大数据计算引擎Spark、大数据开源流计算框架Storm和Spark Streaming；

2、15个大数据技术及应用的典型开源案例，包括大数据处理、分布式文件系统、分布式数据库、大数据运算、流计算、图计算、数据可视化、大数据行业应用等。

应用开发案例

1、Hadoop的安装与使用；

2、HDFS应用编程；

3、HBase应用编程；

4、开源流计算框架Spark应用编程；

5、开源流计算框架Spark Streaming及设计实例；

6、Pregel应用实例；

7、可视化典型实例；

8、大数据在互联网领域的应用及开发；

9、大数据在生物医学领域的应用及开发；

10、大数据在物流领域的应用及开发；

11、大数据在城市管理的应用及开发；

12、大数据在金融行业的应用及开发；

13、大数据在安全领域的应用及开发；

14、大数据在零售行业的应用及开发。