Docker 是一个开源的应用容器引擎,基于 Go 语言 并遵从 Apache2.0 协议开源。
Docker 可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中,然后发布到任何流行的 Linux 机器上,也可以实现虚拟化。
容器是完全使用沙箱机制,相互之间不会有任何接口 (类似 iPhone 的 app),更重要的是容器性能开销极低。
Docker 的应用场景
• Web 应用的自动化打包和发布
• 自动化测试和持续集成、发布
• 在服务型环境中部署和调整数据库或其他的后台应用
• 从头编译或者扩展现有的 OpenShift 或 Cloud Foundry 平台来搭建自己的 PaaS (Platform-as-a-Service) 环境
出此课程原因是很多企业开始要求把spark搭建在docker上面,导致很多学生不知道如何下手安装,怎么解决多台机器通信和共享问题。特别是spark配置文件如何配置。
此课程一步步教大家如何部署docker,如何在docker部署spark,多台机器如何解决ip通信等一些真实的场景。