全站数据
8 4 2 0 5 8 1

机器学习实践:如何将Spark与Python结合

小金药师说药事 | 简单学习,快乐成才!         
问题更新日期:2024-04-18 14:07:51

问题描述

机器学习实践:如何将Spark与Python结合,麻烦给回复
精选答案
最佳答案

1.Spark Context设置内部服务并建立到Spark执行环境的连接。

2.驱动程序中的Spark Context对象协调所有分布式进程并允许进行资源分配。

3. 集群管理器执行程序,它们是具有逻辑的JVM进程。

4. Spark Context对象将应用程序发送给执行者。

5. Spark Context在每个执行器中执行任务。