Warm tip: This article is reproduced from serverfault.com, please click

其他-如何在Spark集群上运行C算法?

(其他 - How to run C algorithm on Spark cluster?)

发布于 2020-11-26 20:28:04

我有一个用C编写的算法。

我想使用Spark在节点集群上运行它。如何在Spark上运行C可执行文件?我已经阅读了有关执行我的二进制文件的JNI和Java Process的信息。

Questioner
Manolis P.
Viewed
11
act_coder 2020-11-28 12:17:21

这是databricks上的一篇不错的文章,内容涉及如何在apache spark中运行c和c ++代码。

https://kb.databricks.com/_static/notebooks/scala/run-c-plus-plus-scala.html

将c / c ++代码移动到基础分布式文件系统后,你可以编译代码并在spark worker节点上运行。