Spark 2: Uso de costumbre chispa presente guión con SparkLauncher

votos
0

Busco a utilizar una costumbre chispa presentar como guión (pero con nombre diferente) para enviar la tarea de chispa usando SparkLauncher

El problema es que el valor por defecto createBuilder()del método impide la modificación de nombre de la secuencia de comandos en SparkLauncher.class.

¿Hay una manera de forzar a la API para usar mi script personalizado, por ejemplo custom-spark-submit?

 private ProcessBuilder createBuilder() {
        List<String> cmd = new ArrayList();
        String script = CommandBuilderUtils.isWindows() ? spark-submit.cmd : spark-submit;
Publicado el 27/11/2018 a las 17:58
fuente por usuario
En otros idiomas...                            

Cookies help us deliver our services. By using our services, you agree to our use of cookies. Learn more