В журналах исполнителя я вижу, что для каждой задачи, как только эта задача будет завершена, появится следующее сообщение журнала.
На самом деле то, что было отправлено водителю. То, что я думал только результат действия будет отправлен водителю. но это сообщение журнала происходит для каждой задачи
2232 байта, результат отправляется драйверу
20/04/16 15:21:14 INFO executor.Executor: Finished task 87.0 in stage 3.0 (TID 204). 2232 bytes result sent to driver
20/04/16 15:21:14 INFO executor.CoarseGrainedExecutorBackend: Got assigned task 206
20/04/16 15:21:14 INFO executor.Executor: Running task 89.0 in stage 3.0 (TID 206)
20/04/16 15:21:14 INFO parquet.ParquetRelation$$anonfun$buildInternalScan$1$$anon$1: Input split: ParquetInputSplit{part:
20/04/16 15:21:14 INFO executor.Executor: Finished task 88.0 in stage 3.0 (TID 205). 2232 bytes result sent to driver
20/04/16 15:21:14 INFO executor.Executor: Finished task 89.0 in stage 3.0 (TID 206). 2232 bytes result sent to driver
Я хочу знать, что это за 2232 байта. это какие-то выходные данные или подтверждение завершения задачи?