digraph G {
0 [labelType="html" label="<br><b>DeserializeToObject</b><br><br>"];
subgraph cluster1 {
isCluster="true";
label="WholeStageCodegen (1)\n \nduration: 195 ms";
2 [labelType="html" label="<br><b>Project</b><br><br>"];
3 [labelType="html" label="<b>Scan ExistingRDD</b><br><br>number of output rows: 609"];
}
2->0;
3->2;
}
4
DeserializeToObject createexternalrow(type_origine#544.toString, n_courrier#545.toString, mots_cles#546.toString, n_sejour#547.toString, destinataire#548.toString, fichier_courrier#549.toString, statut_courrier#550.toString, auteur#551.toString, date_courrier#552.toString, n_patient_etablissement#553.toString, specialite_executant#554.toString, type_courrier#555.toString, staticinvoke(class java.lang.Long, ObjectType(class java.lang.Long), valueOf, id_dc_do_not_overwrite_courriers_metad_24772#568L, true, false, true), StructField(type_origine,StringType,true), StructField(n_courrier,StringType,true), StructField(mots_cles,StringType,true), StructField(n_sejour,StringType,true), StructField(destinataire,StringType,true), StructField(fichier_courrier,StringType,true), StructField(statut_courrier,StringType,true), StructField(auteur,StringType,true), StructField(date_courrier,StringType,true), StructField(n_patient_etablissement,StringType,true), StructField(specialite_executant,StringType,true), ... 2 more fields), obj#608: org.apache.spark.sql.Row
Project [type_origine#544, n_courrier#545, mots_cles#546, n_sejour#547, destinataire#548, fichier_courrier#549, statut_courrier#550, auteur#551, date_courrier#552, n_patient_etablissement#553, specialite_executant#554, type_courrier#555, monotonically_increasing_id() AS id_dc_do_not_overwrite_courriers_metad_24772#568L]
Scan ExistingRDD[type_origine#544,n_courrier#545,mots_cles#546,n_sejour#547,destinataire#548,fichier_courrier#549,statut_courrier#550,auteur#551,date_courrier#552,n_patient_etablissement#553,specialite_executant#554,type_courrier#555]
WholeStageCodegen (1)
== Physical Plan ==
DeserializeToObject (3)
+- * Project (2)
+- * Scan ExistingRDD (1)
(1) Scan ExistingRDD [codegen id : 1]
Output [12]: [type_origine#544, n_courrier#545, mots_cles#546, n_sejour#547, destinataire#548, fichier_courrier#549, statut_courrier#550, auteur#551, date_courrier#552, n_patient_etablissement#553, specialite_executant#554, type_courrier#555]
Arguments: [type_origine#544, n_courrier#545, mots_cles#546, n_sejour#547, destinataire#548, fichier_courrier#549, statut_courrier#550, auteur#551, date_courrier#552, n_patient_etablissement#553, specialite_executant#554, type_courrier#555], MapPartitionsRDD[37] at createDataFrame at AbsExportExecutor.java:55, ExistingRDD, UnknownPartitioning(0)
(2) Project [codegen id : 1]
Output [13]: [type_origine#544, n_courrier#545, mots_cles#546, n_sejour#547, destinataire#548, fichier_courrier#549, statut_courrier#550, auteur#551, date_courrier#552, n_patient_etablissement#553, specialite_executant#554, type_courrier#555, monotonically_increasing_id() AS id_dc_do_not_overwrite_courriers_metad_24772#568L]
Input [12]: [type_origine#544, n_courrier#545, mots_cles#546, n_sejour#547, destinataire#548, fichier_courrier#549, statut_courrier#550, auteur#551, date_courrier#552, n_patient_etablissement#553, specialite_executant#554, type_courrier#555]
(3) DeserializeToObject
Input [13]: [type_origine#544, n_courrier#545, mots_cles#546, n_sejour#547, destinataire#548, fichier_courrier#549, statut_courrier#550, auteur#551, date_courrier#552, n_patient_etablissement#553, specialite_executant#554, type_courrier#555, id_dc_do_not_overwrite_courriers_metad_24772#568L]
Arguments: createexternalrow(type_origine#544.toString, n_courrier#545.toString, mots_cles#546.toString, n_sejour#547.toString, destinataire#548.toString, fichier_courrier#549.toString, statut_courrier#550.toString, auteur#551.toString, date_courrier#552.toString, n_patient_etablissement#553.toString, specialite_executant#554.toString, type_courrier#555.toString, staticinvoke(class java.lang.Long, ObjectType(class java.lang.Long), valueOf, id_dc_do_not_overwrite_courriers_metad_24772#568L, true, false, true), StructField(type_origine,StringType,true), StructField(n_courrier,StringType,true), StructField(mots_cles,StringType,true), StructField(n_sejour,StringType,true), StructField(destinataire,StringType,true), StructField(fichier_courrier,StringType,true), StructField(statut_courrier,StringType,true), StructField(auteur,StringType,true), StructField(date_courrier,StringType,true), StructField(n_patient_etablissement,StringType,true), StructField(specialite_executant,StringType,true), ... 2 more fields), obj#608: org.apache.spark.sql.Row