| Stage Id | Description | Submitted | Duration | Tasks: Succeeded/Total | Input | Output | Shuffle Read | Shuffle Write |
|---|---|---|---|---|---|---|---|---|
| 5 | saveAsTextFile at <console>:51 org.apache.spark.rdd.RDD.saveAsTextFile(RDD.scala:1436) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:51) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:56) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:58) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:60) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:62) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:64) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:66) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:68) $line68.$read$$iwC$$iwC$$iwC$$iwC.<init>(<console>:70) $line68.$read$$iwC$$iwC$$iwC.<init>(<console>:72) $line68.$read$$iwC$$iwC.<init>(<console>:74) $line68.$read$$iwC.<init>(<console>:76) $line68.$read.<init>(<console>:78) $line68.$read$.<init>(<console>:82) $line68.$read$.<clinit>(<console>) $line68.$eval$.<init>(<console>:7) $line68.$eval$.<clinit>(<console>) $line68.$eval.$print(<console>) sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) | 2022/07/06 10:16:11 | 4 s |
200/200
| 35.2 KB | 272.8 MB | ||
| 4 | rdd at <console>:51 org.apache.spark.sql.DataFrame.rdd(DataFrame.scala:1634) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:51) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:56) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:58) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:60) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:62) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:64) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:66) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:68) $line68.$read$$iwC$$iwC$$iwC$$iwC.<init>(<console>:70) $line68.$read$$iwC$$iwC$$iwC.<init>(<console>:72) $line68.$read$$iwC$$iwC.<init>(<console>:74) $line68.$read$$iwC.<init>(<console>:76) $line68.$read.<init>(<console>:78) $line68.$read$.<init>(<console>:82) $line68.$read$.<clinit>(<console>) $line68.$eval$.<init>(<console>:7) $line68.$eval$.<clinit>(<console>) $line68.$eval.$print(<console>) sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) | 2022/07/06 10:16:00 | 10 s |
20/20
| 616.8 MB | 272.7 MB | ||
| 3 | rdd at <console>:51 org.apache.spark.sql.DataFrame.rdd(DataFrame.scala:1634) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:51) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:56) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:58) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:60) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:62) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:64) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:66) $line68.$read$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:68) $line68.$read$$iwC$$iwC$$iwC$$iwC.<init>(<console>:70) $line68.$read$$iwC$$iwC$$iwC.<init>(<console>:72) $line68.$read$$iwC$$iwC.<init>(<console>:74) $line68.$read$$iwC.<init>(<console>:76) $line68.$read.<init>(<console>:78) $line68.$read$.<init>(<console>:82) $line68.$read$.<clinit>(<console>) $line68.$eval$.<init>(<console>:7) $line68.$eval$.<clinit>(<console>) $line68.$eval.$print(<console>) sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) | 2022/07/06 10:16:00 | 0.8 s |
12/12
| 30.2 KB | 65.6 KB |
