ql/src/test/results/clientpositive/perf/spark/query9.q.out

   1 Warning: Map Join MAPJOIN[171][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
   2 Warning: Map Join MAPJOIN[172][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
   3 Warning: Map Join MAPJOIN[173][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
   4 Warning: Map Join MAPJOIN[174][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
   5 Warning: Map Join MAPJOIN[175][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
   6 Warning: Map Join MAPJOIN[176][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
   7 Warning: Map Join MAPJOIN[177][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
   8 Warning: Map Join MAPJOIN[178][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
   9 Warning: Map Join MAPJOIN[179][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
  10 Warning: Map Join MAPJOIN[180][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
  11 Warning: Map Join MAPJOIN[181][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
  12 Warning: Map Join MAPJOIN[182][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
  13 Warning: Map Join MAPJOIN[183][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
  14 Warning: Map Join MAPJOIN[184][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
  15 Warning: Map Join MAPJOIN[185][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
  16 PREHOOK: query: explain
  17 select case when (select count(*)
  18                   from store_sales
  19                   where ss_quantity between 1 and 20) > 409437
  20             then (select avg(ss_ext_list_price)
  21                   from store_sales
  22                   where ss_quantity between 1 and 20)
  23             else (select avg(ss_net_paid_inc_tax)
  24                   from store_sales
  25                   where ss_quantity between 1 and 20) end bucket1 ,
  26        case when (select count(*)
  27                   from store_sales
  28                   where ss_quantity between 21 and 40) > 4595804
  29             then (select avg(ss_ext_list_price)
  30                   from store_sales
  31                   where ss_quantity between 21 and 40)
  32             else (select avg(ss_net_paid_inc_tax)
  33                   from store_sales
  34                   where ss_quantity between 21 and 40) end bucket2,
  35        case when (select count(*)
  36                   from store_sales
  37                   where ss_quantity between 41 and 60) > 7887297
  38             then (select avg(ss_ext_list_price)
  39                   from store_sales
  40                   where ss_quantity between 41 and 60)
  41             else (select avg(ss_net_paid_inc_tax)
  42                   from store_sales
  43                   where ss_quantity between 41 and 60) end bucket3,
  44        case when (select count(*)
  45                   from store_sales
  46                   where ss_quantity between 61 and 80) > 10872978
  47             then (select avg(ss_ext_list_price)
  48                   from store_sales
  49                   where ss_quantity between 61 and 80)
  50             else (select avg(ss_net_paid_inc_tax)
  51                   from store_sales
  52                   where ss_quantity between 61 and 80) end bucket4,
  53        case when (select count(*)
  54                   from store_sales
  55                   where ss_quantity between 81 and 100) > 43571537
  56             then (select avg(ss_ext_list_price)
  57                   from store_sales
  58                   where ss_quantity between 81 and 100)
  59             else (select avg(ss_net_paid_inc_tax)
  60                   from store_sales
  61                   where ss_quantity between 81 and 100) end bucket5
  62 from reason
  63 where r_reason_sk = 1
  64 PREHOOK: type: QUERY
  65 POSTHOOK: query: explain
  66 select case when (select count(*)
  67                   from store_sales
  68                   where ss_quantity between 1 and 20) > 409437
  69             then (select avg(ss_ext_list_price)
  70                   from store_sales
  71                   where ss_quantity between 1 and 20)
  72             else (select avg(ss_net_paid_inc_tax)
  73                   from store_sales
  74                   where ss_quantity between 1 and 20) end bucket1 ,
  75        case when (select count(*)
  76                   from store_sales
  77                   where ss_quantity between 21 and 40) > 4595804
  78             then (select avg(ss_ext_list_price)
  79                   from store_sales
  80                   where ss_quantity between 21 and 40)
  81             else (select avg(ss_net_paid_inc_tax)
  82                   from store_sales
  83                   where ss_quantity between 21 and 40) end bucket2,
  84        case when (select count(*)
  85                   from store_sales
  86                   where ss_quantity between 41 and 60) > 7887297
  87             then (select avg(ss_ext_list_price)
  88                   from store_sales
  89                   where ss_quantity between 41 and 60)
  90             else (select avg(ss_net_paid_inc_tax)
  91                   from store_sales
  92                   where ss_quantity between 41 and 60) end bucket3,
  93        case when (select count(*)
  94                   from store_sales
  95                   where ss_quantity between 61 and 80) > 10872978
  96             then (select avg(ss_ext_list_price)
  97                   from store_sales
  98                   where ss_quantity between 61 and 80)
  99             else (select avg(ss_net_paid_inc_tax)
 100                   from store_sales
 101                   where ss_quantity between 61 and 80) end bucket4,
 102        case when (select count(*)
 103                   from store_sales
 104                   where ss_quantity between 81 and 100) > 43571537
 105             then (select avg(ss_ext_list_price)
 106                   from store_sales
 107                   where ss_quantity between 81 and 100)
 108             else (select avg(ss_net_paid_inc_tax)
 109                   from store_sales
 110                   where ss_quantity between 81 and 100) end bucket5
 111 from reason
 112 where r_reason_sk = 1
 113 POSTHOOK: type: QUERY
 114 STAGE DEPENDENCIES:
 115   Stage-2 is a root stage
 116   Stage-1 depends on stages: Stage-2
 117   Stage-0 depends on stages: Stage-1
 118
 119 STAGE PLANS:
 120   Stage: Stage-2
 121     Spark
 122       Edges:
 123         Reducer 11 <- Map 10 (GROUP, 1)
 124         Reducer 13 <- Map 12 (GROUP, 1)
 125         Reducer 15 <- Map 14 (GROUP, 1)
 126         Reducer 17 <- Map 16 (GROUP, 1)
 127         Reducer 19 <- Map 18 (GROUP, 1)
 128         Reducer 21 <- Map 20 (GROUP, 1)
 129         Reducer 23 <- Map 22 (GROUP, 1)
 130         Reducer 25 <- Map 24 (GROUP, 1)
 131         Reducer 27 <- Map 26 (GROUP, 1)
 132         Reducer 29 <- Map 28 (GROUP, 1)
 133         Reducer 3 <- Map 2 (GROUP, 1)
 134         Reducer 31 <- Map 30 (GROUP, 1)
 135         Reducer 5 <- Map 4 (GROUP, 1)
 136         Reducer 7 <- Map 6 (GROUP, 1)
 137         Reducer 9 <- Map 8 (GROUP, 1)
 138 #### A masked pattern was here ####
 139       Vertices:
 140         Map 10
 141             Map Operator Tree:
 142                 TableScan
 143                   alias: store_sales
 144                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 145                   Filter Operator
 146                     predicate: ss_quantity BETWEEN 21 AND 40 (type: boolean)
 147                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 148                     Select Operator
 149                       expressions: ss_ext_list_price (type: decimal(7,2))
 150                       outputColumnNames: ss_ext_list_price
 151                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 152                       Group By Operator
 153                         aggregations: avg(ss_ext_list_price)
 154                         mode: hash
 155                         outputColumnNames: _col0
 156                         Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 157                         Reduce Output Operator
 158                           sort order:
 159                           Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 160                           value expressions: _col0 (type: struct<count:bigint,sum:decimal(17,2),input:decimal(7,2)>)
 161         Map 12
 162             Map Operator Tree:
 163                 TableScan
 164                   alias: store_sales
 165                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 166                   Filter Operator
 167                     predicate: ss_quantity BETWEEN 21 AND 40 (type: boolean)
 168                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 169                     Select Operator
 170                       expressions: ss_net_paid_inc_tax (type: decimal(7,2))
 171                       outputColumnNames: ss_net_paid_inc_tax
 172                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 173                       Group By Operator
 174                         aggregations: avg(ss_net_paid_inc_tax)
 175                         mode: hash
 176                         outputColumnNames: _col0
 177                         Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 178                         Reduce Output Operator
 179                           sort order:
 180                           Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 181                           value expressions: _col0 (type: struct<count:bigint,sum:decimal(17,2),input:decimal(7,2)>)
 182         Map 14
 183             Map Operator Tree:
 184                 TableScan
 185                   alias: store_sales
 186                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 187                   Filter Operator
 188                     predicate: ss_quantity BETWEEN 41 AND 60 (type: boolean)
 189                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 190                     Select Operator
 191                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 192                       Group By Operator
 193                         aggregations: count()
 194                         mode: hash
 195                         outputColumnNames: _col0
 196                         Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 197                         Reduce Output Operator
 198                           sort order:
 199                           Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 200                           value expressions: _col0 (type: bigint)
 201         Map 16
 202             Map Operator Tree:
 203                 TableScan
 204                   alias: store_sales
 205                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 206                   Filter Operator
 207                     predicate: ss_quantity BETWEEN 41 AND 60 (type: boolean)
 208                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 209                     Select Operator
 210                       expressions: ss_ext_list_price (type: decimal(7,2))
 211                       outputColumnNames: ss_ext_list_price
 212                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 213                       Group By Operator
 214                         aggregations: avg(ss_ext_list_price)
 215                         mode: hash
 216                         outputColumnNames: _col0
 217                         Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 218                         Reduce Output Operator
 219                           sort order:
 220                           Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 221                           value expressions: _col0 (type: struct<count:bigint,sum:decimal(17,2),input:decimal(7,2)>)
 222         Map 18
 223             Map Operator Tree:
 224                 TableScan
 225                   alias: store_sales
 226                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 227                   Filter Operator
 228                     predicate: ss_quantity BETWEEN 41 AND 60 (type: boolean)
 229                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 230                     Select Operator
 231                       expressions: ss_net_paid_inc_tax (type: decimal(7,2))
 232                       outputColumnNames: ss_net_paid_inc_tax
 233                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 234                       Group By Operator
 235                         aggregations: avg(ss_net_paid_inc_tax)
 236                         mode: hash
 237                         outputColumnNames: _col0
 238                         Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 239                         Reduce Output Operator
 240                           sort order:
 241                           Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 242                           value expressions: _col0 (type: struct<count:bigint,sum:decimal(17,2),input:decimal(7,2)>)
 243         Map 2
 244             Map Operator Tree:
 245                 TableScan
 246                   alias: store_sales
 247                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 248                   Filter Operator
 249                     predicate: ss_quantity BETWEEN 1 AND 20 (type: boolean)
 250                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 251                     Select Operator
 252                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 253                       Group By Operator
 254                         aggregations: count()
 255                         mode: hash
 256                         outputColumnNames: _col0
 257                         Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 258                         Reduce Output Operator
 259                           sort order:
 260                           Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 261                           value expressions: _col0 (type: bigint)
 262         Map 20
 263             Map Operator Tree:
 264                 TableScan
 265                   alias: store_sales
 266                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 267                   Filter Operator
 268                     predicate: ss_quantity BETWEEN 61 AND 80 (type: boolean)
 269                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 270                     Select Operator
 271                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 272                       Group By Operator
 273                         aggregations: count()
 274                         mode: hash
 275                         outputColumnNames: _col0
 276                         Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 277                         Reduce Output Operator
 278                           sort order:
 279                           Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 280                           value expressions: _col0 (type: bigint)
 281         Map 22
 282             Map Operator Tree:
 283                 TableScan
 284                   alias: store_sales
 285                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 286                   Filter Operator
 287                     predicate: ss_quantity BETWEEN 61 AND 80 (type: boolean)
 288                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 289                     Select Operator
 290                       expressions: ss_ext_list_price (type: decimal(7,2))
 291                       outputColumnNames: ss_ext_list_price
 292                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 293                       Group By Operator
 294                         aggregations: avg(ss_ext_list_price)
 295                         mode: hash
 296                         outputColumnNames: _col0
 297                         Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 298                         Reduce Output Operator
 299                           sort order:
 300                           Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 301                           value expressions: _col0 (type: struct<count:bigint,sum:decimal(17,2),input:decimal(7,2)>)
 302         Map 24
 303             Map Operator Tree:
 304                 TableScan
 305                   alias: store_sales
 306                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 307                   Filter Operator
 308                     predicate: ss_quantity BETWEEN 61 AND 80 (type: boolean)
 309                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 310                     Select Operator
 311                       expressions: ss_net_paid_inc_tax (type: decimal(7,2))
 312                       outputColumnNames: ss_net_paid_inc_tax
 313                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 314                       Group By Operator
 315                         aggregations: avg(ss_net_paid_inc_tax)
 316                         mode: hash
 317                         outputColumnNames: _col0
 318                         Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 319                         Reduce Output Operator
 320                           sort order:
 321                           Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 322                           value expressions: _col0 (type: struct<count:bigint,sum:decimal(17,2),input:decimal(7,2)>)
 323         Map 26
 324             Map Operator Tree:
 325                 TableScan
 326                   alias: store_sales
 327                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 328                   Filter Operator
 329                     predicate: ss_quantity BETWEEN 81 AND 100 (type: boolean)
 330                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 331                     Select Operator
 332                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 333                       Group By Operator
 334                         aggregations: count()
 335                         mode: hash
 336                         outputColumnNames: _col0
 337                         Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 338                         Reduce Output Operator
 339                           sort order:
 340                           Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 341                           value expressions: _col0 (type: bigint)
 342         Map 28
 343             Map Operator Tree:
 344                 TableScan
 345                   alias: store_sales
 346                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 347                   Filter Operator
 348                     predicate: ss_quantity BETWEEN 81 AND 100 (type: boolean)
 349                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 350                     Select Operator
 351                       expressions: ss_ext_list_price (type: decimal(7,2))
 352                       outputColumnNames: ss_ext_list_price
 353                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 354                       Group By Operator
 355                         aggregations: avg(ss_ext_list_price)
 356                         mode: hash
 357                         outputColumnNames: _col0
 358                         Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 359                         Reduce Output Operator
 360                           sort order:
 361                           Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 362                           value expressions: _col0 (type: struct<count:bigint,sum:decimal(17,2),input:decimal(7,2)>)
 363         Map 30
 364             Map Operator Tree:
 365                 TableScan
 366                   alias: store_sales
 367                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 368                   Filter Operator
 369                     predicate: ss_quantity BETWEEN 81 AND 100 (type: boolean)
 370                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 371                     Select Operator
 372                       expressions: ss_net_paid_inc_tax (type: decimal(7,2))
 373                       outputColumnNames: ss_net_paid_inc_tax
 374                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 375                       Group By Operator
 376                         aggregations: avg(ss_net_paid_inc_tax)
 377                         mode: hash
 378                         outputColumnNames: _col0
 379                         Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 380                         Reduce Output Operator
 381                           sort order:
 382                           Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 383                           value expressions: _col0 (type: struct<count:bigint,sum:decimal(17,2),input:decimal(7,2)>)
 384         Map 4
 385             Map Operator Tree:
 386                 TableScan
 387                   alias: store_sales
 388                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 389                   Filter Operator
 390                     predicate: ss_quantity BETWEEN 1 AND 20 (type: boolean)
 391                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 392                     Select Operator
 393                       expressions: ss_ext_list_price (type: decimal(7,2))
 394                       outputColumnNames: ss_ext_list_price
 395                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 396                       Group By Operator
 397                         aggregations: avg(ss_ext_list_price)
 398                         mode: hash
 399                         outputColumnNames: _col0
 400                         Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 401                         Reduce Output Operator
 402                           sort order:
 403                           Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 404                           value expressions: _col0 (type: struct<count:bigint,sum:decimal(17,2),input:decimal(7,2)>)
 405         Map 6
 406             Map Operator Tree:
 407                 TableScan
 408                   alias: store_sales
 409                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 410                   Filter Operator
 411                     predicate: ss_quantity BETWEEN 1 AND 20 (type: boolean)
 412                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 413                     Select Operator
 414                       expressions: ss_net_paid_inc_tax (type: decimal(7,2))
 415                       outputColumnNames: ss_net_paid_inc_tax
 416                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 417                       Group By Operator
 418                         aggregations: avg(ss_net_paid_inc_tax)
 419                         mode: hash
 420                         outputColumnNames: _col0
 421                         Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 422                         Reduce Output Operator
 423                           sort order:
 424                           Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 425                           value expressions: _col0 (type: struct<count:bigint,sum:decimal(17,2),input:decimal(7,2)>)
 426         Map 8
 427             Map Operator Tree:
 428                 TableScan
 429                   alias: store_sales
 430                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
 431                   Filter Operator
 432                     predicate: ss_quantity BETWEEN 21 AND 40 (type: boolean)
 433                     Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 434                     Select Operator
 435                       Statistics: Num rows: 63999515 Data size: 5646055787 Basic stats: COMPLETE Column stats: NONE
 436                       Group By Operator
 437                         aggregations: count()
 438                         mode: hash
 439                         outputColumnNames: _col0
 440                         Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 441                         Reduce Output Operator
 442                           sort order:
 443                           Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 444                           value expressions: _col0 (type: bigint)
 445         Reducer 11
 446             Local Work:
 447               Map Reduce Local Work
 448             Reduce Operator Tree:
 449               Group By Operator
 450                 aggregations: avg(VALUE._col0)
 451                 mode: mergepartial
 452                 outputColumnNames: _col0
 453                 Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 454                 Spark HashTable Sink Operator
 455                   keys:
 456                     0
 457                     1
 458         Reducer 13
 459             Local Work:
 460               Map Reduce Local Work
 461             Reduce Operator Tree:
 462               Group By Operator
 463                 aggregations: avg(VALUE._col0)
 464                 mode: mergepartial
 465                 outputColumnNames: _col0
 466                 Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 467                 Spark HashTable Sink Operator
 468                   keys:
 469                     0
 470                     1
 471         Reducer 15
 472             Local Work:
 473               Map Reduce Local Work
 474             Reduce Operator Tree:
 475               Group By Operator
 476                 aggregations: count(VALUE._col0)
 477                 mode: mergepartial
 478                 outputColumnNames: _col0
 479                 Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 480                 Spark HashTable Sink Operator
 481                   keys:
 482                     0
 483                     1
 484         Reducer 17
 485             Local Work:
 486               Map Reduce Local Work
 487             Reduce Operator Tree:
 488               Group By Operator
 489                 aggregations: avg(VALUE._col0)
 490                 mode: mergepartial
 491                 outputColumnNames: _col0
 492                 Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 493                 Spark HashTable Sink Operator
 494                   keys:
 495                     0
 496                     1
 497         Reducer 19
 498             Local Work:
 499               Map Reduce Local Work
 500             Reduce Operator Tree:
 501               Group By Operator
 502                 aggregations: avg(VALUE._col0)
 503                 mode: mergepartial
 504                 outputColumnNames: _col0
 505                 Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 506                 Spark HashTable Sink Operator
 507                   keys:
 508                     0
 509                     1
 510         Reducer 21
 511             Local Work:
 512               Map Reduce Local Work
 513             Reduce Operator Tree:
 514               Group By Operator
 515                 aggregations: count(VALUE._col0)
 516                 mode: mergepartial
 517                 outputColumnNames: _col0
 518                 Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 519                 Spark HashTable Sink Operator
 520                   keys:
 521                     0
 522                     1
 523         Reducer 23
 524             Local Work:
 525               Map Reduce Local Work
 526             Reduce Operator Tree:
 527               Group By Operator
 528                 aggregations: avg(VALUE._col0)
 529                 mode: mergepartial
 530                 outputColumnNames: _col0
 531                 Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 532                 Spark HashTable Sink Operator
 533                   keys:
 534                     0
 535                     1
 536         Reducer 25
 537             Local Work:
 538               Map Reduce Local Work
 539             Reduce Operator Tree:
 540               Group By Operator
 541                 aggregations: avg(VALUE._col0)
 542                 mode: mergepartial
 543                 outputColumnNames: _col0
 544                 Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 545                 Spark HashTable Sink Operator
 546                   keys:
 547                     0
 548                     1
 549         Reducer 27
 550             Local Work:
 551               Map Reduce Local Work
 552             Reduce Operator Tree:
 553               Group By Operator
 554                 aggregations: count(VALUE._col0)
 555                 mode: mergepartial
 556                 outputColumnNames: _col0
 557                 Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 558                 Spark HashTable Sink Operator
 559                   keys:
 560                     0
 561                     1
 562         Reducer 29
 563             Local Work:
 564               Map Reduce Local Work
 565             Reduce Operator Tree:
 566               Group By Operator
 567                 aggregations: avg(VALUE._col0)
 568                 mode: mergepartial
 569                 outputColumnNames: _col0
 570                 Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 571                 Spark HashTable Sink Operator
 572                   keys:
 573                     0
 574                     1
 575         Reducer 3
 576             Local Work:
 577               Map Reduce Local Work
 578             Reduce Operator Tree:
 579               Group By Operator
 580                 aggregations: count(VALUE._col0)
 581                 mode: mergepartial
 582                 outputColumnNames: _col0
 583                 Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 584                 Spark HashTable Sink Operator
 585                   keys:
 586                     0
 587                     1
 588         Reducer 31
 589             Local Work:
 590               Map Reduce Local Work
 591             Reduce Operator Tree:
 592               Group By Operator
 593                 aggregations: avg(VALUE._col0)
 594                 mode: mergepartial
 595                 outputColumnNames: _col0
 596                 Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 597                 Spark HashTable Sink Operator
 598                   keys:
 599                     0
 600                     1
 601         Reducer 5
 602             Local Work:
 603               Map Reduce Local Work
 604             Reduce Operator Tree:
 605               Group By Operator
 606                 aggregations: avg(VALUE._col0)
 607                 mode: mergepartial
 608                 outputColumnNames: _col0
 609                 Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 610                 Spark HashTable Sink Operator
 611                   keys:
 612                     0
 613                     1
 614         Reducer 7
 615             Local Work:
 616               Map Reduce Local Work
 617             Reduce Operator Tree:
 618               Group By Operator
 619                 aggregations: avg(VALUE._col0)
 620                 mode: mergepartial
 621                 outputColumnNames: _col0
 622                 Statistics: Num rows: 1 Data size: 288 Basic stats: COMPLETE Column stats: NONE
 623                 Spark HashTable Sink Operator
 624                   keys:
 625                     0
 626                     1
 627         Reducer 9
 628             Local Work:
 629               Map Reduce Local Work
 630             Reduce Operator Tree:
 631               Group By Operator
 632                 aggregations: count(VALUE._col0)
 633                 mode: mergepartial
 634                 outputColumnNames: _col0
 635                 Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
 636                 Spark HashTable Sink Operator
 637                   keys:
 638                     0
 639                     1
 640
 641   Stage: Stage-1
 642     Spark
 643 #### A masked pattern was here ####
 644       Vertices:
 645         Map 1
 646             Map Operator Tree:
 647                 TableScan
 648                   alias: reason
 649                   Statistics: Num rows: 72 Data size: 14400 Basic stats: COMPLETE Column stats: NONE
 650                   Filter Operator
 651                     predicate: (r_reason_sk = 1) (type: boolean)
 652                     Statistics: Num rows: 36 Data size: 7200 Basic stats: COMPLETE Column stats: NONE
 653                     Select Operator
 654                       Statistics: Num rows: 36 Data size: 7200 Basic stats: COMPLETE Column stats: NONE
 655                       Map Join Operator
 656                         condition map:
 657                              Left Outer Join 0 to 1
 658                         keys:
 659                           0
 660                           1
 661                         outputColumnNames: _col1
 662                         input vertices:
 663                           1 Reducer 3
 664                         Statistics: Num rows: 36 Data size: 7524 Basic stats: COMPLETE Column stats: NONE
 665                         Map Join Operator
 666                           condition map:
 667                                Left Outer Join 0 to 1
 668                           keys:
 669                             0
 670                             1
 671                           outputColumnNames: _col1, _col2
 672                           input vertices:
 673                             1 Reducer 5
 674                           Statistics: Num rows: 36 Data size: 17928 Basic stats: COMPLETE Column stats: NONE
 675                           Map Join Operator
 676                             condition map:
 677                                  Left Outer Join 0 to 1
 678                             keys:
 679                               0
 680                               1
 681                             outputColumnNames: _col1, _col2, _col3
 682                             input vertices:
 683                               1 Reducer 7
 684                             Statistics: Num rows: 36 Data size: 28332 Basic stats: COMPLETE Column stats: NONE
 685                             Map Join Operator
 686                               condition map:
 687                                    Left Outer Join 0 to 1
 688                               keys:
 689                                 0
 690                                 1
 691                               outputColumnNames: _col1, _col2, _col3, _col4
 692                               input vertices:
 693                                 1 Reducer 9
 694                               Statistics: Num rows: 36 Data size: 28656 Basic stats: COMPLETE Column stats: NONE
 695                               Map Join Operator
 696                                 condition map:
 697                                      Left Outer Join 0 to 1
 698                                 keys:
 699                                   0
 700                                   1
 701                                 outputColumnNames: _col1, _col2, _col3, _col4, _col5
 702                                 input vertices:
 703                                   1 Reducer 11
 704                                 Statistics: Num rows: 36 Data size: 39060 Basic stats: COMPLETE Column stats: NONE
 705                                 Map Join Operator
 706                                   condition map:
 707                                        Left Outer Join 0 to 1
 708                                   keys:
 709                                     0
 710                                     1
 711                                   outputColumnNames: _col1, _col2, _col3, _col4, _col5, _col6
 712                                   input vertices:
 713                                     1 Reducer 13
 714                                   Statistics: Num rows: 36 Data size: 49464 Basic stats: COMPLETE Column stats: NONE
 715                                   Map Join Operator
 716                                     condition map:
 717                                          Left Outer Join 0 to 1
 718                                     keys:
 719                                       0
 720                                       1
 721                                     outputColumnNames: _col1, _col2, _col3, _col4, _col5, _col6, _col7
 722                                     input vertices:
 723                                       1 Reducer 15
 724                                     Statistics: Num rows: 36 Data size: 49788 Basic stats: COMPLETE Column stats: NONE
 725                                     Map Join Operator
 726                                       condition map:
 727                                            Left Outer Join 0 to 1
 728                                       keys:
 729                                         0
 730                                         1
 731                                       outputColumnNames: _col1, _col2, _col3, _col4, _col5, _col6, _col7, _col8
 732                                       input vertices:
 733                                         1 Reducer 17
 734                                       Statistics: Num rows: 36 Data size: 60192 Basic stats: COMPLETE Column stats: NONE
 735                                       Map Join Operator
 736                                         condition map:
 737                                              Left Outer Join 0 to 1
 738                                         keys:
 739                                           0
 740                                           1
 741                                         outputColumnNames: _col1, _col2, _col3, _col4, _col5, _col6, _col7, _col8, _col9
 742                                         input vertices:
 743                                           1 Reducer 19
 744                                         Statistics: Num rows: 36 Data size: 70596 Basic stats: COMPLETE Column stats: NONE
 745                                         Map Join Operator
 746                                           condition map:
 747                                                Left Outer Join 0 to 1
 748                                           keys:
 749                                             0
 750                                             1
 751                                           outputColumnNames: _col1, _col2, _col3, _col4, _col5, _col6, _col7, _col8, _col9, _col10
 752                                           input vertices:
 753                                             1 Reducer 21
 754                                           Statistics: Num rows: 36 Data size: 70920 Basic stats: COMPLETE Column stats: NONE
 755                                           Map Join Operator
 756                                             condition map:
 757                                                  Left Outer Join 0 to 1
 758                                             keys:
 759                                               0
 760                                               1
 761                                             outputColumnNames: _col1, _col2, _col3, _col4, _col5, _col6, _col7, _col8, _col9, _col10, _col11
 762                                             input vertices:
 763                                               1 Reducer 23
 764                                             Statistics: Num rows: 36 Data size: 81324 Basic stats: COMPLETE Column stats: NONE
 765                                             Map Join Operator
 766                                               condition map:
 767                                                    Left Outer Join 0 to 1
 768                                               keys:
 769                                                 0
 770                                                 1
 771                                               outputColumnNames: _col1, _col2, _col3, _col4, _col5, _col6, _col7, _col8, _col9, _col10, _col11, _col12
 772                                               input vertices:
 773                                                 1 Reducer 25
 774                                               Statistics: Num rows: 36 Data size: 91728 Basic stats: COMPLETE Column stats: NONE
 775                                               Map Join Operator
 776                                                 condition map:
 777                                                      Left Outer Join 0 to 1
 778                                                 keys:
 779                                                   0
 780                                                   1
 781                                                 outputColumnNames: _col1, _col2, _col3, _col4, _col5, _col6, _col7, _col8, _col9, _col10, _col11, _col12, _col13
 782                                                 input vertices:
 783                                                   1 Reducer 27
 784                                                 Statistics: Num rows: 36 Data size: 92052 Basic stats: COMPLETE Column stats: NONE
 785                                                 Map Join Operator
 786                                                   condition map:
 787                                                        Left Outer Join 0 to 1
 788                                                   keys:
 789                                                     0
 790                                                     1
 791                                                   outputColumnNames: _col1, _col2, _col3, _col4, _col5, _col6, _col7, _col8, _col9, _col10, _col11, _col12, _col13, _col14
 792                                                   input vertices:
 793                                                     1 Reducer 29
 794                                                   Statistics: Num rows: 36 Data size: 102456 Basic stats: COMPLETE Column stats: NONE
 795                                                   Map Join Operator
 796                                                     condition map:
 797                                                          Left Outer Join 0 to 1
 798                                                     keys:
 799                                                       0
 800                                                       1
 801                                                     outputColumnNames: _col1, _col2, _col3, _col4, _col5, _col6, _col7, _col8, _col9, _col10, _col11, _col12, _col13, _col14, _col15
 802                                                     input vertices:
 803                                                       1 Reducer 31
 804                                                     Statistics: Num rows: 36 Data size: 112860 Basic stats: COMPLETE Column stats: NONE
 805                                                     Select Operator
 806                                                       expressions: CASE WHEN ((_col1 > 409437L)) THEN (_col2) ELSE (_col3) END (type: decimal(11,6)), CASE WHEN ((_col4 > 4595804L)) THEN (_col5) ELSE (_col6) END (type: decimal(11,6)), CASE WHEN ((_col7 > 7887297L)) THEN (_col8) ELSE (_col9) END (type: decimal(11,6)), CASE WHEN ((_col10 > 10872978L)) THEN (_col11) ELSE (_col12) END (type: decimal(11,6)), CASE WHEN ((_col13 > 43571537L)) THEN (_col14) ELSE (_col15) END (type: decimal(11,6))
 807                                                       outputColumnNames: _col0, _col1, _col2, _col3, _col4
 808                                                       Statistics: Num rows: 36 Data size: 112860 Basic stats: COMPLETE Column stats: NONE
 809                                                       File Output Operator
 810                                                         compressed: false
 811                                                         Statistics: Num rows: 36 Data size: 112860 Basic stats: COMPLETE Column stats: NONE
 812                                                         table:
 813                                                             input format: org.apache.hadoop.mapred.SequenceFileInputFormat
 814                                                             output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
 815                                                             serde: org.apache.hadoop.hive.serde2.lazy.LazySimpleSerDe
 816             Local Work:
 817               Map Reduce Local Work
 818
 819   Stage: Stage-0
 820     Fetch Operator
 821       limit: -1
 822       Processor Tree:
 823         ListSink
 824