HIVE-18797 : ExprConstNodeDesc's getExprString should put appropriate qualifier with...
[hive.git] / ql / src / test / results / clientpositive / perf / spark / query23.q.out
1 Warning: Map Join MAPJOIN[275][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
2 Warning: Map Join MAPJOIN[276][bigTable=?] in task 'Stage-1:MAPRED' is a cross product
3 PREHOOK: query: explain
4 with frequent_ss_items as 
5  (select substr(i_item_desc,1,30) itemdesc,i_item_sk item_sk,d_date solddate,count(*) cnt
6   from store_sales
7       ,date_dim 
8       ,item
9   where ss_sold_date_sk = d_date_sk
10     and ss_item_sk = i_item_sk 
11     and d_year in (1999,1999+1,1999+2,1999+3)
12   group by substr(i_item_desc,1,30),i_item_sk,d_date
13   having count(*) >4),
14  max_store_sales as
15  (select max(csales) tpcds_cmax 
16   from (select c_customer_sk,sum(ss_quantity*ss_sales_price) csales
17         from store_sales
18             ,customer
19             ,date_dim 
20         where ss_customer_sk = c_customer_sk
21          and ss_sold_date_sk = d_date_sk
22          and d_year in (1999,1999+1,1999+2,1999+3) 
23         group by c_customer_sk) x),
24  best_ss_customer as
25  (select c_customer_sk,sum(ss_quantity*ss_sales_price) ssales
26   from store_sales
27       ,customer
28   where ss_customer_sk = c_customer_sk
29   group by c_customer_sk
30   having sum(ss_quantity*ss_sales_price) > (95/100.0) * (select
31   *
32 from
33  max_store_sales))
34   select  sum(sales)
35  from ((select cs_quantity*cs_list_price sales
36        from catalog_sales
37            ,date_dim 
38        where d_year = 1999 
39          and d_moy = 1 
40          and cs_sold_date_sk = d_date_sk 
41          and cs_item_sk in (select item_sk from frequent_ss_items)
42          and cs_bill_customer_sk in (select c_customer_sk from best_ss_customer))
43       union all
44       (select ws_quantity*ws_list_price sales
45        from web_sales 
46            ,date_dim 
47        where d_year = 1999 
48          and d_moy = 1 
49          and ws_sold_date_sk = d_date_sk 
50          and ws_item_sk in (select item_sk from frequent_ss_items)
51          and ws_bill_customer_sk in (select c_customer_sk from best_ss_customer))) y
52  limit 100
53 PREHOOK: type: QUERY
54 POSTHOOK: query: explain
55 with frequent_ss_items as 
56  (select substr(i_item_desc,1,30) itemdesc,i_item_sk item_sk,d_date solddate,count(*) cnt
57   from store_sales
58       ,date_dim 
59       ,item
60   where ss_sold_date_sk = d_date_sk
61     and ss_item_sk = i_item_sk 
62     and d_year in (1999,1999+1,1999+2,1999+3)
63   group by substr(i_item_desc,1,30),i_item_sk,d_date
64   having count(*) >4),
65  max_store_sales as
66  (select max(csales) tpcds_cmax 
67   from (select c_customer_sk,sum(ss_quantity*ss_sales_price) csales
68         from store_sales
69             ,customer
70             ,date_dim 
71         where ss_customer_sk = c_customer_sk
72          and ss_sold_date_sk = d_date_sk
73          and d_year in (1999,1999+1,1999+2,1999+3) 
74         group by c_customer_sk) x),
75  best_ss_customer as
76  (select c_customer_sk,sum(ss_quantity*ss_sales_price) ssales
77   from store_sales
78       ,customer
79   where ss_customer_sk = c_customer_sk
80   group by c_customer_sk
81   having sum(ss_quantity*ss_sales_price) > (95/100.0) * (select
82   *
83 from
84  max_store_sales))
85   select  sum(sales)
86  from ((select cs_quantity*cs_list_price sales
87        from catalog_sales
88            ,date_dim 
89        where d_year = 1999 
90          and d_moy = 1 
91          and cs_sold_date_sk = d_date_sk 
92          and cs_item_sk in (select item_sk from frequent_ss_items)
93          and cs_bill_customer_sk in (select c_customer_sk from best_ss_customer))
94       union all
95       (select ws_quantity*ws_list_price sales
96        from web_sales 
97            ,date_dim 
98        where d_year = 1999 
99          and d_moy = 1 
100          and ws_sold_date_sk = d_date_sk 
101          and ws_item_sk in (select item_sk from frequent_ss_items)
102          and ws_bill_customer_sk in (select c_customer_sk from best_ss_customer))) y
103  limit 100
104 POSTHOOK: type: QUERY
105 STAGE DEPENDENCIES:
106   Stage-2 is a root stage
107   Stage-3 depends on stages: Stage-2
108   Stage-1 depends on stages: Stage-3
109   Stage-0 depends on stages: Stage-1
110
111 STAGE PLANS:
112   Stage: Stage-2
113     Spark
114       Edges:
115         Reducer 14 <- Map 13 (PARTITION-LEVEL SORT, 398), Map 18 (PARTITION-LEVEL SORT, 398)
116         Reducer 15 <- Map 19 (PARTITION-LEVEL SORT, 975), Reducer 14 (PARTITION-LEVEL SORT, 975)
117         Reducer 16 <- Reducer 15 (GROUP, 481)
118         Reducer 17 <- Reducer 16 (GROUP, 1)
119         Reducer 21 <- Map 20 (PARTITION-LEVEL SORT, 398), Map 25 (PARTITION-LEVEL SORT, 398)
120         Reducer 22 <- Map 26 (PARTITION-LEVEL SORT, 975), Reducer 21 (PARTITION-LEVEL SORT, 975)
121         Reducer 23 <- Reducer 22 (GROUP, 481)
122         Reducer 24 <- Reducer 23 (GROUP, 1)
123 #### A masked pattern was here ####
124       Vertices:
125         Map 13 
126             Map Operator Tree:
127                 TableScan
128                   alias: store_sales
129                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
130                   Filter Operator
131                     predicate: (ss_customer_sk is not null and ss_sold_date_sk is not null) (type: boolean)
132                     Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
133                     Select Operator
134                       expressions: ss_sold_date_sk (type: int), ss_customer_sk (type: int)
135                       outputColumnNames: _col0, _col1
136                       Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
137                       Reduce Output Operator
138                         key expressions: _col0 (type: int)
139                         sort order: +
140                         Map-reduce partition columns: _col0 (type: int)
141                         Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
142                         value expressions: _col1 (type: int)
143         Map 18 
144             Map Operator Tree:
145                 TableScan
146                   alias: date_dim
147                   Statistics: Num rows: 73049 Data size: 81741831 Basic stats: COMPLETE Column stats: NONE
148                   Filter Operator
149                     predicate: ((d_year) IN (1999, 2000, 2001, 2002) and d_date_sk is not null) (type: boolean)
150                     Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
151                     Select Operator
152                       expressions: d_date_sk (type: int)
153                       outputColumnNames: _col0
154                       Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
155                       Reduce Output Operator
156                         key expressions: _col0 (type: int)
157                         sort order: +
158                         Map-reduce partition columns: _col0 (type: int)
159                         Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
160         Map 19 
161             Map Operator Tree:
162                 TableScan
163                   alias: customer
164                   Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
165                   Filter Operator
166                     predicate: c_customer_sk is not null (type: boolean)
167                     Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
168                     Select Operator
169                       expressions: c_customer_sk (type: int)
170                       outputColumnNames: _col0
171                       Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
172                       Reduce Output Operator
173                         key expressions: _col0 (type: int)
174                         sort order: +
175                         Map-reduce partition columns: _col0 (type: int)
176                         Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
177         Map 20 
178             Map Operator Tree:
179                 TableScan
180                   alias: store_sales
181                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
182                   Filter Operator
183                     predicate: (ss_customer_sk is not null and ss_sold_date_sk is not null) (type: boolean)
184                     Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
185                     Select Operator
186                       expressions: ss_sold_date_sk (type: int), ss_customer_sk (type: int), ss_quantity (type: int), ss_sales_price (type: decimal(7,2))
187                       outputColumnNames: _col0, _col1, _col2, _col3
188                       Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
189                       Reduce Output Operator
190                         key expressions: _col0 (type: int)
191                         sort order: +
192                         Map-reduce partition columns: _col0 (type: int)
193                         Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
194                         value expressions: _col1 (type: int), _col2 (type: int), _col3 (type: decimal(7,2))
195         Map 25 
196             Map Operator Tree:
197                 TableScan
198                   alias: date_dim
199                   Statistics: Num rows: 73049 Data size: 81741831 Basic stats: COMPLETE Column stats: NONE
200                   Filter Operator
201                     predicate: ((d_year) IN (1999, 2000, 2001, 2002) and d_date_sk is not null) (type: boolean)
202                     Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
203                     Select Operator
204                       expressions: d_date_sk (type: int)
205                       outputColumnNames: _col0
206                       Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
207                       Reduce Output Operator
208                         key expressions: _col0 (type: int)
209                         sort order: +
210                         Map-reduce partition columns: _col0 (type: int)
211                         Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
212         Map 26 
213             Map Operator Tree:
214                 TableScan
215                   alias: customer
216                   Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
217                   Filter Operator
218                     predicate: c_customer_sk is not null (type: boolean)
219                     Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
220                     Select Operator
221                       expressions: c_customer_sk (type: int)
222                       outputColumnNames: _col0
223                       Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
224                       Reduce Output Operator
225                         key expressions: _col0 (type: int)
226                         sort order: +
227                         Map-reduce partition columns: _col0 (type: int)
228                         Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
229         Reducer 14 
230             Reduce Operator Tree:
231               Join Operator
232                 condition map:
233                      Inner Join 0 to 1
234                 keys:
235                   0 _col0 (type: int)
236                   1 _col0 (type: int)
237                 outputColumnNames: _col1
238                 Statistics: Num rows: 633595212 Data size: 55895953508 Basic stats: COMPLETE Column stats: NONE
239                 Reduce Output Operator
240                   key expressions: _col1 (type: int)
241                   sort order: +
242                   Map-reduce partition columns: _col1 (type: int)
243                   Statistics: Num rows: 633595212 Data size: 55895953508 Basic stats: COMPLETE Column stats: NONE
244         Reducer 15 
245             Reduce Operator Tree:
246               Join Operator
247                 condition map:
248                      Inner Join 0 to 1
249                 keys:
250                   0 _col1 (type: int)
251                   1 _col0 (type: int)
252                 outputColumnNames: _col6
253                 Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
254                 Select Operator
255                   expressions: _col6 (type: int)
256                   outputColumnNames: _col0
257                   Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
258                   Group By Operator
259                     keys: _col0 (type: int)
260                     mode: hash
261                     outputColumnNames: _col0
262                     Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
263                     Reduce Output Operator
264                       key expressions: _col0 (type: int)
265                       sort order: +
266                       Map-reduce partition columns: _col0 (type: int)
267                       Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
268         Reducer 16 
269             Reduce Operator Tree:
270               Group By Operator
271                 keys: KEY._col0 (type: int)
272                 mode: mergepartial
273                 outputColumnNames: _col0
274                 Statistics: Num rows: 348477374 Data size: 30742775095 Basic stats: COMPLETE Column stats: NONE
275                 Select Operator
276                   Statistics: Num rows: 348477374 Data size: 30742775095 Basic stats: COMPLETE Column stats: NONE
277                   Group By Operator
278                     aggregations: count()
279                     mode: hash
280                     outputColumnNames: _col0
281                     Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
282                     Reduce Output Operator
283                       sort order: 
284                       Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
285                       value expressions: _col0 (type: bigint)
286         Reducer 17 
287             Local Work:
288               Map Reduce Local Work
289             Reduce Operator Tree:
290               Group By Operator
291                 aggregations: count(VALUE._col0)
292                 mode: mergepartial
293                 outputColumnNames: _col0
294                 Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
295                 Filter Operator
296                   predicate: (sq_count_check(_col0) <= 1) (type: boolean)
297                   Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
298                   Select Operator
299                     Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
300                     Spark HashTable Sink Operator
301                       keys:
302                         0 
303                         1 
304                         2 
305         Reducer 21 
306             Reduce Operator Tree:
307               Join Operator
308                 condition map:
309                      Inner Join 0 to 1
310                 keys:
311                   0 _col0 (type: int)
312                   1 _col0 (type: int)
313                 outputColumnNames: _col1, _col2, _col3
314                 Statistics: Num rows: 633595212 Data size: 55895953508 Basic stats: COMPLETE Column stats: NONE
315                 Reduce Output Operator
316                   key expressions: _col1 (type: int)
317                   sort order: +
318                   Map-reduce partition columns: _col1 (type: int)
319                   Statistics: Num rows: 633595212 Data size: 55895953508 Basic stats: COMPLETE Column stats: NONE
320                   value expressions: _col2 (type: int), _col3 (type: decimal(7,2))
321         Reducer 22 
322             Reduce Operator Tree:
323               Join Operator
324                 condition map:
325                      Inner Join 0 to 1
326                 keys:
327                   0 _col1 (type: int)
328                   1 _col0 (type: int)
329                 outputColumnNames: _col2, _col3, _col6
330                 Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
331                 Select Operator
332                   expressions: _col6 (type: int), (CAST( _col2 AS decimal(10,0)) * _col3) (type: decimal(18,2))
333                   outputColumnNames: _col0, _col1
334                   Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
335                   Group By Operator
336                     aggregations: sum(_col1)
337                     keys: _col0 (type: int)
338                     mode: hash
339                     outputColumnNames: _col0, _col1
340                     Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
341                     Reduce Output Operator
342                       key expressions: _col0 (type: int)
343                       sort order: +
344                       Map-reduce partition columns: _col0 (type: int)
345                       Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
346                       value expressions: _col1 (type: decimal(28,2))
347         Reducer 23 
348             Reduce Operator Tree:
349               Group By Operator
350                 aggregations: sum(VALUE._col0)
351                 keys: KEY._col0 (type: int)
352                 mode: mergepartial
353                 outputColumnNames: _col0, _col1
354                 Statistics: Num rows: 348477374 Data size: 30742775095 Basic stats: COMPLETE Column stats: NONE
355                 Select Operator
356                   expressions: _col1 (type: decimal(28,2))
357                   outputColumnNames: _col1
358                   Statistics: Num rows: 348477374 Data size: 30742775095 Basic stats: COMPLETE Column stats: NONE
359                   Group By Operator
360                     aggregations: max(_col1)
361                     mode: hash
362                     outputColumnNames: _col0
363                     Statistics: Num rows: 1 Data size: 224 Basic stats: COMPLETE Column stats: NONE
364                     Reduce Output Operator
365                       sort order: 
366                       Statistics: Num rows: 1 Data size: 224 Basic stats: COMPLETE Column stats: NONE
367                       value expressions: _col0 (type: decimal(28,2))
368         Reducer 24 
369             Local Work:
370               Map Reduce Local Work
371             Reduce Operator Tree:
372               Group By Operator
373                 aggregations: max(VALUE._col0)
374                 mode: mergepartial
375                 outputColumnNames: _col0
376                 Statistics: Num rows: 1 Data size: 224 Basic stats: COMPLETE Column stats: NONE
377                 Spark HashTable Sink Operator
378                   keys:
379                     0 
380                     1 
381                     2 
382
383   Stage: Stage-3
384     Spark
385       Edges:
386         Reducer 43 <- Map 42 (PARTITION-LEVEL SORT, 398), Map 47 (PARTITION-LEVEL SORT, 398)
387         Reducer 44 <- Map 48 (PARTITION-LEVEL SORT, 975), Reducer 43 (PARTITION-LEVEL SORT, 975)
388         Reducer 45 <- Reducer 44 (GROUP, 481)
389         Reducer 46 <- Reducer 45 (GROUP, 1)
390         Reducer 50 <- Map 49 (PARTITION-LEVEL SORT, 398), Map 54 (PARTITION-LEVEL SORT, 398)
391         Reducer 51 <- Map 55 (PARTITION-LEVEL SORT, 975), Reducer 50 (PARTITION-LEVEL SORT, 975)
392         Reducer 52 <- Reducer 51 (GROUP, 481)
393         Reducer 53 <- Reducer 52 (GROUP, 1)
394 #### A masked pattern was here ####
395       Vertices:
396         Map 42 
397             Map Operator Tree:
398                 TableScan
399                   alias: store_sales
400                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
401                   Filter Operator
402                     predicate: (ss_customer_sk is not null and ss_sold_date_sk is not null) (type: boolean)
403                     Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
404                     Select Operator
405                       expressions: ss_sold_date_sk (type: int), ss_customer_sk (type: int)
406                       outputColumnNames: _col0, _col1
407                       Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
408                       Reduce Output Operator
409                         key expressions: _col0 (type: int)
410                         sort order: +
411                         Map-reduce partition columns: _col0 (type: int)
412                         Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
413                         value expressions: _col1 (type: int)
414         Map 47 
415             Map Operator Tree:
416                 TableScan
417                   alias: date_dim
418                   Statistics: Num rows: 73049 Data size: 81741831 Basic stats: COMPLETE Column stats: NONE
419                   Filter Operator
420                     predicate: ((d_year) IN (1999, 2000, 2001, 2002) and d_date_sk is not null) (type: boolean)
421                     Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
422                     Select Operator
423                       expressions: d_date_sk (type: int)
424                       outputColumnNames: _col0
425                       Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
426                       Reduce Output Operator
427                         key expressions: _col0 (type: int)
428                         sort order: +
429                         Map-reduce partition columns: _col0 (type: int)
430                         Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
431         Map 48 
432             Map Operator Tree:
433                 TableScan
434                   alias: customer
435                   Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
436                   Filter Operator
437                     predicate: c_customer_sk is not null (type: boolean)
438                     Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
439                     Select Operator
440                       expressions: c_customer_sk (type: int)
441                       outputColumnNames: _col0
442                       Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
443                       Reduce Output Operator
444                         key expressions: _col0 (type: int)
445                         sort order: +
446                         Map-reduce partition columns: _col0 (type: int)
447                         Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
448         Map 49 
449             Map Operator Tree:
450                 TableScan
451                   alias: store_sales
452                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
453                   Filter Operator
454                     predicate: (ss_customer_sk is not null and ss_sold_date_sk is not null) (type: boolean)
455                     Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
456                     Select Operator
457                       expressions: ss_sold_date_sk (type: int), ss_customer_sk (type: int), ss_quantity (type: int), ss_sales_price (type: decimal(7,2))
458                       outputColumnNames: _col0, _col1, _col2, _col3
459                       Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
460                       Reduce Output Operator
461                         key expressions: _col0 (type: int)
462                         sort order: +
463                         Map-reduce partition columns: _col0 (type: int)
464                         Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
465                         value expressions: _col1 (type: int), _col2 (type: int), _col3 (type: decimal(7,2))
466         Map 54 
467             Map Operator Tree:
468                 TableScan
469                   alias: date_dim
470                   Statistics: Num rows: 73049 Data size: 81741831 Basic stats: COMPLETE Column stats: NONE
471                   Filter Operator
472                     predicate: ((d_year) IN (1999, 2000, 2001, 2002) and d_date_sk is not null) (type: boolean)
473                     Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
474                     Select Operator
475                       expressions: d_date_sk (type: int)
476                       outputColumnNames: _col0
477                       Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
478                       Reduce Output Operator
479                         key expressions: _col0 (type: int)
480                         sort order: +
481                         Map-reduce partition columns: _col0 (type: int)
482                         Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
483         Map 55 
484             Map Operator Tree:
485                 TableScan
486                   alias: customer
487                   Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
488                   Filter Operator
489                     predicate: c_customer_sk is not null (type: boolean)
490                     Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
491                     Select Operator
492                       expressions: c_customer_sk (type: int)
493                       outputColumnNames: _col0
494                       Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
495                       Reduce Output Operator
496                         key expressions: _col0 (type: int)
497                         sort order: +
498                         Map-reduce partition columns: _col0 (type: int)
499                         Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
500         Reducer 43 
501             Reduce Operator Tree:
502               Join Operator
503                 condition map:
504                      Inner Join 0 to 1
505                 keys:
506                   0 _col0 (type: int)
507                   1 _col0 (type: int)
508                 outputColumnNames: _col1
509                 Statistics: Num rows: 633595212 Data size: 55895953508 Basic stats: COMPLETE Column stats: NONE
510                 Reduce Output Operator
511                   key expressions: _col1 (type: int)
512                   sort order: +
513                   Map-reduce partition columns: _col1 (type: int)
514                   Statistics: Num rows: 633595212 Data size: 55895953508 Basic stats: COMPLETE Column stats: NONE
515         Reducer 44 
516             Reduce Operator Tree:
517               Join Operator
518                 condition map:
519                      Inner Join 0 to 1
520                 keys:
521                   0 _col1 (type: int)
522                   1 _col0 (type: int)
523                 outputColumnNames: _col6
524                 Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
525                 Select Operator
526                   expressions: _col6 (type: int)
527                   outputColumnNames: _col0
528                   Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
529                   Group By Operator
530                     keys: _col0 (type: int)
531                     mode: hash
532                     outputColumnNames: _col0
533                     Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
534                     Reduce Output Operator
535                       key expressions: _col0 (type: int)
536                       sort order: +
537                       Map-reduce partition columns: _col0 (type: int)
538                       Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
539         Reducer 45 
540             Reduce Operator Tree:
541               Group By Operator
542                 keys: KEY._col0 (type: int)
543                 mode: mergepartial
544                 outputColumnNames: _col0
545                 Statistics: Num rows: 348477374 Data size: 30742775095 Basic stats: COMPLETE Column stats: NONE
546                 Select Operator
547                   Statistics: Num rows: 348477374 Data size: 30742775095 Basic stats: COMPLETE Column stats: NONE
548                   Group By Operator
549                     aggregations: count()
550                     mode: hash
551                     outputColumnNames: _col0
552                     Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
553                     Reduce Output Operator
554                       sort order: 
555                       Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
556                       value expressions: _col0 (type: bigint)
557         Reducer 46 
558             Local Work:
559               Map Reduce Local Work
560             Reduce Operator Tree:
561               Group By Operator
562                 aggregations: count(VALUE._col0)
563                 mode: mergepartial
564                 outputColumnNames: _col0
565                 Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
566                 Filter Operator
567                   predicate: (sq_count_check(_col0) <= 1) (type: boolean)
568                   Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
569                   Select Operator
570                     Statistics: Num rows: 1 Data size: 8 Basic stats: COMPLETE Column stats: NONE
571                     Spark HashTable Sink Operator
572                       keys:
573                         0 
574                         1 
575                         2 
576         Reducer 50 
577             Reduce Operator Tree:
578               Join Operator
579                 condition map:
580                      Inner Join 0 to 1
581                 keys:
582                   0 _col0 (type: int)
583                   1 _col0 (type: int)
584                 outputColumnNames: _col1, _col2, _col3
585                 Statistics: Num rows: 633595212 Data size: 55895953508 Basic stats: COMPLETE Column stats: NONE
586                 Reduce Output Operator
587                   key expressions: _col1 (type: int)
588                   sort order: +
589                   Map-reduce partition columns: _col1 (type: int)
590                   Statistics: Num rows: 633595212 Data size: 55895953508 Basic stats: COMPLETE Column stats: NONE
591                   value expressions: _col2 (type: int), _col3 (type: decimal(7,2))
592         Reducer 51 
593             Reduce Operator Tree:
594               Join Operator
595                 condition map:
596                      Inner Join 0 to 1
597                 keys:
598                   0 _col1 (type: int)
599                   1 _col0 (type: int)
600                 outputColumnNames: _col2, _col3, _col6
601                 Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
602                 Select Operator
603                   expressions: _col6 (type: int), (CAST( _col2 AS decimal(10,0)) * _col3) (type: decimal(18,2))
604                   outputColumnNames: _col0, _col1
605                   Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
606                   Group By Operator
607                     aggregations: sum(_col1)
608                     keys: _col0 (type: int)
609                     mode: hash
610                     outputColumnNames: _col0, _col1
611                     Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
612                     Reduce Output Operator
613                       key expressions: _col0 (type: int)
614                       sort order: +
615                       Map-reduce partition columns: _col0 (type: int)
616                       Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
617                       value expressions: _col1 (type: decimal(28,2))
618         Reducer 52 
619             Reduce Operator Tree:
620               Group By Operator
621                 aggregations: sum(VALUE._col0)
622                 keys: KEY._col0 (type: int)
623                 mode: mergepartial
624                 outputColumnNames: _col0, _col1
625                 Statistics: Num rows: 348477374 Data size: 30742775095 Basic stats: COMPLETE Column stats: NONE
626                 Select Operator
627                   expressions: _col1 (type: decimal(28,2))
628                   outputColumnNames: _col1
629                   Statistics: Num rows: 348477374 Data size: 30742775095 Basic stats: COMPLETE Column stats: NONE
630                   Group By Operator
631                     aggregations: max(_col1)
632                     mode: hash
633                     outputColumnNames: _col0
634                     Statistics: Num rows: 1 Data size: 224 Basic stats: COMPLETE Column stats: NONE
635                     Reduce Output Operator
636                       sort order: 
637                       Statistics: Num rows: 1 Data size: 224 Basic stats: COMPLETE Column stats: NONE
638                       value expressions: _col0 (type: decimal(28,2))
639         Reducer 53 
640             Local Work:
641               Map Reduce Local Work
642             Reduce Operator Tree:
643               Group By Operator
644                 aggregations: max(VALUE._col0)
645                 mode: mergepartial
646                 outputColumnNames: _col0
647                 Statistics: Num rows: 1 Data size: 224 Basic stats: COMPLETE Column stats: NONE
648                 Spark HashTable Sink Operator
649                   keys:
650                     0 
651                     1 
652                     2 
653
654   Stage: Stage-1
655     Spark
656       Edges:
657         Reducer 10 <- Reducer 38 (GROUP PARTITION-LEVEL SORT, 481)
658         Reducer 2 <- Map 1 (PARTITION-LEVEL SORT, 305), Map 35 (PARTITION-LEVEL SORT, 305)
659         Reducer 28 <- Map 27 (PARTITION-LEVEL SORT, 935), Map 30 (PARTITION-LEVEL SORT, 935)
660         Reducer 29 <- Reducer 28 (GROUP, 437)
661         Reducer 3 <- Reducer 10 (PARTITION-LEVEL SORT, 376), Reducer 2 (PARTITION-LEVEL SORT, 376)
662         Reducer 32 <- Map 31 (PARTITION-LEVEL SORT, 154), Map 35 (PARTITION-LEVEL SORT, 154)
663         Reducer 33 <- Reducer 10 (PARTITION-LEVEL SORT, 209), Reducer 32 (PARTITION-LEVEL SORT, 209)
664         Reducer 34 <- Reducer 33 (PARTITION-LEVEL SORT, 451), Reducer 58 (PARTITION-LEVEL SORT, 451)
665         Reducer 37 <- Map 11 (PARTITION-LEVEL SORT, 398), Map 36 (PARTITION-LEVEL SORT, 398)
666         Reducer 38 <- Map 12 (PARTITION-LEVEL SORT, 442), Reducer 37 (PARTITION-LEVEL SORT, 442)
667         Reducer 4 <- Reducer 29 (PARTITION-LEVEL SORT, 634), Reducer 3 (PARTITION-LEVEL SORT, 634)
668         Reducer 5 <- Reducer 34 (GROUP, 1), Reducer 4 (GROUP, 1)
669         Reducer 58 <- Reducer 28 (GROUP, 437)
670 #### A masked pattern was here ####
671       Vertices:
672         Map 1 
673             Map Operator Tree:
674                 TableScan
675                   alias: catalog_sales
676                   Statistics: Num rows: 287989836 Data size: 38999608952 Basic stats: COMPLETE Column stats: NONE
677                   Filter Operator
678                     predicate: (cs_bill_customer_sk is not null and cs_item_sk is not null and cs_sold_date_sk is not null) (type: boolean)
679                     Statistics: Num rows: 287989836 Data size: 38999608952 Basic stats: COMPLETE Column stats: NONE
680                     Select Operator
681                       expressions: cs_sold_date_sk (type: int), cs_bill_customer_sk (type: int), cs_item_sk (type: int), cs_quantity (type: int), cs_list_price (type: decimal(7,2))
682                       outputColumnNames: _col0, _col1, _col2, _col3, _col4
683                       Statistics: Num rows: 287989836 Data size: 38999608952 Basic stats: COMPLETE Column stats: NONE
684                       Reduce Output Operator
685                         key expressions: _col0 (type: int)
686                         sort order: +
687                         Map-reduce partition columns: _col0 (type: int)
688                         Statistics: Num rows: 287989836 Data size: 38999608952 Basic stats: COMPLETE Column stats: NONE
689                         value expressions: _col1 (type: int), _col2 (type: int), _col3 (type: int), _col4 (type: decimal(7,2))
690         Map 11 
691             Map Operator Tree:
692                 TableScan
693                   alias: date_dim
694                   Statistics: Num rows: 73049 Data size: 81741831 Basic stats: COMPLETE Column stats: NONE
695                   Filter Operator
696                     predicate: ((d_year) IN (1999, 2000, 2001, 2002) and d_date_sk is not null) (type: boolean)
697                     Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
698                     Select Operator
699                       expressions: d_date_sk (type: int), d_date (type: string)
700                       outputColumnNames: _col0, _col1
701                       Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
702                       Reduce Output Operator
703                         key expressions: _col0 (type: int)
704                         sort order: +
705                         Map-reduce partition columns: _col0 (type: int)
706                         Statistics: Num rows: 36525 Data size: 40871475 Basic stats: COMPLETE Column stats: NONE
707                         value expressions: _col1 (type: string)
708         Map 12 
709             Map Operator Tree:
710                 TableScan
711                   alias: item
712                   Statistics: Num rows: 462000 Data size: 663560457 Basic stats: COMPLETE Column stats: NONE
713                   Filter Operator
714                     predicate: i_item_sk is not null (type: boolean)
715                     Statistics: Num rows: 462000 Data size: 663560457 Basic stats: COMPLETE Column stats: NONE
716                     Select Operator
717                       expressions: i_item_sk (type: int), i_item_desc (type: string)
718                       outputColumnNames: _col0, _col1
719                       Statistics: Num rows: 462000 Data size: 663560457 Basic stats: COMPLETE Column stats: NONE
720                       Reduce Output Operator
721                         key expressions: _col0 (type: int)
722                         sort order: +
723                         Map-reduce partition columns: _col0 (type: int)
724                         Statistics: Num rows: 462000 Data size: 663560457 Basic stats: COMPLETE Column stats: NONE
725                         value expressions: _col1 (type: string)
726         Map 27 
727             Map Operator Tree:
728                 TableScan
729                   alias: store_sales
730                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
731                   Filter Operator
732                     predicate: ss_customer_sk is not null (type: boolean)
733                     Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
734                     Select Operator
735                       expressions: ss_customer_sk (type: int), ss_quantity (type: int), ss_sales_price (type: decimal(7,2))
736                       outputColumnNames: _col0, _col1, _col2
737                       Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
738                       Reduce Output Operator
739                         key expressions: _col0 (type: int)
740                         sort order: +
741                         Map-reduce partition columns: _col0 (type: int)
742                         Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
743                         value expressions: _col1 (type: int), _col2 (type: decimal(7,2))
744         Map 30 
745             Map Operator Tree:
746                 TableScan
747                   alias: customer
748                   Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
749                   Filter Operator
750                     predicate: c_customer_sk is not null (type: boolean)
751                     Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
752                     Select Operator
753                       expressions: c_customer_sk (type: int)
754                       outputColumnNames: _col0
755                       Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
756                       Reduce Output Operator
757                         key expressions: _col0 (type: int)
758                         sort order: +
759                         Map-reduce partition columns: _col0 (type: int)
760                         Statistics: Num rows: 80000000 Data size: 68801615852 Basic stats: COMPLETE Column stats: NONE
761         Map 31 
762             Map Operator Tree:
763                 TableScan
764                   alias: web_sales
765                   Statistics: Num rows: 144002668 Data size: 19580198212 Basic stats: COMPLETE Column stats: NONE
766                   Filter Operator
767                     predicate: (ws_bill_customer_sk is not null and ws_item_sk is not null and ws_sold_date_sk is not null) (type: boolean)
768                     Statistics: Num rows: 144002668 Data size: 19580198212 Basic stats: COMPLETE Column stats: NONE
769                     Select Operator
770                       expressions: ws_sold_date_sk (type: int), ws_item_sk (type: int), ws_bill_customer_sk (type: int), ws_quantity (type: int), ws_list_price (type: decimal(7,2))
771                       outputColumnNames: _col0, _col1, _col2, _col3, _col4
772                       Statistics: Num rows: 144002668 Data size: 19580198212 Basic stats: COMPLETE Column stats: NONE
773                       Reduce Output Operator
774                         key expressions: _col0 (type: int)
775                         sort order: +
776                         Map-reduce partition columns: _col0 (type: int)
777                         Statistics: Num rows: 144002668 Data size: 19580198212 Basic stats: COMPLETE Column stats: NONE
778                         value expressions: _col1 (type: int), _col2 (type: int), _col3 (type: int), _col4 (type: decimal(7,2))
779         Map 35 
780             Map Operator Tree:
781                 TableScan
782                   alias: date_dim
783                   Statistics: Num rows: 73049 Data size: 81741831 Basic stats: COMPLETE Column stats: NONE
784                   Filter Operator
785                     predicate: ((d_moy = 1) and (d_year = 1999) and d_date_sk is not null) (type: boolean)
786                     Statistics: Num rows: 18262 Data size: 20435178 Basic stats: COMPLETE Column stats: NONE
787                     Select Operator
788                       expressions: d_date_sk (type: int)
789                       outputColumnNames: _col0
790                       Statistics: Num rows: 18262 Data size: 20435178 Basic stats: COMPLETE Column stats: NONE
791                       Reduce Output Operator
792                         key expressions: _col0 (type: int)
793                         sort order: +
794                         Map-reduce partition columns: _col0 (type: int)
795                         Statistics: Num rows: 18262 Data size: 20435178 Basic stats: COMPLETE Column stats: NONE
796         Map 36 
797             Map Operator Tree:
798                 TableScan
799                   alias: store_sales
800                   Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
801                   Filter Operator
802                     predicate: (ss_item_sk is not null and ss_sold_date_sk is not null) (type: boolean)
803                     Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
804                     Select Operator
805                       expressions: ss_sold_date_sk (type: int), ss_item_sk (type: int)
806                       outputColumnNames: _col0, _col1
807                       Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
808                       Reduce Output Operator
809                         key expressions: _col0 (type: int)
810                         sort order: +
811                         Map-reduce partition columns: _col0 (type: int)
812                         Statistics: Num rows: 575995635 Data size: 50814502088 Basic stats: COMPLETE Column stats: NONE
813                         value expressions: _col1 (type: int)
814         Reducer 10 
815             Reduce Operator Tree:
816               Group By Operator
817                 aggregations: count(VALUE._col0)
818                 keys: KEY._col0 (type: int), KEY._col1 (type: string), KEY._col2 (type: string)
819                 mode: mergepartial
820                 outputColumnNames: _col0, _col1, _col2, _col3
821                 Statistics: Num rows: 348477374 Data size: 30742775095 Basic stats: COMPLETE Column stats: NONE
822                 Select Operator
823                   expressions: _col0 (type: int), _col3 (type: bigint)
824                   outputColumnNames: _col0, _col3
825                   Statistics: Num rows: 348477374 Data size: 30742775095 Basic stats: COMPLETE Column stats: NONE
826                   Filter Operator
827                     predicate: (_col3 > 4L) (type: boolean)
828                     Statistics: Num rows: 116159124 Data size: 10247591639 Basic stats: COMPLETE Column stats: NONE
829                     Select Operator
830                       expressions: _col0 (type: int)
831                       outputColumnNames: _col1
832                       Statistics: Num rows: 116159124 Data size: 10247591639 Basic stats: COMPLETE Column stats: NONE
833                       Group By Operator
834                         keys: _col1 (type: int)
835                         mode: complete
836                         outputColumnNames: _col0
837                         Statistics: Num rows: 58079562 Data size: 5123795819 Basic stats: COMPLETE Column stats: NONE
838                         Reduce Output Operator
839                           key expressions: _col0 (type: int)
840                           sort order: +
841                           Map-reduce partition columns: _col0 (type: int)
842                           Statistics: Num rows: 58079562 Data size: 5123795819 Basic stats: COMPLETE Column stats: NONE
843         Reducer 2 
844             Reduce Operator Tree:
845               Join Operator
846                 condition map:
847                      Inner Join 0 to 1
848                 keys:
849                   0 _col0 (type: int)
850                   1 _col0 (type: int)
851                 outputColumnNames: _col1, _col2, _col3, _col4
852                 Statistics: Num rows: 316788826 Data size: 42899570777 Basic stats: COMPLETE Column stats: NONE
853                 Reduce Output Operator
854                   key expressions: _col2 (type: int)
855                   sort order: +
856                   Map-reduce partition columns: _col2 (type: int)
857                   Statistics: Num rows: 316788826 Data size: 42899570777 Basic stats: COMPLETE Column stats: NONE
858                   value expressions: _col1 (type: int), _col3 (type: int), _col4 (type: decimal(7,2))
859         Reducer 28 
860             Reduce Operator Tree:
861               Join Operator
862                 condition map:
863                      Inner Join 0 to 1
864                 keys:
865                   0 _col0 (type: int)
866                   1 _col0 (type: int)
867                 outputColumnNames: _col1, _col2, _col3
868                 Statistics: Num rows: 633595212 Data size: 55895953508 Basic stats: COMPLETE Column stats: NONE
869                 Select Operator
870                   expressions: _col3 (type: int), (CAST( _col1 AS decimal(10,0)) * _col2) (type: decimal(18,2))
871                   outputColumnNames: _col0, _col1
872                   Statistics: Num rows: 633595212 Data size: 55895953508 Basic stats: COMPLETE Column stats: NONE
873                   Group By Operator
874                     aggregations: sum(_col1)
875                     keys: _col0 (type: int)
876                     mode: hash
877                     outputColumnNames: _col0, _col1
878                     Statistics: Num rows: 633595212 Data size: 55895953508 Basic stats: COMPLETE Column stats: NONE
879                     Reduce Output Operator
880                       key expressions: _col0 (type: int)
881                       sort order: +
882                       Map-reduce partition columns: _col0 (type: int)
883                       Statistics: Num rows: 633595212 Data size: 55895953508 Basic stats: COMPLETE Column stats: NONE
884                       value expressions: _col1 (type: decimal(28,2))
885         Reducer 29 
886             Local Work:
887               Map Reduce Local Work
888             Reduce Operator Tree:
889               Group By Operator
890                 aggregations: sum(VALUE._col0)
891                 keys: KEY._col0 (type: int)
892                 mode: mergepartial
893                 outputColumnNames: _col0, _col1
894                 Statistics: Num rows: 316797606 Data size: 27947976754 Basic stats: COMPLETE Column stats: NONE
895                 Map Join Operator
896                   condition map:
897                        Inner Join 0 to 1
898                        Inner Join 0 to 2
899                   keys:
900                     0 
901                     1 
902                     2 
903                   outputColumnNames: _col1, _col2, _col3
904                   input vertices:
905                     0 Reducer 17
906                     1 Reducer 24
907                   Statistics: Num rows: 316797606 Data size: 101761818952 Basic stats: COMPLETE Column stats: NONE
908                   Filter Operator
909                     predicate: (_col3 > (0.95 * _col1)) (type: boolean)
910                     Statistics: Num rows: 105599202 Data size: 33920606317 Basic stats: COMPLETE Column stats: NONE
911                     Select Operator
912                       expressions: _col2 (type: int)
913                       outputColumnNames: _col0
914                       Statistics: Num rows: 105599202 Data size: 33920606317 Basic stats: COMPLETE Column stats: NONE
915                       Reduce Output Operator
916                         key expressions: _col0 (type: int)
917                         sort order: +
918                         Map-reduce partition columns: _col0 (type: int)
919                         Statistics: Num rows: 105599202 Data size: 33920606317 Basic stats: COMPLETE Column stats: NONE
920         Reducer 3 
921             Reduce Operator Tree:
922               Join Operator
923                 condition map:
924                      Inner Join 0 to 1
925                 keys:
926                   0 _col2 (type: int)
927                   1 _col0 (type: int)
928                 outputColumnNames: _col1, _col3, _col4
929                 Statistics: Num rows: 348467716 Data size: 47189528877 Basic stats: COMPLETE Column stats: NONE
930                 Reduce Output Operator
931                   key expressions: _col1 (type: int)
932                   sort order: +
933                   Map-reduce partition columns: _col1 (type: int)
934                   Statistics: Num rows: 348467716 Data size: 47189528877 Basic stats: COMPLETE Column stats: NONE
935                   value expressions: _col3 (type: int), _col4 (type: decimal(7,2))
936         Reducer 32 
937             Reduce Operator Tree:
938               Join Operator
939                 condition map:
940                      Inner Join 0 to 1
941                 keys:
942                   0 _col0 (type: int)
943                   1 _col0 (type: int)
944                 outputColumnNames: _col1, _col2, _col3, _col4
945                 Statistics: Num rows: 158402938 Data size: 21538218500 Basic stats: COMPLETE Column stats: NONE
946                 Reduce Output Operator
947                   key expressions: _col1 (type: int)
948                   sort order: +
949                   Map-reduce partition columns: _col1 (type: int)
950                   Statistics: Num rows: 158402938 Data size: 21538218500 Basic stats: COMPLETE Column stats: NONE
951                   value expressions: _col2 (type: int), _col3 (type: int), _col4 (type: decimal(7,2))
952         Reducer 33 
953             Reduce Operator Tree:
954               Join Operator
955                 condition map:
956                      Inner Join 0 to 1
957                 keys:
958                   0 _col1 (type: int)
959                   1 _col0 (type: int)
960                 outputColumnNames: _col2, _col3, _col4
961                 Statistics: Num rows: 174243235 Data size: 23692040863 Basic stats: COMPLETE Column stats: NONE
962                 Reduce Output Operator
963                   key expressions: _col2 (type: int)
964                   sort order: +
965                   Map-reduce partition columns: _col2 (type: int)
966                   Statistics: Num rows: 174243235 Data size: 23692040863 Basic stats: COMPLETE Column stats: NONE
967                   value expressions: _col3 (type: int), _col4 (type: decimal(7,2))
968         Reducer 34 
969             Reduce Operator Tree:
970               Join Operator
971                 condition map:
972                      Inner Join 0 to 1
973                 outputColumnNames: _col3, _col4
974                 Statistics: Num rows: 191667562 Data size: 26061245514 Basic stats: COMPLETE Column stats: NONE
975                 Select Operator
976                   expressions: (CAST( _col3 AS decimal(10,0)) * _col4) (type: decimal(18,2))
977                   outputColumnNames: _col0
978                   Statistics: Num rows: 191667562 Data size: 26061245514 Basic stats: COMPLETE Column stats: NONE
979                   Group By Operator
980                     aggregations: sum(_col0)
981                     mode: hash
982                     outputColumnNames: _col0
983                     Statistics: Num rows: 1 Data size: 112 Basic stats: COMPLETE Column stats: NONE
984                     Reduce Output Operator
985                       sort order: 
986                       Statistics: Num rows: 1 Data size: 112 Basic stats: COMPLETE Column stats: NONE
987                       TopN Hash Memory Usage: 0.1
988                       value expressions: _col0 (type: decimal(28,2))
989         Reducer 37 
990             Reduce Operator Tree:
991               Join Operator
992                 condition map:
993                      Inner Join 0 to 1
994                 keys:
995                   0 _col0 (type: int)
996                   1 _col0 (type: int)
997                 outputColumnNames: _col1, _col3
998                 Statistics: Num rows: 633595212 Data size: 55895953508 Basic stats: COMPLETE Column stats: NONE
999                 Reduce Output Operator
1000                   key expressions: _col1 (type: int)
1001                   sort order: +
1002                   Map-reduce partition columns: _col1 (type: int)
1003                   Statistics: Num rows: 633595212 Data size: 55895953508 Basic stats: COMPLETE Column stats: NONE
1004                   value expressions: _col3 (type: string)
1005         Reducer 38 
1006             Reduce Operator Tree:
1007               Join Operator
1008                 condition map:
1009                      Inner Join 0 to 1
1010                 keys:
1011                   0 _col1 (type: int)
1012                   1 _col0 (type: int)
1013                 outputColumnNames: _col3, _col5, _col6
1014                 Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
1015                 Select Operator
1016                   expressions: substr(_col6, 1, 30) (type: string), _col5 (type: int), _col3 (type: string)
1017                   outputColumnNames: _col0, _col1, _col2
1018                   Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
1019                   Group By Operator
1020                     aggregations: count()
1021                     keys: _col1 (type: int), _col0 (type: string), _col2 (type: string)
1022                     mode: hash
1023                     outputColumnNames: _col0, _col1, _col2, _col3
1024                     Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
1025                     Reduce Output Operator
1026                       key expressions: _col0 (type: int), _col1 (type: string), _col2 (type: string)
1027                       sort order: +++
1028                       Map-reduce partition columns: _col0 (type: int)
1029                       Statistics: Num rows: 696954748 Data size: 61485550191 Basic stats: COMPLETE Column stats: NONE
1030                       value expressions: _col3 (type: bigint)
1031         Reducer 4 
1032             Reduce Operator Tree:
1033               Join Operator
1034                 condition map:
1035                      Inner Join 0 to 1
1036                 outputColumnNames: _col3, _col4
1037                 Statistics: Num rows: 383314495 Data size: 51908482889 Basic stats: COMPLETE Column stats: NONE
1038                 Select Operator
1039                   expressions: (CAST( _col3 AS decimal(10,0)) * _col4) (type: decimal(18,2))
1040                   outputColumnNames: _col0
1041                   Statistics: Num rows: 383314495 Data size: 51908482889 Basic stats: COMPLETE Column stats: NONE
1042                   Group By Operator
1043                     aggregations: sum(_col0)
1044                     mode: hash
1045                     outputColumnNames: _col0
1046                     Statistics: Num rows: 1 Data size: 112 Basic stats: COMPLETE Column stats: NONE
1047                     Reduce Output Operator
1048                       sort order: 
1049                       Statistics: Num rows: 1 Data size: 112 Basic stats: COMPLETE Column stats: NONE
1050                       TopN Hash Memory Usage: 0.1
1051                       value expressions: _col0 (type: decimal(28,2))
1052         Reducer 5 
1053             Reduce Operator Tree:
1054               Group By Operator
1055                 aggregations: sum(VALUE._col0)
1056                 mode: mergepartial
1057                 outputColumnNames: _col0
1058                 Statistics: Num rows: 1 Data size: 112 Basic stats: COMPLETE Column stats: NONE
1059                 Limit
1060                   Number of rows: 100
1061                   Statistics: Num rows: 1 Data size: 112 Basic stats: COMPLETE Column stats: NONE
1062                   File Output Operator
1063                     compressed: false
1064                     Statistics: Num rows: 1 Data size: 112 Basic stats: COMPLETE Column stats: NONE
1065                     table:
1066                         input format: org.apache.hadoop.mapred.SequenceFileInputFormat
1067                         output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
1068                         serde: org.apache.hadoop.hive.serde2.lazy.LazySimpleSerDe
1069         Reducer 58 
1070             Local Work:
1071               Map Reduce Local Work
1072             Reduce Operator Tree:
1073               Group By Operator
1074                 aggregations: sum(VALUE._col0)
1075                 keys: KEY._col0 (type: int)
1076                 mode: mergepartial
1077                 outputColumnNames: _col0, _col1
1078                 Statistics: Num rows: 316797606 Data size: 27947976754 Basic stats: COMPLETE Column stats: NONE
1079                 Map Join Operator
1080                   condition map:
1081                        Inner Join 0 to 1
1082                        Inner Join 0 to 2
1083                   keys:
1084                     0 
1085                     1 
1086                     2 
1087                   outputColumnNames: _col1, _col2, _col3
1088                   input vertices:
1089                     0 Reducer 46
1090                     1 Reducer 53
1091                   Statistics: Num rows: 316797606 Data size: 101761818952 Basic stats: COMPLETE Column stats: NONE
1092                   Filter Operator
1093                     predicate: (_col3 > (0.95 * _col1)) (type: boolean)
1094                     Statistics: Num rows: 105599202 Data size: 33920606317 Basic stats: COMPLETE Column stats: NONE
1095                     Select Operator
1096                       expressions: _col2 (type: int)
1097                       outputColumnNames: _col0
1098                       Statistics: Num rows: 105599202 Data size: 33920606317 Basic stats: COMPLETE Column stats: NONE
1099                       Reduce Output Operator
1100                         key expressions: _col0 (type: int)
1101                         sort order: +
1102                         Map-reduce partition columns: _col0 (type: int)
1103                         Statistics: Num rows: 105599202 Data size: 33920606317 Basic stats: COMPLETE Column stats: NONE
1104
1105   Stage: Stage-0
1106     Fetch Operator
1107       limit: 100
1108       Processor Tree:
1109         ListSink
1110