a8ae0007ddd4e7cdc300154ec896aa85e6b76f6a
[hive.git] / ql / src / test / results / clientpositive / auto_join_without_localtask.q.out
1 PREHOOK: query: explain
2 select a.* from src a join src b on a.key=b.key order by key, value limit 40
3 PREHOOK: type: QUERY
4 POSTHOOK: query: explain
5 select a.* from src a join src b on a.key=b.key order by key, value limit 40
6 POSTHOOK: type: QUERY
7 STAGE DEPENDENCIES:
8   Stage-6 is a root stage , consists of Stage-7, Stage-8, Stage-1
9   Stage-7 has a backup stage: Stage-1
10   Stage-4 depends on stages: Stage-7
11   Stage-2 depends on stages: Stage-1, Stage-4, Stage-5
12   Stage-8 has a backup stage: Stage-1
13   Stage-5 depends on stages: Stage-8
14   Stage-1
15   Stage-0 depends on stages: Stage-2
16
17 STAGE PLANS:
18   Stage: Stage-6
19     Conditional Operator
20
21   Stage: Stage-7
22     Map Reduce Local Work
23       Alias -> Map Local Tables:
24         $hdt$_1:b 
25           Fetch Operator
26             limit: -1
27       Alias -> Map Local Operator Tree:
28         $hdt$_1:b 
29           TableScan
30             alias: b
31             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
32             Filter Operator
33               predicate: key is not null (type: boolean)
34               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
35               Select Operator
36                 expressions: key (type: string)
37                 outputColumnNames: _col0
38                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
39                 HashTable Sink Operator
40                   keys:
41                     0 _col0 (type: string)
42                     1 _col0 (type: string)
43
44   Stage: Stage-4
45     Map Reduce
46       Map Operator Tree:
47           TableScan
48             alias: a
49             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
50             Filter Operator
51               predicate: key is not null (type: boolean)
52               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
53               Select Operator
54                 expressions: key (type: string), value (type: string)
55                 outputColumnNames: _col0, _col1
56                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
57                 Map Join Operator
58                   condition map:
59                        Inner Join 0 to 1
60                   keys:
61                     0 _col0 (type: string)
62                     1 _col0 (type: string)
63                   outputColumnNames: _col0, _col1
64                   Statistics: Num rows: 550 Data size: 5843 Basic stats: COMPLETE Column stats: NONE
65                   File Output Operator
66                     compressed: false
67                     table:
68                         input format: org.apache.hadoop.mapred.SequenceFileInputFormat
69                         output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
70                         serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
71       Local Work:
72         Map Reduce Local Work
73
74   Stage: Stage-2
75     Map Reduce
76       Map Operator Tree:
77           TableScan
78             Reduce Output Operator
79               key expressions: _col0 (type: string), _col1 (type: string)
80               sort order: ++
81               Statistics: Num rows: 550 Data size: 5843 Basic stats: COMPLETE Column stats: NONE
82               TopN Hash Memory Usage: 0.1
83       Reduce Operator Tree:
84         Select Operator
85           expressions: KEY.reducesinkkey0 (type: string), KEY.reducesinkkey1 (type: string)
86           outputColumnNames: _col0, _col1
87           Statistics: Num rows: 550 Data size: 5843 Basic stats: COMPLETE Column stats: NONE
88           Limit
89             Number of rows: 40
90             Statistics: Num rows: 40 Data size: 400 Basic stats: COMPLETE Column stats: NONE
91             File Output Operator
92               compressed: false
93               Statistics: Num rows: 40 Data size: 400 Basic stats: COMPLETE Column stats: NONE
94               table:
95                   input format: org.apache.hadoop.mapred.SequenceFileInputFormat
96                   output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
97                   serde: org.apache.hadoop.hive.serde2.lazy.LazySimpleSerDe
98
99   Stage: Stage-8
100     Map Reduce Local Work
101       Alias -> Map Local Tables:
102         $hdt$_0:a 
103           Fetch Operator
104             limit: -1
105       Alias -> Map Local Operator Tree:
106         $hdt$_0:a 
107           TableScan
108             alias: a
109             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
110             Filter Operator
111               predicate: key is not null (type: boolean)
112               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
113               Select Operator
114                 expressions: key (type: string), value (type: string)
115                 outputColumnNames: _col0, _col1
116                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
117                 HashTable Sink Operator
118                   keys:
119                     0 _col0 (type: string)
120                     1 _col0 (type: string)
121
122   Stage: Stage-5
123     Map Reduce
124       Map Operator Tree:
125           TableScan
126             alias: b
127             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
128             Filter Operator
129               predicate: key is not null (type: boolean)
130               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
131               Select Operator
132                 expressions: key (type: string)
133                 outputColumnNames: _col0
134                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
135                 Map Join Operator
136                   condition map:
137                        Inner Join 0 to 1
138                   keys:
139                     0 _col0 (type: string)
140                     1 _col0 (type: string)
141                   outputColumnNames: _col0, _col1
142                   Statistics: Num rows: 550 Data size: 5843 Basic stats: COMPLETE Column stats: NONE
143                   File Output Operator
144                     compressed: false
145                     table:
146                         input format: org.apache.hadoop.mapred.SequenceFileInputFormat
147                         output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
148                         serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
149       Local Work:
150         Map Reduce Local Work
151
152   Stage: Stage-1
153     Map Reduce
154       Map Operator Tree:
155           TableScan
156             alias: a
157             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
158             Filter Operator
159               predicate: key is not null (type: boolean)
160               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
161               Select Operator
162                 expressions: key (type: string), value (type: string)
163                 outputColumnNames: _col0, _col1
164                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
165                 Reduce Output Operator
166                   key expressions: _col0 (type: string)
167                   sort order: +
168                   Map-reduce partition columns: _col0 (type: string)
169                   Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
170                   value expressions: _col1 (type: string)
171           TableScan
172             alias: b
173             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
174             Filter Operator
175               predicate: key is not null (type: boolean)
176               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
177               Select Operator
178                 expressions: key (type: string)
179                 outputColumnNames: _col0
180                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
181                 Reduce Output Operator
182                   key expressions: _col0 (type: string)
183                   sort order: +
184                   Map-reduce partition columns: _col0 (type: string)
185                   Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
186       Reduce Operator Tree:
187         Join Operator
188           condition map:
189                Inner Join 0 to 1
190           keys:
191             0 _col0 (type: string)
192             1 _col0 (type: string)
193           outputColumnNames: _col0, _col1
194           Statistics: Num rows: 550 Data size: 5843 Basic stats: COMPLETE Column stats: NONE
195           File Output Operator
196             compressed: false
197             table:
198                 input format: org.apache.hadoop.mapred.SequenceFileInputFormat
199                 output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
200                 serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
201
202   Stage: Stage-0
203     Fetch Operator
204       limit: 40
205       Processor Tree:
206         ListSink
207
208 PREHOOK: query: select a.* from src a join src b on a.key=b.key order by key, value limit 40
209 PREHOOK: type: QUERY
210 PREHOOK: Input: default@src
211 #### A masked pattern was here ####
212 POSTHOOK: query: select a.* from src a join src b on a.key=b.key order by key, value limit 40
213 POSTHOOK: type: QUERY
214 POSTHOOK: Input: default@src
215 #### A masked pattern was here ####
216 RUN: Stage-6:CONDITIONAL
217 RUN: Stage-7:MAPREDLOCAL
218 RUN: Stage-4:MAPRED
219 RUN: Stage-2:MAPRED
220 0       val_0
221 0       val_0
222 0       val_0
223 0       val_0
224 0       val_0
225 0       val_0
226 0       val_0
227 0       val_0
228 0       val_0
229 10      val_10
230 100     val_100
231 100     val_100
232 100     val_100
233 100     val_100
234 103     val_103
235 103     val_103
236 103     val_103
237 103     val_103
238 104     val_104
239 104     val_104
240 104     val_104
241 104     val_104
242 105     val_105
243 11      val_11
244 111     val_111
245 113     val_113
246 113     val_113
247 113     val_113
248 113     val_113
249 114     val_114
250 116     val_116
251 118     val_118
252 118     val_118
253 118     val_118
254 118     val_118
255 119     val_119
256 119     val_119
257 119     val_119
258 119     val_119
259 119     val_119
260 PREHOOK: query: explain
261 select a.* from src a join src b on a.key=b.key join src c on a.value=c.value order by a.key, a.value limit 40
262 PREHOOK: type: QUERY
263 POSTHOOK: query: explain
264 select a.* from src a join src b on a.key=b.key join src c on a.value=c.value order by a.key, a.value limit 40
265 POSTHOOK: type: QUERY
266 STAGE DEPENDENCIES:
267   Stage-11 is a root stage , consists of Stage-14, Stage-15, Stage-1
268   Stage-14 has a backup stage: Stage-1
269   Stage-9 depends on stages: Stage-14
270   Stage-8 depends on stages: Stage-1, Stage-9, Stage-10 , consists of Stage-12, Stage-7, Stage-2
271   Stage-12 has a backup stage: Stage-2
272   Stage-6 depends on stages: Stage-12
273   Stage-3 depends on stages: Stage-2, Stage-6, Stage-7
274   Stage-7 has a backup stage: Stage-2
275   Stage-2
276   Stage-15 has a backup stage: Stage-1
277   Stage-10 depends on stages: Stage-15
278   Stage-1
279   Stage-0 depends on stages: Stage-3
280
281 STAGE PLANS:
282   Stage: Stage-11
283     Conditional Operator
284
285   Stage: Stage-14
286     Map Reduce Local Work
287       Alias -> Map Local Tables:
288         $hdt$_1:b 
289           Fetch Operator
290             limit: -1
291       Alias -> Map Local Operator Tree:
292         $hdt$_1:b 
293           TableScan
294             alias: b
295             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
296             Filter Operator
297               predicate: key is not null (type: boolean)
298               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
299               Select Operator
300                 expressions: key (type: string)
301                 outputColumnNames: _col0
302                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
303                 HashTable Sink Operator
304                   keys:
305                     0 _col0 (type: string)
306                     1 _col0 (type: string)
307
308   Stage: Stage-9
309     Map Reduce
310       Map Operator Tree:
311           TableScan
312             alias: a
313             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
314             Filter Operator
315               predicate: (key is not null and value is not null) (type: boolean)
316               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
317               Select Operator
318                 expressions: key (type: string), value (type: string)
319                 outputColumnNames: _col0, _col1
320                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
321                 Map Join Operator
322                   condition map:
323                        Inner Join 0 to 1
324                   keys:
325                     0 _col0 (type: string)
326                     1 _col0 (type: string)
327                   outputColumnNames: _col0, _col1
328                   Statistics: Num rows: 550 Data size: 5843 Basic stats: COMPLETE Column stats: NONE
329                   File Output Operator
330                     compressed: false
331                     table:
332                         input format: org.apache.hadoop.mapred.SequenceFileInputFormat
333                         output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
334                         serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
335       Local Work:
336         Map Reduce Local Work
337
338   Stage: Stage-8
339     Conditional Operator
340
341   Stage: Stage-12
342     Map Reduce Local Work
343       Alias -> Map Local Tables:
344         $hdt$_2:c 
345           Fetch Operator
346             limit: -1
347       Alias -> Map Local Operator Tree:
348         $hdt$_2:c 
349           TableScan
350             alias: c
351             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
352             Filter Operator
353               predicate: value is not null (type: boolean)
354               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
355               Select Operator
356                 expressions: value (type: string)
357                 outputColumnNames: _col0
358                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
359                 HashTable Sink Operator
360                   keys:
361                     0 _col1 (type: string)
362                     1 _col0 (type: string)
363
364   Stage: Stage-6
365     Map Reduce
366       Map Operator Tree:
367           TableScan
368             Map Join Operator
369               condition map:
370                    Inner Join 0 to 1
371               keys:
372                 0 _col1 (type: string)
373                 1 _col0 (type: string)
374               outputColumnNames: _col0, _col1
375               Statistics: Num rows: 605 Data size: 6427 Basic stats: COMPLETE Column stats: NONE
376               File Output Operator
377                 compressed: false
378                 table:
379                     input format: org.apache.hadoop.mapred.SequenceFileInputFormat
380                     output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
381                     serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
382       Local Work:
383         Map Reduce Local Work
384
385   Stage: Stage-3
386     Map Reduce
387       Map Operator Tree:
388           TableScan
389             Reduce Output Operator
390               key expressions: _col0 (type: string), _col1 (type: string)
391               sort order: ++
392               Statistics: Num rows: 605 Data size: 6427 Basic stats: COMPLETE Column stats: NONE
393               TopN Hash Memory Usage: 0.1
394       Reduce Operator Tree:
395         Select Operator
396           expressions: KEY.reducesinkkey0 (type: string), KEY.reducesinkkey1 (type: string)
397           outputColumnNames: _col0, _col1
398           Statistics: Num rows: 605 Data size: 6427 Basic stats: COMPLETE Column stats: NONE
399           Limit
400             Number of rows: 40
401             Statistics: Num rows: 40 Data size: 400 Basic stats: COMPLETE Column stats: NONE
402             File Output Operator
403               compressed: false
404               Statistics: Num rows: 40 Data size: 400 Basic stats: COMPLETE Column stats: NONE
405               table:
406                   input format: org.apache.hadoop.mapred.SequenceFileInputFormat
407                   output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
408                   serde: org.apache.hadoop.hive.serde2.lazy.LazySimpleSerDe
409
410   Stage: Stage-7
411     Map Reduce
412       Map Operator Tree:
413           TableScan
414             alias: c
415             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
416             Filter Operator
417               predicate: value is not null (type: boolean)
418               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
419               Select Operator
420                 expressions: value (type: string)
421                 outputColumnNames: _col0
422                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
423                 Map Join Operator
424                   condition map:
425                        Inner Join 0 to 1
426                   keys:
427                     0 _col1 (type: string)
428                     1 _col0 (type: string)
429                   outputColumnNames: _col0, _col1
430                   Statistics: Num rows: 605 Data size: 6427 Basic stats: COMPLETE Column stats: NONE
431                   File Output Operator
432                     compressed: false
433                     table:
434                         input format: org.apache.hadoop.mapred.SequenceFileInputFormat
435                         output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
436                         serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
437       Local Work:
438         Map Reduce Local Work
439           Alias -> Map Local Tables:
440             $INTNAME 
441               Fetch Operator
442                 limit: -1
443           Alias -> Map Local Operator Tree:
444             $INTNAME 
445               TableScan
446
447   Stage: Stage-2
448     Map Reduce
449       Map Operator Tree:
450           TableScan
451             Reduce Output Operator
452               key expressions: _col1 (type: string)
453               sort order: +
454               Map-reduce partition columns: _col1 (type: string)
455               Statistics: Num rows: 550 Data size: 5843 Basic stats: COMPLETE Column stats: NONE
456               value expressions: _col0 (type: string)
457           TableScan
458             alias: c
459             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
460             Filter Operator
461               predicate: value is not null (type: boolean)
462               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
463               Select Operator
464                 expressions: value (type: string)
465                 outputColumnNames: _col0
466                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
467                 Reduce Output Operator
468                   key expressions: _col0 (type: string)
469                   sort order: +
470                   Map-reduce partition columns: _col0 (type: string)
471                   Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
472       Reduce Operator Tree:
473         Join Operator
474           condition map:
475                Inner Join 0 to 1
476           keys:
477             0 _col1 (type: string)
478             1 _col0 (type: string)
479           outputColumnNames: _col0, _col1
480           Statistics: Num rows: 605 Data size: 6427 Basic stats: COMPLETE Column stats: NONE
481           File Output Operator
482             compressed: false
483             table:
484                 input format: org.apache.hadoop.mapred.SequenceFileInputFormat
485                 output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
486                 serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
487
488   Stage: Stage-15
489     Map Reduce Local Work
490       Alias -> Map Local Tables:
491         $hdt$_0:a 
492           Fetch Operator
493             limit: -1
494       Alias -> Map Local Operator Tree:
495         $hdt$_0:a 
496           TableScan
497             alias: a
498             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
499             Filter Operator
500               predicate: (key is not null and value is not null) (type: boolean)
501               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
502               Select Operator
503                 expressions: key (type: string), value (type: string)
504                 outputColumnNames: _col0, _col1
505                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
506                 HashTable Sink Operator
507                   keys:
508                     0 _col0 (type: string)
509                     1 _col0 (type: string)
510
511   Stage: Stage-10
512     Map Reduce
513       Map Operator Tree:
514           TableScan
515             alias: b
516             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
517             Filter Operator
518               predicate: key is not null (type: boolean)
519               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
520               Select Operator
521                 expressions: key (type: string)
522                 outputColumnNames: _col0
523                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
524                 Map Join Operator
525                   condition map:
526                        Inner Join 0 to 1
527                   keys:
528                     0 _col0 (type: string)
529                     1 _col0 (type: string)
530                   outputColumnNames: _col0, _col1
531                   Statistics: Num rows: 550 Data size: 5843 Basic stats: COMPLETE Column stats: NONE
532                   File Output Operator
533                     compressed: false
534                     table:
535                         input format: org.apache.hadoop.mapred.SequenceFileInputFormat
536                         output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
537                         serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
538       Local Work:
539         Map Reduce Local Work
540
541   Stage: Stage-1
542     Map Reduce
543       Map Operator Tree:
544           TableScan
545             alias: a
546             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
547             Filter Operator
548               predicate: (key is not null and value is not null) (type: boolean)
549               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
550               Select Operator
551                 expressions: key (type: string), value (type: string)
552                 outputColumnNames: _col0, _col1
553                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
554                 Reduce Output Operator
555                   key expressions: _col0 (type: string)
556                   sort order: +
557                   Map-reduce partition columns: _col0 (type: string)
558                   Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
559                   value expressions: _col1 (type: string)
560           TableScan
561             alias: b
562             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
563             Filter Operator
564               predicate: key is not null (type: boolean)
565               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
566               Select Operator
567                 expressions: key (type: string)
568                 outputColumnNames: _col0
569                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
570                 Reduce Output Operator
571                   key expressions: _col0 (type: string)
572                   sort order: +
573                   Map-reduce partition columns: _col0 (type: string)
574                   Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
575       Reduce Operator Tree:
576         Join Operator
577           condition map:
578                Inner Join 0 to 1
579           keys:
580             0 _col0 (type: string)
581             1 _col0 (type: string)
582           outputColumnNames: _col0, _col1
583           Statistics: Num rows: 550 Data size: 5843 Basic stats: COMPLETE Column stats: NONE
584           File Output Operator
585             compressed: false
586             table:
587                 input format: org.apache.hadoop.mapred.SequenceFileInputFormat
588                 output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
589                 serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
590
591   Stage: Stage-0
592     Fetch Operator
593       limit: 40
594       Processor Tree:
595         ListSink
596
597 PREHOOK: query: select a.* from src a join src b on a.key=b.key join src c on a.value=c.value order by a.key, a.value limit 40
598 PREHOOK: type: QUERY
599 PREHOOK: Input: default@src
600 #### A masked pattern was here ####
601 POSTHOOK: query: select a.* from src a join src b on a.key=b.key join src c on a.value=c.value order by a.key, a.value limit 40
602 POSTHOOK: type: QUERY
603 POSTHOOK: Input: default@src
604 #### A masked pattern was here ####
605 RUN: Stage-11:CONDITIONAL
606 RUN: Stage-14:MAPREDLOCAL
607 RUN: Stage-9:MAPRED
608 RUN: Stage-8:CONDITIONAL
609 RUN: Stage-12:MAPREDLOCAL
610 RUN: Stage-6:MAPRED
611 RUN: Stage-3:MAPRED
612 0       val_0
613 0       val_0
614 0       val_0
615 0       val_0
616 0       val_0
617 0       val_0
618 0       val_0
619 0       val_0
620 0       val_0
621 0       val_0
622 0       val_0
623 0       val_0
624 0       val_0
625 0       val_0
626 0       val_0
627 0       val_0
628 0       val_0
629 0       val_0
630 0       val_0
631 0       val_0
632 0       val_0
633 0       val_0
634 0       val_0
635 0       val_0
636 0       val_0
637 0       val_0
638 0       val_0
639 10      val_10
640 100     val_100
641 100     val_100
642 100     val_100
643 100     val_100
644 100     val_100
645 100     val_100
646 100     val_100
647 100     val_100
648 103     val_103
649 103     val_103
650 103     val_103
651 103     val_103
652 PREHOOK: query: explain
653 select a.* from src a join src b on a.key=b.key join src c on a.value=c.value where a.key>100 order by a.key, a.value limit 40
654 PREHOOK: type: QUERY
655 POSTHOOK: query: explain
656 select a.* from src a join src b on a.key=b.key join src c on a.value=c.value where a.key>100 order by a.key, a.value limit 40
657 POSTHOOK: type: QUERY
658 STAGE DEPENDENCIES:
659   Stage-11 is a root stage , consists of Stage-14, Stage-15, Stage-1
660   Stage-14 has a backup stage: Stage-1
661   Stage-9 depends on stages: Stage-14
662   Stage-8 depends on stages: Stage-1, Stage-9, Stage-10 , consists of Stage-12, Stage-7, Stage-2
663   Stage-12 has a backup stage: Stage-2
664   Stage-6 depends on stages: Stage-12
665   Stage-3 depends on stages: Stage-2, Stage-6, Stage-7
666   Stage-7 has a backup stage: Stage-2
667   Stage-2
668   Stage-15 has a backup stage: Stage-1
669   Stage-10 depends on stages: Stage-15
670   Stage-1
671   Stage-0 depends on stages: Stage-3
672
673 STAGE PLANS:
674   Stage: Stage-11
675     Conditional Operator
676
677   Stage: Stage-14
678     Map Reduce Local Work
679       Alias -> Map Local Tables:
680         $hdt$_2:b 
681           Fetch Operator
682             limit: -1
683       Alias -> Map Local Operator Tree:
684         $hdt$_2:b 
685           TableScan
686             alias: b
687             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
688             Filter Operator
689               predicate: (UDFToDouble(key) > 100.0) (type: boolean)
690               Statistics: Num rows: 166 Data size: 1763 Basic stats: COMPLETE Column stats: NONE
691               Select Operator
692                 expressions: key (type: string)
693                 outputColumnNames: _col0
694                 Statistics: Num rows: 166 Data size: 1763 Basic stats: COMPLETE Column stats: NONE
695                 HashTable Sink Operator
696                   keys:
697                     0 _col0 (type: string)
698                     1 _col0 (type: string)
699
700   Stage: Stage-9
701     Map Reduce
702       Map Operator Tree:
703           TableScan
704             alias: a
705             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
706             Filter Operator
707               predicate: ((UDFToDouble(key) > 100.0) and value is not null) (type: boolean)
708               Statistics: Num rows: 166 Data size: 1763 Basic stats: COMPLETE Column stats: NONE
709               Select Operator
710                 expressions: key (type: string), value (type: string)
711                 outputColumnNames: _col0, _col1
712                 Statistics: Num rows: 166 Data size: 1763 Basic stats: COMPLETE Column stats: NONE
713                 Map Join Operator
714                   condition map:
715                        Inner Join 0 to 1
716                   keys:
717                     0 _col0 (type: string)
718                     1 _col0 (type: string)
719                   outputColumnNames: _col0, _col1
720                   Statistics: Num rows: 182 Data size: 1939 Basic stats: COMPLETE Column stats: NONE
721                   File Output Operator
722                     compressed: false
723                     table:
724                         input format: org.apache.hadoop.mapred.SequenceFileInputFormat
725                         output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
726                         serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
727       Local Work:
728         Map Reduce Local Work
729
730   Stage: Stage-8
731     Conditional Operator
732
733   Stage: Stage-12
734     Map Reduce Local Work
735       Alias -> Map Local Tables:
736         $hdt$_0:c 
737           Fetch Operator
738             limit: -1
739       Alias -> Map Local Operator Tree:
740         $hdt$_0:c 
741           TableScan
742             alias: c
743             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
744             Filter Operator
745               predicate: value is not null (type: boolean)
746               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
747               Select Operator
748                 expressions: value (type: string)
749                 outputColumnNames: _col0
750                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
751                 HashTable Sink Operator
752                   keys:
753                     0 _col1 (type: string)
754                     1 _col0 (type: string)
755
756   Stage: Stage-6
757     Map Reduce
758       Map Operator Tree:
759           TableScan
760             Map Join Operator
761               condition map:
762                    Inner Join 0 to 1
763               keys:
764                 0 _col1 (type: string)
765                 1 _col0 (type: string)
766               outputColumnNames: _col0, _col1
767               Statistics: Num rows: 550 Data size: 5843 Basic stats: COMPLETE Column stats: NONE
768               File Output Operator
769                 compressed: false
770                 table:
771                     input format: org.apache.hadoop.mapred.SequenceFileInputFormat
772                     output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
773                     serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
774       Local Work:
775         Map Reduce Local Work
776
777   Stage: Stage-3
778     Map Reduce
779       Map Operator Tree:
780           TableScan
781             Reduce Output Operator
782               key expressions: _col0 (type: string), _col1 (type: string)
783               sort order: ++
784               Statistics: Num rows: 550 Data size: 5843 Basic stats: COMPLETE Column stats: NONE
785               TopN Hash Memory Usage: 0.1
786       Reduce Operator Tree:
787         Select Operator
788           expressions: KEY.reducesinkkey0 (type: string), KEY.reducesinkkey1 (type: string)
789           outputColumnNames: _col0, _col1
790           Statistics: Num rows: 550 Data size: 5843 Basic stats: COMPLETE Column stats: NONE
791           Limit
792             Number of rows: 40
793             Statistics: Num rows: 40 Data size: 400 Basic stats: COMPLETE Column stats: NONE
794             File Output Operator
795               compressed: false
796               Statistics: Num rows: 40 Data size: 400 Basic stats: COMPLETE Column stats: NONE
797               table:
798                   input format: org.apache.hadoop.mapred.SequenceFileInputFormat
799                   output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
800                   serde: org.apache.hadoop.hive.serde2.lazy.LazySimpleSerDe
801
802   Stage: Stage-7
803     Map Reduce
804       Map Operator Tree:
805           TableScan
806             alias: c
807             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
808             Filter Operator
809               predicate: value is not null (type: boolean)
810               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
811               Select Operator
812                 expressions: value (type: string)
813                 outputColumnNames: _col0
814                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
815                 Map Join Operator
816                   condition map:
817                        Inner Join 0 to 1
818                   keys:
819                     0 _col1 (type: string)
820                     1 _col0 (type: string)
821                   outputColumnNames: _col0, _col1
822                   Statistics: Num rows: 550 Data size: 5843 Basic stats: COMPLETE Column stats: NONE
823                   File Output Operator
824                     compressed: false
825                     table:
826                         input format: org.apache.hadoop.mapred.SequenceFileInputFormat
827                         output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
828                         serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
829       Local Work:
830         Map Reduce Local Work
831           Alias -> Map Local Tables:
832             $INTNAME 
833               Fetch Operator
834                 limit: -1
835           Alias -> Map Local Operator Tree:
836             $INTNAME 
837               TableScan
838
839   Stage: Stage-2
840     Map Reduce
841       Map Operator Tree:
842           TableScan
843             Reduce Output Operator
844               key expressions: _col1 (type: string)
845               sort order: +
846               Map-reduce partition columns: _col1 (type: string)
847               Statistics: Num rows: 182 Data size: 1939 Basic stats: COMPLETE Column stats: NONE
848               value expressions: _col0 (type: string)
849           TableScan
850             alias: c
851             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
852             Filter Operator
853               predicate: value is not null (type: boolean)
854               Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
855               Select Operator
856                 expressions: value (type: string)
857                 outputColumnNames: _col0
858                 Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
859                 Reduce Output Operator
860                   key expressions: _col0 (type: string)
861                   sort order: +
862                   Map-reduce partition columns: _col0 (type: string)
863                   Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
864       Reduce Operator Tree:
865         Join Operator
866           condition map:
867                Inner Join 0 to 1
868           keys:
869             0 _col1 (type: string)
870             1 _col0 (type: string)
871           outputColumnNames: _col0, _col1
872           Statistics: Num rows: 550 Data size: 5843 Basic stats: COMPLETE Column stats: NONE
873           File Output Operator
874             compressed: false
875             table:
876                 input format: org.apache.hadoop.mapred.SequenceFileInputFormat
877                 output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
878                 serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
879
880   Stage: Stage-15
881     Map Reduce Local Work
882       Alias -> Map Local Tables:
883         $hdt$_1:a 
884           Fetch Operator
885             limit: -1
886       Alias -> Map Local Operator Tree:
887         $hdt$_1:a 
888           TableScan
889             alias: a
890             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
891             Filter Operator
892               predicate: ((UDFToDouble(key) > 100.0) and value is not null) (type: boolean)
893               Statistics: Num rows: 166 Data size: 1763 Basic stats: COMPLETE Column stats: NONE
894               Select Operator
895                 expressions: key (type: string), value (type: string)
896                 outputColumnNames: _col0, _col1
897                 Statistics: Num rows: 166 Data size: 1763 Basic stats: COMPLETE Column stats: NONE
898                 HashTable Sink Operator
899                   keys:
900                     0 _col0 (type: string)
901                     1 _col0 (type: string)
902
903   Stage: Stage-10
904     Map Reduce
905       Map Operator Tree:
906           TableScan
907             alias: b
908             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
909             Filter Operator
910               predicate: (UDFToDouble(key) > 100.0) (type: boolean)
911               Statistics: Num rows: 166 Data size: 1763 Basic stats: COMPLETE Column stats: NONE
912               Select Operator
913                 expressions: key (type: string)
914                 outputColumnNames: _col0
915                 Statistics: Num rows: 166 Data size: 1763 Basic stats: COMPLETE Column stats: NONE
916                 Map Join Operator
917                   condition map:
918                        Inner Join 0 to 1
919                   keys:
920                     0 _col0 (type: string)
921                     1 _col0 (type: string)
922                   outputColumnNames: _col0, _col1
923                   Statistics: Num rows: 182 Data size: 1939 Basic stats: COMPLETE Column stats: NONE
924                   File Output Operator
925                     compressed: false
926                     table:
927                         input format: org.apache.hadoop.mapred.SequenceFileInputFormat
928                         output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
929                         serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
930       Local Work:
931         Map Reduce Local Work
932
933   Stage: Stage-1
934     Map Reduce
935       Map Operator Tree:
936           TableScan
937             alias: a
938             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
939             Filter Operator
940               predicate: ((UDFToDouble(key) > 100.0) and value is not null) (type: boolean)
941               Statistics: Num rows: 166 Data size: 1763 Basic stats: COMPLETE Column stats: NONE
942               Select Operator
943                 expressions: key (type: string), value (type: string)
944                 outputColumnNames: _col0, _col1
945                 Statistics: Num rows: 166 Data size: 1763 Basic stats: COMPLETE Column stats: NONE
946                 Reduce Output Operator
947                   key expressions: _col0 (type: string)
948                   sort order: +
949                   Map-reduce partition columns: _col0 (type: string)
950                   Statistics: Num rows: 166 Data size: 1763 Basic stats: COMPLETE Column stats: NONE
951                   value expressions: _col1 (type: string)
952           TableScan
953             alias: b
954             Statistics: Num rows: 500 Data size: 5312 Basic stats: COMPLETE Column stats: NONE
955             Filter Operator
956               predicate: (UDFToDouble(key) > 100.0) (type: boolean)
957               Statistics: Num rows: 166 Data size: 1763 Basic stats: COMPLETE Column stats: NONE
958               Select Operator
959                 expressions: key (type: string)
960                 outputColumnNames: _col0
961                 Statistics: Num rows: 166 Data size: 1763 Basic stats: COMPLETE Column stats: NONE
962                 Reduce Output Operator
963                   key expressions: _col0 (type: string)
964                   sort order: +
965                   Map-reduce partition columns: _col0 (type: string)
966                   Statistics: Num rows: 166 Data size: 1763 Basic stats: COMPLETE Column stats: NONE
967       Reduce Operator Tree:
968         Join Operator
969           condition map:
970                Inner Join 0 to 1
971           keys:
972             0 _col0 (type: string)
973             1 _col0 (type: string)
974           outputColumnNames: _col0, _col1
975           Statistics: Num rows: 182 Data size: 1939 Basic stats: COMPLETE Column stats: NONE
976           File Output Operator
977             compressed: false
978             table:
979                 input format: org.apache.hadoop.mapred.SequenceFileInputFormat
980                 output format: org.apache.hadoop.hive.ql.io.HiveSequenceFileOutputFormat
981                 serde: org.apache.hadoop.hive.serde2.lazybinary.LazyBinarySerDe
982
983   Stage: Stage-0
984     Fetch Operator
985       limit: 40
986       Processor Tree:
987         ListSink
988
989 PREHOOK: query: select a.* from src a join src b on a.key=b.key join src c on a.value=c.value where a.key>100 order by a.key, a.value limit 40
990 PREHOOK: type: QUERY
991 PREHOOK: Input: default@src
992 #### A masked pattern was here ####
993 POSTHOOK: query: select a.* from src a join src b on a.key=b.key join src c on a.value=c.value where a.key>100 order by a.key, a.value limit 40
994 POSTHOOK: type: QUERY
995 POSTHOOK: Input: default@src
996 #### A masked pattern was here ####
997 RUN: Stage-11:CONDITIONAL
998 RUN: Stage-14:MAPREDLOCAL
999 RUN: Stage-9:MAPRED
1000 RUN: Stage-8:CONDITIONAL
1001 RUN: Stage-12:MAPREDLOCAL
1002 RUN: Stage-6:MAPRED
1003 RUN: Stage-3:MAPRED
1004 103     val_103
1005 103     val_103
1006 103     val_103
1007 103     val_103
1008 103     val_103
1009 103     val_103
1010 103     val_103
1011 103     val_103
1012 104     val_104
1013 104     val_104
1014 104     val_104
1015 104     val_104
1016 104     val_104
1017 104     val_104
1018 104     val_104
1019 104     val_104
1020 105     val_105
1021 111     val_111
1022 113     val_113
1023 113     val_113
1024 113     val_113
1025 113     val_113
1026 113     val_113
1027 113     val_113
1028 113     val_113
1029 113     val_113
1030 114     val_114
1031 116     val_116
1032 118     val_118
1033 118     val_118
1034 118     val_118
1035 118     val_118
1036 118     val_118
1037 118     val_118
1038 118     val_118
1039 118     val_118
1040 119     val_119
1041 119     val_119
1042 119     val_119
1043 119     val_119
1044 PREHOOK: query: select a.* from src a join src b on a.key=b.key join src c on a.value=c.value where a.key>100 order by a.key, a.value limit 40
1045 PREHOOK: type: QUERY
1046 PREHOOK: Input: default@src
1047 #### A masked pattern was here ####
1048 Hive Runtime Error: Map local work exhausted memory
1049 FAILED: Execution Error, return code 3 from org.apache.hadoop.hive.ql.exec.mr.MapredLocalTask
1050 ATTEMPT: Execute BackupTask: org.apache.hadoop.hive.ql.exec.mr.MapRedTask
1051 Hive Runtime Error: Map local work exhausted memory
1052 FAILED: Execution Error, return code 3 from org.apache.hadoop.hive.ql.exec.mr.MapredLocalTask
1053 ATTEMPT: Execute BackupTask: org.apache.hadoop.hive.ql.exec.mr.MapRedTask
1054 POSTHOOK: query: select a.* from src a join src b on a.key=b.key join src c on a.value=c.value where a.key>100 order by a.key, a.value limit 40
1055 POSTHOOK: type: QUERY
1056 POSTHOOK: Input: default@src
1057 #### A masked pattern was here ####
1058 RUN: Stage-11:CONDITIONAL
1059 RUN: Stage-14:MAPREDLOCAL
1060 RUN: Stage-1:MAPRED
1061 RUN: Stage-8:CONDITIONAL
1062 RUN: Stage-12:MAPREDLOCAL
1063 RUN: Stage-2:MAPRED
1064 RUN: Stage-3:MAPRED
1065 103     val_103
1066 103     val_103
1067 103     val_103
1068 103     val_103
1069 103     val_103
1070 103     val_103
1071 103     val_103
1072 103     val_103
1073 104     val_104
1074 104     val_104
1075 104     val_104
1076 104     val_104
1077 104     val_104
1078 104     val_104
1079 104     val_104
1080 104     val_104
1081 105     val_105
1082 111     val_111
1083 113     val_113
1084 113     val_113
1085 113     val_113
1086 113     val_113
1087 113     val_113
1088 113     val_113
1089 113     val_113
1090 113     val_113
1091 114     val_114
1092 116     val_116
1093 118     val_118
1094 118     val_118
1095 118     val_118
1096 118     val_118
1097 118     val_118
1098 118     val_118
1099 118     val_118
1100 118     val_118
1101 119     val_119
1102 119     val_119
1103 119     val_119
1104 119     val_119