- No #ifdef WITH_LIBCORE anymore in backend, compilation without libcore was broken...
[libfirm] / ir / be / ia32 / ia32_emitter.c
1 /**
2  * This file implements the node emitter.
3  * @author Christian Wuerdig, Matthias Braun
4  * $Id$
5  */
6 #ifdef HAVE_CONFIG_H
7 #include <config.h>
8 #endif
9
10 #include <limits.h>
11
12 #include "xmalloc.h"
13 #include "tv.h"
14 #include "iredges.h"
15 #include "debug.h"
16 #include "irgwalk.h"
17 #include "irprintf.h"
18 #include "irop_t.h"
19 #include "irargs_t.h"
20 #include "irprog_t.h"
21 #include "iredges_t.h"
22 #include "execfreq.h"
23 #include "error.h"
24
25 #include "../besched_t.h"
26 #include "../benode_t.h"
27 #include "../beabi.h"
28 #include "../be_dbgout.h"
29
30 #include "ia32_emitter.h"
31 #include "gen_ia32_emitter.h"
32 #include "gen_ia32_regalloc_if.h"
33 #include "ia32_nodes_attr.h"
34 #include "ia32_new_nodes.h"
35 #include "ia32_map_regs.h"
36 #include "bearch_ia32_t.h"
37
38 #define BLOCK_PREFIX ".L"
39
40 #define SNPRINTF_BUF_LEN 128
41
42 /* global arch_env for lc_printf functions */
43 static const arch_env_t *arch_env = NULL;
44
45 /** by default, we generate assembler code for the Linux gas */
46 asm_flavour_t asm_flavour = ASM_LINUX_GAS;
47
48 /**
49  * Switch to a new section
50  */
51 void ia32_switch_section(FILE *F, section_t sec) {
52         static section_t curr_sec = NO_SECTION;
53         static const char *text[ASM_MAX][SECTION_MAX] = {
54                 {
55                         ".section\t.text",
56                         ".section\t.data",
57                         ".section\t.rodata",
58                         ".section\t.bss",
59                         ".section\t.tbss,\"awT\",@nobits",
60                         ".section\t.ctors,\"aw\",@progbits"
61                 },
62                 {
63                         ".section\t.text",
64                         ".section\t.data",
65                         ".section .rdata,\"dr\"",
66                         ".section\t.bss",
67                         ".section\t.tbss,\"awT\",@nobits",
68                         ".section\t.ctors,\"aw\",@progbits"
69                 }
70         };
71
72         if (curr_sec == sec)
73                 return;
74
75         curr_sec = sec;
76         switch (sec) {
77
78         case NO_SECTION:
79                 break;
80
81         case SECTION_TEXT:
82         case SECTION_DATA:
83         case SECTION_RODATA:
84         case SECTION_COMMON:
85         case SECTION_TLS:
86         case SECTION_CTOR:
87                 fprintf(F, "\t%s\n", text[asm_flavour][sec]);
88                 break;
89
90         default:
91                 break;
92         }
93 }
94
95 static void ia32_dump_function_object(FILE *F, const char *name)
96 {
97         switch (asm_flavour) {
98         case ASM_LINUX_GAS:
99                 fprintf(F, "\t.type\t%s, @function\n", name);
100                 break;
101         case ASM_MINGW_GAS:
102                 fprintf(F, "\t.def\t%s;\t.scl\t2;\t.type\t32;\t.endef\n", name);
103                 break;
104         default:
105                 break;
106         }
107 }
108
109 static void ia32_dump_function_size(FILE *F, const char *name)
110 {
111         switch (asm_flavour) {
112         case ASM_LINUX_GAS:
113                 fprintf(F, "\t.size\t%s, .-%s\n", name, name);
114                 break;
115         default:
116                 break;
117         }
118 }
119
120 /**
121  * Returns the register at in position pos.
122  */
123 static const arch_register_t *get_in_reg(const ir_node *irn, int pos) {
124         ir_node                *op;
125         const arch_register_t  *reg = NULL;
126
127         assert(get_irn_arity(irn) > pos && "Invalid IN position");
128
129         /* The out register of the operator at position pos is the
130            in register we need. */
131         op = get_irn_n(irn, pos);
132
133         reg = arch_get_irn_register(arch_env, op);
134
135         assert(reg && "no in register found");
136
137         /* in case of a joker register: just return a valid register */
138         if (arch_register_type_is(reg, joker)) {
139                 arch_register_req_t       req;
140                 const arch_register_req_t *p_req;
141
142                 /* ask for the requirements */
143                 p_req = arch_get_register_req(arch_env, &req, irn, pos);
144
145                 if (arch_register_req_is(p_req, limited)) {
146                         /* in case of limited requirements: get the first allowed register */
147
148                         bitset_t *bs = bitset_alloca(arch_register_class_n_regs(p_req->cls));
149                         int      idx;
150
151                         p_req->limited(p_req->limited_env, bs);
152                         idx = bitset_next_set(bs, 0);
153                         reg = arch_register_for_index(p_req->cls, idx);
154                 } else {
155                         /* otherwise get first register in class */
156                         reg = arch_register_for_index(p_req->cls, 0);
157                 }
158         }
159
160         return reg;
161 }
162
163 /**
164  * Returns the register at out position pos.
165  */
166 static const arch_register_t *get_out_reg(const ir_node *irn, int pos) {
167         ir_node                *proj;
168         const arch_register_t  *reg = NULL;
169
170         /* 1st case: irn is not of mode_T, so it has only                 */
171         /*           one OUT register -> good                             */
172         /* 2nd case: irn is of mode_T -> collect all Projs and ask the    */
173         /*           Proj with the corresponding projnum for the register */
174
175         if (get_irn_mode(irn) != mode_T) {
176                 reg = arch_get_irn_register(arch_env, irn);
177         } else if (is_ia32_irn(irn)) {
178                 reg = get_ia32_out_reg(irn, pos);
179         } else {
180                 const ir_edge_t *edge;
181
182                 foreach_out_edge(irn, edge) {
183                         proj = get_edge_src_irn(edge);
184                         assert(is_Proj(proj) && "non-Proj from mode_T node");
185                         if (get_Proj_proj(proj) == pos) {
186                                 reg = arch_get_irn_register(arch_env, proj);
187                                 break;
188                         }
189                 }
190         }
191
192         assert(reg && "no out register found");
193         return reg;
194 }
195
196 /**
197  * Returns an ident for the given tarval tv.
198  */
199 static ident *get_ident_for_tv(tarval *tv) {
200         char buf[256];
201         int len = tarval_snprintf(buf, sizeof(buf), tv);
202         assert(len);
203         return new_id_from_str(buf);
204 }
205
206 /**
207  * Determine the gnu assembler suffix that indicates a mode
208  */
209 static char get_mode_suffix(const ir_mode *mode) {
210         if(mode_is_float(mode)) {
211                 switch(get_mode_size_bits(mode)) {
212                 case 32:
213                         return 's';
214                 case 64:
215                         return 'l';
216                 case 80:
217                         return 't';
218                 }
219         } else {
220                 assert(mode_is_int(mode) || mode_is_reference(mode));
221                 switch(get_mode_size_bits(mode)) {
222                 case 64:
223                         return 'q';
224                 case 32:
225                         return 'l';
226                 case 16:
227                         return 'w';
228                 case 8:
229                         return 'b';
230                 }
231         }
232         panic("Can't output mode_suffix for %+F\n", mode);
233 }
234
235 static int produces_result(const ir_node *node) {
236         return !(is_ia32_St(node) ||
237                 is_ia32_Store8Bit(node) ||
238                 is_ia32_CondJmp(node) ||
239                 is_ia32_xCondJmp(node) ||
240                 is_ia32_CmpSet(node) ||
241                 is_ia32_xCmpSet(node) ||
242                 is_ia32_SwitchJmp(node));
243 }
244
245 static const char *ia32_get_reg_name_for_mode(ia32_emit_env_t *env, ir_mode *mode, const arch_register_t *reg) {
246         switch(get_mode_size_bits(mode)) {
247                 case 8:
248                         return ia32_get_mapped_reg_name(env->isa->regs_8bit, reg);
249                 case 16:
250                         return ia32_get_mapped_reg_name(env->isa->regs_16bit, reg);
251                 default:
252                         return (char *)arch_register_get_name(reg);
253         }
254 }
255
256 #if 0
257 /**
258  * Determines the SSE suffix depending on the mode.
259  */
260 static int ia32_print_mode_suffix(lc_appendable_t *app,
261     const lc_arg_occ_t *occ, const lc_arg_value_t *arg)
262 {
263         ir_node *irn  = arg->v_ptr;
264         ir_mode *mode = get_ia32_ls_mode(irn);
265
266         if (mode_is_float(mode)) {
267                 return lc_appendable_chadd(app, get_mode_size_bits(mode) == 32 ? 's' : 'd');
268         } else {
269                 if(get_mode_size_bits(mode) == 32)
270                         return 0;
271
272                 if(mode_is_signed(mode))
273                         lc_appendable_chadd(app, 's');
274                 else
275                         lc_appendable_chadd(app, 'z');
276
277                 lc_appendable_chadd(app, get_mode_suffix(mode));
278                 return 2;
279         }
280 }
281 #endif
282
283 /**
284  * Add a number to a prefix. This number will not be used a second time.
285  */
286 static char *get_unique_label(char *buf, size_t buflen, const char *prefix) {
287         static unsigned long id = 0;
288         snprintf(buf, buflen, "%s%lu", prefix, ++id);
289         return buf;
290 }
291
292 /*************************************************************
293  *             _       _    __   _          _
294  *            (_)     | |  / _| | |        | |
295  *  _ __  _ __ _ _ __ | |_| |_  | |__   ___| |_ __   ___ _ __
296  * | '_ \| '__| | '_ \| __|  _| | '_ \ / _ \ | '_ \ / _ \ '__|
297  * | |_) | |  | | | | | |_| |   | | | |  __/ | |_) |  __/ |
298  * | .__/|_|  |_|_| |_|\__|_|   |_| |_|\___|_| .__/ \___|_|
299  * | |                                       | |
300  * |_|                                       |_|
301  *************************************************************/
302
303 void ia32_emit_ident(ia32_emit_env_t *env, ident *id)
304 {
305         size_t len = get_id_strlen(id);
306         const char* str = get_id_str(id);
307
308         ia32_emit_string_len(env, str, len);
309 }
310
311 void ia32_emit_irprintf(ia32_emit_env_t *env, const char *fmt, ...)
312 {
313         char buf[128];
314         va_list ap;
315
316         va_start(ap, fmt);
317         ir_vsnprintf(buf, sizeof(buf), fmt, ap);
318         va_end(ap);
319
320         ia32_emit_string(env, buf);
321 }
322
323 void ia32_emit_source_register(ia32_emit_env_t *env, const ir_node *node, int pos)
324 {
325         const arch_register_t *reg = get_in_reg(node, pos);
326         const char *reg_name = arch_register_get_name(reg);
327
328         assert(pos < get_irn_arity(node));
329
330         ia32_emit_char(env, '%');
331         ia32_emit_string(env, reg_name);
332 }
333
334 void ia32_emit_dest_register(ia32_emit_env_t *env, const ir_node *node, int pos) {
335         const arch_register_t *reg = get_out_reg(node, pos);
336         const char *reg_name = arch_register_get_name(reg);
337
338         ia32_emit_char(env, '%');
339         ia32_emit_string(env, reg_name);
340 }
341
342 void ia32_emit_x87_name(ia32_emit_env_t *env, const ir_node *node, int pos)
343 {
344         ia32_attr_t *attr = get_ia32_attr(node);
345
346         assert(pos < 3);
347         ia32_emit_char(env, '%');
348         ia32_emit_string(env, attr->x87[pos]->name);
349 }
350
351 void ia32_emit_immediate(ia32_emit_env_t *env, const ir_node *node)
352 {
353         tarval *tv;
354         ident *id;
355
356         switch(get_ia32_immop_type(node)) {
357         case ia32_ImmConst:
358                 tv = get_ia32_Immop_tarval(node);
359                 id = get_ident_for_tv(tv);
360                 break;
361         case ia32_ImmSymConst:
362                 id = get_ia32_Immop_symconst(node);
363                 break;
364         default:
365                 assert(0);
366                 ia32_emit_string(env, "BAD");
367                 return;
368         }
369
370         ia32_emit_ident(env, id);
371 }
372
373 void ia32_emit_mode_suffix(ia32_emit_env_t *env, const ir_mode *mode)
374 {
375         ia32_emit_char(env, get_mode_suffix(mode));
376 }
377
378 void ia32_emit_x87_mode_suffix(ia32_emit_env_t *env, const ir_node *node)
379 {
380         ir_mode *mode = get_ia32_ls_mode(node);
381         if(mode != NULL)
382                 ia32_emit_mode_suffix(env, mode);
383 }
384
385 static char get_xmm_mode_suffix(ir_mode *mode)
386 {
387         assert(mode_is_float(mode));
388         switch(get_mode_size_bits(mode)) {
389         case 32:
390                 return 's';
391         case 64:
392                 return 'd';
393         default:
394                 assert(0);
395         }
396         return '%';
397 }
398
399 void ia32_emit_xmm_mode_suffix(ia32_emit_env_t *env, const ir_node *node)
400 {
401         ir_mode *mode = get_ia32_ls_mode(node);
402         assert(mode != NULL);
403         ia32_emit_char(env, 's');
404         ia32_emit_char(env, get_xmm_mode_suffix(mode));
405 }
406
407 void ia32_emit_xmm_mode_suffix_s(ia32_emit_env_t *env, const ir_node *node)
408 {
409         ir_mode *mode = get_ia32_ls_mode(node);
410         assert(mode != NULL);
411         ia32_emit_char(env, get_xmm_mode_suffix(mode));
412 }
413
414 void ia32_emit_extend_suffix(ia32_emit_env_t *env, const ir_mode *mode)
415 {
416         if(get_mode_size_bits(mode) == 32)
417                 return;
418         if(mode_is_signed(mode)) {
419                 ia32_emit_char(env, 's');
420         } else {
421                 ia32_emit_char(env, 'z');
422         }
423 }
424
425 /**
426  * Emits registers and/or address mode of a binary operation.
427  */
428 void ia32_emit_binop(ia32_emit_env_t *env, const ir_node *node) {
429         switch(get_ia32_op_type(node)) {
430                 case ia32_Normal:
431                         if (is_ia32_ImmConst(node) || is_ia32_ImmSymConst(node)) {
432                                 ia32_emit_char(env, '$');
433                                 ia32_emit_immediate(env, node);
434                                 ia32_emit_cstring(env, ", ");
435                                 ia32_emit_source_register(env, node, 2);
436                         } else {
437                                 const arch_register_t *in1 = get_in_reg(node, 2);
438                                 const arch_register_t *in2 = get_in_reg(node, 3);
439                                 const arch_register_t *out = produces_result(node) ? get_out_reg(node, 0) : NULL;
440                                 const arch_register_t *in;
441                                 const char            *in_name;
442
443                                 in      = out ? (REGS_ARE_EQUAL(out, in2) ? in1 : in2) : in2;
444                                 out     = out ? out : in1;
445                                 in_name = arch_register_get_name(in);
446
447                                 if (is_ia32_emit_cl(node)) {
448                                         assert(REGS_ARE_EQUAL(&ia32_gp_regs[REG_ECX], in) && "shift operation needs ecx");
449                                         in_name = "cl";
450                                 }
451
452                                 ia32_emit_char(env, '%');
453                                 ia32_emit_string(env, in_name);
454                                 ia32_emit_cstring(env, ", %");
455                                 ia32_emit_string(env, arch_register_get_name(out));
456                         }
457                         break;
458                 case ia32_AddrModeS:
459                         if (is_ia32_ImmConst(node) || is_ia32_ImmSymConst(node)) {
460                                 assert(!produces_result(node) && "Source AM with Const must not produce result");
461                                 ia32_emit_am(env, node);
462                                 ia32_emit_cstring(env, ", $");
463                                 ia32_emit_immediate(env, node);
464                         } else if (produces_result(node)) {
465                                 ia32_emit_am(env, node);
466                                 ia32_emit_cstring(env, ", ");
467                                 ia32_emit_dest_register(env, node, 0);
468                         } else {
469                                 ia32_emit_am(env, node);
470                                 ia32_emit_cstring(env, ", ");
471                                 ia32_emit_source_register(env, node, 2);
472                         }
473                         break;
474                 case ia32_AddrModeD:
475                         if (is_ia32_ImmConst(node) || is_ia32_ImmSymConst(node)) {
476                                 ia32_emit_char(env, '$');
477                                 ia32_emit_immediate(env, node);
478                                 ia32_emit_cstring(env, ", ");
479                                 ia32_emit_am(env, node);
480                         } else {
481                                 const arch_register_t *in1 = get_in_reg(node, get_irn_arity(node) == 5 ? 3 : 2);
482                                 ir_mode               *mode = get_ia32_ls_mode(node);
483                                 const char            *in_name;
484
485                                 in_name = ia32_get_reg_name_for_mode(env, mode, in1);
486
487                                 if (is_ia32_emit_cl(node)) {
488                                         assert(REGS_ARE_EQUAL(&ia32_gp_regs[REG_ECX], in1) && "shift operation needs ecx");
489                                         in_name = "cl";
490                                 }
491
492                                 ia32_emit_char(env, '%');
493                                 ia32_emit_string(env, in_name);
494                                 ia32_emit_cstring(env, ", ");
495                                 ia32_emit_am(env, node);
496                         }
497                         break;
498                 default:
499                         assert(0 && "unsupported op type");
500         }
501 }
502
503 /**
504  * Emits registers and/or address mode of a binary operation.
505  */
506 void ia32_emit_x87_binop(ia32_emit_env_t *env, const ir_node *node) {
507         switch(get_ia32_op_type(node)) {
508                 case ia32_Normal:
509                         if (is_ia32_ImmConst(node) || is_ia32_ImmSymConst(node)) {
510                                 // should not happen...
511                                 assert(0);
512                         } else {
513                                 ia32_attr_t *attr = get_ia32_attr(node);
514                                 const arch_register_t *in1 = attr->x87[0];
515                                 const arch_register_t *in2 = attr->x87[1];
516                                 const arch_register_t *out = attr->x87[2];
517                                 const arch_register_t *in;
518
519                                 in  = out ? (REGS_ARE_EQUAL(out, in2) ? in1 : in2) : in2;
520                                 out = out ? out : in1;
521
522                                 ia32_emit_char(env, '%');
523                                 ia32_emit_string(env, arch_register_get_name(in));
524                                 ia32_emit_cstring(env, ", %");
525                                 ia32_emit_string(env, arch_register_get_name(out));
526                         }
527                         break;
528                 case ia32_AddrModeS:
529                 case ia32_AddrModeD:
530                         ia32_emit_am(env, node);
531                         break;
532                 default:
533                         assert(0 && "unsupported op type");
534         }
535 }
536
537 /**
538  * Emits registers and/or address mode of a unary operation.
539  */
540 void ia32_emit_unop(ia32_emit_env_t *env, const ir_node *node) {
541         switch(get_ia32_op_type(node)) {
542                 case ia32_Normal:
543                         if (is_ia32_ImmConst(node) || is_ia32_ImmSymConst(node)) {
544                                 ia32_emit_char(env, '$');
545                                 ia32_emit_immediate(env, node);
546                         } else {
547                                 if (is_ia32_Mul(node) || is_ia32_IMul1OP(node)) {
548                                         ia32_emit_source_register(env, node, 3);
549                                 } else if(is_ia32_IDiv(node) || is_ia32_Div(node)) {
550                                         ia32_emit_source_register(env, node, 4);
551                                 } else if(is_ia32_Push(node)) {
552                                         ia32_emit_source_register(env, node, 2);
553                                 } else if(is_ia32_Pop(node)) {
554                                         ia32_emit_dest_register(env, node, 1);
555                                 } else {
556                                         ia32_emit_dest_register(env, node, 0);
557                                 }
558                         }
559                         break;
560                 case ia32_AddrModeS:
561                 case ia32_AddrModeD:
562                         ia32_emit_am(env, node);
563                         break;
564                 default:
565                         assert(0 && "unsupported op type");
566         }
567 }
568
569 /**
570  * Emits address mode.
571  */
572 void ia32_emit_am(ia32_emit_env_t *env, const ir_node *node) {
573         ia32_am_flavour_t am_flav = get_ia32_am_flavour(node);
574         ident *id = get_ia32_am_sc(node);
575         int offs = get_ia32_am_offs_int(node);
576
577         /* just to be sure... */
578         assert(!is_ia32_use_frame(node) || get_ia32_frame_ent(node) != NULL);
579
580         /* emit offset */
581         if (id != NULL) {
582                 if (is_ia32_am_sc_sign(node))
583                         ia32_emit_char(env, '-');
584                 ia32_emit_ident(env, id);
585         }
586
587         if(offs != 0) {
588                 if(id != NULL) {
589                         ia32_emit_irprintf(env, "%+d", offs);
590                 } else {
591                         ia32_emit_irprintf(env, "%d", offs);
592                 }
593         }
594
595         if (am_flav & (ia32_B | ia32_I)) {
596                 ia32_emit_char(env, '(');
597
598                 /* emit base */
599                 if (am_flav & ia32_B) {
600                         ia32_emit_source_register(env, node, 0);
601                 }
602
603                 /* emit index + scale */
604                 if (am_flav & ia32_I) {
605                         ia32_emit_char(env, ',');
606                         ia32_emit_source_register(env, node, 1);
607
608                         if (am_flav & ia32_S) {
609                                 ia32_emit_irprintf(env, ",%d", 1 << get_ia32_am_scale(node));
610                         }
611                 }
612                 ia32_emit_char(env, ')');
613         }
614 }
615
616 #if 0
617 /**
618  * Formated print of commands and comments.
619  */
620 static void ia32_fprintf_format(FILE *F, const ir_node *irn, char *cmd_buf, char *cmnt_buf) {
621         unsigned lineno;
622         const char *name = irn ? be_retrieve_dbg_info(get_irn_dbg_info((ir_node *)irn), &lineno) : NULL;
623
624         if (name)
625                 fprintf(F, "\t%-35s %-60s /* %s:%u */\n", cmd_buf, cmnt_buf, name, lineno);
626         else
627                 fprintf(F, "\t%-35s %-60s\n", cmd_buf, cmnt_buf);
628 }
629 #endif
630
631 void ia32_write_line(ia32_emit_env_t *env)
632 {
633         char *finished_line = obstack_finish(env->obst);
634
635         fwrite(finished_line, env->linelength, 1, env->out);
636         env->linelength = 0;
637         obstack_free(env->obst, finished_line);
638 }
639
640 void ia32_pad_comment(ia32_emit_env_t *env)
641 {
642         while(env->linelength <= 30) {
643                 ia32_emit_char(env, ' ');
644         }
645         ia32_emit_cstring(env, "    ");
646 }
647
648 void ia32_emit_finish_line(ia32_emit_env_t *env, const ir_node *node)
649 {
650         dbg_info *dbg;
651         const char *sourcefile;
652         unsigned lineno;
653
654         if(node == NULL) {
655                 ia32_emit_char(env, '\n');
656                 ia32_write_line(env);
657                 return;
658         }
659
660         ia32_pad_comment(env);
661         ia32_emit_cstring(env, "/* ");
662         ia32_emit_irprintf(env, "%+F ", node);
663
664         dbg = get_irn_dbg_info(node);
665         sourcefile = be_retrieve_dbg_info(dbg, &lineno);
666         if(sourcefile != NULL) {
667                 ia32_emit_string(env, sourcefile);
668                 ia32_emit_irprintf(env, ":%u", lineno);
669         }
670         ia32_emit_cstring(env, " */\n");
671         ia32_write_line(env);
672 }
673
674
675 /*************************************************
676  *                 _ _                         _
677  *                (_) |                       | |
678  *   ___ _ __ ___  _| |_    ___ ___  _ __   __| |
679  *  / _ \ '_ ` _ \| | __|  / __/ _ \| '_ \ / _` |
680  * |  __/ | | | | | | |_  | (_| (_) | | | | (_| |
681  *  \___|_| |_| |_|_|\__|  \___\___/|_| |_|\__,_|
682  *
683  *************************************************/
684
685 #undef IA32_DO_EMIT
686 #define IA32_DO_EMIT(irn) ia32_fprintf_format(F, irn, cmd_buf, cmnt_buf)
687
688 /*
689  * coding of conditions
690  */
691 struct cmp2conditon_t {
692         const char *name;
693         pn_Cmp      num;
694 };
695
696 /*
697  * positive conditions for signed compares
698  */
699 static const struct cmp2conditon_t cmp2condition_s[] = {
700         { NULL,              pn_Cmp_False },  /* always false */
701         { "e",               pn_Cmp_Eq },     /* == */
702         { "l",               pn_Cmp_Lt },     /* < */
703         { "le",              pn_Cmp_Le },     /* <= */
704         { "g",               pn_Cmp_Gt },     /* > */
705         { "ge",              pn_Cmp_Ge },     /* >= */
706         { "ne",              pn_Cmp_Lg },     /* != */
707         { NULL,              pn_Cmp_Leg},     /* Floating point: ordered */
708         { NULL,              pn_Cmp_Uo },     /* Floating point: unordered */
709         { "e",               pn_Cmp_Ue },     /* Floating point: unordered or == */
710         { "b",               pn_Cmp_Ul },     /* Floating point: unordered or < */
711         { "be",              pn_Cmp_Ule },    /* Floating point: unordered or <= */
712         { "a",               pn_Cmp_Ug },     /* Floating point: unordered or > */
713         { "ae",              pn_Cmp_Uge },    /* Floating point: unordered or >= */
714         { "ne",              pn_Cmp_Ne },     /* Floating point: unordered or != */
715         { NULL,              pn_Cmp_True },   /* always true */
716 };
717
718 /*
719  * positive conditions for unsigned compares
720  */
721 static const struct cmp2conditon_t cmp2condition_u[] = {
722         { NULL,              pn_Cmp_False },  /* always false */
723         { "e",               pn_Cmp_Eq },     /* == */
724         { "b",               pn_Cmp_Lt },     /* < */
725         { "be",              pn_Cmp_Le },     /* <= */
726         { "a",               pn_Cmp_Gt },     /* > */
727         { "ae",              pn_Cmp_Ge },     /* >= */
728         { "ne",              pn_Cmp_Lg },     /* != */
729         { NULL,              pn_Cmp_True },   /* always true */
730 };
731
732 /*
733  * returns the condition code
734  */
735 static const char *get_cmp_suffix(int cmp_code)
736 {
737         assert( (cmp2condition_s[cmp_code & 15].num) == (cmp_code & 15));
738         assert( (cmp2condition_u[cmp_code & 7].num) == (cmp_code & 7));
739
740         if((cmp_code & ia32_pn_Cmp_Unsigned)) {
741                 return cmp2condition_u[cmp_code & 7].name;
742         } else {
743                 return cmp2condition_s[cmp_code & 15].name;
744         }
745 }
746
747 void ia32_emit_cmp_suffix(ia32_emit_env_t *env, long pnc)
748 {
749         ia32_emit_string(env, get_cmp_suffix(pnc));
750 }
751
752
753 /**
754  * Returns the target block for a control flow node.
755  */
756 static ir_node *get_cfop_target_block(const ir_node *irn) {
757         return get_irn_link(irn);
758 }
759
760 /**
761  * Returns the target label for a control flow node.
762  */
763 void ia32_emit_cfop_target(ia32_emit_env_t * env, const ir_node *node) {
764         ir_node *block = get_cfop_target_block(node);
765
766         ia32_emit_cstring(env, BLOCK_PREFIX);
767         ia32_emit_irprintf(env, "%d", get_irn_node_nr(block));
768 }
769
770 /** Return the next block in Block schedule */
771 static ir_node *next_blk_sched(const ir_node *block) {
772         return get_irn_link(block);
773 }
774
775 /**
776  * Returns the Proj with projection number proj and NOT mode_M
777  */
778 static ir_node *get_proj(const ir_node *node, long proj) {
779         const ir_edge_t *edge;
780         ir_node         *src;
781
782         assert(get_irn_mode(node) == mode_T && "expected mode_T node");
783
784         foreach_out_edge(node, edge) {
785                 src = get_edge_src_irn(edge);
786
787                 assert(is_Proj(src) && "Proj expected");
788                 if (get_irn_mode(src) == mode_M)
789                         continue;
790
791                 if (get_Proj_proj(src) == proj)
792                         return src;
793         }
794         return NULL;
795 }
796
797 /**
798  * Emits the jump sequence for a conditional jump (cmp + jmp_true + jmp_false)
799  */
800 static void finish_CondJmp(ia32_emit_env_t *env, const ir_node *node,
801                            ir_mode *mode, long pnc) {
802         const ir_node *proj_true;
803         const ir_node *proj_false;
804         const ir_node *block;
805         const ir_node *next_block;
806         int flipped = 0;
807
808         /* get both Proj's */
809         proj_true = get_proj(node, pn_Cond_true);
810         assert(proj_true && "CondJmp without true Proj");
811
812         proj_false = get_proj(node, pn_Cond_false);
813         assert(proj_false && "CondJmp without false Proj");
814
815         /* for now, the code works for scheduled and non-schedules blocks */
816         block = get_nodes_block(node);
817
818         /* we have a block schedule */
819         next_block = next_blk_sched(block);
820
821         if (get_cfop_target_block(proj_true) == next_block) {
822                 /* exchange both proj's so the second one can be omitted */
823                 const ir_node *t = proj_true;
824
825                 proj_true  = proj_false;
826                 proj_false = t;
827                 flipped    = 1;
828                 pnc        = get_negated_pnc(pnc, mode);
829         }
830
831         /* in case of unordered compare, check for parity */
832         if (pnc & pn_Cmp_Uo) {
833                 ia32_emit_cstring(env, "\tjp ");
834                 ia32_emit_cfop_target(env, proj_true);
835                 ia32_emit_finish_line(env, proj_true);
836         }
837
838         ia32_emit_cstring(env, "\tj");
839         ia32_emit_cmp_suffix(env, pnc);
840         ia32_emit_char(env, ' ');
841         ia32_emit_cfop_target(env, proj_true);
842         ia32_emit_finish_line(env, proj_true);
843
844         /* the second Proj might be a fallthrough */
845         if (get_cfop_target_block(proj_false) != next_block) {
846                 ia32_emit_cstring(env, "\tjmp ");
847                 ia32_emit_cfop_target(env, proj_false);
848                 ia32_emit_finish_line(env, proj_false);
849         } else {
850                 ia32_emit_cstring(env, "\t/* fallthrough to");
851                 ia32_emit_cfop_target(env, proj_false);
852                 ia32_emit_cstring(env, " */");
853                 ia32_emit_finish_line(env, proj_false);
854         }
855 }
856
857 /**
858  * Emits code for conditional jump.
859  */
860 static void CondJmp_emitter(ia32_emit_env_t *env, const ir_node *node) {
861         ia32_emit_cstring(env, "\tcmp ");
862         ia32_emit_binop(env, node);
863         ia32_emit_finish_line(env, node);
864
865         finish_CondJmp(env, node, mode_Iu, get_ia32_pncode(node));
866 }
867
868 /**
869  * Emits code for conditional jump with two variables.
870  */
871 static void emit_ia32_CondJmp(ia32_emit_env_t *env, const ir_node *node) {
872         CondJmp_emitter(env, node);
873 }
874
875 /**
876  * Emits code for conditional test and jump.
877  */
878 static void TestJmp_emitter(ia32_emit_env_t *env, const ir_node *node) {
879         if(is_ia32_ImmSymConst(node) || is_ia32_ImmConst(node)) {
880                 ia32_emit_cstring(env, "\ttest $");
881                 ia32_emit_immediate(env, node);
882                 ia32_emit_cstring(env, ", ");
883                 ia32_emit_source_register(env, node, 0);
884                 ia32_emit_finish_line(env, node);
885         } else {
886                 ia32_emit_cstring(env, "\ttest ");
887                 ia32_emit_source_register(env, node, 1);
888                 ia32_emit_cstring(env, ", ");
889                 ia32_emit_source_register(env, node, 0);
890                 ia32_emit_finish_line(env, node);
891         }
892         finish_CondJmp(env, node, mode_Iu, get_ia32_pncode(node));
893 }
894
895 /**
896  * Emits code for conditional test and jump with two variables.
897  */
898 static void emit_ia32_TestJmp(ia32_emit_env_t *env, const ir_node *node) {
899         TestJmp_emitter(env, node);
900 }
901
902 static void emit_ia32_CJmp(ia32_emit_env_t *env, const ir_node *node) {
903         ia32_emit_cstring(env, "/* omitted redundant test */");
904         ia32_emit_finish_line(env, node);
905
906         finish_CondJmp(env, node, mode_Is, get_ia32_pncode(node));
907 }
908
909 static void emit_ia32_CJmpAM(ia32_emit_env_t *env, const ir_node *node) {
910         ia32_emit_cstring(env, "/* omitted redundant test/cmp */");
911         ia32_emit_finish_line(env, node);
912
913         finish_CondJmp(env, node, mode_Is, get_ia32_pncode(node));
914 }
915
916 /**
917  * Emits code for conditional SSE floating point jump with two variables.
918  */
919 static void emit_ia32_xCondJmp(ia32_emit_env_t *env, const ir_node *node) {
920         ia32_emit_cstring(env, "\tucomi");
921         ia32_emit_xmm_mode_suffix(env, node);
922         ia32_emit_char(env, ' ');
923         ia32_emit_binop(env, node);
924         ia32_emit_finish_line(env, node);
925
926         finish_CondJmp(env, node, mode_F, get_ia32_pncode(node));
927 }
928
929 /**
930  * Emits code for conditional x87 floating point jump with two variables.
931  */
932 static void emit_ia32_x87CondJmp(ia32_emit_env_t *env, const ir_node *node) {
933         ia32_attr_t *attr = get_ia32_attr(node);
934         const char *reg = attr->x87[1]->name;
935         long pnc = get_ia32_pncode(node);
936
937         switch (get_ia32_irn_opcode(node)) {
938         case iro_ia32_fcomrJmp:
939                 pnc = get_inversed_pnc(pnc);
940                 reg = attr->x87[0]->name;
941         case iro_ia32_fcomJmp:
942         default:
943                 ia32_emit_cstring(env, "\tfucom ");
944                 break;
945         case iro_ia32_fcomrpJmp:
946                 pnc = get_inversed_pnc(pnc);
947                 reg = attr->x87[0]->name;
948         case iro_ia32_fcompJmp:
949                 ia32_emit_cstring(env, "\tfucomp ");
950                 break;
951         case iro_ia32_fcomrppJmp:
952                 pnc = get_inversed_pnc(pnc);
953         case iro_ia32_fcomppJmp:
954                 ia32_emit_cstring(env, "\tfucompp ");
955                 reg = "";
956                 break;
957         }
958
959         if(reg[0] != '\0') {
960                 ia32_emit_char(env, '%');
961                 ia32_emit_string(env, reg);
962         }
963         ia32_emit_finish_line(env, node);
964
965         ia32_emit_cstring(env, "\tfnstsw %ax");
966         ia32_emit_finish_line(env, node);
967         ia32_emit_cstring(env, "\tsahf");
968         ia32_emit_finish_line(env, node);
969
970         finish_CondJmp(env, node, mode_E, pnc);
971 }
972
973 static void CMov_emitter(ia32_emit_env_t *env, const ir_node *node) {
974         long pnc = get_ia32_pncode(node);
975         int is_PsiCondCMov = is_ia32_PsiCondCMov(node);
976         int idx_left  = 2 - is_PsiCondCMov;
977         int idx_right = 3 - is_PsiCondCMov;
978         const arch_register_t *in1, *in2, *out;
979
980         out = arch_get_irn_register(env->arch_env, node);
981         in1 = arch_get_irn_register(env->arch_env, get_irn_n(node, idx_left));
982         in2 = arch_get_irn_register(env->arch_env, get_irn_n(node, idx_right));
983
984         /* we have to emit the cmp first, because the destination register */
985         /* could be one of the compare registers                           */
986         if (is_ia32_CmpCMov(node)) {
987                 ia32_emit_cstring(env, "\tcmp ");
988                 ia32_emit_source_register(env, node, 1);
989                 ia32_emit_cstring(env, ", ");
990                 ia32_emit_source_register(env, node, 0);
991         } else if (is_ia32_xCmpCMov(node)) {
992                 ia32_emit_cstring(env, "\tucomis");
993                 ia32_emit_mode_suffix(env, get_irn_mode(node));
994                 ia32_emit_char(env, ' ');
995                 ia32_emit_source_register(env, node, 1);
996                 ia32_emit_cstring(env, ", ");
997                 ia32_emit_source_register(env, node, 0);
998         } else if (is_PsiCondCMov) {
999                 /* omit compare because flags are already set by And/Or */
1000                 ia32_emit_cstring(env, "\ttest ");
1001                 ia32_emit_source_register(env, node, 0);
1002                 ia32_emit_cstring(env, ", ");
1003                 ia32_emit_source_register(env, node, 0);
1004         } else {
1005                 assert(0 && "unsupported CMov");
1006         }
1007         ia32_emit_finish_line(env, node);
1008
1009         if (REGS_ARE_EQUAL(out, in2)) {
1010                 /* best case: default in == out -> do nothing */
1011         } else if (REGS_ARE_EQUAL(out, in1)) {
1012                 ir_node *n = (ir_node*) node;
1013                 /* true in == out -> need complement compare and exchange true and default in */
1014                 ir_node *t = get_irn_n(n, idx_left);
1015                 set_irn_n(n, idx_left, get_irn_n(n, idx_right));
1016                 set_irn_n(n, idx_right, t);
1017
1018                 pnc = get_negated_pnc(pnc, get_irn_mode(node));
1019         } else {
1020                 /* out is different from in: need copy default -> out */
1021                 if (is_PsiCondCMov) {
1022                         ia32_emit_cstring(env, "\tmovl ");
1023                         ia32_emit_dest_register(env, node, 2);
1024                         ia32_emit_cstring(env, ", ");
1025                         ia32_emit_dest_register(env, node, 0);
1026                 } else {
1027                         ia32_emit_cstring(env, "\tmovl ");
1028                         ia32_emit_source_register(env, node, 3);
1029                         ia32_emit_cstring(env, ", ");
1030                         ia32_emit_dest_register(env, node, 0);
1031                 }
1032                 ia32_emit_finish_line(env, node);
1033         }
1034
1035         if (is_PsiCondCMov) {
1036                 ia32_emit_cstring(env, "\tcmov");
1037                 ia32_emit_cmp_suffix(env, pnc);
1038                 ia32_emit_cstring(env, "l ");
1039                 ia32_emit_source_register(env, node, 1);
1040                 ia32_emit_cstring(env, ", ");
1041                 ia32_emit_dest_register(env, node, 0);
1042         } else {
1043                 ia32_emit_cstring(env, "\tcmov");
1044                 ia32_emit_cmp_suffix(env, pnc);
1045                 ia32_emit_cstring(env, "l ");
1046                 ia32_emit_source_register(env, node, 2);
1047                 ia32_emit_cstring(env, ", ");
1048                 ia32_emit_dest_register(env, node, 0);
1049         }
1050         ia32_emit_finish_line(env, node);
1051 }
1052
1053 static void emit_ia32_CmpCMov(ia32_emit_env_t *env, const ir_node *node) {
1054         CMov_emitter(env, node);
1055 }
1056
1057 static void emit_ia32_PsiCondCMov(ia32_emit_env_t *env, const ir_node *node) {
1058         CMov_emitter(env, node);
1059 }
1060
1061 static void emit_ia32_xCmpCMov(ia32_emit_env_t *env, const ir_node *node) {
1062         CMov_emitter(env, node);
1063 }
1064
1065 static void Set_emitter(ia32_emit_env_t *env, const ir_node *node, ir_mode *mode) {
1066         int pnc = get_ia32_pncode(node);
1067         const char *reg8bit;
1068         const arch_register_t *out;
1069
1070         out     = arch_get_irn_register(env->arch_env, node);
1071         reg8bit = ia32_get_mapped_reg_name(env->isa->regs_8bit, out);
1072
1073         if (is_ia32_CmpSet(node)) {
1074                 ia32_emit_cstring(env, "\tcmp ");
1075                 ia32_emit_binop(env, node);
1076         } else if (is_ia32_xCmpSet(node)) {
1077                 ia32_emit_cstring(env, "\tucomis");
1078                 ia32_emit_mode_suffix(env, get_irn_mode(get_irn_n(node, 2)));
1079                 ia32_emit_char(env, ' ');
1080                 ia32_emit_binop(env, node);
1081         } else if (is_ia32_PsiCondSet(node)) {
1082                 ia32_emit_cstring(env, "\tcmp $0, ");
1083                 ia32_emit_source_register(env, node, 0);
1084         } else {
1085                 assert(0 && "unsupported Set");
1086         }
1087         ia32_emit_finish_line(env, node);
1088
1089         /* use mov to clear target because it doesn't affect the eflags */
1090         ia32_emit_cstring(env, "\tmovl $0, %");
1091         ia32_emit_string(env, arch_register_get_name(out));
1092         ia32_emit_finish_line(env, node);
1093
1094         ia32_emit_cstring(env, "\tset");
1095         ia32_emit_cmp_suffix(env, pnc);
1096         ia32_emit_cstring(env, " %");
1097         ia32_emit_string(env, reg8bit);
1098         ia32_emit_finish_line(env, node);
1099 }
1100
1101 static void emit_ia32_CmpSet(ia32_emit_env_t *env, const ir_node *node) {
1102         Set_emitter(env, node, get_irn_mode(get_irn_n(node, 2)));
1103 }
1104
1105 static void emit_ia32_PsiCondSet(ia32_emit_env_t *env, const ir_node *node) {
1106         Set_emitter(env, node, get_irn_mode(get_irn_n(node, 0)));
1107 }
1108
1109 static void emit_ia32_xCmpSet(ia32_emit_env_t *env, const ir_node *node) {
1110         Set_emitter(env, node, get_irn_mode(get_irn_n(node, 2)));
1111 }
1112
1113 static void emit_ia32_xCmp(ia32_emit_env_t *env, const ir_node *node) {
1114         int  sse_pnc  = -1;
1115         long pnc      = get_ia32_pncode(node);
1116         long unord    = pnc & pn_Cmp_Uo;
1117
1118         assert( (pnc & ia32_pn_Cmp_Unsigned) == 0);
1119
1120         switch (pnc) {
1121                 case pn_Cmp_Leg: /* odered */
1122                         sse_pnc = 7;
1123                         break;
1124                 case pn_Cmp_Uo:  /* unordered */
1125                         sse_pnc = 3;
1126                         break;
1127                 case pn_Cmp_Ue:
1128                 case pn_Cmp_Eq:  /* == */
1129                         sse_pnc = 0;
1130                         break;
1131                 case pn_Cmp_Ul:
1132                 case pn_Cmp_Lt:  /* < */
1133                         sse_pnc = 1;
1134                         break;
1135                 case pn_Cmp_Ule:
1136                 case pn_Cmp_Le: /* <= */
1137                         sse_pnc = 2;
1138                         break;
1139                 case pn_Cmp_Ug:
1140                 case pn_Cmp_Gt:  /* > */
1141                         sse_pnc = 6;
1142                         break;
1143                 case pn_Cmp_Uge:
1144                 case pn_Cmp_Ge: /* >= */
1145                         sse_pnc = 5;
1146                         break;
1147                 case pn_Cmp_Ne:
1148                 case pn_Cmp_Lg:  /* != */
1149                         sse_pnc = 4;
1150                         break;
1151         }
1152
1153         assert(sse_pnc >= 0 && "unsupported compare");
1154
1155         if (unord && sse_pnc != 3) {
1156                 /*
1157                         We need a separate compare against unordered.
1158                         Quick and Dirty solution:
1159                         - get some memory on stack
1160                         - compare
1161                         - store result
1162                         - compare
1163                         - and result and stored result
1164                     - cleanup stack
1165                 */
1166                 ia32_emit_cstring(env, "\tsubl $8, %esp");
1167                 ia32_emit_finish_line(env, node);
1168
1169                 ia32_emit_cstring(env, "\tcmpsd $3, ");
1170                 ia32_emit_binop(env, node);
1171                 ia32_emit_finish_line(env, node);
1172
1173                 ia32_emit_cstring(env, "\tmovsd ");
1174                 ia32_emit_dest_register(env, node, 0);
1175                 ia32_emit_cstring(env, ", (%esp)");
1176                 ia32_emit_finish_line(env, node);
1177         }
1178
1179         ia32_emit_cstring(env, "\tcmpsd ");
1180         ia32_emit_irprintf(env, "%d, ", sse_pnc);
1181         ia32_emit_binop(env, node);
1182         ia32_emit_finish_line(env, node);
1183
1184         if (unord && sse_pnc != 3) {
1185                 ia32_emit_cstring(env, "\tandpd (%esp), ");
1186                 ia32_emit_dest_register(env, node, 0);
1187                 ia32_emit_finish_line(env, node);
1188
1189                 ia32_emit_cstring(env, "\taddl $8, %esp");
1190                 ia32_emit_finish_line(env, node);
1191         }
1192 }
1193
1194 /*********************************************************
1195  *                 _ _       _
1196  *                (_) |     (_)
1197  *   ___ _ __ ___  _| |_     _ _   _ _ __ ___  _ __  ___
1198  *  / _ \ '_ ` _ \| | __|   | | | | | '_ ` _ \| '_ \/ __|
1199  * |  __/ | | | | | | |_    | | |_| | | | | | | |_) \__ \
1200  *  \___|_| |_| |_|_|\__|   | |\__,_|_| |_| |_| .__/|___/
1201  *                         _/ |               | |
1202  *                        |__/                |_|
1203  *********************************************************/
1204
1205 /* jump table entry (target and corresponding number) */
1206 typedef struct _branch_t {
1207         ir_node *target;
1208         int      value;
1209 } branch_t;
1210
1211 /* jump table for switch generation */
1212 typedef struct _jmp_tbl_t {
1213         ir_node  *defProj;         /**< default target */
1214         int       min_value;       /**< smallest switch case */
1215         int       max_value;       /**< largest switch case */
1216         int       num_branches;    /**< number of jumps */
1217         char     *label;           /**< label of the jump table */
1218         branch_t *branches;        /**< jump array */
1219 } jmp_tbl_t;
1220
1221 /**
1222  * Compare two variables of type branch_t. Used to sort all switch cases
1223  */
1224 static int ia32_cmp_branch_t(const void *a, const void *b) {
1225         branch_t *b1 = (branch_t *)a;
1226         branch_t *b2 = (branch_t *)b;
1227
1228         if (b1->value <= b2->value)
1229                 return -1;
1230         else
1231                 return 1;
1232 }
1233
1234 /**
1235  * Emits code for a SwitchJmp (creates a jump table if
1236  * possible otherwise a cmp-jmp cascade). Port from
1237  * cggg ia32 backend
1238  */
1239 static void emit_ia32_SwitchJmp(ia32_emit_env_t *env, const ir_node *node) {
1240         unsigned long       interval;
1241         int                 last_value, i;
1242         long                pnc;
1243         jmp_tbl_t           tbl;
1244         ir_node            *proj;
1245         const ir_edge_t    *edge;
1246
1247         /* fill the table structure */
1248         tbl.label        = xmalloc(SNPRINTF_BUF_LEN);
1249         tbl.label        = get_unique_label(tbl.label, SNPRINTF_BUF_LEN, ".TBL_");
1250         tbl.defProj      = NULL;
1251         tbl.num_branches = get_irn_n_edges(node);
1252         tbl.branches     = xcalloc(tbl.num_branches, sizeof(tbl.branches[0]));
1253         tbl.min_value    = INT_MAX;
1254         tbl.max_value    = INT_MIN;
1255
1256         i = 0;
1257         /* go over all proj's and collect them */
1258         foreach_out_edge(node, edge) {
1259                 proj = get_edge_src_irn(edge);
1260                 assert(is_Proj(proj) && "Only proj allowed at SwitchJmp");
1261
1262                 pnc = get_Proj_proj(proj);
1263
1264                 /* create branch entry */
1265                 tbl.branches[i].target = proj;
1266                 tbl.branches[i].value  = pnc;
1267
1268                 tbl.min_value = pnc < tbl.min_value ? pnc : tbl.min_value;
1269                 tbl.max_value = pnc > tbl.max_value ? pnc : tbl.max_value;
1270
1271                 /* check for default proj */
1272                 if (pnc == get_ia32_pncode(node)) {
1273                         assert(tbl.defProj == NULL && "found two defProjs at SwitchJmp");
1274                         tbl.defProj = proj;
1275                 }
1276
1277                 i++;
1278         }
1279
1280         /* sort the branches by their number */
1281         qsort(tbl.branches, tbl.num_branches, sizeof(tbl.branches[0]), ia32_cmp_branch_t);
1282
1283         /* two-complement's magic make this work without overflow */
1284         interval = tbl.max_value - tbl.min_value;
1285
1286         /* emit the table */
1287         ia32_emit_cstring(env, "\tcmpl $");
1288         ia32_emit_irprintf(env, "%u, ", interval);
1289         ia32_emit_source_register(env, node, 0);
1290         ia32_emit_finish_line(env, node);
1291
1292         ia32_emit_cstring(env, "\tja ");
1293         ia32_emit_cfop_target(env, tbl.defProj);
1294         ia32_emit_finish_line(env, node);
1295
1296         if (tbl.num_branches > 1) {
1297                 /* create table */
1298                 ia32_emit_cstring(env, "\tjmp *");
1299                 ia32_emit_string(env, tbl.label);
1300                 ia32_emit_cstring(env, "(,");
1301                 ia32_emit_source_register(env, node, 0);
1302                 ia32_emit_cstring(env, ",4)");
1303                 ia32_emit_finish_line(env, node);
1304
1305                 ia32_switch_section(env->out, SECTION_RODATA);
1306                 ia32_emit_cstring(env, "\t.align 4\n");
1307                 ia32_write_line(env);
1308
1309                 ia32_emit_string(env, tbl.label);
1310                 ia32_emit_cstring(env, ":\n");
1311                 ia32_write_line(env);
1312
1313                 ia32_emit_cstring(env, ".long ");
1314                 ia32_emit_cfop_target(env, tbl.branches[0].target);
1315                 ia32_emit_finish_line(env, NULL);
1316
1317                 last_value = tbl.branches[0].value;
1318                 for (i = 1; i < tbl.num_branches; ++i) {
1319                         while (++last_value < tbl.branches[i].value) {
1320                                 ia32_emit_cstring(env, ".long ");
1321                                 ia32_emit_cfop_target(env, tbl.defProj);
1322                                 ia32_emit_finish_line(env, NULL);
1323                         }
1324                         ia32_emit_cstring(env, ".long ");
1325                         ia32_emit_cfop_target(env, tbl.branches[i].target);
1326                         ia32_emit_finish_line(env, NULL);
1327                 }
1328                 ia32_switch_section(env->out, SECTION_TEXT);
1329         } else {
1330                 /* one jump is enough */
1331                 ia32_emit_cstring(env, "\tjmp ");
1332                 ia32_emit_cfop_target(env, tbl.branches[0].target);
1333                 ia32_emit_finish_line(env, node);
1334         }
1335
1336         if (tbl.label)
1337                 free(tbl.label);
1338         if (tbl.branches)
1339                 free(tbl.branches);
1340 }
1341
1342 /**
1343  * Emits code for a unconditional jump.
1344  */
1345 static void emit_Jmp(ia32_emit_env_t *env, const ir_node *node) {
1346         ir_node *block, *next_block;
1347
1348         /* for now, the code works for scheduled and non-schedules blocks */
1349         block = get_nodes_block(node);
1350
1351         /* we have a block schedule */
1352         next_block = next_blk_sched(block);
1353         if (get_cfop_target_block(node) != next_block) {
1354                 ia32_emit_cstring(env, "\tjmp ");
1355                 ia32_emit_cfop_target(env, node);
1356         } else {
1357                 ia32_emit_cstring(env, "\t/* fallthrough to ");
1358                 ia32_emit_cfop_target(env, node);
1359                 ia32_emit_cstring(env, " */");
1360         }
1361         ia32_emit_finish_line(env, node);
1362 }
1363
1364 /**********************************
1365  *   _____                  ____
1366  *  / ____|                |  _ \
1367  * | |     ___  _ __  _   _| |_) |
1368  * | |    / _ \| '_ \| | | |  _ <
1369  * | |___| (_) | |_) | |_| | |_) |
1370  *  \_____\___/| .__/ \__, |____/
1371  *             | |     __/ |
1372  *             |_|    |___/
1373  **********************************/
1374
1375 /**
1376  * Emit movsb/w instructions to make mov count divideable by 4
1377  */
1378 static void emit_CopyB_prolog(ia32_emit_env_t *env, int rem) {
1379         ia32_emit_cstring(env, "\tcld");
1380         ia32_emit_finish_line(env, NULL);
1381
1382         switch(rem) {
1383         case 1:
1384                 ia32_emit_cstring(env, "\tmovsb");
1385                 ia32_emit_finish_line(env, NULL);
1386                 break;
1387         case 2:
1388                 ia32_emit_cstring(env, "\tmovsw");
1389                 ia32_emit_finish_line(env, NULL);
1390                 break;
1391         case 3:
1392                 ia32_emit_cstring(env, "\tmovsb");
1393                 ia32_emit_finish_line(env, NULL);
1394                 ia32_emit_cstring(env, "\tmovsw");
1395                 ia32_emit_finish_line(env, NULL);
1396                 break;
1397         }
1398 }
1399
1400 /**
1401  * Emit rep movsd instruction for memcopy.
1402  */
1403 static void emit_ia32_CopyB(ia32_emit_env_t *env, const ir_node *node) {
1404         tarval *tv = get_ia32_Immop_tarval(node);
1405         int    rem = get_tarval_long(tv);
1406
1407         emit_CopyB_prolog(env, rem);
1408
1409         ia32_emit_cstring(env, "\trep movsd");
1410         ia32_emit_finish_line(env, node);
1411 }
1412
1413 /**
1414  * Emits unrolled memcopy.
1415  */
1416 static void emit_ia32_CopyB_i(ia32_emit_env_t *env, const ir_node *node) {
1417         tarval *tv   = get_ia32_Immop_tarval(node);
1418         int     size = get_tarval_long(tv);
1419
1420         emit_CopyB_prolog(env, size & 0x3);
1421
1422         size >>= 2;
1423         while (size--) {
1424                 ia32_emit_cstring(env, "\tmovsd");
1425                 ia32_emit_finish_line(env, NULL);
1426         }
1427 }
1428
1429
1430
1431 /***************************
1432  *   _____
1433  *  / ____|
1434  * | |     ___  _ ____   __
1435  * | |    / _ \| '_ \ \ / /
1436  * | |___| (_) | | | \ V /
1437  *  \_____\___/|_| |_|\_/
1438  *
1439  ***************************/
1440
1441 /**
1442  * Emit code for conversions (I, FP), (FP, I) and (FP, FP).
1443  */
1444 static void emit_ia32_Conv_with_FP(ia32_emit_env_t *env, const ir_node *node) {
1445         ir_mode            *ls_mode = get_ia32_ls_mode(node);
1446         int                 ls_bits = get_mode_size_bits(ls_mode);
1447
1448         ia32_emit_cstring(env, "\tcvt");
1449
1450         if(is_ia32_Conv_I2FP(node)) {
1451                 if(ls_bits == 32) {
1452                         ia32_emit_cstring(env, "si2ss");
1453                 } else {
1454                         ia32_emit_cstring(env, "si2sd");
1455                 }
1456         } else if(is_ia32_Conv_FP2I(node)) {
1457                 if(ls_bits == 32) {
1458                         ia32_emit_cstring(env, "ss2si");
1459                 } else {
1460                         ia32_emit_cstring(env, "sd2si");
1461                 }
1462         } else {
1463                 assert(is_ia32_Conv_FP2FP(node));
1464                 if(ls_bits == 32) {
1465                         ia32_emit_cstring(env, "sd2ss");
1466                 } else {
1467                         ia32_emit_cstring(env, "ss2sd");
1468                 }
1469         }
1470         ia32_emit_char(env, ' ');
1471
1472         switch(get_ia32_op_type(node)) {
1473                 case ia32_Normal:
1474                         ia32_emit_source_register(env, node, 2);
1475                         ia32_emit_cstring(env, ", ");
1476                         ia32_emit_dest_register(env, node, 0);
1477                         break;
1478                 case ia32_AddrModeS:
1479                         ia32_emit_dest_register(env, node, 0);
1480                         ia32_emit_cstring(env, ", ");
1481                         ia32_emit_am(env, node);
1482                         break;
1483                 default:
1484                         assert(0 && "unsupported op type for Conv");
1485         }
1486         ia32_emit_finish_line(env, node);
1487 }
1488
1489 static void emit_ia32_Conv_I2FP(ia32_emit_env_t *env, const ir_node *node) {
1490         emit_ia32_Conv_with_FP(env, node);
1491 }
1492
1493 static void emit_ia32_Conv_FP2I(ia32_emit_env_t *env, const ir_node *node) {
1494         emit_ia32_Conv_with_FP(env, node);
1495 }
1496
1497 static void emit_ia32_Conv_FP2FP(ia32_emit_env_t *env, const ir_node *node) {
1498         emit_ia32_Conv_with_FP(env, node);
1499 }
1500
1501 /**
1502  * Emits code for an Int conversion.
1503  */
1504 static void emit_ia32_Conv_I2I(ia32_emit_env_t *env, const ir_node *node) {
1505         const char *sign_suffix;
1506         ir_mode *smaller_mode = get_ia32_ls_mode(node);
1507         int smaller_bits = get_mode_size_bits(smaller_mode);
1508         int signed_mode;
1509         const arch_register_t *in_reg, *out_reg;
1510
1511         assert(!mode_is_float(smaller_mode));
1512         assert(smaller_bits == 8 || smaller_bits == 16 || smaller_bits == 32);
1513
1514         signed_mode = mode_is_signed(smaller_mode);
1515         if(smaller_bits == 32) {
1516                 // this should not happen as it's no convert
1517                 assert(0);
1518                 sign_suffix = "";
1519         } else {
1520                 sign_suffix = signed_mode ? "s" : "z";
1521         }
1522
1523         switch(get_ia32_op_type(node)) {
1524                 case ia32_Normal:
1525                         in_reg  = get_in_reg(node, 2);
1526                         out_reg = get_out_reg(node, 0);
1527
1528                         if (REGS_ARE_EQUAL(in_reg, &ia32_gp_regs[REG_EAX]) &&
1529                                 REGS_ARE_EQUAL(out_reg, in_reg)                &&
1530                                 signed_mode)
1531                         {
1532                                 /* argument and result are both in EAX and */
1533                                 /* signedness is ok: -> use converts       */
1534                                 if (smaller_bits == 8) {
1535                                         ia32_emit_cstring(env, "\tcbtw");
1536                                 } else if (smaller_bits == 16) {
1537                                         ia32_emit_cstring(env, "\tcwtl");
1538                                 } else {
1539                                         assert(0);
1540                                 }
1541                         } else if (REGS_ARE_EQUAL(out_reg, in_reg) && !signed_mode) {
1542                                 /* argument and result are in the same register */
1543                                 /* and signedness is ok: -> use and with mask   */
1544                                 int mask = (1 << smaller_bits) - 1;
1545                                 ia32_emit_cstring(env, "\tandl $0x");
1546                                 ia32_emit_irprintf(env, "%x, ", mask);
1547                                 ia32_emit_dest_register(env, node, 0);
1548                         } else {
1549                                 const char *sreg = ia32_get_reg_name_for_mode(env, smaller_mode, in_reg);
1550
1551                                 ia32_emit_cstring(env, "\tmov");
1552                                 ia32_emit_string(env, sign_suffix);
1553                                 ia32_emit_mode_suffix(env, smaller_mode);
1554                                 ia32_emit_cstring(env, "l %");
1555                                 ia32_emit_string(env, sreg);
1556                                 ia32_emit_cstring(env, ", ");
1557                                 ia32_emit_dest_register(env, node, 0);
1558                         }
1559                         break;
1560                 case ia32_AddrModeS: {
1561                         ia32_emit_cstring(env, "\tmov");
1562                         ia32_emit_string(env, sign_suffix);
1563                         ia32_emit_mode_suffix(env, smaller_mode);
1564                         ia32_emit_cstring(env, "l %");
1565                         ia32_emit_am(env, node);
1566                         ia32_emit_cstring(env, ", ");
1567                         ia32_emit_dest_register(env, node, 0);
1568                         break;
1569                 }
1570                 default:
1571                         assert(0 && "unsupported op type for Conv");
1572         }
1573         ia32_emit_finish_line(env, node);
1574 }
1575
1576 /**
1577  * Emits code for an 8Bit Int conversion.
1578  */
1579 void emit_ia32_Conv_I2I8Bit(ia32_emit_env_t *env, const ir_node *node) {
1580         emit_ia32_Conv_I2I(env, node);
1581 }
1582
1583
1584 /*******************************************
1585  *  _                          _
1586  * | |                        | |
1587  * | |__   ___ _ __   ___   __| | ___  ___
1588  * | '_ \ / _ \ '_ \ / _ \ / _` |/ _ \/ __|
1589  * | |_) |  __/ | | | (_) | (_| |  __/\__ \
1590  * |_.__/ \___|_| |_|\___/ \__,_|\___||___/
1591  *
1592  *******************************************/
1593
1594 /**
1595  * Emits a backend call
1596  */
1597 static void emit_be_Call(ia32_emit_env_t *env, const ir_node *node) {
1598         ir_entity *ent = be_Call_get_entity(node);
1599
1600         ia32_emit_cstring(env, "\tcall ");
1601         if (ent) {
1602                 ia32_emit_string(env, get_entity_ld_name(ent));
1603         } else {
1604                 ia32_emit_char(env, '*');
1605                 ia32_emit_dest_register(env, get_irn_n(node, be_pos_Call_ptr), 0);
1606         }
1607         ia32_emit_finish_line(env, node);
1608 }
1609
1610 /**
1611  * Emits code to increase stack pointer.
1612  */
1613 static void emit_be_IncSP(ia32_emit_env_t *env, const ir_node *node) {
1614         int offs = be_get_IncSP_offset(node);
1615
1616         if (offs == 0)
1617                 return;
1618
1619         if (offs > 0) {
1620                 ia32_emit_cstring(env, "\tsubl $");
1621                 ia32_emit_irprintf(env, "%u, ", offs);
1622                 ia32_emit_source_register(env, node, 0);
1623         } else {
1624                 ia32_emit_cstring(env, "\taddl $");
1625                 ia32_emit_irprintf(env, "%u, ", -offs);
1626                 ia32_emit_source_register(env, node, 0);
1627         }
1628         ia32_emit_finish_line(env, node);
1629 }
1630
1631 /**
1632  * Emits code to set stack pointer.
1633  */
1634 static void emit_be_SetSP(ia32_emit_env_t *env, const ir_node *node) {
1635         ia32_emit_cstring(env, "\tmovl ");
1636         ia32_emit_source_register(env, node, 2);
1637         ia32_emit_cstring(env, ", ");
1638         ia32_emit_dest_register(env, node, 0);
1639         ia32_emit_finish_line(env, node);
1640 }
1641
1642 /**
1643  * Emits code for Copy/CopyKeep.
1644  */
1645 static void Copy_emitter(ia32_emit_env_t *env, const ir_node *node, const ir_node *op) {
1646         const arch_env_t *aenv = env->arch_env;
1647
1648         if (REGS_ARE_EQUAL(arch_get_irn_register(aenv, node), arch_get_irn_register(aenv, op)) ||
1649                 arch_register_type_is(arch_get_irn_register(aenv, op), virtual))
1650                 return;
1651
1652         if (mode_is_float(get_irn_mode(node))) {
1653                 ia32_emit_cstring(env, "\tmovsd ");
1654                 ia32_emit_source_register(env, node, 0);
1655                 ia32_emit_cstring(env, ", ");
1656                 ia32_emit_dest_register(env, node, 0);
1657         } else {
1658                 ia32_emit_cstring(env, "\tmovl ");
1659                 ia32_emit_source_register(env, node, 0);
1660                 ia32_emit_cstring(env, ", ");
1661                 ia32_emit_dest_register(env, node, 0);
1662         }
1663         ia32_emit_finish_line(env, node);
1664 }
1665
1666 static void emit_be_Copy(ia32_emit_env_t *env, const ir_node *node) {
1667         Copy_emitter(env, node, be_get_Copy_op(node));
1668 }
1669
1670 static void emit_be_CopyKeep(ia32_emit_env_t *env, const ir_node *node) {
1671         Copy_emitter(env, node, be_get_CopyKeep_op(node));
1672 }
1673
1674 /**
1675  * Emits code for exchange.
1676  */
1677 static void emit_be_Perm(ia32_emit_env_t *env, const ir_node *node) {
1678         const arch_register_t *in1, *in2;
1679         const arch_register_class_t *cls1, *cls2;
1680
1681         in1 = arch_get_irn_register(env->arch_env, get_irn_n(node, 0));
1682         in2 = arch_get_irn_register(env->arch_env, get_irn_n(node, 1));
1683
1684         cls1 = arch_register_get_class(in1);
1685         cls2 = arch_register_get_class(in2);
1686
1687         assert(cls1 == cls2 && "Register class mismatch at Perm");
1688
1689         if (cls1 == &ia32_reg_classes[CLASS_ia32_gp]) {
1690 #if 0
1691                 if(emit_env->isa->opt_arch == arch_athlon) {
1692                         // xchg commands are Vector path on athlons and therefore stall the DirectPath pipeline
1693                         // it is often beneficial to use the 3 xor trick instead of an xchg
1694                         cmnt_buf[0] = 0;
1695                         lc_esnprintf(ia32_get_arg_env(), cmd_buf, SNPRINTF_BUF_LEN, "xor %1S, %2S", irn, irn);
1696                         IA32_DO_EMIT(irn);
1697                         lc_esnprintf(ia32_get_arg_env(), cmd_buf, SNPRINTF_BUF_LEN, "xor %2S, %1S", irn, irn);
1698                         IA32_DO_EMIT(irn);
1699                         lc_esnprintf(ia32_get_arg_env(), cmd_buf, SNPRINTF_BUF_LEN, "xor %1S, %2S", irn, irn);
1700                 } else {
1701 #endif
1702                         ia32_emit_cstring(env, "\txchg ");
1703                         ia32_emit_source_register(env, node, 1);
1704                         ia32_emit_cstring(env, ", ");
1705                         ia32_emit_source_register(env, node, 0);
1706                         ia32_emit_finish_line(env, node);
1707 #if 0
1708                 }
1709 #endif
1710         } else if (cls1 == &ia32_reg_classes[CLASS_ia32_xmm]) {
1711                 ia32_emit_cstring(env, "\txorpd ");
1712                 ia32_emit_source_register(env, node, 1);
1713                 ia32_emit_cstring(env, ", ");
1714                 ia32_emit_source_register(env, node, 0);
1715                 ia32_emit_finish_line(env, NULL);
1716
1717                 ia32_emit_cstring(env, "\txorpd ");
1718                 ia32_emit_source_register(env, node, 0);
1719                 ia32_emit_cstring(env, ", ");
1720                 ia32_emit_source_register(env, node, 1);
1721                 ia32_emit_finish_line(env, NULL);
1722
1723                 ia32_emit_cstring(env, "\txorpd ");
1724                 ia32_emit_source_register(env, node, 1);
1725                 ia32_emit_cstring(env, ", ");
1726                 ia32_emit_source_register(env, node, 0);
1727                 ia32_emit_finish_line(env, node);
1728         } else if (cls1 == &ia32_reg_classes[CLASS_ia32_vfp]) {
1729                 /* is a NOP */
1730         } else if (cls1 == &ia32_reg_classes[CLASS_ia32_st]) {
1731                 /* is a NOP */
1732         }
1733 }
1734
1735 /**
1736  * Emits code for Constant loading.
1737  */
1738 static void emit_ia32_Const(ia32_emit_env_t *env, const ir_node *node) {
1739         ir_mode *mode = get_irn_mode(node);
1740         ia32_immop_type_t imm_tp = get_ia32_immop_type(node);
1741
1742         if (imm_tp == ia32_ImmSymConst) {
1743                 ia32_emit_cstring(env, "\tmovl $");
1744                 ia32_emit_immediate(env, node);
1745                 ia32_emit_cstring(env, ", ");
1746                 ia32_emit_dest_register(env, node, 0);
1747         } else {
1748                 tarval *tv = get_ia32_Immop_tarval(node);
1749                 assert(mode == mode_Iu);
1750                 /* beware: in some rare cases mode is mode_b which has no tarval_null() */
1751                 if (tarval_is_null(tv)) {
1752                         if (env->isa->opt_arch == arch_pentium_4) {
1753                                 /* P4 prefers sub r, r, others xor r, r */
1754                                 ia32_emit_cstring(env, "\tsubl ");
1755                         } else {
1756                                 ia32_emit_cstring(env, "\txorl ");
1757                         }
1758                         ia32_emit_dest_register(env, node, 0);
1759                         ia32_emit_cstring(env, ", ");
1760                         ia32_emit_dest_register(env, node, 0);
1761                 } else {
1762                         ia32_emit_cstring(env, "\tmovl $");
1763                         ia32_emit_immediate(env, node);
1764                         ia32_emit_cstring(env, ", ");
1765                         ia32_emit_dest_register(env, node, 0);
1766                 }
1767         }
1768         ia32_emit_finish_line(env, node);
1769 }
1770
1771 /**
1772  * Emits code to load the TLS base
1773  */
1774 static void emit_ia32_LdTls(ia32_emit_env_t *env, const ir_node *node) {
1775         ia32_emit_cstring(env, "\tmovl %gs:0, ");
1776         ia32_emit_dest_register(env, node, 0);
1777         ia32_emit_finish_line(env, node);
1778 }
1779
1780 static void emit_be_Return(ia32_emit_env_t *env, const ir_node *node) {
1781         ia32_emit_cstring(env, "\tret");
1782         ia32_emit_finish_line(env, node);
1783 }
1784
1785 static void emit_Nothing(ia32_emit_env_t *env, const ir_node *node) {
1786 }
1787
1788
1789 /***********************************************************************************
1790  *                  _          __                                             _
1791  *                 (_)        / _|                                           | |
1792  *  _ __ ___   __ _ _ _ __   | |_ _ __ __ _ _ __ ___   _____      _____  _ __| | __
1793  * | '_ ` _ \ / _` | | '_ \  |  _| '__/ _` | '_ ` _ \ / _ \ \ /\ / / _ \| '__| |/ /
1794  * | | | | | | (_| | | | | | | | | | | (_| | | | | | |  __/\ V  V / (_) | |  |   <
1795  * |_| |_| |_|\__,_|_|_| |_| |_| |_|  \__,_|_| |_| |_|\___| \_/\_/ \___/|_|  |_|\_\
1796  *
1797  ***********************************************************************************/
1798
1799 /**
1800  * Enters the emitter functions for handled nodes into the generic
1801  * pointer of an opcode.
1802  */
1803 static void ia32_register_emitters(void) {
1804
1805 #define IA32_EMIT2(a,b) op_ia32_##a->ops.generic = (op_func)emit_ia32_##b
1806 #define IA32_EMIT(a)    IA32_EMIT2(a,a)
1807 #define EMIT(a)         op_##a->ops.generic = (op_func)emit_##a
1808 #define IGN(a)                  op_##a->ops.generic = (op_func)emit_Nothing
1809 #define BE_EMIT(a)      op_be_##a->ops.generic = (op_func)emit_be_##a
1810 #define BE_IGN(a)               op_be_##a->ops.generic = (op_func)emit_Nothing
1811
1812         /* first clear the generic function pointer for all ops */
1813         clear_irp_opcodes_generic_func();
1814
1815         /* register all emitter functions defined in spec */
1816         ia32_register_spec_emitters();
1817
1818         /* other ia32 emitter functions */
1819         IA32_EMIT(CondJmp);
1820         IA32_EMIT(TestJmp);
1821         IA32_EMIT(CJmp);
1822         IA32_EMIT(CJmpAM);
1823         IA32_EMIT(CmpCMov);
1824         IA32_EMIT(PsiCondCMov);
1825         IA32_EMIT(CmpSet);
1826         IA32_EMIT(PsiCondSet);
1827         IA32_EMIT(SwitchJmp);
1828         IA32_EMIT(CopyB);
1829         IA32_EMIT(CopyB_i);
1830         IA32_EMIT(Conv_I2FP);
1831         IA32_EMIT(Conv_FP2I);
1832         IA32_EMIT(Conv_FP2FP);
1833         IA32_EMIT(Conv_I2I);
1834         IA32_EMIT(Conv_I2I8Bit);
1835         IA32_EMIT(Const);
1836         IA32_EMIT(LdTls);
1837         IA32_EMIT(xCmp);
1838         IA32_EMIT(xCmpSet);
1839         IA32_EMIT(xCmpCMov);
1840         IA32_EMIT(xCondJmp);
1841         IA32_EMIT2(fcomJmp, x87CondJmp);
1842         IA32_EMIT2(fcompJmp, x87CondJmp);
1843         IA32_EMIT2(fcomppJmp, x87CondJmp);
1844         IA32_EMIT2(fcomrJmp, x87CondJmp);
1845         IA32_EMIT2(fcomrpJmp, x87CondJmp);
1846         IA32_EMIT2(fcomrppJmp, x87CondJmp);
1847
1848         /* benode emitter */
1849         BE_EMIT(Call);
1850         BE_EMIT(IncSP);
1851         BE_EMIT(SetSP);
1852         BE_EMIT(Copy);
1853         BE_EMIT(CopyKeep);
1854         BE_EMIT(Perm);
1855         BE_EMIT(Return);
1856
1857         BE_IGN(RegParams);
1858         BE_IGN(Barrier);
1859         BE_IGN(Keep);
1860
1861         /* firm emitter */
1862         EMIT(Jmp);
1863         IGN(Proj);
1864         IGN(Phi);
1865         IGN(Start);
1866
1867 #undef BE_EMIT
1868 #undef EMIT
1869 #undef IGN
1870 #undef IA32_EMIT2
1871 #undef IA32_EMIT
1872 }
1873
1874 static const char *last_name = NULL;
1875 static unsigned last_line = -1;
1876 static unsigned num = -1;
1877
1878 /**
1879  * Emit the debug support for node node.
1880  */
1881 static void ia32_emit_dbg(ia32_emit_env_t *env, const ir_node *node) {
1882         dbg_info *db = get_irn_dbg_info(node);
1883         unsigned lineno;
1884         const char *fname = be_retrieve_dbg_info(db, &lineno);
1885
1886         if (! env->cg->birg->main_env->options->stabs_debug_support)
1887                 return;
1888
1889         if (fname) {
1890                 if (last_name != fname) {
1891                         last_line = -1;
1892                         be_dbg_include_begin(env->cg->birg->main_env->db_handle, fname);
1893                         last_name = fname;
1894                 }
1895                 if (last_line != lineno) {
1896                         char name[64];
1897                         FILE *F = env->out;
1898
1899                         snprintf(name, sizeof(name), ".LM%u", ++num);
1900                         last_line = lineno;
1901                         be_dbg_line(env->cg->birg->main_env->db_handle, lineno, name);
1902                         fprintf(F, "%s:\n", name);
1903                 }
1904         }
1905 }
1906
1907 typedef void (*emit_func_ptr) (ia32_emit_env_t *, const ir_node *);
1908
1909 /**
1910  * Emits code for a node.
1911  */
1912 static void ia32_emit_node(ia32_emit_env_t *env, const ir_node *node) {
1913         ir_op *op = get_irn_op(node);
1914         DEBUG_ONLY(firm_dbg_module_t *mod = env->mod;)
1915
1916         DBG((mod, LEVEL_1, "emitting code for %+F\n", node));
1917
1918         if (op->ops.generic) {
1919                 emit_func_ptr func = (emit_func_ptr) op->ops.generic;
1920                 ia32_emit_dbg(env, node);
1921                 (*func) (env, node);
1922         } else {
1923                 emit_Nothing(env, node);
1924                 ir_fprintf(stderr, "Warning: No emit handler for node %+F (%+G)\n", node, node);
1925         }
1926 }
1927
1928 /**
1929  * Emits gas alignment directives
1930  */
1931 static void ia32_emit_alignment(ia32_emit_env_t *env, unsigned align, unsigned skip) {
1932         ia32_emit_cstring(env, "\t.p2align ");
1933         ia32_emit_irprintf(env, "%u,,%u\n", align, skip);
1934         ia32_write_line(env);
1935 }
1936
1937 /**
1938  * Emits gas alignment directives for Functions depended on cpu architecture.
1939  */
1940 static void ia32_emit_align_func(ia32_emit_env_t *env, cpu_support cpu) {
1941         unsigned align;
1942         unsigned maximum_skip;
1943
1944         switch (cpu) {
1945                 case arch_i386:
1946                         align = 2;
1947                         break;
1948                 case arch_i486:
1949                         align = 4;
1950                         break;
1951                 case arch_k6:
1952                         align = 5;
1953                         break;
1954                 default:
1955                         align = 4;
1956         }
1957         maximum_skip = (1 << align) - 1;
1958         ia32_emit_alignment(env, align, maximum_skip);
1959 }
1960
1961 /**
1962  * Emits gas alignment directives for Labels depended on cpu architecture.
1963  */
1964 static void ia32_emit_align_label(ia32_emit_env_t *env, cpu_support cpu) {
1965         unsigned align; unsigned maximum_skip;
1966
1967         switch (cpu) {
1968                 case arch_i386:
1969                         align = 2;
1970                         break;
1971                 case arch_i486:
1972                         align = 4;
1973                         break;
1974                 case arch_k6:
1975                         align = 5;
1976                         break;
1977                 default:
1978                         align = 4;
1979         }
1980         maximum_skip = (1 << align) - 1;
1981         ia32_emit_alignment(env, align, maximum_skip);
1982 }
1983
1984 static int is_first_loop_block(ia32_emit_env_t *env, ir_node *block, ir_node *prev_block) {
1985         ir_exec_freq *exec_freq = env->cg->birg->exec_freq;
1986         double block_freq, prev_freq;
1987         static const double DELTA = .0001;
1988         cpu_support cpu = env->isa->opt_arch;
1989
1990         if(exec_freq == NULL)
1991                 return 0;
1992         if(cpu == arch_i386 || cpu == arch_i486)
1993                 return 0;
1994
1995         block_freq = get_block_execfreq(exec_freq, block);
1996         prev_freq = get_block_execfreq(exec_freq, prev_block);
1997
1998         if(block_freq < DELTA || prev_freq < DELTA)
1999                 return 0;
2000
2001         block_freq /= prev_freq;
2002
2003         switch (cpu) {
2004                 case arch_athlon:
2005                 case arch_athlon_64:
2006                 case arch_k6:
2007                         return block_freq > 3;
2008                 default:
2009                         break;
2010         }
2011
2012         return block_freq > 2;
2013 }
2014
2015 /**
2016  * Walks over the nodes in a block connected by scheduling edges
2017  * and emits code for each node.
2018  */
2019 static void ia32_gen_block(ia32_emit_env_t *env, ir_node *block, ir_node *last_block) {
2020         ir_graph      *irg         = get_irn_irg(block);
2021         ir_node       *start_block = get_irg_start_block(irg);
2022         int           need_label   = 1;
2023         const ir_node *node;
2024         int           i;
2025
2026         assert(is_Block(block));
2027
2028         if (block == start_block)
2029                 need_label = 0;
2030
2031         if (need_label && get_irn_arity(block) == 1) {
2032                 ir_node *pred_block = get_Block_cfgpred_block(block, 0);
2033
2034                 if (pred_block == last_block && get_irn_n_edges_kind(pred_block, EDGE_KIND_BLOCK) <= 2)
2035                         need_label = 0;
2036         }
2037
2038         /* special case: if one of our cfg preds is a switch-jmp we need a label, */
2039         /*               otherwise there might be jump table entries jumping to   */
2040         /*               non-existent (omitted) labels                            */
2041         for (i = get_Block_n_cfgpreds(block) - 1; i >= 0; --i) {
2042                 ir_node *pred = get_Block_cfgpred(block, i);
2043
2044                 if (is_Proj(pred)) {
2045                         assert(get_irn_mode(pred) == mode_X);
2046                         if (is_ia32_SwitchJmp(get_Proj_pred(pred))) {
2047                                 need_label = 1;
2048                                 break;
2049                         }
2050                 }
2051         }
2052
2053         if (need_label) {
2054                 int i, arity;
2055                 int align = 1;
2056                 ir_exec_freq *exec_freq = env->cg->birg->exec_freq;
2057
2058                 /* align the loop headers */
2059                 if (! is_first_loop_block(env, block, last_block)) {
2060                         /* align blocks where the previous block has no fallthrough */
2061                         arity = get_irn_arity(block);
2062
2063                         for (i = 0; i < arity; ++i) {
2064                                 ir_node *predblock = get_Block_cfgpred_block(block, i);
2065
2066                                 if (predblock == last_block) {
2067                                         align = 0;
2068                                         break;
2069                                 }
2070                         }
2071                 }
2072
2073                 if (align)
2074                         ia32_emit_align_label(env, env->isa->opt_arch);
2075
2076                 ia32_emit_cstring(env, BLOCK_PREFIX);
2077                 ia32_emit_irprintf(env, "%d:", get_irn_node_nr(block));
2078                 ia32_pad_comment(env);
2079                 ia32_emit_cstring(env, "   /* preds:");
2080
2081                 /* emit list of pred blocks in comment */
2082                 arity = get_irn_arity(block);
2083                 for (i = 0; i < arity; ++i) {
2084                         ir_node *predblock = get_Block_cfgpred_block(block, i);
2085                         ia32_emit_irprintf(env, " %d", get_irn_node_nr(predblock));
2086                 }
2087
2088                 if (exec_freq != NULL) {
2089                         ia32_emit_irprintf(env, " freq: %f", get_block_execfreq(exec_freq, block));
2090                 }
2091                 ia32_emit_cstring(env, " */\n");
2092                 ia32_write_line(env);
2093         }
2094
2095         /* emit the contents of the block */
2096         ia32_emit_dbg(env, block);
2097         sched_foreach(block, node) {
2098                 ia32_emit_node(env, node);
2099         }
2100 }
2101
2102 /**
2103  * Emits code for function start.
2104  */
2105 static void ia32_emit_func_prolog(ia32_emit_env_t *env, ir_graph *irg) {
2106         FILE *F = env->out;
2107         ir_entity  *irg_ent  = get_irg_entity(irg);
2108         const char *irg_name = get_entity_ld_name(irg_ent);
2109         cpu_support cpu      = env->isa->opt_arch;
2110         const be_irg_t *birg = env->cg->birg;
2111
2112         fprintf(F, "\n");
2113         ia32_switch_section(F, SECTION_TEXT);
2114         be_dbg_method_begin(birg->main_env->db_handle, irg_ent, be_abi_get_stack_layout(birg->abi));
2115         ia32_emit_align_func(env, cpu);
2116         if (get_entity_visibility(irg_ent) == visibility_external_visible) {
2117                 fprintf(F, ".globl %s\n", irg_name);
2118         }
2119         ia32_dump_function_object(F, irg_name);
2120         fprintf(F, "%s:\n", irg_name);
2121 }
2122
2123 /**
2124  * Emits code for function end
2125  */
2126 static void ia32_emit_func_epilog(ia32_emit_env_t *env, ir_graph *irg) {
2127         const char *irg_name = get_entity_ld_name(get_irg_entity(irg));
2128         const be_irg_t *birg = env->cg->birg;
2129         FILE *F = env->out;
2130
2131         ia32_dump_function_size(F, irg_name);
2132         be_dbg_method_end(birg->main_env->db_handle);
2133         fprintf(F, "\n");
2134 }
2135
2136 /**
2137  * Block-walker:
2138  * Sets labels for control flow nodes (jump target)
2139  */
2140 static void ia32_gen_labels(ir_node *block, void *data) {
2141         ir_node *pred;
2142         int n = get_Block_n_cfgpreds(block);
2143
2144         for (n--; n >= 0; n--) {
2145                 pred = get_Block_cfgpred(block, n);
2146                 set_irn_link(pred, block);
2147         }
2148 }
2149
2150 /**
2151  * Main driver. Emits the code for one routine.
2152  */
2153 void ia32_gen_routine(ia32_code_gen_t *cg, FILE *F, ir_graph *irg) {
2154         ia32_emit_env_t env;
2155         ir_node *block;
2156         ir_node *last_block = NULL;
2157         int i, n;
2158         struct obstack obst;
2159
2160         obstack_init(&obst);
2161
2162         env.out      = F;
2163         env.arch_env = cg->arch_env;
2164         env.cg       = cg;
2165         env.isa      = (ia32_isa_t *)cg->arch_env->isa;
2166         env.obst     = &obst;
2167         env.linelength = 0;
2168         FIRM_DBG_REGISTER(env.mod, "firm.be.ia32.emitter");
2169
2170         /* set the global arch_env (needed by print hooks) */
2171         arch_env = cg->arch_env;
2172
2173         ia32_register_emitters();
2174
2175         ia32_emit_func_prolog(&env, irg);
2176         irg_block_walk_graph(irg, ia32_gen_labels, NULL, &env);
2177
2178         n = ARR_LEN(cg->blk_sched);
2179         for (i = 0; i < n;) {
2180                 ir_node *next_bl;
2181
2182                 block   = cg->blk_sched[i];
2183                 ++i;
2184                 next_bl = i < n ? cg->blk_sched[i] : NULL;
2185
2186                 /* set here the link. the emitter expects to find the next block here */
2187                 set_irn_link(block, next_bl);
2188                 ia32_gen_block(&env, block, last_block);
2189                 last_block = block;
2190         }
2191
2192         ia32_emit_func_epilog(&env, irg);
2193 }