refactor post_type() to be explicit about its recursion
[tinycc/miki.git] / tcc-doc.texi
blob8c91d0fbfdecc3d607fb33cdea315caf7cf6125e
1 \input texinfo @c -*- texinfo -*-
2 @c %**start of header
3 @setfilename tcc-doc.info
4 @settitle Tiny C Compiler Reference Documentation
5 @dircategory Software development
6 @direntry
7 * TCC: (tcc-doc).               The Tiny C Compiler.
8 @end direntry
9 @c %**end of header
11 @include config.texi
13 @iftex
14 @titlepage
15 @afourpaper
16 @sp 7
17 @center @titlefont{Tiny C Compiler Reference Documentation}
18 @sp 3
19 @end titlepage
20 @headings double
21 @end iftex
23 @contents
25 @node Top, Introduction, (dir), (dir)
26 @top Tiny C Compiler Reference Documentation
28 This manual documents version @value{VERSION} of the Tiny C Compiler.
30 @menu
31 * Introduction::                Introduction to tcc.
32 * Invoke::                      Invocation of tcc (command line, options).
33 * Clang::                       ANSI C and extensions.
34 * asm::                         Assembler syntax.
35 * linker::                      Output file generation and supported targets.
36 * Bounds::                      Automatic bounds-checking of C code.
37 * Libtcc::                      The libtcc library.
38 * devel::                       Guide for Developers.
39 @end menu
42 @node Introduction
43 @chapter Introduction
45 TinyCC (aka TCC) is a small but hyper fast C compiler. Unlike other C
46 compilers, it is meant to be self-relying: you do not need an
47 external assembler or linker because TCC does that for you.
49 TCC compiles so @emph{fast} that even for big projects @code{Makefile}s may
50 not be necessary.
52 TCC not only supports ANSI C, but also most of the new ISO C99
53 standard and many GNUC extensions including inline assembly.
55 TCC can also be used to make @emph{C scripts}, i.e. pieces of C source
56 that you run as a Perl or Python script. Compilation is so fast that
57 your script will be as fast as if it was an executable.
59 TCC can also automatically generate memory and bound checks
60 (@pxref{Bounds}) while allowing all C pointers operations. TCC can do
61 these checks even if non patched libraries are used.
63 With @code{libtcc}, you can use TCC as a backend for dynamic code
64 generation (@pxref{Libtcc}).
66 TCC mainly supports the i386 target on Linux and Windows. There are alpha
67 ports for the ARM (@code{arm-tcc}) and the TMS320C67xx targets
68 (@code{c67-tcc}). More information about the ARM port is available at
69 @url{http://lists.gnu.org/archive/html/tinycc-devel/2003-10/msg00044.html}.
71 For usage on Windows, see also tcc-win32.txt.
73 @node Invoke
74 @chapter Command line invocation
76 @section Quick start
78 @example
79 @c man begin SYNOPSIS
80 usage: tcc [options] [@var{infile1} @var{infile2}@dots{}] [@option{-run} @var{infile} @var{args}@dots{}]
81 @c man end
82 @end example
84 @noindent
85 @c man begin DESCRIPTION
86 TCC options are a very much like gcc options. The main difference is that TCC
87 can also execute directly the resulting program and give it runtime
88 arguments.
90 Here are some examples to understand the logic:
92 @table @code
93 @item @samp{tcc -run a.c}
94 Compile @file{a.c} and execute it directly
96 @item @samp{tcc -run a.c arg1}
97 Compile a.c and execute it directly. arg1 is given as first argument to
98 the @code{main()} of a.c.
100 @item @samp{tcc a.c -run b.c arg1}
101 Compile @file{a.c} and @file{b.c}, link them together and execute them. arg1 is given
102 as first argument to the @code{main()} of the resulting program. 
103 @ignore 
104 Because multiple C files are specified, @option{--} are necessary to clearly 
105 separate the program arguments from the TCC options.
106 @end ignore
108 @item @samp{tcc -o myprog a.c b.c}
109 Compile @file{a.c} and @file{b.c}, link them and generate the executable @file{myprog}.
111 @item @samp{tcc -o myprog a.o b.o}
112 link @file{a.o} and @file{b.o} together and generate the executable @file{myprog}.
114 @item @samp{tcc -c a.c}
115 Compile @file{a.c} and generate object file @file{a.o}.
117 @item @samp{tcc -c asmfile.S}
118 Preprocess with C preprocess and assemble @file{asmfile.S} and generate
119 object file @file{asmfile.o}.
121 @item @samp{tcc -c asmfile.s}
122 Assemble (but not preprocess) @file{asmfile.s} and generate object file
123 @file{asmfile.o}.
125 @item @samp{tcc -r -o ab.o a.c b.c}
126 Compile @file{a.c} and @file{b.c}, link them together and generate the object file @file{ab.o}.
128 @end table
130 Scripting:
132 TCC can be invoked from @emph{scripts}, just as shell scripts. You just
133 need to add @code{#!/usr/local/bin/tcc -run} at the start of your C source:
135 @example
136 #!/usr/local/bin/tcc -run
137 #include <stdio.h>
139 int main() 
141     printf("Hello World\n");
142     return 0;
144 @end example
146 TCC can read C source code from @emph{standard input} when @option{-} is used in 
147 place of @option{infile}. Example:
149 @example
150 echo 'main()@{puts("hello");@}' | tcc -run -
151 @end example
152 @c man end
154 @section Option summary
156 General Options:
158 @c man begin OPTIONS
159 @table @option
160 @item -v
161 Display current TCC version, increase verbosity.
163 @item -print-search-dirs
164 Print the name of the configured installation directory and a list
165 of program and library directories tcc will search.
167 @item -c
168 Generate an object file (@option{-o} option must also be given).
170 @item -o outfile
171 Put object file, executable, or dll into output file @file{outfile}.
173 @item -Bdir
174 Set the path where the tcc internal libraries can be found (default is
175 @file{PREFIX/lib/tcc}).
177 @item -bench
178 Output compilation statistics.
180 @item -run source [args...]
181 Compile file @var{source} and run it with the command line arguments
182 @var{args}. In order to be able to give more than one argument to a
183 script, several TCC options can be given @emph{after} the
184 @option{-run} option, separated by spaces. Example:
186 @example
187 tcc "-run -L/usr/X11R6/lib -lX11" ex4.c
188 @end example
190 In a script, it gives the following header:
192 @example
193 #!/usr/local/bin/tcc -run -L/usr/X11R6/lib -lX11
194 #include <stdlib.h>
195 int main(int argc, char **argv)
197     ...
199 @end example
201 @end table
203 Preprocessor options:
205 @table @option
206 @item -Idir
207 Specify an additional include path. Include paths are searched in the
208 order they are specified.
210 System include paths are always searched after. The default system
211 include paths are: @file{/usr/local/include}, @file{/usr/include}
212 and @file{PREFIX/lib/tcc/include}. (@file{PREFIX} is usually
213 @file{/usr} or @file{/usr/local}).
215 @item -Dsym[=val]
216 Define preprocessor symbol @samp{sym} to
217 val. If val is not present, its value is @samp{1}. Function-like macros can
218 also be defined: @option{-DF(a)=a+1}
220 @item -Usym
221 Undefine preprocessor symbol @samp{sym}.
222 @end table
224 Compilation flags:
226 Note: each of the following warning options has a negative form beginning with
227 @option{-fno-}.
229 @table @option
230 @item -funsigned-char
231 Let the @code{char} type be unsigned.
233 @item -fsigned-char
234 Let the @code{char} type be signed.
236 @item -fno-common
237 Do not generate common symbols for uninitialized data.
239 @item -fleading-underscore
240 Add a leading underscore at the beginning of each C symbol.
242 @end table
244 Warning options:
246 @table @option
247 @item -w
248 Disable all warnings.
250 @end table
252 Note: each of the following warning options has a negative form beginning with
253 @option{-Wno-}.
255 @table @option
256 @item -Wimplicit-function-declaration
257 Warn about implicit function declaration.
259 @item -Wunsupported
260 Warn about unsupported GCC features that are ignored by TCC.
262 @item -Wwrite-strings
263 Make string constants be of type @code{const char *} instead of @code{char
266 @item -Werror
267 Abort compilation if warnings are issued.
269 @item -Wall 
270 Activate all warnings, except @option{-Werror}, @option{-Wunusupported} and
271 @option{-Wwrite-strings}.
273 @end table
275 Linker options:
277 @table @option
278 @item -Ldir
279 Specify an additional static library path for the @option{-l} option. The
280 default library paths are @file{/usr/local/lib}, @file{/usr/lib} and @file{/lib}.
282 @item -lxxx
283 Link your program with dynamic library libxxx.so or static library
284 libxxx.a. The library is searched in the paths specified by the
285 @option{-L} option.
287 @item -shared
288 Generate a shared library instead of an executable (@option{-o} option
289 must also be given).
291 @item -soname name
292 set name for shared library to be used at runtime
294 @item -static
295 Generate a statically linked executable (default is a shared linked
296 executable) (@option{-o} option must also be given).
298 @item -rdynamic
299 Export global symbols to the dynamic linker. It is useful when a library
300 opened with @code{dlopen()} needs to access executable symbols.
302 @item -r
303 Generate an object file combining all input files (@option{-o} option must
304 also be given).
306 @item -Wl,-Ttext,address
307 Set the start of the .text section to @var{address}.
309 @item -Wl,--oformat,fmt
310 Use @var{fmt} as output format. The supported output formats are:
311 @table @code
312 @item elf32-i386
313 ELF output format (default)
314 @item binary
315 Binary image (only for executable output)
316 @item coff
317 COFF output format (only for executable output for TMS320C67xx target)
318 @end table
320 @item -Wl,-rpath=path
321 Set custom library search path
323 @end table
325 Debugger options:
327 @table @option
328 @item -g
329 Generate run time debug information so that you get clear run time
330 error messages: @code{ test.c:68: in function 'test5()': dereferencing
331 invalid pointer} instead of the laconic @code{Segmentation
332 fault}.
334 @item -b
335 Generate additional support code to check
336 memory allocations and array/pointer bounds. @option{-g} is implied. Note
337 that the generated code is slower and bigger in this case.
339 @item -bt N
340 Display N callers in stack traces. This is useful with @option{-g} or
341 @option{-b}.
343 @end table
345 Note: GCC options @option{-Ox}, @option{-fx} and @option{-mx} are
346 ignored.
347 @c man end
349 @ignore
351 @setfilename tcc
352 @settitle Tiny C Compiler
354 @c man begin SEEALSO
355 gcc(1)
356 @c man end
358 @c man begin AUTHOR
359 Fabrice Bellard
360 @c man end
362 @end ignore
364 @node Clang
365 @chapter C language support
367 @section ANSI C
369 TCC implements all the ANSI C standard, including structure bit fields
370 and floating point numbers (@code{long double}, @code{double}, and
371 @code{float} fully supported).
373 @section ISOC99 extensions
375 TCC implements many features of the new C standard: ISO C99. Currently
376 missing items are: complex and imaginary numbers and variable length
377 arrays.
379 Currently implemented ISOC99 features:
381 @itemize
383 @item 64 bit @code{long long} types are fully supported.
385 @item The boolean type @code{_Bool} is supported.
387 @item @code{__func__} is a string variable containing the current
388 function name.
390 @item Variadic macros: @code{__VA_ARGS__} can be used for
391    function-like macros:
392 @example
393     #define dprintf(level, __VA_ARGS__) printf(__VA_ARGS__)
394 @end example
396 @noindent
397 @code{dprintf} can then be used with a variable number of parameters.
399 @item Declarations can appear anywhere in a block (as in C++).
401 @item Array and struct/union elements can be initialized in any order by
402   using designators:
403 @example
404     struct @{ int x, y; @} st[10] = @{ [0].x = 1, [0].y = 2 @};
406     int tab[10] = @{ 1, 2, [5] = 5, [9] = 9@};
407 @end example
408     
409 @item Compound initializers are supported:
410 @example
411     int *p = (int [])@{ 1, 2, 3 @};
412 @end example
413 to initialize a pointer pointing to an initialized array. The same
414 works for structures and strings.
416 @item Hexadecimal floating point constants are supported:
417 @example
418           double d = 0x1234p10;
419 @end example
421 @noindent
422 is the same as writing 
423 @example
424           double d = 4771840.0;
425 @end example
427 @item @code{inline} keyword is ignored.
429 @item @code{restrict} keyword is ignored.
430 @end itemize
432 @section GNU C extensions
434 TCC implements some GNU C extensions:
436 @itemize
438 @item array designators can be used without '=': 
439 @example
440     int a[10] = @{ [0] 1, [5] 2, 3, 4 @};
441 @end example
443 @item Structure field designators can be a label: 
444 @example
445     struct @{ int x, y; @} st = @{ x: 1, y: 1@};
446 @end example
447 instead of
448 @example
449     struct @{ int x, y; @} st = @{ .x = 1, .y = 1@};
450 @end example
452 @item @code{\e} is ASCII character 27.
454 @item case ranges : ranges can be used in @code{case}s:
455 @example
456     switch(a) @{
457     case 1 @dots{} 9:
458           printf("range 1 to 9\n");
459           break;
460     default:
461           printf("unexpected\n");
462           break;
463     @}
464 @end example
466 @cindex aligned attribute
467 @cindex packed attribute
468 @cindex section attribute
469 @cindex unused attribute
470 @cindex cdecl attribute
471 @cindex stdcall attribute
472 @cindex regparm attribute
473 @cindex dllexport attribute
475 @item The keyword @code{__attribute__} is handled to specify variable or
476 function attributes. The following attributes are supported:
477   @itemize
479   @item @code{aligned(n)}: align a variable or a structure field to n bytes
480 (must be a power of two).
482   @item @code{packed}: force alignment of a variable or a structure field to
483   1.
485   @item @code{section(name)}: generate function or data in assembly section
486 name (name is a string containing the section name) instead of the default
487 section.
489   @item @code{unused}: specify that the variable or the function is unused.
491   @item @code{cdecl}: use standard C calling convention (default).
493   @item @code{stdcall}: use Pascal-like calling convention.
495   @item @code{regparm(n)}: use fast i386 calling convention. @var{n} must be
496 between 1 and 3. The first @var{n} function parameters are respectively put in
497 registers @code{%eax}, @code{%edx} and @code{%ecx}.
499   @item @code{dllexport}: export function from dll/executable (win32 only)
501   @end itemize
503 Here are some examples:
504 @example
505     int a __attribute__ ((aligned(8), section(".mysection")));
506 @end example
508 @noindent
509 align variable @code{a} to 8 bytes and put it in section @code{.mysection}.
511 @example
512     int my_add(int a, int b) __attribute__ ((section(".mycodesection"))) 
513     @{
514         return a + b;
515     @}
516 @end example
518 @noindent
519 generate function @code{my_add} in section @code{.mycodesection}.
521 @item GNU style variadic macros:
522 @example
523     #define dprintf(fmt, args@dots{}) printf(fmt, ## args)
525     dprintf("no arg\n");
526     dprintf("one arg %d\n", 1);
527 @end example
529 @item @code{__FUNCTION__} is interpreted as C99 @code{__func__} 
530 (so it has not exactly the same semantics as string literal GNUC
531 where it is a string literal).
533 @item The @code{__alignof__} keyword can be used as @code{sizeof} 
534 to get the alignment of a type or an expression.
536 @item The @code{typeof(x)} returns the type of @code{x}. 
537 @code{x} is an expression or a type.
539 @item Computed gotos: @code{&&label} returns a pointer of type 
540 @code{void *} on the goto label @code{label}. @code{goto *expr} can be
541 used to jump on the pointer resulting from @code{expr}.
543 @item Inline assembly with asm instruction:
544 @cindex inline assembly
545 @cindex assembly, inline
546 @cindex __asm__
547 @example
548 static inline void * my_memcpy(void * to, const void * from, size_t n)
550 int d0, d1, d2;
551 __asm__ __volatile__(
552         "rep ; movsl\n\t"
553         "testb $2,%b4\n\t"
554         "je 1f\n\t"
555         "movsw\n"
556         "1:\ttestb $1,%b4\n\t"
557         "je 2f\n\t"
558         "movsb\n"
559         "2:"
560         : "=&c" (d0), "=&D" (d1), "=&S" (d2)
561         :"0" (n/4), "q" (n),"1" ((long) to),"2" ((long) from)
562         : "memory");
563 return (to);
565 @end example
567 @noindent
568 @cindex gas
569 TCC includes its own x86 inline assembler with a @code{gas}-like (GNU
570 assembler) syntax. No intermediate files are generated. GCC 3.x named
571 operands are supported.
573 @item @code{__builtin_types_compatible_p()} and @code{__builtin_constant_p()} 
574 are supported.
576 @item @code{#pragma pack} is supported for win32 compatibility.
578 @end itemize
580 @section TinyCC extensions
582 @itemize
584 @item @code{__TINYC__} is a predefined macro to @code{1} to
585 indicate that you use TCC.
587 @item @code{#!} at the start of a line is ignored to allow scripting.
589 @item Binary digits can be entered (@code{0b101} instead of
590 @code{5}).
592 @item @code{__BOUNDS_CHECKING_ON} is defined if bound checking is activated.
594 @end itemize
596 @node asm
597 @chapter TinyCC Assembler
599 Since version 0.9.16, TinyCC integrates its own assembler. TinyCC
600 assembler supports a gas-like syntax (GNU assembler). You can
601 desactivate assembler support if you want a smaller TinyCC executable
602 (the C compiler does not rely on the assembler).
604 TinyCC Assembler is used to handle files with @file{.S} (C
605 preprocessed assembler) and @file{.s} extensions. It is also used to
606 handle the GNU inline assembler with the @code{asm} keyword.
608 @section Syntax
610 TinyCC Assembler supports most of the gas syntax. The tokens are the
611 same as C.
613 @itemize
615 @item C and C++ comments are supported.
617 @item Identifiers are the same as C, so you cannot use '.' or '$'.
619 @item Only 32 bit integer numbers are supported.
621 @end itemize
623 @section Expressions
625 @itemize
627 @item Integers in decimal, octal and hexa are supported.
629 @item Unary operators: +, -, ~.
631 @item Binary operators in decreasing priority order:
633 @enumerate
634 @item *, /, %
635 @item &, |, ^
636 @item +, -
637 @end enumerate
639 @item A value is either an absolute number or a label plus an offset. 
640 All operators accept absolute values except '+' and '-'. '+' or '-' can be
641 used to add an offset to a label. '-' supports two labels only if they
642 are the same or if they are both defined and in the same section.
644 @end itemize
646 @section Labels
648 @itemize
650 @item All labels are considered as local, except undefined ones.
652 @item Numeric labels can be used as local @code{gas}-like labels. 
653 They can be defined several times in the same source. Use 'b'
654 (backward) or 'f' (forward) as suffix to reference them:
656 @example
657  1:
658       jmp 1b /* jump to '1' label before */
659       jmp 1f /* jump to '1' label after */
660  1:
661 @end example
663 @end itemize
665 @section Directives
666 @cindex assembler directives
667 @cindex directives, assembler
668 @cindex align directive
669 @cindex skip directive
670 @cindex space directive
671 @cindex byte directive
672 @cindex word directive
673 @cindex short directive
674 @cindex int directive
675 @cindex long directive
676 @cindex quad directive
677 @cindex globl directive
678 @cindex global directive
679 @cindex section directive
680 @cindex text directive
681 @cindex data directive
682 @cindex bss directive
683 @cindex fill directive
684 @cindex org directive
685 @cindex previous directive
686 @cindex string directive
687 @cindex asciz directive
688 @cindex ascii directive
690 All directives are preceeded by a '.'. The following directives are
691 supported:
693 @itemize
694 @item .align n[,value]
695 @item .skip n[,value]
696 @item .space n[,value]
697 @item .byte value1[,...]
698 @item .word value1[,...]
699 @item .short value1[,...]
700 @item .int value1[,...]
701 @item .long value1[,...]
702 @item .quad immediate_value1[,...]
703 @item .globl symbol
704 @item .global symbol
705 @item .section section
706 @item .text
707 @item .data
708 @item .bss
709 @item .fill repeat[,size[,value]]
710 @item .org n
711 @item .previous
712 @item .string string[,...]
713 @item .asciz string[,...]
714 @item .ascii string[,...]
715 @end itemize
717 @section X86 Assembler
718 @cindex assembler
720 All X86 opcodes are supported. Only ATT syntax is supported (source
721 then destination operand order). If no size suffix is given, TinyCC
722 tries to guess it from the operand sizes.
724 Currently, MMX opcodes are supported but not SSE ones.
726 @node linker
727 @chapter TinyCC Linker
728 @cindex linker
730 @section ELF file generation
731 @cindex ELF
733 TCC can directly output relocatable ELF files (object files),
734 executable ELF files and dynamic ELF libraries without relying on an
735 external linker.
737 Dynamic ELF libraries can be output but the C compiler does not generate
738 position independent code (PIC). It means that the dynamic library
739 code generated by TCC cannot be factorized among processes yet.
741 TCC linker eliminates unreferenced object code in libraries. A single pass is
742 done on the object and library list, so the order in which object files and
743 libraries are specified is important (same constraint as GNU ld). No grouping
744 options (@option{--start-group} and @option{--end-group}) are supported.
746 @section ELF file loader
748 TCC can load ELF object files, archives (.a files) and dynamic
749 libraries (.so).
751 @section PE-i386 file generation
752 @cindex PE-i386
754 TCC for Windows supports the native Win32 executable file format (PE-i386).  It
755 generates EXE files (console and gui) and DLL files.
757 For usage on Windows, see also tcc-win32.txt.
759 @section GNU Linker Scripts
760 @cindex scripts, linker
761 @cindex linker scripts
762 @cindex GROUP, linker command
763 @cindex FILE, linker command
764 @cindex OUTPUT_FORMAT, linker command
765 @cindex TARGET, linker command
767 Because on many Linux systems some dynamic libraries (such as
768 @file{/usr/lib/libc.so}) are in fact GNU ld link scripts (horrible!),
769 the TCC linker also supports a subset of GNU ld scripts.
771 The @code{GROUP} and @code{FILE} commands are supported. @code{OUTPUT_FORMAT}
772 and @code{TARGET} are ignored.
774 Example from @file{/usr/lib/libc.so}:
775 @example
776 /* GNU ld script
777    Use the shared library, but some functions are only in
778    the static library, so try that secondarily.  */
779 GROUP ( /lib/libc.so.6 /usr/lib/libc_nonshared.a )
780 @end example
782 @node Bounds
783 @chapter TinyCC Memory and Bound checks
784 @cindex bound checks
785 @cindex memory checks
787 This feature is activated with the @option{-b} (@pxref{Invoke}).
789 Note that pointer size is @emph{unchanged} and that code generated
790 with bound checks is @emph{fully compatible} with unchecked
791 code. When a pointer comes from unchecked code, it is assumed to be
792 valid. Even very obscure C code with casts should work correctly.
794 For more information about the ideas behind this method, see
795 @url{http://www.doc.ic.ac.uk/~phjk/BoundsChecking.html}.
797 Here are some examples of caught errors:
799 @table @asis
801 @item Invalid range with standard string function:
802 @example
804     char tab[10];
805     memset(tab, 0, 11);
807 @end example
809 @item Out of bounds-error in global or local arrays:
810 @example
812     int tab[10];
813     for(i=0;i<11;i++) @{
814         sum += tab[i];
815     @}
817 @end example
819 @item Out of bounds-error in malloc'ed data:
820 @example
822     int *tab;
823     tab = malloc(20 * sizeof(int));
824     for(i=0;i<21;i++) @{
825         sum += tab4[i];
826     @}
827     free(tab);
829 @end example
831 @item Access of freed memory:
832 @example
834     int *tab;
835     tab = malloc(20 * sizeof(int));
836     free(tab);
837     for(i=0;i<20;i++) @{
838         sum += tab4[i];
839     @}
841 @end example
843 @item Double free:
844 @example
846     int *tab;
847     tab = malloc(20 * sizeof(int));
848     free(tab);
849     free(tab);
851 @end example
853 @end table
855 @node Libtcc
856 @chapter The @code{libtcc} library
858 The @code{libtcc} library enables you to use TCC as a backend for
859 dynamic code generation. 
861 Read the @file{libtcc.h} to have an overview of the API. Read
862 @file{libtcc_test.c} to have a very simple example.
864 The idea consists in giving a C string containing the program you want
865 to compile directly to @code{libtcc}. Then you can access to any global
866 symbol (function or variable) defined.
868 @node devel
869 @chapter Developer's guide
871 This chapter gives some hints to understand how TCC works. You can skip
872 it if you do not intend to modify the TCC code.
874 @section File reading
876 The @code{BufferedFile} structure contains the context needed to read a
877 file, including the current line number. @code{tcc_open()} opens a new
878 file and @code{tcc_close()} closes it. @code{inp()} returns the next
879 character.
881 @section Lexer
883 @code{next()} reads the next token in the current
884 file. @code{next_nomacro()} reads the next token without macro
885 expansion.
887 @code{tok} contains the current token (see @code{TOK_xxx})
888 constants. Identifiers and keywords are also keywords. @code{tokc}
889 contains additional infos about the token (for example a constant value
890 if number or string token).
892 @section Parser
894 The parser is hardcoded (yacc is not necessary). It does only one pass,
895 except:
897 @itemize
899 @item For initialized arrays with unknown size, a first pass 
900 is done to count the number of elements.
902 @item For architectures where arguments are evaluated in 
903 reverse order, a first pass is done to reverse the argument order.
905 @end itemize
907 @section Types
909 The types are stored in a single 'int' variable. It was choosen in the
910 first stages of development when tcc was much simpler. Now, it may not
911 be the best solution.
913 @example
914 #define VT_INT        0  /* integer type */
915 #define VT_BYTE       1  /* signed byte type */
916 #define VT_SHORT      2  /* short type */
917 #define VT_VOID       3  /* void type */
918 #define VT_PTR        4  /* pointer */
919 #define VT_ENUM       5  /* enum definition */
920 #define VT_FUNC       6  /* function type */
921 #define VT_STRUCT     7  /* struct/union definition */
922 #define VT_FLOAT      8  /* IEEE float */
923 #define VT_DOUBLE     9  /* IEEE double */
924 #define VT_LDOUBLE   10  /* IEEE long double */
925 #define VT_BOOL      11  /* ISOC99 boolean type */
926 #define VT_LLONG     12  /* 64 bit integer */
927 #define VT_LONG      13  /* long integer (NEVER USED as type, only
928                             during parsing) */
929 #define VT_BTYPE      0x000f /* mask for basic type */
930 #define VT_UNSIGNED   0x0010  /* unsigned type */
931 #define VT_ARRAY      0x0020  /* array type (also has VT_PTR) */
932 #define VT_BITFIELD   0x0040  /* bitfield modifier */
934 #define VT_STRUCT_SHIFT 17   /* structure/enum name shift (14 bits left) */
935 @end example
937 When a reference to another type is needed (for pointers, functions and
938 structures), the @code{32 - VT_STRUCT_SHIFT} high order bits are used to
939 store an identifier reference.
941 The @code{VT_UNSIGNED} flag can be set for chars, shorts, ints and long
942 longs.
944 Arrays are considered as pointers @code{VT_PTR} with the flag
945 @code{VT_ARRAY} set.
947 The @code{VT_BITFIELD} flag can be set for chars, shorts, ints and long
948 longs. If it is set, then the bitfield position is stored from bits
949 VT_STRUCT_SHIFT to VT_STRUCT_SHIFT + 5 and the bit field size is stored
950 from bits VT_STRUCT_SHIFT + 6 to VT_STRUCT_SHIFT + 11.
952 @code{VT_LONG} is never used except during parsing.
954 During parsing, the storage of an object is also stored in the type
955 integer:
957 @example
958 #define VT_EXTERN  0x00000080  /* extern definition */
959 #define VT_STATIC  0x00000100  /* static variable */
960 #define VT_TYPEDEF 0x00000200  /* typedef definition */
961 @end example
963 @section Symbols
965 All symbols are stored in hashed symbol stacks. Each symbol stack
966 contains @code{Sym} structures.
968 @code{Sym.v} contains the symbol name (remember
969 an idenfier is also a token, so a string is never necessary to store
970 it). @code{Sym.t} gives the type of the symbol. @code{Sym.r} is usually
971 the register in which the corresponding variable is stored. @code{Sym.c} is
972 usually a constant associated to the symbol.
974 Four main symbol stacks are defined:
976 @table @code
978 @item define_stack
979 for the macros (@code{#define}s).
981 @item global_stack
982 for the global variables, functions and types.
984 @item local_stack
985 for the local variables, functions and types.
987 @item global_label_stack
988 for the local labels (for @code{goto}).
990 @item label_stack
991 for GCC block local labels (see the @code{__label__} keyword).
993 @end table
995 @code{sym_push()} is used to add a new symbol in the local symbol
996 stack. If no local symbol stack is active, it is added in the global
997 symbol stack.
999 @code{sym_pop(st,b)} pops symbols from the symbol stack @var{st} until
1000 the symbol @var{b} is on the top of stack. If @var{b} is NULL, the stack
1001 is emptied.
1003 @code{sym_find(v)} return the symbol associated to the identifier
1004 @var{v}. The local stack is searched first from top to bottom, then the
1005 global stack.
1007 @section Sections
1009 The generated code and datas are written in sections. The structure
1010 @code{Section} contains all the necessary information for a given
1011 section. @code{new_section()} creates a new section. ELF file semantics
1012 is assumed for each section.
1014 The following sections are predefined:
1016 @table @code
1018 @item text_section
1019 is the section containing the generated code. @var{ind} contains the
1020 current position in the code section.
1022 @item data_section
1023 contains initialized data
1025 @item bss_section
1026 contains uninitialized data
1028 @item bounds_section
1029 @itemx lbounds_section
1030 are used when bound checking is activated
1032 @item stab_section
1033 @itemx stabstr_section
1034 are used when debugging is actived to store debug information
1036 @item symtab_section
1037 @itemx strtab_section
1038 contain the exported symbols (currently only used for debugging).
1040 @end table
1042 @section Code generation
1043 @cindex code generation
1045 @subsection Introduction
1047 The TCC code generator directly generates linked binary code in one
1048 pass. It is rather unusual these days (see gcc for example which
1049 generates text assembly), but it can be very fast and surprisingly
1050 little complicated.
1052 The TCC code generator is register based. Optimization is only done at
1053 the expression level. No intermediate representation of expression is
1054 kept except the current values stored in the @emph{value stack}.
1056 On x86, three temporary registers are used. When more registers are
1057 needed, one register is spilled into a new temporary variable on the stack.
1059 @subsection The value stack
1060 @cindex value stack, introduction
1062 When an expression is parsed, its value is pushed on the value stack
1063 (@var{vstack}). The top of the value stack is @var{vtop}. Each value
1064 stack entry is the structure @code{SValue}.
1066 @code{SValue.t} is the type. @code{SValue.r} indicates how the value is
1067 currently stored in the generated code. It is usually a CPU register
1068 index (@code{REG_xxx} constants), but additional values and flags are
1069 defined:
1071 @example
1072 #define VT_CONST     0x00f0
1073 #define VT_LLOCAL    0x00f1
1074 #define VT_LOCAL     0x00f2
1075 #define VT_CMP       0x00f3
1076 #define VT_JMP       0x00f4
1077 #define VT_JMPI      0x00f5
1078 #define VT_LVAL      0x0100
1079 #define VT_SYM       0x0200
1080 #define VT_MUSTCAST  0x0400
1081 #define VT_MUSTBOUND 0x0800
1082 #define VT_BOUNDED   0x8000
1083 #define VT_LVAL_BYTE     0x1000
1084 #define VT_LVAL_SHORT    0x2000
1085 #define VT_LVAL_UNSIGNED 0x4000
1086 #define VT_LVAL_TYPE     (VT_LVAL_BYTE | VT_LVAL_SHORT | VT_LVAL_UNSIGNED)
1087 @end example
1089 @table @code
1091 @item VT_CONST
1092 indicates that the value is a constant. It is stored in the union
1093 @code{SValue.c}, depending on its type.
1095 @item VT_LOCAL
1096 indicates a local variable pointer at offset @code{SValue.c.i} in the
1097 stack.
1099 @item VT_CMP
1100 indicates that the value is actually stored in the CPU flags (i.e. the
1101 value is the consequence of a test). The value is either 0 or 1. The
1102 actual CPU flags used is indicated in @code{SValue.c.i}. 
1104 If any code is generated which destroys the CPU flags, this value MUST be
1105 put in a normal register.
1107 @item VT_JMP
1108 @itemx VT_JMPI
1109 indicates that the value is the consequence of a conditional jump. For VT_JMP,
1110 it is 1 if the jump is taken, 0 otherwise. For VT_JMPI it is inverted.
1112 These values are used to compile the @code{||} and @code{&&} logical
1113 operators.
1115 If any code is generated, this value MUST be put in a normal
1116 register. Otherwise, the generated code won't be executed if the jump is
1117 taken.
1119 @item VT_LVAL
1120 is a flag indicating that the value is actually an lvalue (left value of
1121 an assignment). It means that the value stored is actually a pointer to
1122 the wanted value. 
1124 Understanding the use @code{VT_LVAL} is very important if you want to
1125 understand how TCC works.
1127 @item VT_LVAL_BYTE
1128 @itemx VT_LVAL_SHORT
1129 @itemx VT_LVAL_UNSIGNED
1130 if the lvalue has an integer type, then these flags give its real
1131 type. The type alone is not enough in case of cast optimisations.
1133 @item VT_LLOCAL
1134 is a saved lvalue on the stack. @code{VT_LLOCAL} should be eliminated
1135 ASAP because its semantics are rather complicated.
1137 @item VT_MUSTCAST
1138 indicates that a cast to the value type must be performed if the value
1139 is used (lazy casting).
1141 @item VT_SYM
1142 indicates that the symbol @code{SValue.sym} must be added to the constant.
1144 @item VT_MUSTBOUND
1145 @itemx VT_BOUNDED
1146 are only used for optional bound checking.
1148 @end table
1150 @subsection Manipulating the value stack
1151 @cindex value stack
1153 @code{vsetc()} and @code{vset()} pushes a new value on the value
1154 stack. If the previous @var{vtop} was stored in a very unsafe place(for
1155 example in the CPU flags), then some code is generated to put the
1156 previous @var{vtop} in a safe storage.
1158 @code{vpop()} pops @var{vtop}. In some cases, it also generates cleanup
1159 code (for example if stacked floating point registers are used as on
1160 x86).
1162 The @code{gv(rc)} function generates code to evaluate @var{vtop} (the
1163 top value of the stack) into registers. @var{rc} selects in which
1164 register class the value should be put. @code{gv()} is the @emph{most
1165 important function} of the code generator.
1167 @code{gv2()} is the same as @code{gv()} but for the top two stack
1168 entries.
1170 @subsection CPU dependent code generation
1171 @cindex CPU dependent
1172 See the @file{i386-gen.c} file to have an example.
1174 @table @code
1176 @item load()
1177 must generate the code needed to load a stack value into a register.
1179 @item store()
1180 must generate the code needed to store a register into a stack value
1181 lvalue.
1183 @item gfunc_start()
1184 @itemx gfunc_param()
1185 @itemx gfunc_call()
1186 should generate a function call
1188 @item gfunc_prolog()
1189 @itemx gfunc_epilog()
1190 should generate a function prolog/epilog.
1192 @item gen_opi(op)
1193 must generate the binary integer operation @var{op} on the two top
1194 entries of the stack which are guaranted to contain integer types.
1196 The result value should be put on the stack.
1198 @item gen_opf(op)
1199 same as @code{gen_opi()} for floating point operations. The two top
1200 entries of the stack are guaranted to contain floating point values of
1201 same types.
1203 @item gen_cvt_itof()
1204 integer to floating point conversion.
1206 @item gen_cvt_ftoi()
1207 floating point to integer conversion.
1209 @item gen_cvt_ftof()
1210 floating point to floating point of different size conversion.
1212 @item gen_bounded_ptr_add()
1213 @item gen_bounded_ptr_deref()
1214 are only used for bounds checking.
1216 @end table
1218 @section Optimizations done
1219 @cindex optimizations
1220 @cindex constant propagation
1221 @cindex strength reduction
1222 @cindex comparison operators
1223 @cindex caching processor flags
1224 @cindex flags, caching
1225 @cindex jump optimization
1226 Constant propagation is done for all operations. Multiplications and
1227 divisions are optimized to shifts when appropriate. Comparison
1228 operators are optimized by maintaining a special cache for the
1229 processor flags. &&, || and ! are optimized by maintaining a special
1230 'jump target' value. No other jump optimization is currently performed
1231 because it would require to store the code in a more abstract fashion.
1233 @unnumbered Concept Index
1234 @printindex cp
1236 @bye
1238 @c Local variables:
1239 @c fill-column: 78
1240 @c texinfo-column-for-description: 32
1241 @c End: