examples/cppscan.rec

   1 #include <stdio.h>
   2 #include <string.h>
   3 #include <stdlib.h>
   4
   5 #define TK_Dlit 256
   6 #define TK_Slit 257
   7 #define TK_Float 258
   8 #define TK_Id 259
   9 #define TK_NameSep 260
  10 #define TK_Arrow 261
  11 #define TK_PlusPlus 262
  12 #define TK_MinusMinus 263
  13 #define TK_ArrowStar 264
  14 #define TK_DotStar 265
  15 #define TK_ShiftLeft 266
  16 #define TK_ShiftRight 267
  17 #define TK_IntegerDecimal 268
  18 #define TK_IntegerOctal 269
  19 #define TK_IntegerHex 270
  20 #define TK_EqualsEquals 271
  21 #define TK_NotEquals 272
  22 #define TK_AndAnd 273
  23 #define TK_OrOr 274
  24 #define TK_MultAssign 275
  25 #define TK_DivAssign 276
  26 #define TK_PercentAssign 277
  27 #define TK_PlusAssign 278
  28 #define TK_MinusAssign 279
  29 #define TK_AmpAssign 280
  30 #define TK_CaretAssign 281
  31 #define TK_BarAssign 282
  32 #define TK_DotDotDot 283
  33 #define TK_Whitespace 284
  34 #define TK_Comment 285
  35
  36 int line = 1, col = 1;
  37
  38 void token( int tok, char *data, int len )
  39 {
  40         printf( "<%i> ", tok );
  41         for ( int i = 0; i < len; i++ )
  42                 fputc( data[i], stdout );
  43         fputc( '\n', stdout );
  44
  45         /* Count newlines and columns. This code is here mainly for having some
  46          * code in the token routine when commenting out the above output during
  47          * performance testing. */
  48         for ( int i = 0; i < len; i ++ ) {
  49                 if ( data[i] == '\n' ) {
  50                         line += 1;
  51                         col = 1;
  52                 }
  53                 else {
  54                         col += 1;
  55                 }
  56         }
  57 }
  58
  59 #define BUFSIZE 8192
  60 char buf[BUFSIZE];
  61
  62 void fill( int n )
  63 {
  64         printf("fill(%i)\n", n);
  65         exit(1);
  66 }
  67
  68 int main()
  69 {
  70         char *start, *p = buf, *lim = buf, *marker;
  71         int len, have, want, shift;
  72         int done = 0;
  73
  74 #define YYCTYPE         char
  75
  76 #define YYCURSOR        p
  77 #define YYLIMIT         lim
  78 #define YYMARKER        marker
  79
  80 #define YYFILL(n)      { \
  81                 if ( ! done ) { \
  82                         have = lim-start; \
  83                         if ( start > buf ) { \
  84                                 shift = start-buf; \
  85                                 memmove( buf, start, have ); \
  86                                 start -= shift; \
  87                                 p -= shift; \
  88                                 lim -= shift; \
  89                                 marker -= shift; \
  90                         } \
  91                         want = BUFSIZE - have - 1; \
  92                         len = fread( lim, 1, want, stdin ); \
  93                         lim += len; \
  94                         if ( len < want ) { \
  95                                 *lim++ = 0; \
  96                                 done = 1; \
  97                         } \
  98                 } \
  99         }
 100
 101 again:
 102         start = p;
 103
 104 /*!re2c
 105
 106 ANY                             = [\000-\377];
 107 FRACTCONST              = ( [0-9]* "." [0-9]+ ) | [0-9]+ ".";
 108 EXPONENT                = [eE] [+\-]? [0-9]+;
 109 FLOATSUFFIX             = [flFL];
 110
 111         "L"? "\'" ( ANY \ [\'\\\n] | "\\" ANY )* "\'" {
 112                 token( TK_Slit, start, p-start );
 113                 goto again;
 114         }
 115
 116         "L"? "\"" ( ANY \ [\"\\\n] | "\\" ANY )* "\"" {
 117                 token( TK_Dlit, start, p-start );
 118                 goto again;
 119         }
 120
 121         [a-zA-Z_][a-zA-Z0-9_]* {
 122                 token( TK_Id, start, p-start );
 123                 goto again;
 124         }
 125
 126         ( FRACTCONST EXPONENT? FLOATSUFFIX? ) | ( [0-9]+ EXPONENT FLOATSUFFIX? ) {
 127                 token( TK_Float, start, p-start );
 128                 goto again;
 129         }
 130
 131
 132         ( "0" | [1-9][0-9]* ) [ulUL]* {
 133                 token( TK_IntegerDecimal, start, p-start );
 134                 goto again;
 135         }
 136
 137         "0" [0-9]+ [ulUL]* {
 138                 token( TK_IntegerOctal, start, p-start );
 139                 goto again;
 140         }
 141
 142         "0x" [0-9a-fA-F]+[ulUL]* {
 143                 token( TK_IntegerHex, start, p-start );
 144                 goto again;
 145         }
 146
 147         "::"    { token( TK_NameSep, start, p-start ); goto again; }
 148         "=="    { token( TK_EqualsEquals, start, p-start ); goto again; }
 149         "!="    { token( TK_NotEquals, start, p-start ); goto again; }
 150         "&&"    { token( TK_AndAnd, start, p-start ); goto again; }
 151         "||"    { token( TK_OrOr, start, p-start ); goto again; }
 152         "*="    { token( TK_MultAssign, start, p-start ); goto again; }
 153         "/="    { token( TK_DivAssign, start, p-start ); goto again; }
 154         "%="    { token( TK_PercentAssign, start, p-start ); goto again; }
 155         "+="    { token( TK_PlusAssign, start, p-start ); goto again; }
 156         "-="    { token( TK_MinusAssign, start, p-start ); goto again; }
 157         "&="    { token( TK_AmpAssign, start, p-start ); goto again; }
 158         "^="    { token( TK_CaretAssign, start, p-start ); goto again; }
 159         "|="    { token( TK_BarAssign, start, p-start ); goto again; }
 160         "++"    { token( TK_PlusPlus, start, p-start ); goto again; }
 161         "--"    { token( TK_MinusMinus, start, p-start ); goto again; }
 162         "->"    { token( TK_Arrow, start, p-start ); goto again; }
 163         "->*"   { token( TK_ArrowStar, start, p-start ); goto again; }
 164         ".*"    { token( TK_DotStar, start, p-start ); goto again; }
 165         "..."   { token( TK_DotDotDot, start, p-start ); goto again; }
 166
 167         "/*" { goto comment; }
 168         "//" (ANY\"\n")* "\n"   { goto again; }
 169         [\001-\040\177]+                { goto again; }
 170
 171         [\041-\057\072-\100\133-\140\173-\176]  {
 172                 token( *start, start, p-start );
 173                 goto again;
 174         }
 175         "\000"                                  { return 0; }
 176 */
 177
 178 comment:
 179 /*!re2c
 180         "*/"                                    { goto again; }
 181         ANY                                             { goto comment; }
 182 */
 183 }