helm/ocaml/mathql_interpreter/mQueryTLexer.mll

   1 (* Copyright (C) 2000, HELM Team.
   2  *
   3  * This file is part of HELM, an Hypertextual, Electronic
   4  * Library of Mathematics, developed at the Computer Science
   5  * Department, University of Bologna, Italy.
   6  *
   7  * HELM is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU General Public License
   9  * as published by the Free Software Foundation; either version 2
  10  * of the License, or (at your option) any later version.
  11  *
  12  * HELM is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  15  * GNU General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU General Public License
  18  * along with HELM; if not, write to the Free Software
  19  * Foundation, Inc., 59 Temple Place - Suite 330, Boston,
  20  * MA  02111-1307, USA.
  21  *
  22  * For details, see the HELM World-Wide-Web page,
  23  * http://cs.unibo.it/helm/.
  24  *)
  25
  26 (*  AUTOR: Ferruccio Guidi <fguidi@cs.unibo.it>
  27  *)
  28
  29 {
  30    open MQueryTParser
  31
  32    let debug = false
  33
  34    let out s = if debug then prerr_endline s
  35 }
  36
  37 let SPC   = [' ' '\t' '\n']+
  38 let ALPHA = ['A'-'Z' 'a'-'z' '_']
  39 let NUM   = ['0'-'9']
  40 let IDEN  = ALPHA (NUM | ALPHA)*
  41 let QSTR  = [^ '"' '\\']+
  42
  43 rule comm_token = parse
  44    | "(*"         { comm_token lexbuf; comm_token lexbuf }
  45    | "*)"         { () }
  46    | ['*' '(']    { comm_token lexbuf }
  47    | [^ '*' '(']* { comm_token lexbuf }
  48 and string_token = parse
  49    | '"'         { DQ  }
  50    | '\\' _      { STR (String.sub (Lexing.lexeme lexbuf) 1 1) }
  51    | QSTR        { STR (Lexing.lexeme lexbuf) }
  52    | eof         { EOF }
  53 and query_token = parse
  54    | "(*"        { comm_token lexbuf; query_token lexbuf }
  55    | SPC         { query_token lexbuf }
  56    | '"'         { let str = qstr string_token lexbuf in
  57                    out ("STR " ^ str); STR str }
  58    | '('         { out "LP"; LP }
  59    | ')'         { out "RP"; RP }
  60    | '{'         { out "LC"; LC }
  61    | '}'         { out "RC"; RC }
  62    | '@'         { out "AT"; AT }
  63    | '%'         { out "PC"; PC }
  64    | '$'         { out "DL"; DL }
  65    | '.'         { out "FS"; FS }
  66    | ','         { out "CM"; CM }
  67    | ';'         { out "SC"; SC }
  68    | '/'         { out "SL"; SL }
  69    | "add"       { out "ADD"   ; ADD    }
  70    | "align"     { out "ALIGN" ; ALIGN  }
  71    | "allbut"    { out "BUT"   ; BUT    }
  72    | "and"       { out "AND"   ; AND    }
  73    | "as"        { out "AS"    ; AS     }
  74    | "attr"      { out "ATTR"  ; ATTR   }
  75    | "be"        { out "BE"    ; BE     }
  76    | "count"     { out "COUNT" ; COUNT  }
  77    | "diff"      { out "DIFF"  ; DIFF   }
  78    | "distr"     { out "DISTR" ; DISTR  }
  79    | "else"      { out "ELSE"  ; ELSE   }
  80    | "empty"     { out "EMPTY" ; EMPTY  }
  81    | "eq"        { out "EQ"    ; EQ     }
  82    | "ex"        { out "EX"    ; EX     }
  83    | "false"     { out "FALSE" ; FALSE  }
  84    | "for"       { out "FOR"   ; FOR    }
  85    | "from"      { out "FROM"  ; FROM   }
  86    | "if"        { out "IF"    ; IF     }
  87    | "in"        { out "IN"    ; IN     }
  88    | "inf"       { out "INF"   ; INF    }
  89    | "intersect" { out "INTER" ; INTER  }
  90    | "inverse"   { out "INV"   ; INV    }
  91    | "istrue"    { out "IST"   ; IST    }
  92    | "isfalse"   { out "ISF"   ; ISF    }
  93    | "keep"      { out "KEEP"  ; KEEP   }
  94    | "le"        { out "LE"    ; LE     }
  95    | "let"       { out "LET"   ; LET    }
  96    | "log"       { out "LOG"   ; LOG    }
  97    | "lt"        { out "LT"    ; LT     }
  98    | "main"      { out "MAIN"  ; MAIN   }
  99    | "match"     { out "MATCH" ; MATCH  }
 100    | "meet"      { out "MEET"  ; MEET   }
 101    | "not"       { out "NOT"   ; NOT    }
 102    | "of"        { out "OF"    ; OF     }
 103    | "or"        { out "OR"    ; OR     }
 104    | "pattern"   { out "PAT"   ; PAT    }
 105    | "proj"      { out "PROJ"  ; PROJ   }
 106    | "property"  { out "PROP"  ; PROP   }
 107    | "select"    { out "SELECT"; SELECT }
 108    | "source"    { out "SOURCE"; SOURCE }
 109    | "stat"      { out "STAT"  ; STAT   }
 110    | "sub"       { out "SUB"   ; SUB    }
 111    | "subj"      { out "SUBJ"  ; SUBJ   }
 112    | "sup"       { out "SUP"   ; SUP    }
 113    | "super"     { out "SUPER" ; SUPER  }
 114    | "then"      { out "THEN"  ; THEN   }
 115    | "true"      { out "TRUE"  ; TRUE   }
 116    | "union"     { out "UNION" ; UNION  }
 117    | "where"     { out "WHERE" ; WHERE  }
 118    | "xor"       { out "XOR"   ; XOR    }
 119    | IDEN        { let id = Lexing.lexeme lexbuf in
 120                    out ("ID " ^ id); ID id }
 121    | eof         { out "EOF"   ; EOF    }
 122 and result_token = parse
 123    | SPC         { result_token lexbuf }
 124    | "(*"        { comm_token lexbuf; result_token lexbuf }
 125    | '"'         { STR (qstr string_token lexbuf) }
 126    | '/'         { out "SL"; SL }
 127    | '{'         { LC }
 128    | '}'         { RC }
 129    | ','         { CM }
 130    | ';'         { SC }
 131    | '='         { IS }
 132    | "attr"      { ATTR }
 133    | eof         { EOF  }