helm/ocaml/mathql_test/mQGTopLexer.mll

   1 (* Copyright (C) 2000, HELM Team.
   2  *
   3  * This file is part of HELM, an Hypertextual, Electronic
   4  * Library of Mathematics, developed at the Computer Science
   5  * Department, University of Bologna, Italy.
   6  *
   7  * HELM is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU General Public License
   9  * as published by the Free Software Foundation; either version 2
  10  * of the License, or (at your option) any later version.
  11  *
  12  * HELM is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  15  * GNU General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU General Public License
  18  * along with HELM; if not, write to the Free Software
  19  * Foundation, Inc., 59 Temple Place - Suite 330, Boston,
  20  * MA  02111-1307, USA.
  21  *
  22  * For details, see the HELM World-Wide-Web page,
  23  * http://cs.unibo.it/helm/.
  24  *)
  25
  26 {
  27    open MQGTopParser
  28
  29    let debug = false
  30
  31    let out s = if debug then prerr_endline s
  32 }
  33
  34 let SPC   = [' ' '\t' '\n']+
  35 let ALPHA = ['A'-'Z' 'a'-'z' '_']
  36 let NUM   = ['0'-'9']
  37 let IDEN  = ALPHA (NUM | ALPHA)*
  38 let QSTR  = [^ '"' '\\']+
  39
  40 rule comm_token = parse
  41    | "(*"         { comm_token lexbuf; comm_token lexbuf }
  42    | "*)"         { () }
  43    | ['*' '(']    { comm_token lexbuf }
  44    | [^ '*' '(']* { comm_token lexbuf }
  45 and string_token = parse
  46    | '"'         { DQ  }
  47    | '\\' _      { STR (String.sub (Lexing.lexeme lexbuf) 1 1) }
  48    | QSTR        { STR (Lexing.lexeme lexbuf) }
  49    | eof         { EOF }
  50 and spec_token = parse
  51    | "(*"        { comm_token lexbuf; spec_token lexbuf }
  52    | SPC         { spec_token lexbuf }
  53    | '"'         { let str = qstr string_token lexbuf in
  54                    out ("STR " ^ str); STR str }
  55    | '{'         { out "LC"; LC }
  56    | '}'         { out "RC"; RC }
  57    | ','         { out "CM"; CM }
  58    | '$'         { out "DL"; DL }
  59    | "not"       { out "NOT"   ; NOT    }
  60    | "mustobj"   { out "MOBJ"  ; MOBJ   }
  61    | "mustsort"  { out "MSORT" ; MSORT  }
  62    | "mustrel"   { out "MREL"  ; MREL   }
  63    | "sonlyobj"  { out "SOBJ"  ; SOBJ   }
  64    | "sonlysort" { out "SSORT" ; SSORT  }
  65    | "onlyrel"   { out "OREL"  ; OREL   }
  66    | "wonlyobj"  { out "WOBJ"  ; WOBJ   }
  67    | "wonlysort" { out "WSORT" ; WSORT  }
  68    | IDEN        { let id = Lexing.lexeme lexbuf in
  69                    out ("ID " ^ id); ID id }
  70    | eof         { EOF }