helm/ocaml/cic_disambiguation/test_lexer.ml

   1 (* Copyright (C) 2004, HELM Team.
   2  *
   3  * This file is part of HELM, an Hypertextual, Electronic
   4  * Library of Mathematics, developed at the Computer Science
   5  * Department, University of Bologna, Italy.
   6  *
   7  * HELM is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU General Public License
   9  * as published by the Free Software Foundation; either version 2
  10  * of the License, or (at your option) any later version.
  11  *
  12  * HELM is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  15  * GNU General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU General Public License
  18  * along with HELM; if not, write to the Free Software
  19  * Foundation, Inc., 59 Temple Place - Suite 330, Boston,
  20  * MA  02111-1307, USA.
  21  *
  22  * For details, see the HELM World-Wide-Web page,
  23  * http://helm.cs.unibo.it/
  24  *)
  25
  26 let ic =
  27   try
  28     open_in Sys.argv.(1)
  29   with Invalid_argument _ -> stdin
  30 in
  31 let token_stream =
  32   fst (CicTextualLexer2.cic_lexer.Token.tok_func (Stream.of_channel ic))
  33 in
  34 let rec dump () =
  35   let (a,b) = Stream.next token_stream in
  36   if a = "EOI" then raise Stream.Failure;
  37   print_endline (Printf.sprintf "%s '%s'" a b);
  38   dump ()
  39 in
  40 try
  41   dump ()
  42 with Stream.Failure -> ()