helm/DEVEL/mathml_editor/src/TTokenizer.hh

   1 /* This file is part of EdiTeX, an editor of mathematical
   2  * expressions based on TeX syntax.
   3  *
   4  * Copyright (C) 2002-2003 Luca Padovani <lpadovan@cs.unibo.it>,
   5  *                    2003 Paolo Marinelli <pmarinel@cs.unibo.it>.
   6  *
   7  * This library is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Lesser General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2.1 of the License, or (at your option) any later version.
  11  *
  12  * This library is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Lesser General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Lesser General Public
  18  * License along with this library; if not, write to the Free Software
  19  * Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
  20  *
  21  * For more information, please visit the project's home page
  22  * http://helm.cs.unibo.it/editex/
  23  * or send an email to <lpadovan@cs.unibo.it>
  24  */
  25
  26 #ifndef __TTokenizer_hh__
  27 #define __TTokenizer_hh__
  28
  29 #include <string>
  30 #include <vector>
  31 #include <list>
  32
  33 #include "TToken.hh"
  34 #include "APushParser.hh"
  35
  36 class TTokenizer : private APushParser
  37 {
  38 public:
  39   TTokenizer(class ALogger& l) : APushParser(l) { };
  40
  41   std::vector<TToken> tokenize(const std::string&);
  42
  43 private:
  44   virtual void reset(void);
  45   virtual void push(const TToken&);
  46   virtual std::string drop(bool = false);
  47   virtual void setCursorHint(const std::string&) { };
  48   virtual bool hideCursor(void) { return false; };
  49   virtual bool showCursor(void) { return false; };
  50
  51   std::list<TToken> tokens;
  52 };
  53
  54 #endif // __TTokenizer_hh__