]> matita.cs.unibo.it Git - helm.git/blobdiff - helm/matita/matitaScript.ml
ocaml 3.09 transition
[helm.git] / helm / matita / matitaScript.ml
index af38ff8c2c86589f306cfcdcebb2cf644f12a7ff..34e0408c598f281aa0d6bee4417bc3ad5493e407 100644 (file)
 open Printf
 open MatitaTypes
 
-let debug = true
-let debug_print = if  debug then prerr_endline else ignore
+module TA = GrafiteAst
+
+let debug = false
+let debug_print = if debug then prerr_endline else ignore
 
   (** raised when one of the script margins (top or bottom) is reached *)
 exception Margin
@@ -36,15 +38,16 @@ let safe_substring s i j =
   try String.sub s i j with Invalid_argument _ -> assert false
 
 let heading_nl_RE = Pcre.regexp "^\\s*\n\\s*"
+let heading_nl_RE' = Pcre.regexp "^(\\s*\n\\s*)((.|\n)*)"
 let only_dust_RE = Pcre.regexp "^(\\s|\n|%%[^\n]*\n)*$"
 let multiline_RE = Pcre.regexp "^\n[^\n]+$"
 let newline_RE = Pcre.regexp "\n"
  
 let comment str =
   if Pcre.pmatch ~rex:multiline_RE str then
-    "\n(** " ^ (Pcre.replace ~rex:newline_RE str) ^ " **)"
+    "\n(** " ^ (Pcre.replace ~rex:newline_RE str) ^ " *)"
   else
-    "\n(**\n" ^ str ^ "\n**)"
+    "\n(**\n" ^ str ^ "\n*)"
                      
 let first_line s =
   let s = Pcre.replace ~rex:heading_nl_RE s in
@@ -53,47 +56,78 @@ let first_line s =
     String.sub s 0 nl_pos
   with Not_found -> s
 
-let prepend_text header base =
-  if Pcre.pmatch ~rex:heading_nl_RE base then
-    sprintf "\n%s%s" header base
-  else
-    sprintf "%s\n%s" header base
-
   (** creates a statement AST for the Goal tactic, e.g. "goal 7" *)
 let goal_ast n =
-  let module A = TacticAst in
-  let loc = CicAst.dummy_floc in
-  A.Executable (loc, A.Tactical (loc, A.Tactic (loc, A.Goal (loc, n))))
-
-let eval_with_engine status user_goal parsed_text st =
-  let module TA = TacticAst in
-  let module TAPp = TacticAstPp in
+  let module A = GrafiteAst in
+  let loc = DisambiguateTypes.dummy_floc in
+  A.Executable (loc, A.Tactical (loc,
+    A.Tactic (loc, A.Goal (loc, n)),
+    Some (A.Dot loc)))
+
+type guistuff = {
+  mathviewer:MatitaTypes.mathViewer;
+  urichooser: UriManager.uri list -> UriManager.uri list;
+  ask_confirmation: title:string -> message:string -> [`YES | `NO | `CANCEL];
+  develcreator: containing:string option -> unit;
+  mutable filenamedata: string option * MatitamakeLib.development option
+}
+
+let eval_with_engine guistuff status user_goal parsed_text st =
+  let module TAPp = GrafiteAstPp in
+  let include_ = 
+    match guistuff.filenamedata with
+    | None,None -> []
+    | None,Some devel -> [MatitamakeLib.root_for_development devel ]
+    | Some f,_ -> 
+        match MatitamakeLib.development_for_dir (Filename.dirname f) with
+        | None -> []
+        | Some devel -> [MatitamakeLib.root_for_development devel ]
+  in
   let parsed_text_length = String.length parsed_text in
   let loc, ex = 
-    match st with TA.Executable (loc,ex) -> loc, ex | _ -> assert false 
-  in
-  let goal_changed = ref false in
-  let status =
+    match st with TA.Executable (loc,ex) -> loc, ex | _ -> assert false in
+  let initial_space,parsed_text =
+   try
+    let pieces = Pcre.extract ~rex:heading_nl_RE' parsed_text in
+     pieces.(1), pieces.(2)
+   with
+    Not_found -> "", parsed_text in
+  (* we add the goal command if needed *)
+  let inital_space,new_status,new_status_and_text_list' =
     match status.proof_status with
-      | Incomplete_proof (_, goal) when goal <> user_goal ->
-          goal_changed := true;
-          MatitaEngine.eval_ast 
+(*     | Incomplete_proof { stack = stack }
+      when not (List.mem user_goal (Continuationals.head_goals stack)) ->
+        let status =
+          MatitaEngine.eval_ast ~include_paths:include_
             ~do_heavy_checks:true status (goal_ast user_goal)
-      | _ -> status
+        in
+        let initial_space = if initial_space = "" then "\n" else initial_space
+        in
+        "\n", status,
+        [ status,
+          initial_space ^ TAPp.pp_tactical (TA.Select (loc, [user_goal])) ] *)
+      | _ -> initial_space,status,[] in
+  let new_status = 
+    MatitaEngine.eval_ast 
+      ~include_paths:include_ ~do_heavy_checks:true new_status st 
   in
-  let new_status = MatitaEngine.eval_ast ~do_heavy_checks:true status st in
   let new_aliases =
     match ex with
       | TA.Command (_, TA.Alias _)
-      | TA.Command (_, TA.Include _) -> DisambiguateTypes.Environment.empty
+      | TA.Command (_, TA.Include _)
+      | TA.Command (_, TA.Interpretation _) -> []
       | _ -> MatitaSync.alias_diff ~from:status new_status
   in
-  (* we remove the defined object since we consider them "automathic aliases" *)
-  let new_aliases = 
+  (* we remove the defined object since we consider them "automatic aliases" *)
+  let dummy_st =
+    TA.Comment (DisambiguateTypes.dummy_floc,
+      TA.Note (DisambiguateTypes.dummy_floc, ""))
+  in
+  let initial_space,status,new_status_and_text_list_rev = 
     let module DTE = DisambiguateTypes.Environment in
     let module UM = UriManager in
-    DTE.fold (
-      fun k ((v,_) as value) acc -> 
+    List.fold_left (
+      fun (initial_space,status,acc) (k,((v,_) as value)) -> 
         let b = 
           try
             let v = UM.strip_xpointer (UM.uri_of_string v) in
@@ -101,44 +135,96 @@ let eval_with_engine status user_goal parsed_text st =
           with UM.IllFormedUri _ -> false
         in
         if b then 
-          acc
+          initial_space,status,acc
         else
-          DTE.add k value acc
-    ) new_aliases DTE.empty
-  in
-  let new_text =
-    if DisambiguateTypes.Environment.is_empty new_aliases then
-      parsed_text
-    else
-      prepend_text (CicTextualParser2.EnvironmentP3.to_string new_aliases)
-        parsed_text
+         let new_text =
+          let initial_space =
+           if initial_space = "" then "\n" else initial_space in
+            initial_space ^
+             DisambiguatePp.pp_environment
+              (DisambiguateTypes.Environment.add k value
+                DisambiguateTypes.Environment.empty) in
+         let new_status =
+          MatitaSync.set_proof_aliases status [k,value]
+         in
+          "\n",new_status,((new_status, (new_text, dummy_st))::acc)
+    ) (initial_space,status,[]) new_aliases in
+  let parsed_text = initial_space ^ parsed_text in
+  let res =
+   List.rev new_status_and_text_list_rev @ new_status_and_text_list' @
+    [new_status, (parsed_text, st)]
   in
-  let new_text =
-    if !goal_changed then
-      prepend_text
-        (TAPp.pp_tactic (TA.Goal (loc, user_goal))(* ^ "\n"*))
-        new_text
-    else
-      new_text
-  in
-    [ new_status, new_text ], parsed_text_length
+   res,parsed_text_length
 
-let disambiguate term status =
+let eval_with_engine guistuff status user_goal parsed_text st =
+  try
+    eval_with_engine guistuff status user_goal parsed_text st
+  with
+  | MatitaEngine.UnableToInclude what 
+  | MatitaEngine.IncludedFileNotCompiled what as exc ->
+      let compile_needed_and_go_on d =
+        let target = what in
+        let refresh_cb () = 
+          while Glib.Main.pending () do ignore(Glib.Main.iteration false); done
+        in
+        if not(MatitamakeLib.build_development_in_bg ~target refresh_cb d) then
+          raise exc
+        else
+          eval_with_engine guistuff status user_goal parsed_text st
+      in
+      let do_nothing () = [], 0 in
+      let handle_with_devel d =
+        let name = MatitamakeLib.name_for_development d in
+        let title = "Unable to include " ^ what in
+        let message = 
+          what ^ " is handled by development <b>" ^ name ^ "</b>.\n\n" ^
+          "<i>Should I compile it and Its dependencies?</i>"
+        in
+        (match guistuff.ask_confirmation ~title ~message with
+        | `YES -> compile_needed_and_go_on d
+        | `NO -> raise exc
+        | `CANCEL -> do_nothing ())
+      in
+      let handle_without_devel filename =
+        let title = "Unable to include " ^ what in
+        let message = 
+         what ^ " is <b>not</b> handled by a development.\n" ^
+         "All dependencies are automatically solved for a development.\n\n" ^
+         "<i>Do you want to set up a development?</i>"
+        in
+        (match guistuff.ask_confirmation ~title ~message with
+        | `YES -> 
+            (match filename with
+            | Some f -> 
+                guistuff.develcreator ~containing:(Some (Filename.dirname f))
+            | None -> guistuff.develcreator ~containing:None);
+            do_nothing ()
+        | `NO -> raise exc
+        | `CANCEL -> do_nothing())
+      in
+      match guistuff.filenamedata with
+      | None,None -> handle_without_devel None
+      | None,Some d -> handle_with_devel d
+      | Some f,_ ->
+          match MatitamakeLib.development_for_dir (Filename.dirname f) with
+          | None -> handle_without_devel (Some f)
+          | Some d -> handle_with_devel d
+;;
+
+let disambiguate_macro_term term status user_goal =
   let module MD = MatitaDisambiguator in
   let dbd = MatitaDb.instance () in
-  let metasenv = MatitaMisc.get_proof_metasenv status in
-  let context = MatitaMisc.get_proof_context status in
-  let aliases = MatitaMisc.get_proof_aliases status in
-  let interps = MD.disambiguate_term dbd context metasenv aliases term in
+  let metasenv = MatitaTypes.get_proof_metasenv status in
+  let context = MatitaTypes.get_proof_context status user_goal in
+  let interps =
+   MD.disambiguate_term ~dbd ~context ~metasenv ~aliases:status.aliases
+    ~universe:(Some status.multi_aliases) term in
   match interps with 
-  | [_,_,x,_] -> x
+  | [_,_,x,_], _ -> x
   | _ -> assert false
  
-let eval_macro status (mathviewer:MatitaTypes.mathViewer) urichooser
- parsed_text script mac
-=
-  let module TA = TacticAst in
-  let module TAPp = TacticAstPp in
+let eval_macro guistuff status user_goal unparsed_text parsed_text script mac =
+  let module TAPp = GrafiteAstPp in
   let module MQ = MetadataQuery in
   let module MDB = MatitaDb in
   let module CTC = CicTypeChecker in
@@ -150,24 +236,28 @@ let eval_macro status (mathviewer:MatitaTypes.mathViewer) urichooser
   match mac with
   (* WHELP's stuff *)
   | TA.WMatch (loc, term) -> 
-      let term = disambiguate term status in
+      let term = disambiguate_macro_term term status user_goal in
       let l =  MQ.match_term ~dbd term in
-      let entry = `Whelp (TAPp.pp_macro_cic (TA.WMatch (loc, term)), l) in
-      mathviewer#show_uri_list ~reuse:true ~entry l;
+      let query_url =
+        MatitaMisc.strip_suffix ~suffix:"."
+          (HExtlib.trim_blanks unparsed_text)
+      in
+      let entry = `Whelp (query_url, l) in
+      guistuff.mathviewer#show_uri_list ~reuse:true ~entry l;
       [], parsed_text_length
   | TA.WInstance (loc, term) ->
-      let term = disambiguate term status in
+      let term = disambiguate_macro_term term status user_goal in
       let l = MQ.instance ~dbd term in
       let entry = `Whelp (TAPp.pp_macro_cic (TA.WInstance (loc, term)), l) in
-      mathviewer#show_uri_list ~reuse:true ~entry l;
+      guistuff.mathviewer#show_uri_list ~reuse:true ~entry l;
       [], parsed_text_length
   | TA.WLocate (loc, s) -> 
       let l = MQ.locate ~dbd s in
       let entry = `Whelp (TAPp.pp_macro_cic (TA.WLocate (loc, s)), l) in
-      mathviewer#show_uri_list ~reuse:true ~entry l;
+      guistuff.mathviewer#show_uri_list ~reuse:true ~entry l;
       [], parsed_text_length
   | TA.WElim (loc, term) ->
-      let term = disambiguate term status in
+      let term = disambiguate_macro_term term status user_goal in
       let uri =
         match term with
         | Cic.MutInd (uri,n,_) -> UriManager.uri_of_uriref uri n None 
@@ -175,35 +265,37 @@ let eval_macro status (mathviewer:MatitaTypes.mathViewer) urichooser
       in
       let l = MQ.elim ~dbd uri in
       let entry = `Whelp (TAPp.pp_macro_cic (TA.WElim (loc, term)), l) in
-      mathviewer#show_uri_list ~reuse:true ~entry l;
+      guistuff.mathviewer#show_uri_list ~reuse:true ~entry l;
       [], parsed_text_length
   | TA.WHint (loc, term) ->
-      let term = disambiguate term status in
+      let term = disambiguate_macro_term term status user_goal in
       let s = ((None,[0,[],term], Cic.Meta (0,[]) ,term),0) in
       let l = List.map fst (MQ.experimental_hint ~dbd s) in
       let entry = `Whelp (TAPp.pp_macro_cic (TA.WHint (loc, term)), l) in
-      mathviewer#show_uri_list ~reuse:true ~entry l;
+      guistuff.mathviewer#show_uri_list ~reuse:true ~entry l;
       [], parsed_text_length
   (* REAL macro *)
   | TA.Hint loc -> 
-      let s = MatitaMisc.get_proof_status status in
-      let l = List.map fst (MQ.experimental_hint ~dbd s) in
-      let selected = urichooser l in
+      let proof = MatitaTypes.get_current_proof status in
+      let proof_status = proof, user_goal in
+      let l = List.map fst (MQ.experimental_hint ~dbd proof_status) in
+      let selected = guistuff.urichooser l in
       (match selected with
       | [] -> [], parsed_text_length
       | [uri] -> 
-        let ast = 
-         TA.Executable (loc,
-          (TA.Tactical (loc, 
-            TA.Tactic (loc,
-             TA.Apply (loc, CicAst.Uri (UriManager.string_of_uri uri,None))))))
-        in
+          let suri = UriManager.string_of_uri uri in
+          let ast = 
+            TA.Executable (loc, (TA.Tactical (loc,
+              TA.Tactic (loc,
+                TA.Apply (loc, CicNotationPt.Uri (suri, None))),
+                Some (TA.Dot loc))))
+          in
         let new_status = MatitaEngine.eval_ast status ast in
         let extra_text = 
           comment parsed_text ^ 
           "\n" ^ TAPp.pp_statement ast
         in
-        [ new_status , extra_text ], parsed_text_length
+        [ new_status , (extra_text, ast) ], parsed_text_length
       | _ -> 
           MatitaLog.error 
             "The result of the urichooser should be only 1 uri, not:\n";
@@ -212,21 +304,20 @@ let eval_macro status (mathviewer:MatitaTypes.mathViewer) urichooser
           ) selected;
           assert false)
   | TA.Check (_,term) ->
-      let metasenv = MatitaMisc.get_proof_metasenv status in
-      let context = MatitaMisc.get_proof_context status in
-      let aliases = MatitaMisc.get_proof_aliases status in
+      let metasenv = MatitaTypes.get_proof_metasenv status in
+      let context = MatitaTypes.get_proof_context status user_goal in
       let interps = 
-        MatitaDisambiguator.disambiguate_term 
-          dbd context metasenv aliases term 
+        MatitaDisambiguator.disambiguate_term ~dbd ~context ~metasenv
+         ~aliases:status.aliases ~universe:(Some status.multi_aliases) term
       in
       let _, metasenv , term, ugraph =
         match interps with 
-        | [x] -> x
+        | [x], _ -> x
         | _ -> assert false
       in
       let ty,_ = CTC.type_of_aux' metasenv context term ugraph in
       let t_and_ty = Cic.Cast (term,ty) in
-      mathviewer#show_entry (`Cic (t_and_ty,metasenv));
+      guistuff.mathviewer#show_entry (`Cic (t_and_ty,metasenv));
       [], parsed_text_length
 (*   | TA.Abort _ -> 
       let rec go_back () =
@@ -249,24 +340,23 @@ let eval_macro status (mathviewer:MatitaTypes.mathViewer) urichooser
   | TA.Print (_,kind) -> failwith "not implemented"
   | TA.Search_pat (_, search_kind, str) -> failwith "not implemented"
   | TA.Search_term (_, search_kind, term) -> failwith "not implemented"
-
                                 
-let eval_executable status (mathviewer:MatitaTypes.mathViewer) urichooser
-ask_confirmation user_goal parsed_text script ex =
-  let module TA = TacticAst in
-  let module TAPp = TacticAstPp in
+let eval_executable guistuff status user_goal unparsed_text parsed_text script
+  ex
+=
+  let module TAPp = GrafiteAstPp in
   let module MD = MatitaDisambiguator in
   let module ML = MatitacleanLib in
   let parsed_text_length = String.length parsed_text in
   match ex with
-  | TA.Command (loc, _) | TA.Tactical (loc, _) ->
+  | TA.Command (loc, _) | TA.Tactical (loc, _, _) ->
       (try 
-        (match ML.baseuri_of_baseuri_decl (TA.Executable (loc,ex)) with
+        (match MatitaMisc.baseuri_of_baseuri_decl (TA.Executable (loc,ex)) with
         | None -> ()
         | Some u -> 
-            if not (MatitacleanLib.is_empty u) then
+            if not (MatitaMisc.is_empty u) then
               match 
-                ask_confirmation 
+                guistuff.ask_confirmation 
                   ~title:"Baseuri redefinition" 
                   ~message:(
                     "Baseuri " ^ u ^ " already exists.\n" ^
@@ -276,66 +366,115 @@ ask_confirmation user_goal parsed_text script ex =
               | `YES -> MatitacleanLib.clean_baseuris [u]
               | `NO -> ()
               | `CANCEL -> raise MatitaTypes.Cancel);
-        eval_with_engine status user_goal parsed_text (TA.Executable (loc, ex))
+        eval_with_engine 
+          guistuff status user_goal parsed_text (TA.Executable (loc, ex))
       with MatitaTypes.Cancel -> [], 0)
   | TA.Macro (_,mac) ->
-      eval_macro status mathviewer urichooser parsed_text script mac
+      eval_macro guistuff status user_goal unparsed_text parsed_text script mac
+
+let parse_statement baseoffset parsedlen ?error_tag (buffer: GText.buffer) text 
+=
+  try
+    GrafiteParser.parse_statement (Ulexing.from_utf8_string text)
+  with CicNotationParser.Parse_error (floc, err) as exn ->
+    match error_tag with
+    | None -> raise exn
+    | Some error_tag ->
+        let (x, y) = CicNotationPt.loc_of_floc floc in
+        let x = parsedlen + x in
+        let y = parsedlen + y in
+        let x' = baseoffset + x in
+        let y' = baseoffset + y in
+        let x_iter = buffer#get_iter (`OFFSET x') in
+        let y_iter = buffer#get_iter (`OFFSET y') in
+        buffer#apply_tag error_tag ~start:x_iter ~stop:y_iter;
+        let id = ref None in
+        id := Some (buffer#connect#changed ~callback:(fun () ->
+          buffer#remove_tag error_tag ~start:buffer#start_iter
+            ~stop:buffer#end_iter;
+          match !id with
+          | None -> assert false (* a race condition occurred *)
+          | Some id ->
+              (new GObj.gobject_ops buffer#as_buffer)#disconnect id));
+        let flocb,floce = floc in
+        let floc =
+          { flocb with Lexing.pos_cnum = x }, { floce with Lexing.pos_cnum = y }
+        in
+        buffer#place_cursor (buffer#get_iter (`OFFSET x'));
+        raise (CicNotationParser.Parse_error (floc, err))
 
-let rec eval_statement status (mathviewer:MatitaTypes.mathViewer) urichooser
-ask_confirmation user_goal script s =
-  if Pcre.pmatch ~rex:only_dust_RE s then raise Margin;
-  let st = CicTextualParser2.parse_statement (Stream.of_string s) in
+let rec eval_statement baseoffset parsedlen error_tag (buffer : GText.buffer)
+ guistuff status user_goal script statement
+=
+  let st, unparsed_text =
+    match statement with
+    | `Raw text ->
+        if Pcre.pmatch ~rex:only_dust_RE text then raise Margin;
+        parse_statement baseoffset parsedlen ~error_tag buffer text, text
+    | `Ast (st, text) -> st, text
+  in
   let text_of_loc loc =
-    let parsed_text_length = snd (CicAst.loc_of_floc loc) in
-    let parsed_text = safe_substring s 0 parsed_text_length in
+    let parsed_text_length = snd (CicNotationPt.loc_of_floc loc) in
+    let parsed_text = safe_substring unparsed_text 0 parsed_text_length in
     parsed_text, parsed_text_length
   in
   match st with
-  | TacticAst.Comment (loc,_)-> 
+  | GrafiteAst.Comment (loc, _) -> 
       let parsed_text, parsed_text_length = text_of_loc loc in
-      let remain_len = String.length s - parsed_text_length in
-      let s = String.sub s parsed_text_length remain_len in
+      let remain_len = String.length unparsed_text - parsed_text_length in
+      let s = String.sub unparsed_text parsed_text_length remain_len in
       let s,len = 
-        eval_statement status 
-          mathviewer urichooser ask_confirmation user_goal script s 
+        eval_statement baseoffset (parsedlen + parsed_text_length) error_tag
+         buffer guistuff status user_goal script (`Raw s)
       in
       (match s with
-      | (status, text) :: tl ->
-        ((status, parsed_text ^ text)::tl), (parsed_text_length + len)
+      | (status, (text, ast)) :: tl ->
+          ((status, (parsed_text ^ text, ast))::tl), (parsed_text_length + len)
       | [] -> [], 0)
-  | TacticAst.Executable (loc, ex) ->
+  | GrafiteAst.Executable (loc, ex) ->
       let parsed_text, parsed_text_length = text_of_loc loc in
-      eval_executable 
-        status mathviewer urichooser ask_confirmation 
-          user_goal parsed_text script ex
+      eval_executable guistuff status user_goal unparsed_text parsed_text
+        script ex 
   
 let fresh_script_id =
   let i = ref 0 in
   fun () -> incr i; !i
 
-class script ~(buffer: GText.buffer) ~(init: MatitaTypes.status) 
+class script  ~(source_view: GSourceView.source_view)
+              ~(init: MatitaTypes.status) 
               ~(mathviewer: MatitaTypes.mathViewer) 
               ~set_star
               ~ask_confirmation
-              ~urichooser () =
+              ~urichooser 
+              ~develcreator 
+              () =
+let buffer = source_view#buffer in
+let source_buffer = source_view#source_buffer in
 object (self)
-  val mutable filename = None
   val scriptId = fresh_script_id ()
+  
+  val guistuff = {
+    mathviewer = mathviewer;
+    urichooser = urichooser;
+    ask_confirmation = ask_confirmation;
+    develcreator = develcreator;
+    filenamedata = (None, None)} 
+  
   method private getFilename =
-    match filename with Some f -> f | _ -> assert false
+    match guistuff.filenamedata with Some f,_ -> f | _ -> assert false
+
+  method filename = self#getFilename
+    
   method private ppFilename =
-    match filename with Some f -> f | None -> sprintf ".unnamed%d.ma" scriptId
+    match guistuff.filenamedata with 
+    | Some f,_ -> f 
+    | None,_ -> sprintf ".unnamed%d.ma" scriptId
   
   initializer 
-    ignore(GMain.Timeout.add ~ms:300000 
-       ~callback:(fun _ -> self#_saveToBackuptFile ();true));
-    ignore(buffer#connect#modified_changed 
-       (fun _ -> if buffer#modified then 
-          set_star self#ppFilename true 
-        else 
-          set_star self#ppFilename false));
-    self#reset ();
-    self#template ()
+    ignore (GMain.Timeout.add ~ms:300000 
+       ~callback:(fun _ -> self#_saveToBackupFile ();true));
+    ignore (buffer#connect#modified_changed 
+      (fun _ -> set_star (Filename.basename self#ppFilename) buffer#modified))
 
   val mutable statements = [];    (** executed statements *)
   val mutable history = [ init ];
@@ -346,52 +485,75 @@ object (self)
 
   (** goal as seen by the user (i.e. metano corresponding to current tab) *)
   val mutable userGoal = ~-1
-  val mutable lock_mark_pos = 0
 
   (** text mark and tag representing locked part of a script *)
   val locked_mark =
     buffer#create_mark ~name:"locked" ~left_gravity:true buffer#start_iter
   val locked_tag = buffer#create_tag [`BACKGROUND "lightblue"; `EDITABLE false]
+  val error_tag = buffer#create_tag [`UNDERLINE `SINGLE; `FOREGROUND "red"]
+
+  method locked_mark = locked_mark
+  method locked_tag = locked_tag
 
     (* history can't be empty, the invariant above grant that it contains at
      * least the init status *)
   method status = match history with hd :: _ -> hd | _ -> assert false
 
   method private _advance ?statement () =
+    let rec aux st =
+      let baseoffset = (buffer#get_iter_at_mark (`MARK locked_mark))#offset in
+      let (entries, parsed_len) = 
+        eval_statement baseoffset 0 error_tag buffer guistuff self#status
+          userGoal self st
+      in
+      let (new_statuses, new_statements, new_asts) =
+        let statuses, statements = List.split entries in
+        let texts, asts = List.split statements in
+        statuses, texts, asts
+      in
+      history <- List.rev new_statuses @ history;
+      statements <- List.rev new_statements @ statements;
+      let start = buffer#get_iter_at_mark (`MARK locked_mark) in
+      let new_text = String.concat "" new_statements in
+      if statement <> None then
+       buffer#insert ~iter:start new_text
+      else
+        let s = match st with `Raw s | `Ast (_, s) -> s in
+        if new_text <> String.sub s 0 parsed_len then
+        begin
+          let stop = start#copy#forward_chars parsed_len in
+          buffer#delete ~start ~stop;
+          buffer#insert ~iter:start new_text;
+        end;
+      self#moveMark (String.length new_text);
+      (*
+      (match List.rev new_asts with (* advance again on punctuation *)
+      | TA.Executable (_, TA.Tactical (_, tac, _)) :: _ ->
+          let baseoffset =
+            (buffer#get_iter_at_mark (`MARK locked_mark))#offset
+          in
+          let text = self#getFuture in
+          (try
+            (match parse_statement baseoffset 0 ?error_tag:None buffer text with
+            | TA.Executable (loc, TA.Tactical (_, tac, None)) as st
+              when GrafiteAst.is_punctuation tac ->
+                let len = snd (CicNotationPt.loc_of_floc loc) in
+                aux (`Ast (st, String.sub text 0 len))
+            | _ -> ())
+          with CicNotationParser.Parse_error _ | End_of_file -> ())
+      | _ -> ())
+      *)
+    in
     let s = match statement with Some s -> s | None -> self#getFuture in
     MatitaLog.debug ("evaluating: " ^ first_line s ^ " ...");
-    let (entries, parsed_len) = 
-      eval_statement self#status 
-        mathviewer urichooser ask_confirmation userGoal self s 
-    in
-    let (new_statuses, new_statements) = List.split entries in
-(*
-prerr_endline "evalStatement returned";
-List.iter (fun s -> prerr_endline ("'" ^ s ^ "'")) new_statements;
-*)
-    history <- List.rev new_statuses @ history;
-    statements <- List.rev new_statements @ statements;
-    let start = buffer#get_iter_at_mark (`MARK locked_mark) in
-    let new_text = String.concat "" new_statements in
-    if new_text <> String.sub s 0 parsed_len then
-      begin
-(*       prerr_endline ("new:" ^ new_text); *)
-(*       prerr_endline ("s:" ^ String.sub s 0 parsed_len); *)
-      let stop = start#copy#forward_chars parsed_len in
-      buffer#delete ~start ~stop;
-      buffer#insert ~iter:start new_text;
-(*       prerr_endline "AUTOMATICALLY MODIFIED!!!!!" *)
-      end;
-    self#moveMark (String.length new_text)
-
-  method private _retract () =
-    match statements, history with
-    | last_statement :: _, cur_status :: prev_status :: _ ->
-        MatitaSync.time_travel ~present:cur_status ~past:prev_status;
-        statements <- List.tl statements;
-        history <- List.tl history;
-        self#moveMark (- (String.length last_statement));
-    | _ -> raise Margin
+    (try aux (`Raw s) with End_of_file -> raise Margin)
+
+  method private _retract offset status new_statements new_history =
+    let cur_status = match history with s::_ -> s | [] -> assert false in
+    MatitaSync.time_travel ~present:cur_status ~past:status;
+    statements <- new_statements;
+    history <- new_history;
+    self#moveMark (- offset)
 
   method advance ?statement () =
     try
@@ -403,8 +565,15 @@ List.iter (fun s -> prerr_endline ("'" ^ s ^ "'")) new_statements;
 
   method retract () =
     try
-      self#_retract ();
-      self#notify
+      let cmp,new_statements,new_history,status =
+       match statements,history with
+          stat::statements, _::(status::_ as history) ->
+           String.length stat, statements, history, status
+       | [],[_] -> raise Margin
+       | _,_ -> assert false
+      in
+       self#_retract cmp status new_statements new_history;
+       self#notify
     with 
     | Margin -> self#notify
     | exc -> self#notify; raise exc
@@ -428,17 +597,17 @@ List.iter (fun s -> prerr_endline ("'" ^ s ^ "'")) new_statements;
     in
     buffer#move_mark mark ~where:new_mark_pos;
     buffer#apply_tag locked_tag ~start:buffer#start_iter ~stop:new_mark_pos;
-    lock_mark_pos <- new_mark_pos#offset;
     buffer#move_mark `INSERT old_insert;
-    begin
-     match self#status.proof_status with
-        Incomplete_proof (_,goal) -> self#setGoal goal
-      | _ -> ()
-    end ;
+    let mark_position = buffer#get_iter_at_mark mark in
+    if source_view#move_mark_onscreen mark then
+     begin
+      buffer#move_mark mark mark_position;
+      source_view#scroll_to_mark ~use_align:true ~xalign:1.0 ~yalign:0.1 mark;
+     end;
     while Glib.Main.pending () do ignore(Glib.Main.iteration false); done
 
   method clean_dirty_lock =
-    let lock_mark_iter = buffer#get_iter (`OFFSET lock_mark_pos) in
+    let lock_mark_iter = buffer#get_iter_at_mark (`MARK locked_mark) in
     buffer#remove_tag locked_tag ~start:buffer#start_iter ~stop:buffer#end_iter;
     buffer#apply_tag locked_tag ~start:buffer#start_iter ~stop:lock_mark_iter
 
@@ -451,13 +620,15 @@ List.iter (fun s -> prerr_endline ("'" ^ s ^ "'")) new_statements;
     let status = self#status in
     List.iter (fun o -> o status) observers
 
-  method loadFromFile () =
-    buffer#set_text (MatitaMisc.input_file self#getFilename);
-    self#goto_top;
+  method loadFromFile f =
+    buffer#set_text (HExtlib.input_file f);
+    self#reset_buffer;
     buffer#set_modified false
     
   method assignFileName file =
-    filename <- Some file;
+    let abspath = MatitaMisc.absolute_path file in
+    let devel = MatitamakeLib.development_for_dir (Filename.dirname abspath) in
+    guistuff.filenamedata <- Some abspath, devel
     
   method saveToFile () =
     let oc = open_out self#getFilename in
@@ -466,7 +637,7 @@ List.iter (fun s -> prerr_endline ("'" ^ s ^ "'")) new_statements;
     close_out oc;
     buffer#set_modified false
   
-  method private _saveToBackuptFile () =
+  method private _saveToBackupFile () =
     if buffer#modified then
       begin
         let f = self#ppFilename ^ "~" in
@@ -478,66 +649,109 @@ List.iter (fun s -> prerr_endline ("'" ^ s ^ "'")) new_statements;
       end
   
   method private goto_top =
-    MatitaSync.time_travel ~present:self#status ~past:init;
+    MatitaSync.time_travel ~present:self#status ~past:init
+
+  method private reset_buffer = 
     statements <- [];
     history <- [ init ];
     userGoal <- ~-1;
+    self#notify;
     buffer#remove_tag locked_tag ~start:buffer#start_iter ~stop:buffer#end_iter;
     buffer#move_mark (`MARK locked_mark) ~where:buffer#start_iter
 
   method reset () =
-    self#goto_top;
+    self#reset_buffer;
+    source_buffer#begin_not_undoable_action ();
     buffer#delete ~start:buffer#start_iter ~stop:buffer#end_iter;
-    self#notify;
+    source_buffer#end_not_undoable_action ();
     buffer#set_modified false
-
+  
   method template () =
-    let template = MatitaMisc.input_file BuildTimeConf.script_template in 
+    let template = HExtlib.input_file BuildTimeConf.script_template in 
     buffer#insert ~iter:(buffer#get_iter `START) template;
-    filename <- None;
+    guistuff.filenamedata <- 
+      (None,MatitamakeLib.development_for_dir (Unix.getcwd ()));
     buffer#set_modified false;
-    set_star self#ppFilename false
+    set_star (Filename.basename self#ppFilename) false
 
   method goto (pos: [`Top | `Bottom | `Cursor]) () =
+    let old_locked_mark =
+     `MARK
+       (buffer#create_mark ~name:"old_locked_mark"
+         ~left_gravity:true (buffer#get_iter_at_mark (`MARK locked_mark))) in
+    let getpos _ = buffer#get_iter_at_mark (`MARK locked_mark) in 
+    let getoldpos _ = buffer#get_iter_at_mark old_locked_mark in 
+    let dispose_old_locked_mark () = buffer#delete_mark old_locked_mark in
     match pos with
-    | `Top -> self#goto_top; self#notify
+    | `Top -> 
+        dispose_old_locked_mark (); 
+        self#goto_top; 
+        self#reset_buffer;
+        self#notify
     | `Bottom ->
         (try 
-          let getpos _ = buffer#get_iter_at_mark (`MARK locked_mark) in 
-          let rec dowhile pos =
+          let rec dowhile () =
             self#_advance ();
-            if pos#compare (getpos ()) < 0 then
-              dowhile (getpos ())
+            let newpos = getpos () in
+            if (getoldpos ())#compare newpos < 0 then
+              begin
+                buffer#move_mark old_locked_mark newpos;
+                dowhile ()
+              end
           in
-          dowhile (getpos ());
+          dowhile ();
+          dispose_old_locked_mark ();
           self#notify 
         with 
-        | Margin -> self#notify
-        | exc -> self#notify; raise exc)
+        | Margin -> dispose_old_locked_mark (); self#notify
+        | exc -> dispose_old_locked_mark (); self#notify; raise exc)
     | `Cursor ->
         let locked_iter () = buffer#get_iter_at_mark (`NAME "locked") in
         let cursor_iter () = buffer#get_iter_at_mark `INSERT in
-        let rec forward_until_cursor () = (* go forward until locked > cursor *)
-          self#_advance ();
-          if (locked_iter ())#compare (cursor_iter ()) < 0 then
-            forward_until_cursor ()
+        let remember =
+         `MARK
+           (buffer#create_mark ~name:"initial_insert"
+             ~left_gravity:true (cursor_iter ())) in
+        let dispose_remember () = buffer#delete_mark remember in
+        let remember_iter () =
+         buffer#get_iter_at_mark (`NAME "initial_insert") in
+        let cmp () = (locked_iter ())#offset - (remember_iter ())#offset in
+        let icmp = cmp () in
+        let forward_until_cursor () = (* go forward until locked > cursor *)
+          let rec aux () =
+            self#_advance ();
+            if cmp () < 0 && (getoldpos ())#compare (getpos ()) < 0 
+            then
+             begin
+              buffer#move_mark old_locked_mark (getpos ());
+              aux ()
+             end
+          in
+          aux ()
         in
-        let rec back_until_cursor () = (* go backward until locked < cursor *)
-          self#_retract ();
-          if (locked_iter ())#compare (cursor_iter ()) > 0 then
-            back_until_cursor ()
+        let rec back_until_cursor len = (* go backward until locked < cursor *)
+         function
+            statements, (status::_ as history) when len <= 0 ->
+             self#_retract (icmp - len) status statements history
+          | statement::tl1, _::tl2 ->
+             back_until_cursor (len - String.length statement) (tl1,tl2)
+          | _,_ -> assert false
         in
-        let cmp = (locked_iter ())#compare (cursor_iter ()) in
         (try
-          if cmp < 0 then       (* locked < cursor *)
-            (forward_until_cursor (); self#notify)
-          else if cmp > 0 then  (* locked > cursor *)
-            (back_until_cursor (); self#notify)
-          else                  (* cursor = locked *)
-              ()
+          begin
+           if icmp < 0 then       (* locked < cursor *)
+             (forward_until_cursor (); self#notify)
+           else if icmp > 0 then  (* locked > cursor *)
+             (back_until_cursor icmp (statements,history); self#notify)
+           else                  (* cursor = locked *)
+               ()
+          end ;
+          dispose_remember ();
+          dispose_old_locked_mark ();
         with 
-        | Margin -> self#notify
-        | exc -> self#notify; raise exc)
+        | Margin -> dispose_remember (); dispose_old_locked_mark (); self#notify
+        | exc -> dispose_remember (); dispose_old_locked_mark ();
+                 self#notify; raise exc)
               
   method onGoingProof () =
     match self#status.proof_status with
@@ -545,32 +759,33 @@ List.iter (fun s -> prerr_endline ("'" ^ s ^ "'")) new_statements;
     | Incomplete_proof _ -> true
     | Intermediate _ -> assert false
 
-  method proofStatus = MatitaMisc.get_proof_status self#status
-  method proofMetasenv = MatitaMisc.get_proof_metasenv self#status
-  method proofContext = MatitaMisc.get_proof_context self#status
+(*   method proofStatus = MatitaTypes.get_proof_status self#status *)
+  method proofMetasenv = MatitaTypes.get_proof_metasenv self#status
+  method proofContext = MatitaTypes.get_proof_context self#status userGoal
+  method proofConclusion = MatitaTypes.get_proof_conclusion self#status userGoal
+  method stack = MatitaTypes.get_stack self#status
   method setGoal n = userGoal <- n
+  method goal = userGoal
 
   method eos = 
     let s = self#getFuture in
     let rec is_there_and_executable s = 
       if Pcre.pmatch ~rex:only_dust_RE s then raise Margin;
-      let st = CicTextualParser2.parse_statement (Stream.of_string s) in
+      let st = GrafiteParser.parse_statement (Ulexing.from_utf8_string s) in
       match st with
-      | TacticAst.Comment (loc,_)-> 
-          let parsed_text_length = snd (CicAst.loc_of_floc loc) in
+      | GrafiteAst.Comment (loc,_)-> 
+          let parsed_text_length = snd (CicNotationPt.loc_of_floc loc) in
           let remain_len = String.length s - parsed_text_length in
           let next = String.sub s parsed_text_length remain_len in
           is_there_and_executable next
-      | TacticAst.Executable (loc, ex) -> false
+      | GrafiteAst.Executable (loc, ex) -> false
     in
     try
       is_there_and_executable s
     with 
-    | CicTextualParser2.Parse_error _ -> false
-    | Margin -> true
-      
-    
-    
+    | CicNotationParser.Parse_error _ -> false
+    | Margin | End_of_file -> true
+
   (* debug *)
   method dump () =
     MatitaLog.debug "script status:";
@@ -578,20 +793,21 @@ List.iter (fun s -> prerr_endline ("'" ^ s ^ "'")) new_statements;
     MatitaLog.debug (sprintf "%d statements:" (List.length statements));
     List.iter MatitaLog.debug statements;
     MatitaLog.debug ("Current file name: " ^
-      (match filename with None -> "[ no name ]" | Some f -> f));
+      (match guistuff.filenamedata with 
+      |None,_ -> "[ no name ]" 
+      | Some f,_ -> f));
 
 end
 
 let _script = ref None
 
-let script ~buffer ~init ~mathviewer ~urichooser ~ask_confirmation ~set_star ()
+let script ~source_view ~init ~mathviewer ~urichooser ~develcreator ~ask_confirmation ~set_star ()
 =
   let s = new script 
-    ~buffer ~init ~mathviewer ~ask_confirmation ~urichooser ~set_star () 
+    ~source_view ~init ~mathviewer ~ask_confirmation ~urichooser ~develcreator ~set_star () 
   in
   _script := Some s;
   s
 
-let instance () = match !_script with None -> assert false | Some s -> s
-
+let current () = match !_script with None -> assert false | Some s -> s