src/Pure/General/symbol.ML
author wenzelm
Sat May 29 15:06:19 2004 +0200 (2004-05-29)
changeset 14834 e47744683560
parent 14728 df34201f1a15
child 14873 7efc14398e82
permissions -rw-r--r--
improved support for raw symbols;
wenzelm@6118
     1
(*  Title:      Pure/General/symbol.ML
wenzelm@6116
     2
    ID:         $Id$
wenzelm@6116
     3
    Author:     Markus Wenzel, TU Muenchen
wenzelm@8806
     4
    License:    GPL (GNU GENERAL PUBLIC LICENSE)
wenzelm@6116
     5
wenzelm@14678
     6
Generalized characters with and infinite amount of named symbols.
wenzelm@6116
     7
*)
wenzelm@6116
     8
wenzelm@6116
     9
signature SYMBOL =
wenzelm@6116
    10
sig
wenzelm@6116
    11
  type symbol
wenzelm@6116
    12
  val space: symbol
wenzelm@10953
    13
  val spaces: int -> symbol
wenzelm@14678
    14
  val is_char: symbol -> bool
wenzelm@14678
    15
  val is_symbolic: symbol -> bool
wenzelm@14678
    16
  val is_printable: symbol -> bool
wenzelm@6116
    17
  val eof: symbol
wenzelm@6116
    18
  val is_eof: symbol -> bool
wenzelm@6116
    19
  val not_eof: symbol -> bool
wenzelm@6116
    20
  val stopper: symbol * (symbol -> bool)
wenzelm@14678
    21
  val sync: symbol
wenzelm@14678
    22
  val is_sync: symbol -> bool
wenzelm@14678
    23
  val not_sync: symbol -> bool
wenzelm@14678
    24
  val malformed: symbol
wenzelm@6116
    25
  val is_ascii: symbol -> bool
wenzelm@14678
    26
  val is_ascii_letter: symbol -> bool
wenzelm@14678
    27
  val is_ascii_digit: symbol -> bool
wenzelm@14678
    28
  val is_ascii_quasi: symbol -> bool
wenzelm@14678
    29
  val is_ascii_blank: symbol -> bool
wenzelm@14834
    30
  val is_raw: symbol -> bool
wenzelm@14834
    31
  val decode_raw: symbol -> string
wenzelm@14834
    32
  val encode_raw: string -> symbol list
wenzelm@14678
    33
  datatype kind = Letter | Digit | Quasi | Blank | Other
wenzelm@14678
    34
  val kind: symbol -> kind
wenzelm@6116
    35
  val is_letter: symbol -> bool
wenzelm@6116
    36
  val is_digit: symbol -> bool
wenzelm@12904
    37
  val is_quasi: symbol -> bool
wenzelm@14678
    38
  val is_blank: symbol -> bool
wenzelm@6116
    39
  val is_quasi_letter: symbol -> bool
wenzelm@6116
    40
  val is_letdig: symbol -> bool
wenzelm@14728
    41
  val beginning: int -> symbol list -> string
wenzelm@14678
    42
  val scanner: string -> (string list -> 'a * string list) -> symbol list -> 'a
berghofe@13730
    43
  val scan_id: string list -> string * string list
wenzelm@6116
    44
  val scan: string list -> symbol * string list
wenzelm@6116
    45
  val source: bool -> (string, 'a) Source.source ->
wenzelm@6116
    46
    (symbol, (string, 'a) Source.source) Source.source
wenzelm@6272
    47
  val explode: string -> symbol list
wenzelm@14678
    48
  val strip_blanks: string -> string
wenzelm@14678
    49
  val bump_init: string -> string
wenzelm@12904
    50
  val bump_string: string -> string
wenzelm@14678
    51
  val length: symbol list -> int
wenzelm@14834
    52
  val plain_output: string -> string
wenzelm@14834
    53
  val default_output: string -> string * real
wenzelm@10953
    54
  val default_indent: string * int -> string
wenzelm@14834
    55
  val default_raw: string -> string
wenzelm@6692
    56
  val symbolsN: string
wenzelm@6692
    57
  val xsymbolsN: string
wenzelm@6116
    58
end;
wenzelm@6116
    59
wenzelm@6116
    60
structure Symbol: SYMBOL =
wenzelm@6116
    61
struct
wenzelm@6116
    62
wenzelm@14678
    63
(** type symbol **)
wenzelm@6272
    64
wenzelm@14678
    65
(*Symbols, which are considered the smallest entities of any Isabelle
wenzelm@6272
    66
  string, may be of the following form:
wenzelm@14678
    67
wenzelm@14834
    68
    (1) ASCII symbols: a
wenzelm@14834
    69
    (2) printable symbols: \<ident>
wenzelm@14834
    70
    (3) control symbols: \<^ident>
wenzelm@14834
    71
    (4) raw control symbols: \<^raw:...>, where "..." may be any printable
wenzelm@14834
    72
        character excluding ">", or \<^rawNNN> where NNN are digits
wenzelm@6272
    73
wenzelm@14678
    74
  Output is subject to the print_mode variable (default: verbatim),
wenzelm@14678
    75
  actual interpretation in display is up to front-end tools.
schirmer@14561
    76
wenzelm@14834
    77
  Proper symbols may optionally start with "\\" instead of just "\"
wenzelm@14834
    78
  for compatibility with ML string literals (e.g. used in old-style
wenzelm@14834
    79
  theory files and ML proof scripts).  To be on the safe side, the
wenzelm@14834
    80
  default output of these symbols will start with the double "\\".
wenzelm@6272
    81
*)
wenzelm@6272
    82
wenzelm@6272
    83
type symbol = string;
wenzelm@6272
    84
wenzelm@6272
    85
val space = " ";
wenzelm@10953
    86
fun spaces k = Library.replicate_string k space;
wenzelm@14678
    87
wenzelm@14678
    88
fun is_char s = size s = 1;
wenzelm@14678
    89
wenzelm@14678
    90
fun is_symbolic s =
wenzelm@14678
    91
  String.isPrefix "\\<" s andalso not (String.isPrefix "\\<^" s);
wenzelm@14678
    92
wenzelm@14678
    93
fun is_printable s =
wenzelm@14678
    94
  if is_char s then ord space <= ord s andalso ord s <= ord "~"
wenzelm@14678
    95
  else not (String.isPrefix "\\<^" s);
wenzelm@6272
    96
wenzelm@6272
    97
wenzelm@14678
    98
(* input source control *)
wenzelm@6272
    99
wenzelm@14678
   100
val eof = "";
wenzelm@6272
   101
fun is_eof s = s = eof;
wenzelm@6272
   102
fun not_eof s = s <> eof;
wenzelm@6272
   103
val stopper = (eof, is_eof);
wenzelm@6272
   104
wenzelm@14678
   105
val sync = "\\<^sync>";
wenzelm@14678
   106
fun is_sync s = s = sync;
wenzelm@14678
   107
fun not_sync s = s <> sync;
wenzelm@14678
   108
wenzelm@14678
   109
val malformed = "\\<^malformed>";
wenzelm@14678
   110
wenzelm@14678
   111
wenzelm@14678
   112
(* ascii symbols *)
wenzelm@14678
   113
wenzelm@14678
   114
fun is_ascii s = is_char s andalso ord s < 128;
wenzelm@14678
   115
wenzelm@14678
   116
fun is_ascii_letter s =
wenzelm@14678
   117
  is_char s andalso
wenzelm@14678
   118
   (ord "A" <= ord s andalso ord s <= ord "Z" orelse
wenzelm@14678
   119
    ord "a" <= ord s andalso ord s <= ord "z");
wenzelm@14678
   120
wenzelm@14678
   121
fun is_ascii_digit s =
wenzelm@14678
   122
  is_char s andalso ord "0" <= ord s andalso ord s <= ord "9";
wenzelm@14678
   123
wenzelm@14678
   124
fun is_ascii_quasi "_" = true
wenzelm@14678
   125
  | is_ascii_quasi "'" = true
wenzelm@14678
   126
  | is_ascii_quasi _ = false;
wenzelm@14678
   127
wenzelm@14678
   128
val is_ascii_blank =
wenzelm@14678
   129
  fn " " => true | "\t" => true | "\r" => true | "\n" => true | "\^L" => true
wenzelm@14678
   130
    | _ => false;
wenzelm@14678
   131
wenzelm@14678
   132
wenzelm@14834
   133
(* raw symbols *)
wenzelm@14834
   134
wenzelm@14834
   135
fun is_raw s =
wenzelm@14834
   136
  String.isPrefix "\\<^raw" s andalso String.substring (s, size s - 1, 1) = ">";
wenzelm@14834
   137
wenzelm@14834
   138
fun decode_raw s =
wenzelm@14834
   139
  if not (is_raw s) then "*** BAD RAW OUTPUT " ^ s ^ " ***"
wenzelm@14834
   140
  else if String.isPrefix "\\<^raw:" s then String.substring (s, 7, size s - 8)
wenzelm@14834
   141
  else chr (#1 (Library.read_int (explode (String.substring (s, 6, size s - 7)))));
wenzelm@14834
   142
wenzelm@14834
   143
local
wenzelm@14834
   144
wenzelm@14834
   145
fun raw_chr c = ord space <= ord c andalso ord c <= ord "~" andalso c <> ">";
wenzelm@14834
   146
wenzelm@14834
   147
val raw1 = enclose "\\<^raw:" ">" o implode;
wenzelm@14834
   148
val raw2 = enclose "\\<^raw" ">" o string_of_int o ord;
wenzelm@14834
   149
wenzelm@14834
   150
fun encode cs = enc (take_prefix raw_chr cs)
wenzelm@14834
   151
and enc ([], []) = []
wenzelm@14834
   152
  | enc (cs, []) = [raw1 cs]
wenzelm@14834
   153
  | enc ([], d :: ds) = raw2 d :: encode ds
wenzelm@14834
   154
  | enc (cs, d :: ds) = raw1 cs :: raw2 d :: encode ds;
wenzelm@14834
   155
wenzelm@14834
   156
in
wenzelm@14834
   157
wenzelm@14834
   158
val scan_raw =
wenzelm@14834
   159
 (Scan.this (explode "raw:") -- Scan.any raw_chr ||
wenzelm@14834
   160
  Scan.this (explode "raw") -- Scan.any1 is_ascii_digit) >> (implode o op @);
wenzelm@14834
   161
wenzelm@14834
   162
fun encode_raw s =
wenzelm@14834
   163
  if exists_string (not o raw_chr) s then encode (explode s)
wenzelm@14834
   164
  else [enclose "\\<^raw:" ">" s];
wenzelm@14834
   165
wenzelm@14834
   166
end;
wenzelm@14834
   167
wenzelm@14834
   168
wenzelm@14678
   169
(* standard symbol kinds *)
wenzelm@14678
   170
wenzelm@14678
   171
datatype kind = Letter | Digit | Quasi | Blank | Other;
wenzelm@6272
   172
skalberg@14171
   173
local
wenzelm@14678
   174
  val symbol_kinds = Symtab.make
wenzelm@14678
   175
   [("\\<A>", Letter),
wenzelm@14678
   176
    ("\\<B>", Letter),
wenzelm@14678
   177
    ("\\<C>", Letter),
wenzelm@14678
   178
    ("\\<D>", Letter),
wenzelm@14678
   179
    ("\\<E>", Letter),
wenzelm@14678
   180
    ("\\<F>", Letter),
wenzelm@14678
   181
    ("\\<G>", Letter),
wenzelm@14678
   182
    ("\\<H>", Letter),
wenzelm@14678
   183
    ("\\<I>", Letter),
wenzelm@14678
   184
    ("\\<J>", Letter),
wenzelm@14678
   185
    ("\\<K>", Letter),
wenzelm@14678
   186
    ("\\<L>", Letter),
wenzelm@14678
   187
    ("\\<M>", Letter),
wenzelm@14678
   188
    ("\\<N>", Letter),
wenzelm@14678
   189
    ("\\<O>", Letter),
wenzelm@14678
   190
    ("\\<P>", Letter),
wenzelm@14678
   191
    ("\\<Q>", Letter),
wenzelm@14678
   192
    ("\\<R>", Letter),
wenzelm@14678
   193
    ("\\<S>", Letter),
wenzelm@14678
   194
    ("\\<T>", Letter),
wenzelm@14678
   195
    ("\\<U>", Letter),
wenzelm@14678
   196
    ("\\<V>", Letter),
wenzelm@14678
   197
    ("\\<W>", Letter),
wenzelm@14678
   198
    ("\\<X>", Letter),
wenzelm@14678
   199
    ("\\<Y>", Letter),
wenzelm@14678
   200
    ("\\<Z>", Letter),
wenzelm@14678
   201
    ("\\<a>", Letter),
wenzelm@14678
   202
    ("\\<b>", Letter),
wenzelm@14678
   203
    ("\\<c>", Letter),
wenzelm@14678
   204
    ("\\<d>", Letter),
wenzelm@14678
   205
    ("\\<e>", Letter),
wenzelm@14678
   206
    ("\\<f>", Letter),
wenzelm@14678
   207
    ("\\<g>", Letter),
wenzelm@14678
   208
    ("\\<h>", Letter),
wenzelm@14678
   209
    ("\\<i>", Letter),
wenzelm@14678
   210
    ("\\<j>", Letter),
wenzelm@14678
   211
    ("\\<k>", Letter),
wenzelm@14678
   212
    ("\\<l>", Letter),
wenzelm@14678
   213
    ("\\<m>", Letter),
wenzelm@14678
   214
    ("\\<n>", Letter),
wenzelm@14678
   215
    ("\\<o>", Letter),
wenzelm@14678
   216
    ("\\<p>", Letter),
wenzelm@14678
   217
    ("\\<q>", Letter),
wenzelm@14678
   218
    ("\\<r>", Letter),
wenzelm@14678
   219
    ("\\<s>", Letter),
wenzelm@14678
   220
    ("\\<t>", Letter),
wenzelm@14678
   221
    ("\\<u>", Letter),
wenzelm@14678
   222
    ("\\<v>", Letter),
wenzelm@14678
   223
    ("\\<w>", Letter),
wenzelm@14678
   224
    ("\\<x>", Letter),
wenzelm@14678
   225
    ("\\<y>", Letter),
wenzelm@14678
   226
    ("\\<z>", Letter),
wenzelm@14678
   227
    ("\\<AA>", Letter),
wenzelm@14678
   228
    ("\\<BB>", Letter),
wenzelm@14678
   229
    ("\\<CC>", Letter),
wenzelm@14678
   230
    ("\\<DD>", Letter),
wenzelm@14678
   231
    ("\\<EE>", Letter),
wenzelm@14678
   232
    ("\\<FF>", Letter),
wenzelm@14678
   233
    ("\\<GG>", Letter),
wenzelm@14678
   234
    ("\\<HH>", Letter),
wenzelm@14678
   235
    ("\\<II>", Letter),
wenzelm@14678
   236
    ("\\<JJ>", Letter),
wenzelm@14678
   237
    ("\\<KK>", Letter),
wenzelm@14678
   238
    ("\\<LL>", Letter),
wenzelm@14678
   239
    ("\\<MM>", Letter),
wenzelm@14678
   240
    ("\\<NN>", Letter),
wenzelm@14678
   241
    ("\\<OO>", Letter),
wenzelm@14678
   242
    ("\\<PP>", Letter),
wenzelm@14678
   243
    ("\\<QQ>", Letter),
wenzelm@14678
   244
    ("\\<RR>", Letter),
wenzelm@14678
   245
    ("\\<SS>", Letter),
wenzelm@14678
   246
    ("\\<TT>", Letter),
wenzelm@14678
   247
    ("\\<UU>", Letter),
wenzelm@14678
   248
    ("\\<VV>", Letter),
wenzelm@14678
   249
    ("\\<WW>", Letter),
wenzelm@14678
   250
    ("\\<XX>", Letter),
wenzelm@14678
   251
    ("\\<YY>", Letter),
wenzelm@14678
   252
    ("\\<ZZ>", Letter),
wenzelm@14678
   253
    ("\\<aa>", Letter),
wenzelm@14678
   254
    ("\\<bb>", Letter),
wenzelm@14678
   255
    ("\\<cc>", Letter),
wenzelm@14678
   256
    ("\\<dd>", Letter),
wenzelm@14678
   257
    ("\\<ee>", Letter),
wenzelm@14678
   258
    ("\\<ff>", Letter),
wenzelm@14678
   259
    ("\\<gg>", Letter),
wenzelm@14678
   260
    ("\\<hh>", Letter),
wenzelm@14678
   261
    ("\\<ii>", Letter),
wenzelm@14678
   262
    ("\\<jj>", Letter),
wenzelm@14678
   263
    ("\\<kk>", Letter),
wenzelm@14678
   264
    ("\\<ll>", Letter),
wenzelm@14678
   265
    ("\\<mm>", Letter),
wenzelm@14678
   266
    ("\\<nn>", Letter),
wenzelm@14678
   267
    ("\\<oo>", Letter),
wenzelm@14678
   268
    ("\\<pp>", Letter),
wenzelm@14678
   269
    ("\\<qq>", Letter),
wenzelm@14678
   270
    ("\\<rr>", Letter),
wenzelm@14678
   271
    ("\\<ss>", Letter),
wenzelm@14678
   272
    ("\\<tt>", Letter),
wenzelm@14678
   273
    ("\\<uu>", Letter),
wenzelm@14678
   274
    ("\\<vv>", Letter),
wenzelm@14678
   275
    ("\\<ww>", Letter),
wenzelm@14678
   276
    ("\\<xx>", Letter),
wenzelm@14678
   277
    ("\\<yy>", Letter),
wenzelm@14678
   278
    ("\\<zz>", Letter),
wenzelm@14678
   279
    ("\\<alpha>", Letter),
wenzelm@14678
   280
    ("\\<beta>", Letter),
wenzelm@14678
   281
    ("\\<gamma>", Letter),
wenzelm@14678
   282
    ("\\<delta>", Letter),
wenzelm@14678
   283
    ("\\<epsilon>", Letter),
wenzelm@14678
   284
    ("\\<zeta>", Letter),
wenzelm@14678
   285
    ("\\<eta>", Letter),
wenzelm@14678
   286
    ("\\<theta>", Letter),
wenzelm@14678
   287
    ("\\<iota>", Letter),
wenzelm@14678
   288
    ("\\<kappa>", Letter),
wenzelm@14678
   289
    ("\\<lambda>", Other),      (*sic!*)
wenzelm@14678
   290
    ("\\<mu>", Letter),
wenzelm@14678
   291
    ("\\<nu>", Letter),
wenzelm@14678
   292
    ("\\<xi>", Letter),
wenzelm@14678
   293
    ("\\<pi>", Letter),
wenzelm@14678
   294
    ("\\<rho>", Letter),
wenzelm@14678
   295
    ("\\<sigma>", Letter),
wenzelm@14678
   296
    ("\\<tau>", Letter),
wenzelm@14678
   297
    ("\\<upsilon>", Letter),
wenzelm@14678
   298
    ("\\<phi>", Letter),
wenzelm@14678
   299
    ("\\<psi>", Letter),
wenzelm@14678
   300
    ("\\<omega>", Letter),
wenzelm@14678
   301
    ("\\<Gamma>", Letter),
wenzelm@14678
   302
    ("\\<Delta>", Letter),
wenzelm@14678
   303
    ("\\<Theta>", Letter),
wenzelm@14678
   304
    ("\\<Lambda>", Letter),
wenzelm@14678
   305
    ("\\<Xi>", Letter),
wenzelm@14678
   306
    ("\\<Pi>", Letter),
wenzelm@14678
   307
    ("\\<Sigma>", Letter),
wenzelm@14678
   308
    ("\\<Upsilon>", Letter),
wenzelm@14678
   309
    ("\\<Phi>", Letter),
wenzelm@14678
   310
    ("\\<Psi>", Letter),
wenzelm@14678
   311
    ("\\<Omega>", Letter),
wenzelm@14678
   312
    ("\\<^isub>", Quasi),
wenzelm@14678
   313
    ("\\<^isup>", Quasi),
wenzelm@14678
   314
    ("\\<spacespace>", Blank)];
skalberg@14171
   315
in
wenzelm@14678
   316
  fun kind s =
wenzelm@14678
   317
    if is_ascii_letter s then Letter
wenzelm@14678
   318
    else if is_ascii_digit s then Digit
wenzelm@14678
   319
    else if is_ascii_quasi s then Quasi
wenzelm@14678
   320
    else if is_ascii_blank s then Blank
wenzelm@14678
   321
    else if is_char s then Other
wenzelm@14678
   322
    else if_none (Symtab.lookup (symbol_kinds, s)) Other;
wenzelm@14678
   323
end;
skalberg@14173
   324
wenzelm@14678
   325
fun is_letter s = kind s = Letter;
wenzelm@14678
   326
fun is_digit s = kind s = Digit;
wenzelm@14678
   327
fun is_quasi s = kind s = Quasi;
wenzelm@14678
   328
fun is_blank s = kind s = Blank;
wenzelm@6272
   329
wenzelm@14678
   330
fun is_quasi_letter s = let val k = kind s in k = Letter orelse k = Quasi end;
wenzelm@14678
   331
fun is_letdig s = let val k = kind s in k = Letter orelse k = Digit orelse k = Quasi end;
wenzelm@11010
   332
wenzelm@6272
   333
wenzelm@6272
   334
wenzelm@14678
   335
(** symbol input **)
wenzelm@14678
   336
wenzelm@14678
   337
(* scanning through symbols *)
wenzelm@6272
   338
wenzelm@14728
   339
fun beginning n raw_ss =
wenzelm@6272
   340
  let
wenzelm@14678
   341
    val (all_ss, _) = Library.take_suffix is_blank raw_ss;
wenzelm@14728
   342
    val dots = if length all_ss > n then " ..." else "";
wenzelm@14728
   343
    val (ss, _) = Library.take_suffix is_blank (Library.take (n, all_ss));
wenzelm@14678
   344
  in implode (map (fn s => if is_blank s then space else s) ss) ^ dots end;
wenzelm@6640
   345
wenzelm@6640
   346
fun scanner msg scan chs =
wenzelm@6640
   347
  let
wenzelm@14728
   348
    fun err_msg cs = msg ^ ": " ^ beginning 10 cs;
wenzelm@6640
   349
    val fin_scan = Scan.error (Scan.finite stopper (!! (fn (cs, _) => err_msg cs) scan));
wenzelm@6640
   350
  in
wenzelm@6640
   351
    (case fin_scan chs of
wenzelm@6640
   352
      (result, []) => result
wenzelm@6640
   353
    | (_, rest) => error (err_msg rest))
wenzelm@6640
   354
  end;
wenzelm@6640
   355
wenzelm@6640
   356
wenzelm@6116
   357
(* scan *)
wenzelm@6116
   358
wenzelm@6116
   359
val scan_id = Scan.one is_letter ^^ (Scan.any is_letdig >> implode);
wenzelm@14678
   360
wenzelm@14678
   361
local
schirmer@14561
   362
wenzelm@14678
   363
val scan_encoded_newline =
wenzelm@14678
   364
  $$ "\r" -- $$ "\n" >> K "\n" ||
wenzelm@14678
   365
  $$ "\r" >> K "\n" ||
wenzelm@14834
   366
  Scan.optional ($$ "\\") "" -- Scan.this (explode "\\<^newline>") >> K "\n";
wenzelm@14678
   367
wenzelm@14678
   368
in
wenzelm@6116
   369
wenzelm@6116
   370
val scan =
wenzelm@14678
   371
  scan_encoded_newline ||
schirmer@14561
   372
  ($$ "\\" --| Scan.optional ($$ "\\") "") ^^ $$ "<" ^^
wenzelm@14728
   373
    !! (fn (cs, _) => "Malformed symbolic character specification: \\" ^ "<" ^ beginning 10 cs)
wenzelm@14678
   374
       (($$ "^" ^^ (scan_raw || scan_id) || scan_id) ^^ $$ ">") ||
wenzelm@6116
   375
  Scan.one not_eof;
wenzelm@6116
   376
wenzelm@14678
   377
end;
wenzelm@14678
   378
wenzelm@14562
   379
wenzelm@6116
   380
(* source *)
wenzelm@6116
   381
wenzelm@10747
   382
val recover = Scan.any ((not o is_blank) andf not_eof) >> K [malformed];
wenzelm@6116
   383
wenzelm@6116
   384
fun source do_recover src =
wenzelm@6116
   385
  Source.source stopper (Scan.bulk scan) (if do_recover then Some recover else None) src;
wenzelm@6116
   386
wenzelm@6116
   387
wenzelm@6116
   388
(* explode *)
wenzelm@6116
   389
wenzelm@14562
   390
fun no_explode [] = true
wenzelm@14562
   391
  | no_explode ("\\" :: "<" :: _) = false
wenzelm@14562
   392
  | no_explode ("\r" :: _) = false
wenzelm@14562
   393
  | no_explode (_ :: cs) = no_explode cs;
wenzelm@6116
   394
wenzelm@6116
   395
fun sym_explode str =
wenzelm@6116
   396
  let val chs = explode str in
wenzelm@14562
   397
    if no_explode chs then chs
wenzelm@12116
   398
    else the (Scan.read stopper (Scan.repeat scan) chs)
wenzelm@6116
   399
  end;
wenzelm@6116
   400
wenzelm@6116
   401
wenzelm@14678
   402
(* blanks *)
wenzelm@14678
   403
wenzelm@14678
   404
fun strip_blanks s =
wenzelm@14678
   405
  sym_explode s
wenzelm@14678
   406
  |> Library.take_prefix is_blank |> #2
wenzelm@14678
   407
  |> Library.take_suffix is_blank |> #1
wenzelm@14678
   408
  |> implode;
wenzelm@14678
   409
wenzelm@14678
   410
wenzelm@14678
   411
(* bump string -- treat as base 26 or base 1 numbers *)
wenzelm@14678
   412
wenzelm@14678
   413
fun ends_symbolic (_ :: "\\<^isup>" :: _) = true
wenzelm@14678
   414
  | ends_symbolic (_ :: "\\<^isub>" :: _) = true
wenzelm@14678
   415
  | ends_symbolic (s :: _) = is_symbolic s
wenzelm@14678
   416
  | ends_symbolic [] = false;
wenzelm@14678
   417
wenzelm@14678
   418
fun bump_init str =
wenzelm@14678
   419
  if ends_symbolic (rev (sym_explode str)) then str ^ "'"
wenzelm@14678
   420
  else str ^ "a";
wenzelm@12904
   421
wenzelm@12904
   422
fun bump_string str =
wenzelm@12904
   423
  let
wenzelm@12904
   424
    fun bump [] = ["a"]
wenzelm@12904
   425
      | bump ("z" :: ss) = "a" :: bump ss
wenzelm@12904
   426
      | bump (s :: ss) =
wenzelm@14678
   427
          if is_char s andalso ord "a" <= ord s andalso ord s < ord "z"
wenzelm@12904
   428
          then chr (ord s + 1) :: ss
wenzelm@12904
   429
          else "a" :: s :: ss;
wenzelm@14678
   430
wenzelm@14678
   431
    val (ss, qs) = apfst rev (Library.take_suffix is_quasi (sym_explode str));
wenzelm@14678
   432
    val ss' = if ends_symbolic ss then "'" :: ss else bump ss;
wenzelm@14678
   433
  in implode (rev ss' @ qs) end;
wenzelm@14678
   434
wenzelm@12904
   435
wenzelm@6272
   436
wenzelm@6272
   437
(** symbol output **)
wenzelm@6272
   438
wenzelm@14678
   439
fun sym_len s =
wenzelm@14678
   440
  if not (is_printable s) then 0
wenzelm@14678
   441
  else if String.isPrefix "\\<long" s then 2
wenzelm@14678
   442
  else if String.isPrefix "\\<Long" s then 2
wenzelm@14678
   443
  else if s = "\\<spacespace>" then 2
wenzelm@14678
   444
  else 1;
wenzelm@14678
   445
wenzelm@14678
   446
fun sym_length ss = foldl (fn (n, s) => sym_len s + n) (0, ss);
wenzelm@14678
   447
wenzelm@14678
   448
wenzelm@14678
   449
(* default output *)
wenzelm@6272
   450
wenzelm@14834
   451
local
wenzelm@14834
   452
wenzelm@6272
   453
fun string_size s = (s, real (size s));
wenzelm@6272
   454
wenzelm@14834
   455
fun sym_output s =
wenzelm@14834
   456
  if is_char s then s
wenzelm@14834
   457
  else if is_raw s then decode_raw s
wenzelm@14834
   458
  else "\\" ^ s;
wenzelm@14834
   459
wenzelm@14834
   460
in
berghofe@13730
   461
schirmer@14561
   462
fun default_output s =
schirmer@14561
   463
  if not (exists_string (equal "\\") s) then string_size s
wenzelm@14834
   464
  else string_size (implode (map sym_output (sym_explode s)));
wenzelm@14834
   465
wenzelm@14834
   466
end;
wenzelm@14834
   467
wenzelm@14834
   468
val plain_output = #1 o default_output;
wenzelm@6272
   469
wenzelm@10953
   470
fun default_indent (_: string, k) = spaces k;
wenzelm@14834
   471
val default_raw = implode o encode_raw;
wenzelm@14834
   472
wenzelm@14834
   473
val _ = Output.add_mode "" (default_output, default_indent, default_raw);
wenzelm@6272
   474
wenzelm@10953
   475
wenzelm@14678
   476
(* print modes *)
wenzelm@6272
   477
wenzelm@6692
   478
val symbolsN = "symbols";
wenzelm@6692
   479
val xsymbolsN = "xsymbols";
wenzelm@6692
   480
wenzelm@6272
   481
wenzelm@6116
   482
(*final declarations of this structure!*)
wenzelm@6272
   483
val length = sym_length;
wenzelm@6116
   484
val explode = sym_explode;
wenzelm@6116
   485
wenzelm@6116
   486
end;