8cabea721b4a548233b5dee449cc80cc1f6447ad
[gnulib.git] / regex.c
1 /* Extended regular expression matching and search library,
2    version 0.12.
3    (Implements POSIX draft P10003.2/D11.2, except for
4    internationalization features.)
5
6    Copyright (C) 1993 Free Software Foundation, Inc.
7
8    This program is free software; you can redistribute it and/or modify
9    it under the terms of the GNU General Public License as published by
10    the Free Software Foundation; either version 2, or (at your option)
11    any later version.
12
13    This program is distributed in the hope that it will be useful,
14    but WITHOUT ANY WARRANTY; without even the implied warranty of
15    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
16    GNU General Public License for more details.
17
18    You should have received a copy of the GNU General Public License
19    along with this program; if not, write to the Free Software
20    Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.  */
21
22 /* AIX requires this to be the first thing in the file. */
23 #if defined (_AIX) && !defined (REGEX_MALLOC)
24   #pragma alloca
25 #endif
26
27 #define _GNU_SOURCE
28
29 #ifdef HAVE_CONFIG_H
30 #if defined (emacs) || defined (CONFIG_BROKETS)
31 /* We use <config.h> instead of "config.h" so that a compilation
32    using -I. -I$srcdir will use ./config.h rather than $srcdir/config.h
33    (which it would do because it found this file in $srcdir).  */
34 #include <config.h>
35 #else
36 #include "config.h"
37 #endif
38 #endif
39
40 /* We need this for `regex.h', and perhaps for the Emacs include files.  */
41 #include <sys/types.h>
42
43 /* The `emacs' switch turns on certain matching commands
44    that make sense only in Emacs. */
45 #ifdef emacs
46
47 #include "lisp.h"
48 #include "buffer.h"
49 #include "syntax.h"
50
51 /* Emacs uses `NULL' as a predicate.  */
52 #undef NULL
53
54 #else  /* not emacs */
55
56 #ifdef STDC_HEADERS
57 #include <stdlib.h>
58 #else
59 char *malloc ();
60 char *realloc ();
61 #endif
62
63
64 /* We used to test for `BSTRING' here, but only GCC and Emacs define
65    `BSTRING', as far as I know, and neither of them use this code.  */
66 #if HAVE_STRING_H || STDC_HEADERS
67 #include <string.h>
68 #ifndef bcmp
69 #define bcmp(s1, s2, n) memcmp ((s1), (s2), (n))
70 #endif
71 #ifndef bcopy
72 #define bcopy(s, d, n)  memcpy ((d), (s), (n))
73 #endif
74 #ifndef bzero
75 #define bzero(s, n)     memset ((s), 0, (n))
76 #endif
77 #else
78 #include <strings.h>
79 #endif
80
81 /* Define the syntax stuff for \<, \>, etc.  */
82
83 /* This must be nonzero for the wordchar and notwordchar pattern
84    commands in re_match_2.  */
85 #ifndef Sword 
86 #define Sword 1
87 #endif
88
89 #ifdef SYNTAX_TABLE
90
91 extern char *re_syntax_table;
92
93 #else /* not SYNTAX_TABLE */
94
95 /* How many characters in the character set.  */
96 #define CHAR_SET_SIZE 256
97
98 static char re_syntax_table[CHAR_SET_SIZE];
99
100 static void
101 init_syntax_once ()
102 {
103    register int c;
104    static int done = 0;
105
106    if (done)
107      return;
108
109    bzero (re_syntax_table, sizeof re_syntax_table);
110
111    for (c = 'a'; c <= 'z'; c++)
112      re_syntax_table[c] = Sword;
113
114    for (c = 'A'; c <= 'Z'; c++)
115      re_syntax_table[c] = Sword;
116
117    for (c = '0'; c <= '9'; c++)
118      re_syntax_table[c] = Sword;
119
120    re_syntax_table['_'] = Sword;
121
122    done = 1;
123 }
124
125 #endif /* not SYNTAX_TABLE */
126
127 #define SYNTAX(c) re_syntax_table[c]
128
129 #endif /* not emacs */
130 \f
131 /* Get the interface, including the syntax bits.  */
132 #include "regex.h"
133
134 /* isalpha etc. are used for the character classes.  */
135 #include <ctype.h>
136
137 /* Jim Meyering writes:
138
139    "... Some ctype macros are valid only for character codes that
140    isascii says are ASCII (SGI's IRIX-4.0.5 is one such system --when
141    using /bin/cc or gcc but without giving an ansi option).  So, all
142    ctype uses should be through macros like ISPRINT...  If
143    STDC_HEADERS is defined, then autoconf has verified that the ctype
144    macros don't need to be guarded with references to isascii. ...
145    Defining isascii to 1 should let any compiler worth its salt
146    eliminate the && through constant folding."  */
147
148 #if defined (STDC_HEADERS) || (!defined (isascii) && !defined (HAVE_ISASCII))
149 #define ISASCII(c) 1
150 #else
151 #define ISASCII(c) isascii(c)
152 #endif
153
154 #ifdef isblank
155 #define ISBLANK(c) (ISASCII (c) && isblank (c))
156 #else
157 #define ISBLANK(c) ((c) == ' ' || (c) == '\t')
158 #endif
159 #ifdef isgraph
160 #define ISGRAPH(c) (ISASCII (c) && isgraph (c))
161 #else
162 #define ISGRAPH(c) (ISASCII (c) && isprint (c) && !isspace (c))
163 #endif
164
165 #define ISPRINT(c) (ISASCII (c) && isprint (c))
166 #define ISDIGIT(c) (ISASCII (c) && isdigit (c))
167 #define ISALNUM(c) (ISASCII (c) && isalnum (c))
168 #define ISALPHA(c) (ISASCII (c) && isalpha (c))
169 #define ISCNTRL(c) (ISASCII (c) && iscntrl (c))
170 #define ISLOWER(c) (ISASCII (c) && islower (c))
171 #define ISPUNCT(c) (ISASCII (c) && ispunct (c))
172 #define ISSPACE(c) (ISASCII (c) && isspace (c))
173 #define ISUPPER(c) (ISASCII (c) && isupper (c))
174 #define ISXDIGIT(c) (ISASCII (c) && isxdigit (c))
175
176 #ifndef NULL
177 #define NULL 0
178 #endif
179
180 /* We remove any previous definition of `SIGN_EXTEND_CHAR',
181    since ours (we hope) works properly with all combinations of
182    machines, compilers, `char' and `unsigned char' argument types.
183    (Per Bothner suggested the basic approach.)  */
184 #undef SIGN_EXTEND_CHAR
185 #if __STDC__
186 #define SIGN_EXTEND_CHAR(c) ((signed char) (c))
187 #else  /* not __STDC__ */
188 /* As in Harbison and Steele.  */
189 #define SIGN_EXTEND_CHAR(c) ((((unsigned char) (c)) ^ 128) - 128)
190 #endif
191 \f
192 /* Should we use malloc or alloca?  If REGEX_MALLOC is not defined, we
193    use `alloca' instead of `malloc'.  This is because using malloc in
194    re_search* or re_match* could cause memory leaks when C-g is used in
195    Emacs; also, malloc is slower and causes storage fragmentation.  On
196    the other hand, malloc is more portable, and easier to debug.  
197    
198    Because we sometimes use alloca, some routines have to be macros,
199    not functions -- `alloca'-allocated space disappears at the end of the
200    function it is called in.  */
201
202 #ifdef REGEX_MALLOC
203
204 #define REGEX_ALLOCATE malloc
205 #define REGEX_REALLOCATE(source, osize, nsize) realloc (source, nsize)
206
207 #else /* not REGEX_MALLOC  */
208
209 /* Emacs already defines alloca, sometimes.  */
210 #ifndef alloca
211
212 /* Make alloca work the best possible way.  */
213 #ifdef __GNUC__
214 #define alloca __builtin_alloca
215 #else /* not __GNUC__ */
216 #if HAVE_ALLOCA_H
217 #include <alloca.h>
218 #else /* not __GNUC__ or HAVE_ALLOCA_H */
219 #ifndef _AIX /* Already did AIX, up at the top.  */
220 char *alloca ();
221 #endif /* not _AIX */
222 #endif /* not HAVE_ALLOCA_H */ 
223 #endif /* not __GNUC__ */
224
225 #endif /* not alloca */
226
227 #define REGEX_ALLOCATE alloca
228
229 /* Assumes a `char *destination' variable.  */
230 #define REGEX_REALLOCATE(source, osize, nsize)                          \
231   (destination = (char *) alloca (nsize),                               \
232    bcopy (source, destination, osize),                                  \
233    destination)
234
235 #endif /* not REGEX_MALLOC */
236
237
238 /* True if `size1' is non-NULL and PTR is pointing anywhere inside
239    `string1' or just past its end.  This works if PTR is NULL, which is
240    a good thing.  */
241 #define FIRST_STRING_P(ptr)                                     \
242   (size1 && string1 <= (ptr) && (ptr) <= string1 + size1)
243
244 /* (Re)Allocate N items of type T using malloc, or fail.  */
245 #define TALLOC(n, t) ((t *) malloc ((n) * sizeof (t)))
246 #define RETALLOC(addr, n, t) ((addr) = (t *) realloc (addr, (n) * sizeof (t)))
247 #define RETALLOC_IF(addr, n, t) \
248   if (addr) RETALLOC((addr), (n), t); else (addr) = TALLOC ((n), t)
249 #define REGEX_TALLOC(n, t) ((t *) REGEX_ALLOCATE ((n) * sizeof (t)))
250
251 #define BYTEWIDTH 8 /* In bits.  */
252
253 #define STREQ(s1, s2) ((strcmp (s1, s2) == 0))
254
255 #undef MAX
256 #undef MIN
257 #define MAX(a, b) ((a) > (b) ? (a) : (b))
258 #define MIN(a, b) ((a) < (b) ? (a) : (b))
259
260 typedef char boolean;
261 #define false 0
262 #define true 1
263
264 static int re_match_2_internal ();
265 \f
266 /* These are the command codes that appear in compiled regular
267    expressions.  Some opcodes are followed by argument bytes.  A
268    command code can specify any interpretation whatsoever for its
269    arguments.  Zero bytes may appear in the compiled regular expression.
270
271    The value of `exactn' is needed in search.c (search_buffer) in Emacs.
272    So regex.h defines a symbol `RE_EXACTN_VALUE' to be 1; the value of
273    `exactn' we use here must also be 1.  */
274
275 typedef enum
276 {
277   no_op = 0,
278
279         /* Followed by one byte giving n, then by n literal bytes.  */
280   exactn = 1,
281
282         /* Matches any (more or less) character.  */
283   anychar,
284
285         /* Matches any one char belonging to specified set.  First
286            following byte is number of bitmap bytes.  Then come bytes
287            for a bitmap saying which chars are in.  Bits in each byte
288            are ordered low-bit-first.  A character is in the set if its
289            bit is 1.  A character too large to have a bit in the map is
290            automatically not in the set.  */
291   charset,
292
293         /* Same parameters as charset, but match any character that is
294            not one of those specified.  */
295   charset_not,
296
297         /* Start remembering the text that is matched, for storing in a
298            register.  Followed by one byte with the register number, in
299            the range 0 to one less than the pattern buffer's re_nsub
300            field.  Then followed by one byte with the number of groups
301            inner to this one.  (This last has to be part of the
302            start_memory only because we need it in the on_failure_jump
303            of re_match_2.)  */
304   start_memory,
305
306         /* Stop remembering the text that is matched and store it in a
307            memory register.  Followed by one byte with the register
308            number, in the range 0 to one less than `re_nsub' in the
309            pattern buffer, and one byte with the number of inner groups,
310            just like `start_memory'.  (We need the number of inner
311            groups here because we don't have any easy way of finding the
312            corresponding start_memory when we're at a stop_memory.)  */
313   stop_memory,
314
315         /* Match a duplicate of something remembered. Followed by one
316            byte containing the register number.  */
317   duplicate,
318
319         /* Fail unless at beginning of line.  */
320   begline,
321
322         /* Fail unless at end of line.  */
323   endline,
324
325         /* Succeeds if at beginning of buffer (if emacs) or at beginning
326            of string to be matched (if not).  */
327   begbuf,
328
329         /* Analogously, for end of buffer/string.  */
330   endbuf,
331  
332         /* Followed by two byte relative address to which to jump.  */
333   jump, 
334
335         /* Same as jump, but marks the end of an alternative.  */
336   jump_past_alt,
337
338         /* Followed by two-byte relative address of place to resume at
339            in case of failure.  */
340   on_failure_jump,
341         
342         /* Like on_failure_jump, but pushes a placeholder instead of the
343            current string position when executed.  */
344   on_failure_keep_string_jump,
345   
346         /* Throw away latest failure point and then jump to following
347            two-byte relative address.  */
348   pop_failure_jump,
349
350         /* Change to pop_failure_jump if know won't have to backtrack to
351            match; otherwise change to jump.  This is used to jump
352            back to the beginning of a repeat.  If what follows this jump
353            clearly won't match what the repeat does, such that we can be
354            sure that there is no use backtracking out of repetitions
355            already matched, then we change it to a pop_failure_jump.
356            Followed by two-byte address.  */
357   maybe_pop_jump,
358
359         /* Jump to following two-byte address, and push a dummy failure
360            point. This failure point will be thrown away if an attempt
361            is made to use it for a failure.  A `+' construct makes this
362            before the first repeat.  Also used as an intermediary kind
363            of jump when compiling an alternative.  */
364   dummy_failure_jump,
365
366         /* Push a dummy failure point and continue.  Used at the end of
367            alternatives.  */
368   push_dummy_failure,
369
370         /* Followed by two-byte relative address and two-byte number n.
371            After matching N times, jump to the address upon failure.  */
372   succeed_n,
373
374         /* Followed by two-byte relative address, and two-byte number n.
375            Jump to the address N times, then fail.  */
376   jump_n,
377
378         /* Set the following two-byte relative address to the
379            subsequent two-byte number.  The address *includes* the two
380            bytes of number.  */
381   set_number_at,
382
383   wordchar,     /* Matches any word-constituent character.  */
384   notwordchar,  /* Matches any char that is not a word-constituent.  */
385
386   wordbeg,      /* Succeeds if at word beginning.  */
387   wordend,      /* Succeeds if at word end.  */
388
389   wordbound,    /* Succeeds if at a word boundary.  */
390   notwordbound  /* Succeeds if not at a word boundary.  */
391
392 #ifdef emacs
393   ,before_dot,  /* Succeeds if before point.  */
394   at_dot,       /* Succeeds if at point.  */
395   after_dot,    /* Succeeds if after point.  */
396
397         /* Matches any character whose syntax is specified.  Followed by
398            a byte which contains a syntax code, e.g., Sword.  */
399   syntaxspec,
400
401         /* Matches any character whose syntax is not that specified.  */
402   notsyntaxspec
403 #endif /* emacs */
404 } re_opcode_t;
405 \f
406 /* Common operations on the compiled pattern.  */
407
408 /* Store NUMBER in two contiguous bytes starting at DESTINATION.  */
409
410 #define STORE_NUMBER(destination, number)                               \
411   do {                                                                  \
412     (destination)[0] = (number) & 0377;                                 \
413     (destination)[1] = (number) >> 8;                                   \
414   } while (0)
415
416 /* Same as STORE_NUMBER, except increment DESTINATION to
417    the byte after where the number is stored.  Therefore, DESTINATION
418    must be an lvalue.  */
419
420 #define STORE_NUMBER_AND_INCR(destination, number)                      \
421   do {                                                                  \
422     STORE_NUMBER (destination, number);                                 \
423     (destination) += 2;                                                 \
424   } while (0)
425
426 /* Put into DESTINATION a number stored in two contiguous bytes starting
427    at SOURCE.  */
428
429 #define EXTRACT_NUMBER(destination, source)                             \
430   do {                                                                  \
431     (destination) = *(source) & 0377;                                   \
432     (destination) += SIGN_EXTEND_CHAR (*((source) + 1)) << 8;           \
433   } while (0)
434
435 #ifdef DEBUG
436 static void
437 extract_number (dest, source)
438     int *dest;
439     unsigned char *source;
440 {
441   int temp = SIGN_EXTEND_CHAR (*(source + 1)); 
442   *dest = *source & 0377;
443   *dest += temp << 8;
444 }
445
446 #ifndef EXTRACT_MACROS /* To debug the macros.  */
447 #undef EXTRACT_NUMBER
448 #define EXTRACT_NUMBER(dest, src) extract_number (&dest, src)
449 #endif /* not EXTRACT_MACROS */
450
451 #endif /* DEBUG */
452
453 /* Same as EXTRACT_NUMBER, except increment SOURCE to after the number.
454    SOURCE must be an lvalue.  */
455
456 #define EXTRACT_NUMBER_AND_INCR(destination, source)                    \
457   do {                                                                  \
458     EXTRACT_NUMBER (destination, source);                               \
459     (source) += 2;                                                      \
460   } while (0)
461
462 #ifdef DEBUG
463 static void
464 extract_number_and_incr (destination, source)
465     int *destination;
466     unsigned char **source;
467
468   extract_number (destination, *source);
469   *source += 2;
470 }
471
472 #ifndef EXTRACT_MACROS
473 #undef EXTRACT_NUMBER_AND_INCR
474 #define EXTRACT_NUMBER_AND_INCR(dest, src) \
475   extract_number_and_incr (&dest, &src)
476 #endif /* not EXTRACT_MACROS */
477
478 #endif /* DEBUG */
479 \f
480 /* If DEBUG is defined, Regex prints many voluminous messages about what
481    it is doing (if the variable `debug' is nonzero).  If linked with the
482    main program in `iregex.c', you can enter patterns and strings
483    interactively.  And if linked with the main program in `main.c' and
484    the other test files, you can run the already-written tests.  */
485
486 #ifdef DEBUG
487
488 /* We use standard I/O for debugging.  */
489 #include <stdio.h>
490
491 /* It is useful to test things that ``must'' be true when debugging.  */
492 #include <assert.h>
493
494 static int debug = 0;
495
496 #define DEBUG_STATEMENT(e) e
497 #define DEBUG_PRINT1(x) if (debug) printf (x)
498 #define DEBUG_PRINT2(x1, x2) if (debug) printf (x1, x2)
499 #define DEBUG_PRINT3(x1, x2, x3) if (debug) printf (x1, x2, x3)
500 #define DEBUG_PRINT4(x1, x2, x3, x4) if (debug) printf (x1, x2, x3, x4)
501 #define DEBUG_PRINT_COMPILED_PATTERN(p, s, e)                           \
502   if (debug) print_partial_compiled_pattern (s, e)
503 #define DEBUG_PRINT_DOUBLE_STRING(w, s1, sz1, s2, sz2)                  \
504   if (debug) print_double_string (w, s1, sz1, s2, sz2)
505
506
507 extern void printchar ();
508
509 /* Print the fastmap in human-readable form.  */
510
511 void
512 print_fastmap (fastmap)
513     char *fastmap;
514 {
515   unsigned was_a_range = 0;
516   unsigned i = 0;  
517   
518   while (i < (1 << BYTEWIDTH))
519     {
520       if (fastmap[i++])
521         {
522           was_a_range = 0;
523           printchar (i - 1);
524           while (i < (1 << BYTEWIDTH)  &&  fastmap[i])
525             {
526               was_a_range = 1;
527               i++;
528             }
529           if (was_a_range)
530             {
531               printf ("-");
532               printchar (i - 1);
533             }
534         }
535     }
536   putchar ('\n'); 
537 }
538
539
540 /* Print a compiled pattern string in human-readable form, starting at
541    the START pointer into it and ending just before the pointer END.  */
542
543 void
544 print_partial_compiled_pattern (start, end)
545     unsigned char *start;
546     unsigned char *end;
547 {
548   int mcnt, mcnt2;
549   unsigned char *p = start;
550   unsigned char *pend = end;
551
552   if (start == NULL)
553     {
554       printf ("(null)\n");
555       return;
556     }
557     
558   /* Loop over pattern commands.  */
559   while (p < pend)
560     {
561       printf ("%d:\t", p - start);
562
563       switch ((re_opcode_t) *p++)
564         {
565         case no_op:
566           printf ("/no_op");
567           break;
568
569         case exactn:
570           mcnt = *p++;
571           printf ("/exactn/%d", mcnt);
572           do
573             {
574               putchar ('/');
575               printchar (*p++);
576             }
577           while (--mcnt);
578           break;
579
580         case start_memory:
581           mcnt = *p++;
582           printf ("/start_memory/%d/%d", mcnt, *p++);
583           break;
584
585         case stop_memory:
586           mcnt = *p++;
587           printf ("/stop_memory/%d/%d", mcnt, *p++);
588           break;
589
590         case duplicate:
591           printf ("/duplicate/%d", *p++);
592           break;
593
594         case anychar:
595           printf ("/anychar");
596           break;
597
598         case charset:
599         case charset_not:
600           {
601             register int c, last = -100;
602             register int in_range = 0;
603
604             printf ("/charset [%s",
605                     (re_opcode_t) *(p - 1) == charset_not ? "^" : "");
606             
607             assert (p + *p < pend);
608
609             for (c = 0; c < 256; c++)
610               if (c / 8 < *p
611                   && (p[1 + (c/8)] & (1 << (c % 8))))
612                 {
613                   /* Are we starting a range?  */
614                   if (last + 1 == c && ! in_range)
615                     {
616                       putchar ('-');
617                       in_range = 1;
618                     }
619                   /* Have we broken a range?  */
620                   else if (last + 1 != c && in_range)
621               {
622                       printchar (last);
623                       in_range = 0;
624                     }
625                 
626                   if (! in_range)
627                     printchar (c);
628
629                   last = c;
630               }
631
632             if (in_range)
633               printchar (last);
634
635             putchar (']');
636
637             p += 1 + *p;
638           }
639           break;
640
641         case begline:
642           printf ("/begline");
643           break;
644
645         case endline:
646           printf ("/endline");
647           break;
648
649         case on_failure_jump:
650           extract_number_and_incr (&mcnt, &p);
651           printf ("/on_failure_jump to %d", p + mcnt - start);
652           break;
653
654         case on_failure_keep_string_jump:
655           extract_number_and_incr (&mcnt, &p);
656           printf ("/on_failure_keep_string_jump to %d", p + mcnt - start);
657           break;
658
659         case dummy_failure_jump:
660           extract_number_and_incr (&mcnt, &p);
661           printf ("/dummy_failure_jump to %d", p + mcnt - start);
662           break;
663
664         case push_dummy_failure:
665           printf ("/push_dummy_failure");
666           break;
667           
668         case maybe_pop_jump:
669           extract_number_and_incr (&mcnt, &p);
670           printf ("/maybe_pop_jump to %d", p + mcnt - start);
671           break;
672
673         case pop_failure_jump:
674           extract_number_and_incr (&mcnt, &p);
675           printf ("/pop_failure_jump to %d", p + mcnt - start);
676           break;          
677           
678         case jump_past_alt:
679           extract_number_and_incr (&mcnt, &p);
680           printf ("/jump_past_alt to %d", p + mcnt - start);
681           break;          
682           
683         case jump:
684           extract_number_and_incr (&mcnt, &p);
685           printf ("/jump to %d", p + mcnt - start);
686           break;
687
688         case succeed_n: 
689           extract_number_and_incr (&mcnt, &p);
690           extract_number_and_incr (&mcnt2, &p);
691           printf ("/succeed_n to %d, %d times", p + mcnt - start, mcnt2);
692           break;
693         
694         case jump_n: 
695           extract_number_and_incr (&mcnt, &p);
696           extract_number_and_incr (&mcnt2, &p);
697           printf ("/jump_n to %d, %d times", p + mcnt - start, mcnt2);
698           break;
699         
700         case set_number_at: 
701           extract_number_and_incr (&mcnt, &p);
702           extract_number_and_incr (&mcnt2, &p);
703           printf ("/set_number_at location %d to %d", p + mcnt - start, mcnt2);
704           break;
705         
706         case wordbound:
707           printf ("/wordbound");
708           break;
709
710         case notwordbound:
711           printf ("/notwordbound");
712           break;
713
714         case wordbeg:
715           printf ("/wordbeg");
716           break;
717           
718         case wordend:
719           printf ("/wordend");
720           
721 #ifdef emacs
722         case before_dot:
723           printf ("/before_dot");
724           break;
725
726         case at_dot:
727           printf ("/at_dot");
728           break;
729
730         case after_dot:
731           printf ("/after_dot");
732           break;
733
734         case syntaxspec:
735           printf ("/syntaxspec");
736           mcnt = *p++;
737           printf ("/%d", mcnt);
738           break;
739           
740         case notsyntaxspec:
741           printf ("/notsyntaxspec");
742           mcnt = *p++;
743           printf ("/%d", mcnt);
744           break;
745 #endif /* emacs */
746
747         case wordchar:
748           printf ("/wordchar");
749           break;
750           
751         case notwordchar:
752           printf ("/notwordchar");
753           break;
754
755         case begbuf:
756           printf ("/begbuf");
757           break;
758
759         case endbuf:
760           printf ("/endbuf");
761           break;
762
763         default:
764           printf ("?%d", *(p-1));
765         }
766
767       putchar ('\n');
768     }
769
770   printf ("%d:\tend of pattern.\n", p - start);
771 }
772
773
774 void
775 print_compiled_pattern (bufp)
776     struct re_pattern_buffer *bufp;
777 {
778   unsigned char *buffer = bufp->buffer;
779
780   print_partial_compiled_pattern (buffer, buffer + bufp->used);
781   printf ("%d bytes used/%d bytes allocated.\n", bufp->used, bufp->allocated);
782
783   if (bufp->fastmap_accurate && bufp->fastmap)
784     {
785       printf ("fastmap: ");
786       print_fastmap (bufp->fastmap);
787     }
788
789   printf ("re_nsub: %d\t", bufp->re_nsub);
790   printf ("regs_alloc: %d\t", bufp->regs_allocated);
791   printf ("can_be_null: %d\t", bufp->can_be_null);
792   printf ("newline_anchor: %d\n", bufp->newline_anchor);
793   printf ("no_sub: %d\t", bufp->no_sub);
794   printf ("not_bol: %d\t", bufp->not_bol);
795   printf ("not_eol: %d\t", bufp->not_eol);
796   printf ("syntax: %d\n", bufp->syntax);
797   /* Perhaps we should print the translate table?  */
798 }
799
800
801 void
802 print_double_string (where, string1, size1, string2, size2)
803     const char *where;
804     const char *string1;
805     const char *string2;
806     int size1;
807     int size2;
808 {
809   unsigned this_char;
810   
811   if (where == NULL)
812     printf ("(null)");
813   else
814     {
815       if (FIRST_STRING_P (where))
816         {
817           for (this_char = where - string1; this_char < size1; this_char++)
818             printchar (string1[this_char]);
819
820           where = string2;    
821         }
822
823       for (this_char = where - string2; this_char < size2; this_char++)
824         printchar (string2[this_char]);
825     }
826 }
827
828 #else /* not DEBUG */
829
830 #undef assert
831 #define assert(e)
832
833 #define DEBUG_STATEMENT(e)
834 #define DEBUG_PRINT1(x)
835 #define DEBUG_PRINT2(x1, x2)
836 #define DEBUG_PRINT3(x1, x2, x3)
837 #define DEBUG_PRINT4(x1, x2, x3, x4)
838 #define DEBUG_PRINT_COMPILED_PATTERN(p, s, e)
839 #define DEBUG_PRINT_DOUBLE_STRING(w, s1, sz1, s2, sz2)
840
841 #endif /* not DEBUG */
842 \f
843 /* Set by `re_set_syntax' to the current regexp syntax to recognize.  Can
844    also be assigned to arbitrarily: each pattern buffer stores its own
845    syntax, so it can be changed between regex compilations.  */
846 reg_syntax_t re_syntax_options = RE_SYNTAX_EMACS;
847
848
849 /* Specify the precise syntax of regexps for compilation.  This provides
850    for compatibility for various utilities which historically have
851    different, incompatible syntaxes.
852
853    The argument SYNTAX is a bit mask comprised of the various bits
854    defined in regex.h.  We return the old syntax.  */
855
856 reg_syntax_t
857 re_set_syntax (syntax)
858     reg_syntax_t syntax;
859 {
860   reg_syntax_t ret = re_syntax_options;
861   
862   re_syntax_options = syntax;
863   return ret;
864 }
865 \f
866 /* This table gives an error message for each of the error codes listed
867    in regex.h.  Obviously the order here has to be same as there.  */
868
869 static const char *re_error_msg[] =
870   { NULL,                                       /* REG_NOERROR */
871     "No match",                                 /* REG_NOMATCH */
872     "Invalid regular expression",               /* REG_BADPAT */
873     "Invalid collation character",              /* REG_ECOLLATE */
874     "Invalid character class name",             /* REG_ECTYPE */
875     "Trailing backslash",                       /* REG_EESCAPE */
876     "Invalid back reference",                   /* REG_ESUBREG */
877     "Unmatched [ or [^",                        /* REG_EBRACK */
878     "Unmatched ( or \\(",                       /* REG_EPAREN */
879     "Unmatched \\{",                            /* REG_EBRACE */
880     "Invalid content of \\{\\}",                /* REG_BADBR */
881     "Invalid range end",                        /* REG_ERANGE */
882     "Memory exhausted",                         /* REG_ESPACE */
883     "Invalid preceding regular expression",     /* REG_BADRPT */
884     "Premature end of regular expression",      /* REG_EEND */
885     "Regular expression too big",               /* REG_ESIZE */
886     "Unmatched ) or \\)",                       /* REG_ERPAREN */
887   };
888 \f
889 /* Avoiding alloca during matching, to placate r_alloc.  */
890
891 /* Define MATCH_MAY_ALLOCATE unless we need to make sure that the
892    searching and matching functions should not call alloca.  On some
893    systems, alloca is implemented in terms of malloc, and if we're
894    using the relocating allocator routines, then malloc could cause a
895    relocation, which might (if the strings being searched are in the
896    ralloc heap) shift the data out from underneath the regexp
897    routines.
898
899    Here's another reason to avoid allocation: Emacs insists on
900    processing input from X in a signal handler; processing X input may
901    call malloc; if input arrives while a matching routine is calling
902    malloc, then we're scrod.  But Emacs can't just block input while
903    calling matching routines; then we don't notice interrupts when
904    they come in.  So, Emacs blocks input around all regexp calls
905    except the matching calls, which it leaves unprotected, in the
906    faith that they will not malloc.  */
907
908 /* Normally, this is fine.  */
909 #define MATCH_MAY_ALLOCATE
910
911 /* But under some circumstances, it's not.  */
912 #if defined (emacs) || (defined (REL_ALLOC) && defined (C_ALLOCA))
913 #undef MATCH_MAY_ALLOCATE
914 #endif
915
916 \f
917 /* Failure stack declarations and macros; both re_compile_fastmap and
918    re_match_2 use a failure stack.  These have to be macros because of
919    REGEX_ALLOCATE.  */
920    
921
922 /* Number of failure points for which to initially allocate space
923    when matching.  If this number is exceeded, we allocate more
924    space, so it is not a hard limit.  */
925 #ifndef INIT_FAILURE_ALLOC
926 #define INIT_FAILURE_ALLOC 5
927 #endif
928
929 /* Roughly the maximum number of failure points on the stack.  Would be
930    exactly that if always used MAX_FAILURE_SPACE each time we failed.
931    This is a variable only so users of regex can assign to it; we never
932    change it ourselves.  */
933 int re_max_failures = 2000;
934
935 typedef unsigned char *fail_stack_elt_t;
936
937 typedef struct
938 {
939   fail_stack_elt_t *stack;
940   unsigned size;
941   unsigned avail;                       /* Offset of next open position.  */
942 } fail_stack_type;
943
944 #define FAIL_STACK_EMPTY()     (fail_stack.avail == 0)
945 #define FAIL_STACK_PTR_EMPTY() (fail_stack_ptr->avail == 0)
946 #define FAIL_STACK_FULL()      (fail_stack.avail == fail_stack.size)
947 #define FAIL_STACK_TOP()       (fail_stack.stack[fail_stack.avail])
948
949
950 /* Initialize `fail_stack'.  Do `return -2' if the alloc fails.  */
951
952 #ifdef MATCH_MAY_ALLOCATE
953 #define INIT_FAIL_STACK()                                               \
954   do {                                                                  \
955     fail_stack.stack = (fail_stack_elt_t *)                             \
956       REGEX_ALLOCATE (INIT_FAILURE_ALLOC * sizeof (fail_stack_elt_t));  \
957                                                                         \
958     if (fail_stack.stack == NULL)                                       \
959       return -2;                                                        \
960                                                                         \
961     fail_stack.size = INIT_FAILURE_ALLOC;                               \
962     fail_stack.avail = 0;                                               \
963   } while (0)
964 #else
965 #define INIT_FAIL_STACK()                                               \
966   do {                                                                  \
967     fail_stack.avail = 0;                                               \
968   } while (0)
969 #endif
970
971
972 /* Double the size of FAIL_STACK, up to approximately `re_max_failures' items.
973
974    Return 1 if succeeds, and 0 if either ran out of memory
975    allocating space for it or it was already too large.  
976    
977    REGEX_REALLOCATE requires `destination' be declared.   */
978
979 #define DOUBLE_FAIL_STACK(fail_stack)                                   \
980   ((fail_stack).size > re_max_failures * MAX_FAILURE_ITEMS              \
981    ? 0                                                                  \
982    : ((fail_stack).stack = (fail_stack_elt_t *)                         \
983         REGEX_REALLOCATE ((fail_stack).stack,                           \
984           (fail_stack).size * sizeof (fail_stack_elt_t),                \
985           ((fail_stack).size << 1) * sizeof (fail_stack_elt_t)),        \
986                                                                         \
987       (fail_stack).stack == NULL                                        \
988       ? 0                                                               \
989       : ((fail_stack).size <<= 1,                                       \
990          1)))
991
992
993 /* Push PATTERN_OP on FAIL_STACK. 
994
995    Return 1 if was able to do so and 0 if ran out of memory allocating
996    space to do so.  */
997 #define PUSH_PATTERN_OP(pattern_op, fail_stack)                         \
998   ((FAIL_STACK_FULL ()                                                  \
999     && !DOUBLE_FAIL_STACK (fail_stack))                                 \
1000     ? 0                                                                 \
1001     : ((fail_stack).stack[(fail_stack).avail++] = pattern_op,           \
1002        1))
1003
1004 /* This pushes an item onto the failure stack.  Must be a four-byte
1005    value.  Assumes the variable `fail_stack'.  Probably should only
1006    be called from within `PUSH_FAILURE_POINT'.  */
1007 #define PUSH_FAILURE_ITEM(item)                                         \
1008   fail_stack.stack[fail_stack.avail++] = (fail_stack_elt_t) item
1009
1010 /* The complement operation.  Assumes `fail_stack' is nonempty.  */
1011 #define POP_FAILURE_ITEM() fail_stack.stack[--fail_stack.avail]
1012
1013 /* Used to omit pushing failure point id's when we're not debugging.  */
1014 #ifdef DEBUG
1015 #define DEBUG_PUSH PUSH_FAILURE_ITEM
1016 #define DEBUG_POP(item_addr) *(item_addr) = POP_FAILURE_ITEM ()
1017 #else
1018 #define DEBUG_PUSH(item)
1019 #define DEBUG_POP(item_addr)
1020 #endif
1021
1022
1023 /* Push the information about the state we will need
1024    if we ever fail back to it.  
1025    
1026    Requires variables fail_stack, regstart, regend, reg_info, and
1027    num_regs be declared.  DOUBLE_FAIL_STACK requires `destination' be
1028    declared.
1029    
1030    Does `return FAILURE_CODE' if runs out of memory.  */
1031
1032 #define PUSH_FAILURE_POINT(pattern_place, string_place, failure_code)   \
1033   do {                                                                  \
1034     char *destination;                                                  \
1035     /* Must be int, so when we don't save any registers, the arithmetic \
1036        of 0 + -1 isn't done as unsigned.  */                            \
1037     int this_reg;                                                       \
1038                                                                         \
1039     DEBUG_STATEMENT (failure_id++);                                     \
1040     DEBUG_STATEMENT (nfailure_points_pushed++);                         \
1041     DEBUG_PRINT2 ("\nPUSH_FAILURE_POINT #%u:\n", failure_id);           \
1042     DEBUG_PRINT2 ("  Before push, next avail: %d\n", (fail_stack).avail);\
1043     DEBUG_PRINT2 ("                     size: %d\n", (fail_stack).size);\
1044                                                                         \
1045     DEBUG_PRINT2 ("  slots needed: %d\n", NUM_FAILURE_ITEMS);           \
1046     DEBUG_PRINT2 ("     available: %d\n", REMAINING_AVAIL_SLOTS);       \
1047                                                                         \
1048     /* Ensure we have enough space allocated for what we will push.  */ \
1049     while (REMAINING_AVAIL_SLOTS < NUM_FAILURE_ITEMS)                   \
1050       {                                                                 \
1051         if (!DOUBLE_FAIL_STACK (fail_stack))                    \
1052           return failure_code;                                          \
1053                                                                         \
1054         DEBUG_PRINT2 ("\n  Doubled stack; size now: %d\n",              \
1055                        (fail_stack).size);                              \
1056         DEBUG_PRINT2 ("  slots available: %d\n", REMAINING_AVAIL_SLOTS);\
1057       }                                                                 \
1058                                                                         \
1059     /* Push the info, starting with the registers.  */                  \
1060     DEBUG_PRINT1 ("\n");                                                \
1061                                                                         \
1062     for (this_reg = lowest_active_reg; this_reg <= highest_active_reg;  \
1063          this_reg++)                                                    \
1064       {                                                                 \
1065         DEBUG_PRINT2 ("  Pushing reg: %d\n", this_reg);                 \
1066         DEBUG_STATEMENT (num_regs_pushed++);                            \
1067                                                                         \
1068         DEBUG_PRINT2 ("    start: 0x%x\n", regstart[this_reg]);         \
1069         PUSH_FAILURE_ITEM (regstart[this_reg]);                         \
1070                                                                         \
1071         DEBUG_PRINT2 ("    end: 0x%x\n", regend[this_reg]);             \
1072         PUSH_FAILURE_ITEM (regend[this_reg]);                           \
1073                                                                         \
1074         DEBUG_PRINT2 ("    info: 0x%x\n      ", reg_info[this_reg]);    \
1075         DEBUG_PRINT2 (" match_null=%d",                                 \
1076                       REG_MATCH_NULL_STRING_P (reg_info[this_reg]));    \
1077         DEBUG_PRINT2 (" active=%d", IS_ACTIVE (reg_info[this_reg]));    \
1078         DEBUG_PRINT2 (" matched_something=%d",                          \
1079                       MATCHED_SOMETHING (reg_info[this_reg]));          \
1080         DEBUG_PRINT2 (" ever_matched=%d",                               \
1081                       EVER_MATCHED_SOMETHING (reg_info[this_reg]));     \
1082         DEBUG_PRINT1 ("\n");                                            \
1083         PUSH_FAILURE_ITEM (reg_info[this_reg].word);                    \
1084       }                                                                 \
1085                                                                         \
1086     DEBUG_PRINT2 ("  Pushing  low active reg: %d\n", lowest_active_reg);\
1087     PUSH_FAILURE_ITEM (lowest_active_reg);                              \
1088                                                                         \
1089     DEBUG_PRINT2 ("  Pushing high active reg: %d\n", highest_active_reg);\
1090     PUSH_FAILURE_ITEM (highest_active_reg);                             \
1091                                                                         \
1092     DEBUG_PRINT2 ("  Pushing pattern 0x%x: ", pattern_place);           \
1093     DEBUG_PRINT_COMPILED_PATTERN (bufp, pattern_place, pend);           \
1094     PUSH_FAILURE_ITEM (pattern_place);                                  \
1095                                                                         \
1096     DEBUG_PRINT2 ("  Pushing string 0x%x: `", string_place);            \
1097     DEBUG_PRINT_DOUBLE_STRING (string_place, string1, size1, string2,   \
1098                                  size2);                                \
1099     DEBUG_PRINT1 ("'\n");                                               \
1100     PUSH_FAILURE_ITEM (string_place);                                   \
1101                                                                         \
1102     DEBUG_PRINT2 ("  Pushing failure id: %u\n", failure_id);            \
1103     DEBUG_PUSH (failure_id);                                            \
1104   } while (0)
1105
1106 /* This is the number of items that are pushed and popped on the stack
1107    for each register.  */
1108 #define NUM_REG_ITEMS  3
1109
1110 /* Individual items aside from the registers.  */
1111 #ifdef DEBUG
1112 #define NUM_NONREG_ITEMS 5 /* Includes failure point id.  */
1113 #else
1114 #define NUM_NONREG_ITEMS 4
1115 #endif
1116
1117 /* We push at most this many items on the stack.  */
1118 #define MAX_FAILURE_ITEMS ((num_regs - 1) * NUM_REG_ITEMS + NUM_NONREG_ITEMS)
1119
1120 /* We actually push this many items.  */
1121 #define NUM_FAILURE_ITEMS                                               \
1122   ((highest_active_reg - lowest_active_reg + 1) * NUM_REG_ITEMS         \
1123     + NUM_NONREG_ITEMS)
1124
1125 /* How many items can still be added to the stack without overflowing it.  */
1126 #define REMAINING_AVAIL_SLOTS ((fail_stack).size - (fail_stack).avail)
1127
1128
1129 /* Pops what PUSH_FAIL_STACK pushes.
1130
1131    We restore into the parameters, all of which should be lvalues:
1132      STR -- the saved data position.
1133      PAT -- the saved pattern position.
1134      LOW_REG, HIGH_REG -- the highest and lowest active registers.
1135      REGSTART, REGEND -- arrays of string positions.
1136      REG_INFO -- array of information about each subexpression.
1137    
1138    Also assumes the variables `fail_stack' and (if debugging), `bufp',
1139    `pend', `string1', `size1', `string2', and `size2'.  */
1140
1141 #define POP_FAILURE_POINT(str, pat, low_reg, high_reg, regstart, regend, reg_info)\
1142 {                                                                       \
1143   DEBUG_STATEMENT (fail_stack_elt_t failure_id;)                        \
1144   int this_reg;                                                         \
1145   const unsigned char *string_temp;                                     \
1146                                                                         \
1147   assert (!FAIL_STACK_EMPTY ());                                        \
1148                                                                         \
1149   /* Remove failure points and point to how many regs pushed.  */       \
1150   DEBUG_PRINT1 ("POP_FAILURE_POINT:\n");                                \
1151   DEBUG_PRINT2 ("  Before pop, next avail: %d\n", fail_stack.avail);    \
1152   DEBUG_PRINT2 ("                    size: %d\n", fail_stack.size);     \
1153                                                                         \
1154   assert (fail_stack.avail >= NUM_NONREG_ITEMS);                        \
1155                                                                         \
1156   DEBUG_POP (&failure_id);                                              \
1157   DEBUG_PRINT2 ("  Popping failure id: %u\n", failure_id);              \
1158                                                                         \
1159   /* If the saved string location is NULL, it came from an              \
1160      on_failure_keep_string_jump opcode, and we want to throw away the  \
1161      saved NULL, thus retaining our current position in the string.  */ \
1162   string_temp = POP_FAILURE_ITEM ();                                    \
1163   if (string_temp != NULL)                                              \
1164     str = (const char *) string_temp;                                   \
1165                                                                         \
1166   DEBUG_PRINT2 ("  Popping string 0x%x: `", str);                       \
1167   DEBUG_PRINT_DOUBLE_STRING (str, string1, size1, string2, size2);      \
1168   DEBUG_PRINT1 ("'\n");                                                 \
1169                                                                         \
1170   pat = (unsigned char *) POP_FAILURE_ITEM ();                          \
1171   DEBUG_PRINT2 ("  Popping pattern 0x%x: ", pat);                       \
1172   DEBUG_PRINT_COMPILED_PATTERN (bufp, pat, pend);                       \
1173                                                                         \
1174   /* Restore register info.  */                                         \
1175   high_reg = (unsigned) POP_FAILURE_ITEM ();                            \
1176   DEBUG_PRINT2 ("  Popping high active reg: %d\n", high_reg);           \
1177                                                                         \
1178   low_reg = (unsigned) POP_FAILURE_ITEM ();                             \
1179   DEBUG_PRINT2 ("  Popping  low active reg: %d\n", low_reg);            \
1180                                                                         \
1181   for (this_reg = high_reg; this_reg >= low_reg; this_reg--)            \
1182     {                                                                   \
1183       DEBUG_PRINT2 ("    Popping reg: %d\n", this_reg);                 \
1184                                                                         \
1185       reg_info[this_reg].word = POP_FAILURE_ITEM ();                    \
1186       DEBUG_PRINT2 ("      info: 0x%x\n", reg_info[this_reg]);          \
1187                                                                         \
1188       regend[this_reg] = (const char *) POP_FAILURE_ITEM ();            \
1189       DEBUG_PRINT2 ("      end: 0x%x\n", regend[this_reg]);             \
1190                                                                         \
1191       regstart[this_reg] = (const char *) POP_FAILURE_ITEM ();          \
1192       DEBUG_PRINT2 ("      start: 0x%x\n", regstart[this_reg]);         \
1193     }                                                                   \
1194                                                                         \
1195   DEBUG_STATEMENT (nfailure_points_popped++);                           \
1196 } /* POP_FAILURE_POINT */
1197
1198
1199 \f
1200 /* Structure for per-register (a.k.a. per-group) information.
1201    This must not be longer than one word, because we push this value
1202    onto the failure stack.  Other register information, such as the
1203    starting and ending positions (which are addresses), and the list of
1204    inner groups (which is a bits list) are maintained in separate
1205    variables.  
1206    
1207    We are making a (strictly speaking) nonportable assumption here: that
1208    the compiler will pack our bit fields into something that fits into
1209    the type of `word', i.e., is something that fits into one item on the
1210    failure stack.  */
1211 typedef union
1212 {
1213   fail_stack_elt_t word;
1214   struct
1215   {
1216       /* This field is one if this group can match the empty string,
1217          zero if not.  If not yet determined,  `MATCH_NULL_UNSET_VALUE'.  */
1218 #define MATCH_NULL_UNSET_VALUE 3
1219     unsigned match_null_string_p : 2;
1220     unsigned is_active : 1;
1221     unsigned matched_something : 1;
1222     unsigned ever_matched_something : 1;
1223   } bits;
1224 } register_info_type;
1225
1226 #define REG_MATCH_NULL_STRING_P(R)  ((R).bits.match_null_string_p)
1227 #define IS_ACTIVE(R)  ((R).bits.is_active)
1228 #define MATCHED_SOMETHING(R)  ((R).bits.matched_something)
1229 #define EVER_MATCHED_SOMETHING(R)  ((R).bits.ever_matched_something)
1230
1231
1232 /* Call this when have matched a real character; it sets `matched' flags
1233    for the subexpressions which we are currently inside.  Also records
1234    that those subexprs have matched.  */
1235 #define SET_REGS_MATCHED()                                              \
1236   do                                                                    \
1237     {                                                                   \
1238       unsigned r;                                                       \
1239       for (r = lowest_active_reg; r <= highest_active_reg; r++)         \
1240         {                                                               \
1241           MATCHED_SOMETHING (reg_info[r])                               \
1242             = EVER_MATCHED_SOMETHING (reg_info[r])                      \
1243             = 1;                                                        \
1244         }                                                               \
1245     }                                                                   \
1246   while (0)
1247
1248
1249 /* Registers are set to a sentinel when they haven't yet matched.  */
1250 #define REG_UNSET_VALUE ((char *) -1)
1251 #define REG_UNSET(e) ((e) == REG_UNSET_VALUE)
1252
1253
1254 \f
1255 /* How do we implement a missing MATCH_MAY_ALLOCATE?
1256    We make the fail stack a global thing, and then grow it to
1257    re_max_failures when we compile.  */
1258 #ifndef MATCH_MAY_ALLOCATE
1259 static int fail_stack_allocated;
1260 static fail_stack_type fail_stack;
1261
1262 static const char **     regstart, **     regend;
1263 static const char ** old_regstart, ** old_regend;
1264 static const char **best_regstart, **best_regend;
1265 static register_info_type *reg_info; 
1266 static const char **reg_dummy;
1267 static register_info_type *reg_info_dummy;
1268 #endif
1269
1270 \f
1271 /* Subroutine declarations and macros for regex_compile.  */
1272
1273 static void store_op1 (), store_op2 ();
1274 static void insert_op1 (), insert_op2 ();
1275 static boolean at_begline_loc_p (), at_endline_loc_p ();
1276 static boolean group_in_compile_stack ();
1277 static reg_errcode_t compile_range ();
1278
1279 /* Fetch the next character in the uncompiled pattern---translating it 
1280    if necessary.  Also cast from a signed character in the constant
1281    string passed to us by the user to an unsigned char that we can use
1282    as an array index (in, e.g., `translate').  */
1283 #define PATFETCH(c)                                                     \
1284   do {if (p == pend) return REG_EEND;                                   \
1285     c = (unsigned char) *p++;                                           \
1286     if (translate) c = translate[c];                                    \
1287   } while (0)
1288
1289 /* Fetch the next character in the uncompiled pattern, with no
1290    translation.  */
1291 #define PATFETCH_RAW(c)                                                 \
1292   do {if (p == pend) return REG_EEND;                                   \
1293     c = (unsigned char) *p++;                                           \
1294   } while (0)
1295
1296 /* Go backwards one character in the pattern.  */
1297 #define PATUNFETCH p--
1298
1299
1300 /* If `translate' is non-null, return translate[D], else just D.  We
1301    cast the subscript to translate because some data is declared as
1302    `char *', to avoid warnings when a string constant is passed.  But
1303    when we use a character as a subscript we must make it unsigned.  */
1304 #define TRANSLATE(d) (translate ? translate[(unsigned char) (d)] : (d))
1305
1306
1307 /* Macros for outputting the compiled pattern into `buffer'.  */
1308
1309 /* If the buffer isn't allocated when it comes in, use this.  */
1310 #define INIT_BUF_SIZE  32
1311
1312 /* Make sure we have at least N more bytes of space in buffer.  */
1313 #define GET_BUFFER_SPACE(n)                                             \
1314     while (b - bufp->buffer + (n) > bufp->allocated)                    \
1315       EXTEND_BUFFER ()
1316
1317 /* Make sure we have one more byte of buffer space and then add C to it.  */
1318 #define BUF_PUSH(c)                                                     \
1319   do {                                                                  \
1320     GET_BUFFER_SPACE (1);                                               \
1321     *b++ = (unsigned char) (c);                                         \
1322   } while (0)
1323
1324
1325 /* Ensure we have two more bytes of buffer space and then append C1 and C2.  */
1326 #define BUF_PUSH_2(c1, c2)                                              \
1327   do {                                                                  \
1328     GET_BUFFER_SPACE (2);                                               \
1329     *b++ = (unsigned char) (c1);                                        \
1330     *b++ = (unsigned char) (c2);                                        \
1331   } while (0)
1332
1333
1334 /* As with BUF_PUSH_2, except for three bytes.  */
1335 #define BUF_PUSH_3(c1, c2, c3)                                          \
1336   do {                                                                  \
1337     GET_BUFFER_SPACE (3);                                               \
1338     *b++ = (unsigned char) (c1);                                        \
1339     *b++ = (unsigned char) (c2);                                        \
1340     *b++ = (unsigned char) (c3);                                        \
1341   } while (0)
1342
1343
1344 /* Store a jump with opcode OP at LOC to location TO.  We store a
1345    relative address offset by the three bytes the jump itself occupies.  */
1346 #define STORE_JUMP(op, loc, to) \
1347   store_op1 (op, loc, (to) - (loc) - 3)
1348
1349 /* Likewise, for a two-argument jump.  */
1350 #define STORE_JUMP2(op, loc, to, arg) \
1351   store_op2 (op, loc, (to) - (loc) - 3, arg)
1352
1353 /* Like `STORE_JUMP', but for inserting.  Assume `b' is the buffer end.  */
1354 #define INSERT_JUMP(op, loc, to) \
1355   insert_op1 (op, loc, (to) - (loc) - 3, b)
1356
1357 /* Like `STORE_JUMP2', but for inserting.  Assume `b' is the buffer end.  */
1358 #define INSERT_JUMP2(op, loc, to, arg) \
1359   insert_op2 (op, loc, (to) - (loc) - 3, arg, b)
1360
1361
1362 /* This is not an arbitrary limit: the arguments which represent offsets
1363    into the pattern are two bytes long.  So if 2^16 bytes turns out to
1364    be too small, many things would have to change.  */
1365 #define MAX_BUF_SIZE (1L << 16)
1366
1367
1368 /* Extend the buffer by twice its current size via realloc and
1369    reset the pointers that pointed into the old block to point to the
1370    correct places in the new one.  If extending the buffer results in it
1371    being larger than MAX_BUF_SIZE, then flag memory exhausted.  */
1372 #define EXTEND_BUFFER()                                                 \
1373   do {                                                                  \
1374     unsigned char *old_buffer = bufp->buffer;                           \
1375     if (bufp->allocated == MAX_BUF_SIZE)                                \
1376       return REG_ESIZE;                                                 \
1377     bufp->allocated <<= 1;                                              \
1378     if (bufp->allocated > MAX_BUF_SIZE)                                 \
1379       bufp->allocated = MAX_BUF_SIZE;                                   \
1380     bufp->buffer = (unsigned char *) realloc (bufp->buffer, bufp->allocated);\
1381     if (bufp->buffer == NULL)                                           \
1382       return REG_ESPACE;                                                \
1383     /* If the buffer moved, move all the pointers into it.  */          \
1384     if (old_buffer != bufp->buffer)                                     \
1385       {                                                                 \
1386         b = (b - old_buffer) + bufp->buffer;                            \
1387         begalt = (begalt - old_buffer) + bufp->buffer;                  \
1388         if (fixup_alt_jump)                                             \
1389           fixup_alt_jump = (fixup_alt_jump - old_buffer) + bufp->buffer;\
1390         if (laststart)                                                  \
1391           laststart = (laststart - old_buffer) + bufp->buffer;          \
1392         if (pending_exact)                                              \
1393           pending_exact = (pending_exact - old_buffer) + bufp->buffer;  \
1394       }                                                                 \
1395   } while (0)
1396
1397
1398 /* Since we have one byte reserved for the register number argument to
1399    {start,stop}_memory, the maximum number of groups we can report
1400    things about is what fits in that byte.  */
1401 #define MAX_REGNUM 255
1402
1403 /* But patterns can have more than `MAX_REGNUM' registers.  We just
1404    ignore the excess.  */
1405 typedef unsigned regnum_t;
1406
1407
1408 /* Macros for the compile stack.  */
1409
1410 /* Since offsets can go either forwards or backwards, this type needs to
1411    be able to hold values from -(MAX_BUF_SIZE - 1) to MAX_BUF_SIZE - 1.  */
1412 typedef int pattern_offset_t;
1413
1414 typedef struct
1415 {
1416   pattern_offset_t begalt_offset;
1417   pattern_offset_t fixup_alt_jump;
1418   pattern_offset_t inner_group_offset;
1419   pattern_offset_t laststart_offset;  
1420   regnum_t regnum;
1421 } compile_stack_elt_t;
1422
1423
1424 typedef struct
1425 {
1426   compile_stack_elt_t *stack;
1427   unsigned size;
1428   unsigned avail;                       /* Offset of next open position.  */
1429 } compile_stack_type;
1430
1431
1432 #define INIT_COMPILE_STACK_SIZE 32
1433
1434 #define COMPILE_STACK_EMPTY  (compile_stack.avail == 0)
1435 #define COMPILE_STACK_FULL  (compile_stack.avail == compile_stack.size)
1436
1437 /* The next available element.  */
1438 #define COMPILE_STACK_TOP (compile_stack.stack[compile_stack.avail])
1439
1440
1441 /* Set the bit for character C in a list.  */
1442 #define SET_LIST_BIT(c)                               \
1443   (b[((unsigned char) (c)) / BYTEWIDTH]               \
1444    |= 1 << (((unsigned char) c) % BYTEWIDTH))
1445
1446
1447 /* Get the next unsigned number in the uncompiled pattern.  */
1448 #define GET_UNSIGNED_NUMBER(num)                                        \
1449   { if (p != pend)                                                      \
1450      {                                                                  \
1451        PATFETCH (c);                                                    \
1452        while (ISDIGIT (c))                                              \
1453          {                                                              \
1454            if (num < 0)                                                 \
1455               num = 0;                                                  \
1456            num = num * 10 + c - '0';                                    \
1457            if (p == pend)                                               \
1458               break;                                                    \
1459            PATFETCH (c);                                                \
1460          }                                                              \
1461        }                                                                \
1462     }           
1463
1464 #define CHAR_CLASS_MAX_LENGTH  6 /* Namely, `xdigit'.  */
1465
1466 #define IS_CHAR_CLASS(string)                                           \
1467    (STREQ (string, "alpha") || STREQ (string, "upper")                  \
1468     || STREQ (string, "lower") || STREQ (string, "digit")               \
1469     || STREQ (string, "alnum") || STREQ (string, "xdigit")              \
1470     || STREQ (string, "space") || STREQ (string, "print")               \
1471     || STREQ (string, "punct") || STREQ (string, "graph")               \
1472     || STREQ (string, "cntrl") || STREQ (string, "blank"))
1473 \f
1474 /* `regex_compile' compiles PATTERN (of length SIZE) according to SYNTAX.
1475    Returns one of error codes defined in `regex.h', or zero for success.
1476
1477    Assumes the `allocated' (and perhaps `buffer') and `translate'
1478    fields are set in BUFP on entry.
1479
1480    If it succeeds, results are put in BUFP (if it returns an error, the
1481    contents of BUFP are undefined):
1482      `buffer' is the compiled pattern;
1483      `syntax' is set to SYNTAX;
1484      `used' is set to the length of the compiled pattern;
1485      `fastmap_accurate' is zero;
1486      `re_nsub' is the number of subexpressions in PATTERN;
1487      `not_bol' and `not_eol' are zero;
1488    
1489    The `fastmap' and `newline_anchor' fields are neither
1490    examined nor set.  */
1491
1492 static reg_errcode_t
1493 regex_compile (pattern, size, syntax, bufp)
1494      const char *pattern;
1495      int size;
1496      reg_syntax_t syntax;
1497      struct re_pattern_buffer *bufp;
1498 {
1499   /* We fetch characters from PATTERN here.  Even though PATTERN is
1500      `char *' (i.e., signed), we declare these variables as unsigned, so
1501      they can be reliably used as array indices.  */
1502   register unsigned char c, c1;
1503   
1504   /* A random temporary spot in PATTERN.  */
1505   const char *p1;
1506
1507   /* Points to the end of the buffer, where we should append.  */
1508   register unsigned char *b;
1509   
1510   /* Keeps track of unclosed groups.  */
1511   compile_stack_type compile_stack;
1512
1513   /* Points to the current (ending) position in the pattern.  */
1514   const char *p = pattern;
1515   const char *pend = pattern + size;
1516   
1517   /* How to translate the characters in the pattern.  */
1518   char *translate = bufp->translate;
1519
1520   /* Address of the count-byte of the most recently inserted `exactn'
1521      command.  This makes it possible to tell if a new exact-match
1522      character can be added to that command or if the character requires
1523      a new `exactn' command.  */
1524   unsigned char *pending_exact = 0;
1525
1526   /* Address of start of the most recently finished expression.
1527      This tells, e.g., postfix * where to find the start of its
1528      operand.  Reset at the beginning of groups and alternatives.  */
1529   unsigned char *laststart = 0;
1530
1531   /* Address of beginning of regexp, or inside of last group.  */
1532   unsigned char *begalt;
1533
1534   /* Place in the uncompiled pattern (i.e., the {) to
1535      which to go back if the interval is invalid.  */
1536   const char *beg_interval;
1537                 
1538   /* Address of the place where a forward jump should go to the end of
1539      the containing expression.  Each alternative of an `or' -- except the
1540      last -- ends with a forward jump of this sort.  */
1541   unsigned char *fixup_alt_jump = 0;
1542
1543   /* Counts open-groups as they are encountered.  Remembered for the
1544      matching close-group on the compile stack, so the same register
1545      number is put in the stop_memory as the start_memory.  */
1546   regnum_t regnum = 0;
1547
1548 #ifdef DEBUG
1549   DEBUG_PRINT1 ("\nCompiling pattern: ");
1550   if (debug)
1551     {
1552       unsigned debug_count;
1553       
1554       for (debug_count = 0; debug_count < size; debug_count++)
1555         printchar (pattern[debug_count]);
1556       putchar ('\n');
1557     }
1558 #endif /* DEBUG */
1559
1560   /* Initialize the compile stack.  */
1561   compile_stack.stack = TALLOC (INIT_COMPILE_STACK_SIZE, compile_stack_elt_t);
1562   if (compile_stack.stack == NULL)
1563     return REG_ESPACE;
1564
1565   compile_stack.size = INIT_COMPILE_STACK_SIZE;
1566   compile_stack.avail = 0;
1567
1568   /* Initialize the pattern buffer.  */
1569   bufp->syntax = syntax;
1570   bufp->fastmap_accurate = 0;
1571   bufp->not_bol = bufp->not_eol = 0;
1572
1573   /* Set `used' to zero, so that if we return an error, the pattern
1574      printer (for debugging) will think there's no pattern.  We reset it
1575      at the end.  */
1576   bufp->used = 0;
1577   
1578   /* Always count groups, whether or not bufp->no_sub is set.  */
1579   bufp->re_nsub = 0;                            
1580
1581 #if !defined (emacs) && !defined (SYNTAX_TABLE)
1582   /* Initialize the syntax table.  */
1583    init_syntax_once ();
1584 #endif
1585
1586   if (bufp->allocated == 0)
1587     {
1588       if (bufp->buffer)
1589         { /* If zero allocated, but buffer is non-null, try to realloc
1590              enough space.  This loses if buffer's address is bogus, but
1591              that is the user's responsibility.  */
1592           RETALLOC (bufp->buffer, INIT_BUF_SIZE, unsigned char);
1593         }
1594       else
1595         { /* Caller did not allocate a buffer.  Do it for them.  */
1596           bufp->buffer = TALLOC (INIT_BUF_SIZE, unsigned char);
1597         }
1598       if (!bufp->buffer) return REG_ESPACE;
1599
1600       bufp->allocated = INIT_BUF_SIZE;
1601     }
1602
1603   begalt = b = bufp->buffer;
1604
1605   /* Loop through the uncompiled pattern until we're at the end.  */
1606   while (p != pend)
1607     {
1608       PATFETCH (c);
1609
1610       switch (c)
1611         {
1612         case '^':
1613           {
1614             if (   /* If at start of pattern, it's an operator.  */
1615                    p == pattern + 1
1616                    /* If context independent, it's an operator.  */
1617                 || syntax & RE_CONTEXT_INDEP_ANCHORS
1618                    /* Otherwise, depends on what's come before.  */
1619                 || at_begline_loc_p (pattern, p, syntax))
1620               BUF_PUSH (begline);
1621             else
1622               goto normal_char;
1623           }
1624           break;
1625
1626
1627         case '$':
1628           {
1629             if (   /* If at end of pattern, it's an operator.  */
1630                    p == pend 
1631                    /* If context independent, it's an operator.  */
1632                 || syntax & RE_CONTEXT_INDEP_ANCHORS
1633                    /* Otherwise, depends on what's next.  */
1634                 || at_endline_loc_p (p, pend, syntax))
1635                BUF_PUSH (endline);
1636              else
1637                goto normal_char;
1638            }
1639            break;
1640
1641
1642         case '+':
1643         case '?':
1644           if ((syntax & RE_BK_PLUS_QM)
1645               || (syntax & RE_LIMITED_OPS))
1646             goto normal_char;
1647         handle_plus:
1648         case '*':
1649           /* If there is no previous pattern... */
1650           if (!laststart)
1651             {
1652               if (syntax & RE_CONTEXT_INVALID_OPS)
1653                 return REG_BADRPT;
1654               else if (!(syntax & RE_CONTEXT_INDEP_OPS))
1655                 goto normal_char;
1656             }
1657
1658           {
1659             /* Are we optimizing this jump?  */
1660             boolean keep_string_p = false;
1661             
1662             /* 1 means zero (many) matches is allowed.  */
1663             char zero_times_ok = 0, many_times_ok = 0;
1664
1665             /* If there is a sequence of repetition chars, collapse it
1666                down to just one (the right one).  We can't combine
1667                interval operators with these because of, e.g., `a{2}*',
1668                which should only match an even number of `a's.  */
1669
1670             for (;;)
1671               {
1672                 zero_times_ok |= c != '+';
1673                 many_times_ok |= c != '?';
1674
1675                 if (p == pend)
1676                   break;
1677
1678                 PATFETCH (c);
1679
1680                 if (c == '*'
1681                     || (!(syntax & RE_BK_PLUS_QM) && (c == '+' || c == '?')))
1682                   ;
1683
1684                 else if (syntax & RE_BK_PLUS_QM  &&  c == '\\')
1685                   {
1686                     if (p == pend) return REG_EESCAPE;
1687
1688                     PATFETCH (c1);
1689                     if (!(c1 == '+' || c1 == '?'))
1690                       {
1691                         PATUNFETCH;
1692                         PATUNFETCH;
1693                         break;
1694                       }
1695
1696                     c = c1;
1697                   }
1698                 else
1699                   {
1700                     PATUNFETCH;
1701                     break;
1702                   }
1703
1704                 /* If we get here, we found another repeat character.  */
1705                }
1706
1707             /* Star, etc. applied to an empty pattern is equivalent
1708                to an empty pattern.  */
1709             if (!laststart)  
1710               break;
1711
1712             /* Now we know whether or not zero matches is allowed
1713                and also whether or not two or more matches is allowed.  */
1714             if (many_times_ok)
1715               { /* More than one repetition is allowed, so put in at the
1716                    end a backward relative jump from `b' to before the next
1717                    jump we're going to put in below (which jumps from
1718                    laststart to after this jump).  
1719
1720                    But if we are at the `*' in the exact sequence `.*\n',
1721                    insert an unconditional jump backwards to the .,
1722                    instead of the beginning of the loop.  This way we only
1723                    push a failure point once, instead of every time
1724                    through the loop.  */
1725                 assert (p - 1 > pattern);
1726
1727                 /* Allocate the space for the jump.  */
1728                 GET_BUFFER_SPACE (3);
1729
1730                 /* We know we are not at the first character of the pattern,
1731                    because laststart was nonzero.  And we've already
1732                    incremented `p', by the way, to be the character after
1733                    the `*'.  Do we have to do something analogous here
1734                    for null bytes, because of RE_DOT_NOT_NULL?  */
1735                 if (TRANSLATE (*(p - 2)) == TRANSLATE ('.')
1736                     && zero_times_ok
1737                     && p < pend && TRANSLATE (*p) == TRANSLATE ('\n')
1738                     && !(syntax & RE_DOT_NEWLINE))
1739                   { /* We have .*\n.  */
1740                     STORE_JUMP (jump, b, laststart);
1741                     keep_string_p = true;
1742                   }
1743                 else
1744                   /* Anything else.  */
1745                   STORE_JUMP (maybe_pop_jump, b, laststart - 3);
1746
1747                 /* We've added more stuff to the buffer.  */
1748                 b += 3;
1749               }
1750
1751             /* On failure, jump from laststart to b + 3, which will be the
1752                end of the buffer after this jump is inserted.  */
1753             GET_BUFFER_SPACE (3);
1754             INSERT_JUMP (keep_string_p ? on_failure_keep_string_jump
1755                                        : on_failure_jump,
1756                          laststart, b + 3);
1757             pending_exact = 0;
1758             b += 3;
1759
1760             if (!zero_times_ok)
1761               {
1762                 /* At least one repetition is required, so insert a
1763                    `dummy_failure_jump' before the initial
1764                    `on_failure_jump' instruction of the loop. This
1765                    effects a skip over that instruction the first time
1766                    we hit that loop.  */
1767                 GET_BUFFER_SPACE (3);
1768                 INSERT_JUMP (dummy_failure_jump, laststart, laststart + 6);
1769                 b += 3;
1770               }
1771             }
1772           break;
1773
1774
1775         case '.':
1776           laststart = b;
1777           BUF_PUSH (anychar);
1778           break;
1779
1780
1781         case '[':
1782           {
1783             boolean had_char_class = false;
1784
1785             if (p == pend) return REG_EBRACK;
1786
1787             /* Ensure that we have enough space to push a charset: the
1788                opcode, the length count, and the bitset; 34 bytes in all.  */
1789             GET_BUFFER_SPACE (34);
1790
1791             laststart = b;
1792
1793             /* We test `*p == '^' twice, instead of using an if
1794                statement, so we only need one BUF_PUSH.  */
1795             BUF_PUSH (*p == '^' ? charset_not : charset); 
1796             if (*p == '^')
1797               p++;
1798
1799             /* Remember the first position in the bracket expression.  */
1800             p1 = p;
1801
1802             /* Push the number of bytes in the bitmap.  */
1803             BUF_PUSH ((1 << BYTEWIDTH) / BYTEWIDTH);
1804
1805             /* Clear the whole map.  */
1806             bzero (b, (1 << BYTEWIDTH) / BYTEWIDTH);
1807
1808             /* charset_not matches newline according to a syntax bit.  */
1809             if ((re_opcode_t) b[-2] == charset_not
1810                 && (syntax & RE_HAT_LISTS_NOT_NEWLINE))
1811               SET_LIST_BIT ('\n');
1812
1813             /* Read in characters and ranges, setting map bits.  */
1814             for (;;)
1815               {
1816                 if (p == pend) return REG_EBRACK;
1817
1818                 PATFETCH (c);
1819
1820                 /* \ might escape characters inside [...] and [^...].  */
1821                 if ((syntax & RE_BACKSLASH_ESCAPE_IN_LISTS) && c == '\\')
1822                   {
1823                     if (p == pend) return REG_EESCAPE;
1824
1825                     PATFETCH (c1);
1826                     SET_LIST_BIT (c1);
1827                     continue;
1828                   }
1829
1830                 /* Could be the end of the bracket expression.  If it's
1831                    not (i.e., when the bracket expression is `[]' so
1832                    far), the ']' character bit gets set way below.  */
1833                 if (c == ']' && p != p1 + 1)
1834                   break;
1835
1836                 /* Look ahead to see if it's a range when the last thing
1837                    was a character class.  */
1838                 if (had_char_class && c == '-' && *p != ']')
1839                   return REG_ERANGE;
1840
1841                 /* Look ahead to see if it's a range when the last thing
1842                    was a character: if this is a hyphen not at the
1843                    beginning or the end of a list, then it's the range
1844                    operator.  */
1845                 if (c == '-' 
1846                     && !(p - 2 >= pattern && p[-2] == '[') 
1847                     && !(p - 3 >= pattern && p[-3] == '[' && p[-2] == '^')
1848                     && *p != ']')
1849                   {
1850                     reg_errcode_t ret
1851                       = compile_range (&p, pend, translate, syntax, b);
1852                     if (ret != REG_NOERROR) return ret;
1853                   }
1854
1855                 else if (p[0] == '-' && p[1] != ']')
1856                   { /* This handles ranges made up of characters only.  */
1857                     reg_errcode_t ret;
1858
1859                     /* Move past the `-'.  */
1860                     PATFETCH (c1);
1861                     
1862                     ret = compile_range (&p, pend, translate, syntax, b);
1863                     if (ret != REG_NOERROR) return ret;
1864                   }
1865
1866                 /* See if we're at the beginning of a possible character
1867                    class.  */
1868
1869                 else if (syntax & RE_CHAR_CLASSES && c == '[' && *p == ':')
1870                   { /* Leave room for the null.  */
1871                     char str[CHAR_CLASS_MAX_LENGTH + 1];
1872
1873                     PATFETCH (c);
1874                     c1 = 0;
1875
1876                     /* If pattern is `[[:'.  */
1877                     if (p == pend) return REG_EBRACK;
1878
1879                     for (;;)
1880                       {
1881                         PATFETCH (c);
1882                         if (c == ':' || c == ']' || p == pend
1883                             || c1 == CHAR_CLASS_MAX_LENGTH)
1884                           break;
1885                         str[c1++] = c;
1886                       }
1887                     str[c1] = '\0';
1888
1889                     /* If isn't a word bracketed by `[:' and:`]':
1890                        undo the ending character, the letters, and leave 
1891                        the leading `:' and `[' (but set bits for them).  */
1892                     if (c == ':' && *p == ']')
1893                       {
1894                         int ch;
1895                         boolean is_alnum = STREQ (str, "alnum");
1896                         boolean is_alpha = STREQ (str, "alpha");
1897                         boolean is_blank = STREQ (str, "blank");
1898                         boolean is_cntrl = STREQ (str, "cntrl");
1899                         boolean is_digit = STREQ (str, "digit");
1900                         boolean is_graph = STREQ (str, "graph");
1901                         boolean is_lower = STREQ (str, "lower");
1902                         boolean is_print = STREQ (str, "print");
1903                         boolean is_punct = STREQ (str, "punct");
1904                         boolean is_space = STREQ (str, "space");
1905                         boolean is_upper = STREQ (str, "upper");
1906                         boolean is_xdigit = STREQ (str, "xdigit");
1907                         
1908                         if (!IS_CHAR_CLASS (str)) return REG_ECTYPE;
1909
1910                         /* Throw away the ] at the end of the character
1911                            class.  */
1912                         PATFETCH (c);                                   
1913
1914                         if (p == pend) return REG_EBRACK;
1915
1916                         for (ch = 0; ch < 1 << BYTEWIDTH; ch++)
1917                           {
1918                             if (   (is_alnum  && ISALNUM (ch))
1919                                 || (is_alpha  && ISALPHA (ch))
1920                                 || (is_blank  && ISBLANK (ch))
1921                                 || (is_cntrl  && ISCNTRL (ch))
1922                                 || (is_digit  && ISDIGIT (ch))
1923                                 || (is_graph  && ISGRAPH (ch))
1924                                 || (is_lower  && ISLOWER (ch))
1925                                 || (is_print  && ISPRINT (ch))
1926                                 || (is_punct  && ISPUNCT (ch))
1927                                 || (is_space  && ISSPACE (ch))
1928                                 || (is_upper  && ISUPPER (ch))
1929                                 || (is_xdigit && ISXDIGIT (ch)))
1930                             SET_LIST_BIT (ch);
1931                           }
1932                         had_char_class = true;
1933                       }
1934                     else
1935                       {
1936                         c1++;
1937                         while (c1--)    
1938                           PATUNFETCH;
1939                         SET_LIST_BIT ('[');
1940                         SET_LIST_BIT (':');
1941                         had_char_class = false;
1942                       }
1943                   }
1944                 else
1945                   {
1946                     had_char_class = false;
1947                     SET_LIST_BIT (c);
1948                   }
1949               }
1950
1951             /* Discard any (non)matching list bytes that are all 0 at the
1952                end of the map.  Decrease the map-length byte too.  */
1953             while ((int) b[-1] > 0 && b[b[-1] - 1] == 0) 
1954               b[-1]--; 
1955             b += b[-1];
1956           }
1957           break;
1958
1959
1960         case '(':
1961           if (syntax & RE_NO_BK_PARENS)
1962             goto handle_open;
1963           else
1964             goto normal_char;
1965
1966
1967         case ')':
1968           if (syntax & RE_NO_BK_PARENS)
1969             goto handle_close;
1970           else
1971             goto normal_char;
1972
1973
1974         case '\n':
1975           if (syntax & RE_NEWLINE_ALT)
1976             goto handle_alt;
1977           else
1978             goto normal_char;
1979
1980
1981         case '|':
1982           if (syntax & RE_NO_BK_VBAR)
1983             goto handle_alt;
1984           else
1985             goto normal_char;
1986
1987
1988         case '{':
1989            if (syntax & RE_INTERVALS && syntax & RE_NO_BK_BRACES)
1990              goto handle_interval;
1991            else
1992              goto normal_char;
1993
1994
1995         case '\\':
1996           if (p == pend) return REG_EESCAPE;
1997
1998           /* Do not translate the character after the \, so that we can
1999              distinguish, e.g., \B from \b, even if we normally would
2000              translate, e.g., B to b.  */
2001           PATFETCH_RAW (c);
2002
2003           switch (c)
2004             {
2005             case '(':
2006               if (syntax & RE_NO_BK_PARENS)
2007                 goto normal_backslash;
2008
2009             handle_open:
2010               bufp->re_nsub++;
2011               regnum++;
2012
2013               if (COMPILE_STACK_FULL)
2014                 { 
2015                   RETALLOC (compile_stack.stack, compile_stack.size << 1,
2016                             compile_stack_elt_t);
2017                   if (compile_stack.stack == NULL) return REG_ESPACE;
2018
2019                   compile_stack.size <<= 1;
2020                 }
2021
2022               /* These are the values to restore when we hit end of this
2023                  group.  They are all relative offsets, so that if the
2024                  whole pattern moves because of realloc, they will still
2025                  be valid.  */
2026               COMPILE_STACK_TOP.begalt_offset = begalt - bufp->buffer;
2027               COMPILE_STACK_TOP.fixup_alt_jump 
2028                 = fixup_alt_jump ? fixup_alt_jump - bufp->buffer + 1 : 0;
2029               COMPILE_STACK_TOP.laststart_offset = b - bufp->buffer;
2030               COMPILE_STACK_TOP.regnum = regnum;
2031
2032               /* We will eventually replace the 0 with the number of
2033                  groups inner to this one.  But do not push a
2034                  start_memory for groups beyond the last one we can
2035                  represent in the compiled pattern.  */
2036               if (regnum <= MAX_REGNUM)
2037                 {
2038                   COMPILE_STACK_TOP.inner_group_offset = b - bufp->buffer + 2;
2039                   BUF_PUSH_3 (start_memory, regnum, 0);
2040                 }
2041                 
2042               compile_stack.avail++;
2043
2044               fixup_alt_jump = 0;
2045               laststart = 0;
2046               begalt = b;
2047               /* If we've reached MAX_REGNUM groups, then this open
2048                  won't actually generate any code, so we'll have to
2049                  clear pending_exact explicitly.  */
2050               pending_exact = 0;
2051               break;
2052
2053
2054             case ')':
2055               if (syntax & RE_NO_BK_PARENS) goto normal_backslash;
2056
2057               if (COMPILE_STACK_EMPTY)
2058                 if (syntax & RE_UNMATCHED_RIGHT_PAREN_ORD)
2059                   goto normal_backslash;
2060                 else
2061                   return REG_ERPAREN;
2062
2063             handle_close:
2064               if (fixup_alt_jump)
2065                 { /* Push a dummy failure point at the end of the
2066                      alternative for a possible future
2067                      `pop_failure_jump' to pop.  See comments at
2068                      `push_dummy_failure' in `re_match_2'.  */
2069                   BUF_PUSH (push_dummy_failure);
2070                   
2071                   /* We allocated space for this jump when we assigned
2072                      to `fixup_alt_jump', in the `handle_alt' case below.  */
2073                   STORE_JUMP (jump_past_alt, fixup_alt_jump, b - 1);
2074                 }
2075
2076               /* See similar code for backslashed left paren above.  */
2077               if (COMPILE_STACK_EMPTY)
2078                 if (syntax & RE_UNMATCHED_RIGHT_PAREN_ORD)
2079                   goto normal_char;
2080                 else
2081                   return REG_ERPAREN;
2082
2083               /* Since we just checked for an empty stack above, this
2084                  ``can't happen''.  */
2085               assert (compile_stack.avail != 0);
2086               {
2087                 /* We don't just want to restore into `regnum', because
2088                    later groups should continue to be numbered higher,
2089                    as in `(ab)c(de)' -- the second group is #2.  */
2090                 regnum_t this_group_regnum;
2091
2092                 compile_stack.avail--;          
2093                 begalt = bufp->buffer + COMPILE_STACK_TOP.begalt_offset;
2094                 fixup_alt_jump
2095                   = COMPILE_STACK_TOP.fixup_alt_jump
2096                     ? bufp->buffer + COMPILE_STACK_TOP.fixup_alt_jump - 1 
2097                     : 0;
2098                 laststart = bufp->buffer + COMPILE_STACK_TOP.laststart_offset;
2099                 this_group_regnum = COMPILE_STACK_TOP.regnum;
2100                 /* If we've reached MAX_REGNUM groups, then this open
2101                    won't actually generate any code, so we'll have to
2102                    clear pending_exact explicitly.  */
2103                 pending_exact = 0;
2104
2105                 /* We're at the end of the group, so now we know how many
2106                    groups were inside this one.  */
2107                 if (this_group_regnum <= MAX_REGNUM)
2108                   {
2109                     unsigned char *inner_group_loc
2110                       = bufp->buffer + COMPILE_STACK_TOP.inner_group_offset;
2111                     
2112                     *inner_group_loc = regnum - this_group_regnum;
2113                     BUF_PUSH_3 (stop_memory, this_group_regnum,
2114                                 regnum - this_group_regnum);
2115                   }
2116               }
2117               break;
2118
2119
2120             case '|':                                   /* `\|'.  */
2121               if (syntax & RE_LIMITED_OPS || syntax & RE_NO_BK_VBAR)
2122                 goto normal_backslash;
2123             handle_alt:
2124               if (syntax & RE_LIMITED_OPS)
2125                 goto normal_char;
2126
2127               /* Insert before the previous alternative a jump which
2128                  jumps to this alternative if the former fails.  */
2129               GET_BUFFER_SPACE (3);
2130               INSERT_JUMP (on_failure_jump, begalt, b + 6);
2131               pending_exact = 0;
2132               b += 3;
2133
2134               /* The alternative before this one has a jump after it
2135                  which gets executed if it gets matched.  Adjust that
2136                  jump so it will jump to this alternative's analogous
2137                  jump (put in below, which in turn will jump to the next
2138                  (if any) alternative's such jump, etc.).  The last such
2139                  jump jumps to the correct final destination.  A picture:
2140                           _____ _____ 
2141                           |   | |   |   
2142                           |   v |   v 
2143                          a | b   | c   
2144
2145                  If we are at `b', then fixup_alt_jump right now points to a
2146                  three-byte space after `a'.  We'll put in the jump, set
2147                  fixup_alt_jump to right after `b', and leave behind three
2148                  bytes which we'll fill in when we get to after `c'.  */
2149
2150               if (fixup_alt_jump)
2151                 STORE_JUMP (jump_past_alt, fixup_alt_jump, b);
2152
2153               /* Mark and leave space for a jump after this alternative,
2154                  to be filled in later either by next alternative or
2155                  when know we're at the end of a series of alternatives.  */
2156               fixup_alt_jump = b;
2157               GET_BUFFER_SPACE (3);
2158               b += 3;
2159
2160               laststart = 0;
2161               begalt = b;
2162               break;
2163
2164
2165             case '{': 
2166               /* If \{ is a literal.  */
2167               if (!(syntax & RE_INTERVALS)
2168                      /* If we're at `\{' and it's not the open-interval 
2169                         operator.  */
2170                   || ((syntax & RE_INTERVALS) && (syntax & RE_NO_BK_BRACES))
2171                   || (p - 2 == pattern  &&  p == pend))
2172                 goto normal_backslash;
2173
2174             handle_interval:
2175               {
2176                 /* If got here, then the syntax allows intervals.  */
2177
2178                 /* At least (most) this many matches must be made.  */
2179                 int lower_bound = -1, upper_bound = -1;
2180
2181                 beg_interval = p - 1;
2182
2183                 if (p == pend)
2184                   {
2185                     if (syntax & RE_NO_BK_BRACES)
2186                       goto unfetch_interval;
2187                     else
2188                       return REG_EBRACE;
2189                   }
2190
2191                 GET_UNSIGNED_NUMBER (lower_bound);
2192
2193                 if (c == ',')
2194                   {
2195                     GET_UNSIGNED_NUMBER (upper_bound);
2196                     if (upper_bound < 0) upper_bound = RE_DUP_MAX;
2197                   }
2198                 else
2199                   /* Interval such as `{1}' => match exactly once. */
2200                   upper_bound = lower_bound;
2201
2202                 if (lower_bound < 0 || upper_bound > RE_DUP_MAX
2203                     || lower_bound > upper_bound)
2204                   {
2205                     if (syntax & RE_NO_BK_BRACES)
2206                       goto unfetch_interval;
2207                     else 
2208                       return REG_BADBR;
2209                   }
2210
2211                 if (!(syntax & RE_NO_BK_BRACES)) 
2212                   {
2213                     if (c != '\\') return REG_EBRACE;
2214
2215                     PATFETCH (c);
2216                   }
2217
2218                 if (c != '}')
2219                   {
2220                     if (syntax & RE_NO_BK_BRACES)
2221                       goto unfetch_interval;
2222                     else 
2223                       return REG_BADBR;
2224                   }
2225
2226                 /* We just parsed a valid interval.  */
2227
2228                 /* If it's invalid to have no preceding re.  */
2229                 if (!laststart)
2230                   {
2231                     if (syntax & RE_CONTEXT_INVALID_OPS)
2232                       return REG_BADRPT;
2233                     else if (syntax & RE_CONTEXT_INDEP_OPS)
2234                       laststart = b;
2235                     else
2236                       goto unfetch_interval;
2237                   }
2238
2239                 /* If the upper bound is zero, don't want to succeed at
2240                    all; jump from `laststart' to `b + 3', which will be
2241                    the end of the buffer after we insert the jump.  */
2242                  if (upper_bound == 0)
2243                    {
2244                      GET_BUFFER_SPACE (3);
2245                      INSERT_JUMP (jump, laststart, b + 3);
2246                      b += 3;
2247                    }
2248
2249                  /* Otherwise, we have a nontrivial interval.  When
2250                     we're all done, the pattern will look like:
2251                       set_number_at <jump count> <upper bound>
2252                       set_number_at <succeed_n count> <lower bound>
2253                       succeed_n <after jump addr> <succeed_n count>
2254                       <body of loop>
2255                       jump_n <succeed_n addr> <jump count>
2256                     (The upper bound and `jump_n' are omitted if
2257                     `upper_bound' is 1, though.)  */
2258                  else 
2259                    { /* If the upper bound is > 1, we need to insert
2260                         more at the end of the loop.  */
2261                      unsigned nbytes = 10 + (upper_bound > 1) * 10;
2262
2263                      GET_BUFFER_SPACE (nbytes);
2264
2265                      /* Initialize lower bound of the `succeed_n', even
2266                         though it will be set during matching by its
2267                         attendant `set_number_at' (inserted next),
2268                         because `re_compile_fastmap' needs to know.
2269                         Jump to the `jump_n' we might insert below.  */
2270                      INSERT_JUMP2 (succeed_n, laststart,
2271                                    b + 5 + (upper_bound > 1) * 5,
2272                                    lower_bound);
2273                      b += 5;
2274
2275                      /* Code to initialize the lower bound.  Insert 
2276                         before the `succeed_n'.  The `5' is the last two
2277                         bytes of this `set_number_at', plus 3 bytes of
2278                         the following `succeed_n'.  */
2279                      insert_op2 (set_number_at, laststart, 5, lower_bound, b);
2280                      b += 5;
2281
2282                      if (upper_bound > 1)
2283                        { /* More than one repetition is allowed, so
2284                             append a backward jump to the `succeed_n'
2285                             that starts this interval.
2286                             
2287                             When we've reached this during matching,
2288                             we'll have matched the interval once, so
2289                             jump back only `upper_bound - 1' times.  */
2290                          STORE_JUMP2 (jump_n, b, laststart + 5,
2291                                       upper_bound - 1);
2292                          b += 5;
2293
2294                          /* The location we want to set is the second
2295                             parameter of the `jump_n'; that is `b-2' as
2296                             an absolute address.  `laststart' will be
2297                             the `set_number_at' we're about to insert;
2298                             `laststart+3' the number to set, the source
2299                             for the relative address.  But we are
2300                             inserting into the middle of the pattern --
2301                             so everything is getting moved up by 5.
2302                             Conclusion: (b - 2) - (laststart + 3) + 5,
2303                             i.e., b - laststart.
2304                             
2305                             We insert this at the beginning of the loop
2306                             so that if we fail during matching, we'll
2307                             reinitialize the bounds.  */
2308                          insert_op2 (set_number_at, laststart, b - laststart,
2309                                      upper_bound - 1, b);
2310                          b += 5;
2311                        }
2312                    }
2313                 pending_exact = 0;
2314                 beg_interval = NULL;
2315               }
2316               break;
2317
2318             unfetch_interval:
2319               /* If an invalid interval, match the characters as literals.  */
2320                assert (beg_interval);
2321                p = beg_interval;
2322                beg_interval = NULL;
2323
2324                /* normal_char and normal_backslash need `c'.  */
2325                PATFETCH (c);    
2326
2327                if (!(syntax & RE_NO_BK_BRACES))
2328                  {
2329                    if (p > pattern  &&  p[-1] == '\\')
2330                      goto normal_backslash;
2331                  }
2332                goto normal_char;
2333
2334 #ifdef emacs
2335             /* There is no way to specify the before_dot and after_dot
2336                operators.  rms says this is ok.  --karl  */
2337             case '=':
2338               BUF_PUSH (at_dot);
2339               break;
2340
2341             case 's':   
2342               laststart = b;
2343               PATFETCH (c);
2344               BUF_PUSH_2 (syntaxspec, syntax_spec_code[c]);
2345               break;
2346
2347             case 'S':
2348               laststart = b;
2349               PATFETCH (c);
2350               BUF_PUSH_2 (notsyntaxspec, syntax_spec_code[c]);
2351               break;
2352 #endif /* emacs */
2353
2354
2355             case 'w':
2356               laststart = b;
2357               BUF_PUSH (wordchar);
2358               break;
2359
2360
2361             case 'W':
2362               laststart = b;
2363               BUF_PUSH (notwordchar);
2364               break;
2365
2366
2367             case '<':
2368               BUF_PUSH (wordbeg);
2369               break;
2370
2371             case '>':
2372               BUF_PUSH (wordend);
2373               break;
2374
2375             case 'b':
2376               BUF_PUSH (wordbound);
2377               break;
2378
2379             case 'B':
2380               BUF_PUSH (notwordbound);
2381               break;
2382
2383             case '`':
2384               BUF_PUSH (begbuf);
2385               break;
2386
2387             case '\'':
2388               BUF_PUSH (endbuf);
2389               break;
2390
2391             case '1': case '2': case '3': case '4': case '5':
2392             case '6': case '7': case '8': case '9':
2393               if (syntax & RE_NO_BK_REFS)
2394                 goto normal_char;
2395
2396               c1 = c - '0';
2397
2398               if (c1 > regnum)
2399                 return REG_ESUBREG;
2400
2401               /* Can't back reference to a subexpression if inside of it.  */
2402               if (group_in_compile_stack (compile_stack, c1))
2403                 goto normal_char;
2404
2405               laststart = b;
2406               BUF_PUSH_2 (duplicate, c1);
2407               break;
2408
2409
2410             case '+':
2411             case '?':
2412               if (syntax & RE_BK_PLUS_QM)
2413                 goto handle_plus;
2414               else
2415                 goto normal_backslash;
2416
2417             default:
2418             normal_backslash:
2419               /* You might think it would be useful for \ to mean
2420                  not to translate; but if we don't translate it
2421                  it will never match anything.  */
2422               c = TRANSLATE (c);
2423               goto normal_char;
2424             }
2425           break;
2426
2427
2428         default:
2429         /* Expects the character in `c'.  */
2430         normal_char:
2431               /* If no exactn currently being built.  */
2432           if (!pending_exact 
2433
2434               /* If last exactn not at current position.  */
2435               || pending_exact + *pending_exact + 1 != b
2436               
2437               /* We have only one byte following the exactn for the count.  */
2438               || *pending_exact == (1 << BYTEWIDTH) - 1
2439
2440               /* If followed by a repetition operator.  */
2441               || *p == '*' || *p == '^'
2442               || ((syntax & RE_BK_PLUS_QM)
2443                   ? *p == '\\' && (p[1] == '+' || p[1] == '?')
2444                   : (*p == '+' || *p == '?'))
2445               || ((syntax & RE_INTERVALS)
2446                   && ((syntax & RE_NO_BK_BRACES)
2447                       ? *p == '{'
2448                       : (p[0] == '\\' && p[1] == '{'))))
2449             {
2450               /* Start building a new exactn.  */
2451               
2452               laststart = b;
2453
2454               BUF_PUSH_2 (exactn, 0);
2455               pending_exact = b - 1;
2456             }
2457             
2458           BUF_PUSH (c);
2459           (*pending_exact)++;
2460           break;
2461         } /* switch (c) */
2462     } /* while p != pend */
2463
2464   
2465   /* Through the pattern now.  */
2466   
2467   if (fixup_alt_jump)
2468     STORE_JUMP (jump_past_alt, fixup_alt_jump, b);
2469
2470   if (!COMPILE_STACK_EMPTY) 
2471     return REG_EPAREN;
2472
2473   free (compile_stack.stack);
2474
2475   /* We have succeeded; set the length of the buffer.  */
2476   bufp->used = b - bufp->buffer;
2477
2478 #ifdef DEBUG
2479   if (debug)
2480     {
2481       DEBUG_PRINT1 ("\nCompiled pattern: \n");
2482       print_compiled_pattern (bufp);
2483     }
2484 #endif /* DEBUG */
2485
2486 #ifndef MATCH_MAY_ALLOCATE
2487   /* Initialize the failure stack to the largest possible stack.  This
2488      isn't necessary unless we're trying to avoid calling alloca in
2489      the search and match routines.  */
2490   {
2491     int num_regs = bufp->re_nsub + 1;
2492
2493     /* Since DOUBLE_FAIL_STACK refuses to double only if the current size
2494        is strictly greater than re_max_failures, the largest possible stack
2495        is 2 * re_max_failures failure points.  */
2496     fail_stack.size = (2 * re_max_failures * MAX_FAILURE_ITEMS);
2497     if (fail_stack.size > fail_stack_allocated)
2498       {
2499         if (! fail_stack.stack)
2500           fail_stack.stack =
2501             (fail_stack_elt_t *) malloc (fail_stack.size 
2502                                          * sizeof (fail_stack_elt_t));
2503         else
2504           fail_stack.stack =
2505             (fail_stack_elt_t *) realloc (fail_stack.stack,
2506                                           (fail_stack.size
2507                                            * sizeof (fail_stack_elt_t)));
2508         fail_stack_allocated = fail_stack.size;
2509       }
2510
2511     /* Initialize some other variables the matcher uses.  */
2512     RETALLOC_IF (regstart,       num_regs, const char *);
2513     RETALLOC_IF (regend,         num_regs, const char *);
2514     RETALLOC_IF (old_regstart,   num_regs, const char *);
2515     RETALLOC_IF (old_regend,     num_regs, const char *);
2516     RETALLOC_IF (best_regstart,  num_regs, const char *);
2517     RETALLOC_IF (best_regend,    num_regs, const char *);
2518     RETALLOC_IF (reg_info,       num_regs, register_info_type);
2519     RETALLOC_IF (reg_dummy,      num_regs, const char *);
2520     RETALLOC_IF (reg_info_dummy, num_regs, register_info_type);
2521   }
2522 #endif
2523
2524   return REG_NOERROR;
2525 } /* regex_compile */
2526 \f
2527 /* Subroutines for `regex_compile'.  */
2528
2529 /* Store OP at LOC followed by two-byte integer parameter ARG.  */
2530
2531 static void
2532 store_op1 (op, loc, arg)
2533     re_opcode_t op;
2534     unsigned char *loc;
2535     int arg;
2536 {
2537   *loc = (unsigned char) op;
2538   STORE_NUMBER (loc + 1, arg);
2539 }
2540
2541
2542 /* Like `store_op1', but for two two-byte parameters ARG1 and ARG2.  */
2543
2544 static void
2545 store_op2 (op, loc, arg1, arg2)
2546     re_opcode_t op;
2547     unsigned char *loc;
2548     int arg1, arg2;
2549 {
2550   *loc = (unsigned char) op;
2551   STORE_NUMBER (loc + 1, arg1);
2552   STORE_NUMBER (loc + 3, arg2);
2553 }
2554
2555
2556 /* Copy the bytes from LOC to END to open up three bytes of space at LOC
2557    for OP followed by two-byte integer parameter ARG.  */
2558
2559 static void
2560 insert_op1 (op, loc, arg, end)
2561     re_opcode_t op;
2562     unsigned char *loc;
2563     int arg;
2564     unsigned char *end;    
2565 {
2566   register unsigned char *pfrom = end;
2567   register unsigned char *pto = end + 3;
2568
2569   while (pfrom != loc)
2570     *--pto = *--pfrom;
2571     
2572   store_op1 (op, loc, arg);
2573 }
2574
2575
2576 /* Like `insert_op1', but for two two-byte parameters ARG1 and ARG2.  */
2577
2578 static void
2579 insert_op2 (op, loc, arg1, arg2, end)
2580     re_opcode_t op;
2581     unsigned char *loc;
2582     int arg1, arg2;
2583     unsigned char *end;    
2584 {
2585   register unsigned char *pfrom = end;
2586   register unsigned char *pto = end + 5;
2587
2588   while (pfrom != loc)
2589     *--pto = *--pfrom;
2590     
2591   store_op2 (op, loc, arg1, arg2);
2592 }
2593
2594
2595 /* P points to just after a ^ in PATTERN.  Return true if that ^ comes
2596    after an alternative or a begin-subexpression.  We assume there is at
2597    least one character before the ^.  */
2598
2599 static boolean
2600 at_begline_loc_p (pattern, p, syntax)
2601     const char *pattern, *p;
2602     reg_syntax_t syntax;
2603 {
2604   const char *prev = p - 2;
2605   boolean prev_prev_backslash = prev > pattern && prev[-1] == '\\';
2606   
2607   return
2608        /* After a subexpression?  */
2609        (*prev == '(' && (syntax & RE_NO_BK_PARENS || prev_prev_backslash))
2610        /* After an alternative?  */
2611     || (*prev == '|' && (syntax & RE_NO_BK_VBAR || prev_prev_backslash));
2612 }
2613
2614
2615 /* The dual of at_begline_loc_p.  This one is for $.  We assume there is
2616    at least one character after the $, i.e., `P < PEND'.  */
2617
2618 static boolean
2619 at_endline_loc_p (p, pend, syntax)
2620     const char *p, *pend;
2621     int syntax;
2622 {
2623   const char *next = p;
2624   boolean next_backslash = *next == '\\';
2625   const char *next_next = p + 1 < pend ? p + 1 : NULL;
2626   
2627   return
2628        /* Before a subexpression?  */
2629        (syntax & RE_NO_BK_PARENS ? *next == ')'
2630         : next_backslash && next_next && *next_next == ')')
2631        /* Before an alternative?  */
2632     || (syntax & RE_NO_BK_VBAR ? *next == '|'
2633         : next_backslash && next_next && *next_next == '|');
2634 }
2635
2636
2637 /* Returns true if REGNUM is in one of COMPILE_STACK's elements and 
2638    false if it's not.  */
2639
2640 static boolean
2641 group_in_compile_stack (compile_stack, regnum)
2642     compile_stack_type compile_stack;
2643     regnum_t regnum;
2644 {
2645   int this_element;
2646
2647   for (this_element = compile_stack.avail - 1;  
2648        this_element >= 0; 
2649        this_element--)
2650     if (compile_stack.stack[this_element].regnum == regnum)
2651       return true;
2652
2653   return false;
2654 }
2655
2656
2657 /* Read the ending character of a range (in a bracket expression) from the
2658    uncompiled pattern *P_PTR (which ends at PEND).  We assume the
2659    starting character is in `P[-2]'.  (`P[-1]' is the character `-'.)
2660    Then we set the translation of all bits between the starting and
2661    ending characters (inclusive) in the compiled pattern B.
2662    
2663    Return an error code.
2664    
2665    We use these short variable names so we can use the same macros as
2666    `regex_compile' itself.  */
2667
2668 static reg_errcode_t
2669 compile_range (p_ptr, pend, translate, syntax, b)
2670     const char **p_ptr, *pend;
2671     char *translate;
2672     reg_syntax_t syntax;
2673     unsigned char *b;
2674 {
2675   unsigned this_char;
2676
2677   const char *p = *p_ptr;
2678   int range_start, range_end;
2679   
2680   if (p == pend)
2681     return REG_ERANGE;
2682
2683   /* Even though the pattern is a signed `char *', we need to fetch
2684      with unsigned char *'s; if the high bit of the pattern character
2685      is set, the range endpoints will be negative if we fetch using a
2686      signed char *.
2687
2688      We also want to fetch the endpoints without translating them; the 
2689      appropriate translation is done in the bit-setting loop below.  */
2690   range_start = ((unsigned char *) p)[-2];
2691   range_end   = ((unsigned char *) p)[0];
2692
2693   /* Have to increment the pointer into the pattern string, so the
2694      caller isn't still at the ending character.  */
2695   (*p_ptr)++;
2696
2697   /* If the start is after the end, the range is empty.  */
2698   if (range_start > range_end)
2699     return syntax & RE_NO_EMPTY_RANGES ? REG_ERANGE : REG_NOERROR;
2700
2701   /* Here we see why `this_char' has to be larger than an `unsigned
2702      char' -- the range is inclusive, so if `range_end' == 0xff
2703      (assuming 8-bit characters), we would otherwise go into an infinite
2704      loop, since all characters <= 0xff.  */
2705   for (this_char = range_start; this_char <= range_end; this_char++)
2706     {
2707       SET_LIST_BIT (TRANSLATE (this_char));
2708     }
2709   
2710   return REG_NOERROR;
2711 }
2712 \f
2713 /* re_compile_fastmap computes a ``fastmap'' for the compiled pattern in
2714    BUFP.  A fastmap records which of the (1 << BYTEWIDTH) possible
2715    characters can start a string that matches the pattern.  This fastmap
2716    is used by re_search to skip quickly over impossible starting points.
2717
2718    The caller must supply the address of a (1 << BYTEWIDTH)-byte data
2719    area as BUFP->fastmap.
2720    
2721    We set the `fastmap', `fastmap_accurate', and `can_be_null' fields in
2722    the pattern buffer.
2723
2724    Returns 0 if we succeed, -2 if an internal error.   */
2725
2726 int
2727 re_compile_fastmap (bufp)
2728      struct re_pattern_buffer *bufp;
2729 {
2730   int j, k;
2731 #ifdef MATCH_MAY_ALLOCATE
2732   fail_stack_type fail_stack;
2733 #endif
2734 #ifndef REGEX_MALLOC
2735   char *destination;
2736 #endif
2737   /* We don't push any register information onto the failure stack.  */
2738   unsigned num_regs = 0;
2739   
2740   register char *fastmap = bufp->fastmap;
2741   unsigned char *pattern = bufp->buffer;
2742   unsigned long size = bufp->used;
2743   unsigned char *p = pattern;
2744   register unsigned char *pend = pattern + size;
2745
2746   /* Assume that each path through the pattern can be null until
2747      proven otherwise.  We set this false at the bottom of switch
2748      statement, to which we get only if a particular path doesn't
2749      match the empty string.  */
2750   boolean path_can_be_null = true;
2751
2752   /* We aren't doing a `succeed_n' to begin with.  */
2753   boolean succeed_n_p = false;
2754
2755   assert (fastmap != NULL && p != NULL);
2756   
2757   INIT_FAIL_STACK ();
2758   bzero (fastmap, 1 << BYTEWIDTH);  /* Assume nothing's valid.  */
2759   bufp->fastmap_accurate = 1;       /* It will be when we're done.  */
2760   bufp->can_be_null = 0;
2761       
2762   while (p != pend || !FAIL_STACK_EMPTY ())
2763     {
2764       if (p == pend)
2765         {
2766           bufp->can_be_null |= path_can_be_null;
2767           
2768           /* Reset for next path.  */
2769           path_can_be_null = true;
2770           
2771           p = fail_stack.stack[--fail_stack.avail];
2772         }
2773
2774       /* We should never be about to go beyond the end of the pattern.  */
2775       assert (p < pend);
2776       
2777 #ifdef SWITCH_ENUM_BUG
2778       switch ((int) ((re_opcode_t) *p++))
2779 #else
2780       switch ((re_opcode_t) *p++)
2781 #endif
2782         {
2783
2784         /* I guess the idea here is to simply not bother with a fastmap
2785            if a backreference is used, since it's too hard to figure out
2786            the fastmap for the corresponding group.  Setting
2787            `can_be_null' stops `re_search_2' from using the fastmap, so
2788            that is all we do.  */
2789         case duplicate:
2790           bufp->can_be_null = 1;
2791           return 0;
2792
2793
2794       /* Following are the cases which match a character.  These end
2795          with `break'.  */
2796
2797         case exactn:
2798           fastmap[p[1]] = 1;
2799           break;
2800
2801
2802         case charset:
2803           for (j = *p++ * BYTEWIDTH - 1; j >= 0; j--)
2804             if (p[j / BYTEWIDTH] & (1 << (j % BYTEWIDTH)))
2805               fastmap[j] = 1;
2806           break;
2807
2808
2809         case charset_not:
2810           /* Chars beyond end of map must be allowed.  */
2811           for (j = *p * BYTEWIDTH; j < (1 << BYTEWIDTH); j++)
2812             fastmap[j] = 1;
2813
2814           for (j = *p++ * BYTEWIDTH - 1; j >= 0; j--)
2815             if (!(p[j / BYTEWIDTH] & (1 << (j % BYTEWIDTH))))
2816               fastmap[j] = 1;
2817           break;
2818
2819
2820         case wordchar:
2821           for (j = 0; j < (1 << BYTEWIDTH); j++)
2822             if (SYNTAX (j) == Sword)
2823               fastmap[j] = 1;
2824           break;
2825
2826
2827         case notwordchar:
2828           for (j = 0; j < (1 << BYTEWIDTH); j++)
2829             if (SYNTAX (j) != Sword)
2830               fastmap[j] = 1;
2831           break;
2832
2833
2834         case anychar:
2835           /* `.' matches anything ...  */
2836           for (j = 0; j < (1 << BYTEWIDTH); j++)
2837             fastmap[j] = 1;
2838
2839           /* ... except perhaps newline.  */
2840           if (!(bufp->syntax & RE_DOT_NEWLINE))
2841             fastmap['\n'] = 0;
2842
2843           /* Return if we have already set `can_be_null'; if we have,
2844              then the fastmap is irrelevant.  Something's wrong here.  */
2845           else if (bufp->can_be_null)
2846             return 0;
2847
2848           /* Otherwise, have to check alternative paths.  */
2849           break;
2850
2851
2852 #ifdef emacs
2853         case syntaxspec:
2854           k = *p++;
2855           for (j = 0; j < (1 << BYTEWIDTH); j++)
2856             if (SYNTAX (j) == (enum syntaxcode) k)
2857               fastmap[j] = 1;
2858           break;
2859
2860
2861         case notsyntaxspec:
2862           k = *p++;
2863           for (j = 0; j < (1 << BYTEWIDTH); j++)
2864             if (SYNTAX (j) != (enum syntaxcode) k)
2865               fastmap[j] = 1;
2866           break;
2867
2868
2869       /* All cases after this match the empty string.  These end with
2870          `continue'.  */
2871
2872
2873         case before_dot:
2874         case at_dot:
2875         case after_dot:
2876           continue;
2877 #endif /* not emacs */
2878
2879
2880         case no_op:
2881         case begline:
2882         case endline:
2883         case begbuf:
2884         case endbuf:
2885         case wordbound:
2886         case notwordbound:
2887         case wordbeg:
2888         case wordend:
2889         case push_dummy_failure:
2890           continue;
2891
2892
2893         case jump_n:
2894         case pop_failure_jump:
2895         case maybe_pop_jump:
2896         case jump:
2897         case jump_past_alt:
2898         case dummy_failure_jump:
2899           EXTRACT_NUMBER_AND_INCR (j, p);
2900           p += j;       
2901           if (j > 0)
2902             continue;
2903             
2904           /* Jump backward implies we just went through the body of a
2905              loop and matched nothing.  Opcode jumped to should be
2906              `on_failure_jump' or `succeed_n'.  Just treat it like an
2907              ordinary jump.  For a * loop, it has pushed its failure
2908              point already; if so, discard that as redundant.  */
2909           if ((re_opcode_t) *p != on_failure_jump
2910               && (re_opcode_t) *p != succeed_n)
2911             continue;
2912
2913           p++;
2914           EXTRACT_NUMBER_AND_INCR (j, p);
2915           p += j;               
2916           
2917           /* If what's on the stack is where we are now, pop it.  */
2918           if (!FAIL_STACK_EMPTY () 
2919               && fail_stack.stack[fail_stack.avail - 1] == p)
2920             fail_stack.avail--;
2921
2922           continue;
2923
2924
2925         case on_failure_jump:
2926         case on_failure_keep_string_jump:
2927         handle_on_failure_jump:
2928           EXTRACT_NUMBER_AND_INCR (j, p);
2929
2930           /* For some patterns, e.g., `(a?)?', `p+j' here points to the
2931              end of the pattern.  We don't want to push such a point,
2932              since when we restore it above, entering the switch will
2933              increment `p' past the end of the pattern.  We don't need
2934              to push such a point since we obviously won't find any more
2935              fastmap entries beyond `pend'.  Such a pattern can match
2936              the null string, though.  */
2937           if (p + j < pend)
2938             {
2939               if (!PUSH_PATTERN_OP (p + j, fail_stack))
2940                 return -2;
2941             }
2942           else
2943             bufp->can_be_null = 1;
2944
2945           if (succeed_n_p)
2946             {
2947               EXTRACT_NUMBER_AND_INCR (k, p);   /* Skip the n.  */
2948               succeed_n_p = false;
2949             }
2950
2951           continue;
2952
2953
2954         case succeed_n:
2955           /* Get to the number of times to succeed.  */
2956           p += 2;               
2957
2958           /* Increment p past the n for when k != 0.  */
2959           EXTRACT_NUMBER_AND_INCR (k, p);
2960           if (k == 0)
2961             {
2962               p -= 4;
2963               succeed_n_p = true;  /* Spaghetti code alert.  */
2964               goto handle_on_failure_jump;
2965             }
2966           continue;
2967
2968
2969         case set_number_at:
2970           p += 4;
2971           continue;
2972
2973
2974         case start_memory:
2975         case stop_memory:
2976           p += 2;
2977           continue;
2978
2979
2980         default:
2981           abort (); /* We have listed all the cases.  */
2982         } /* switch *p++ */
2983
2984       /* Getting here means we have found the possible starting
2985          characters for one path of the pattern -- and that the empty
2986          string does not match.  We need not follow this path further.
2987          Instead, look at the next alternative (remembered on the
2988          stack), or quit if no more.  The test at the top of the loop
2989          does these things.  */
2990       path_can_be_null = false;
2991       p = pend;
2992     } /* while p */
2993
2994   /* Set `can_be_null' for the last path (also the first path, if the
2995      pattern is empty).  */
2996   bufp->can_be_null |= path_can_be_null;
2997   return 0;
2998 } /* re_compile_fastmap */
2999 \f
3000 /* Set REGS to hold NUM_REGS registers, storing them in STARTS and
3001    ENDS.  Subsequent matches using PATTERN_BUFFER and REGS will use
3002    this memory for recording register information.  STARTS and ENDS
3003    must be allocated using the malloc library routine, and must each
3004    be at least NUM_REGS * sizeof (regoff_t) bytes long.
3005
3006    If NUM_REGS == 0, then subsequent matches should allocate their own
3007    register data.
3008
3009    Unless this function is called, the first search or match using
3010    PATTERN_BUFFER will allocate its own register data, without
3011    freeing the old data.  */
3012
3013 void
3014 re_set_registers (bufp, regs, num_regs, starts, ends)
3015     struct re_pattern_buffer *bufp;
3016     struct re_registers *regs;
3017     unsigned num_regs;
3018     regoff_t *starts, *ends;
3019 {
3020   if (num_regs)
3021     {
3022       bufp->regs_allocated = REGS_REALLOCATE;
3023       regs->num_regs = num_regs;
3024       regs->start = starts;
3025       regs->end = ends;
3026     }
3027   else
3028     {
3029       bufp->regs_allocated = REGS_UNALLOCATED;
3030       regs->num_regs = 0;
3031       regs->start = regs->end = (regoff_t *) 0;
3032     }
3033 }
3034 \f
3035 /* Searching routines.  */
3036
3037 /* Like re_search_2, below, but only one string is specified, and
3038    doesn't let you say where to stop matching. */
3039
3040 int
3041 re_search (bufp, string, size, startpos, range, regs)
3042      struct re_pattern_buffer *bufp;
3043      const char *string;
3044      int size, startpos, range;
3045      struct re_registers *regs;
3046 {
3047   return re_search_2 (bufp, NULL, 0, string, size, startpos, range, 
3048                       regs, size);
3049 }
3050
3051
3052 /* Using the compiled pattern in BUFP->buffer, first tries to match the
3053    virtual concatenation of STRING1 and STRING2, starting first at index
3054    STARTPOS, then at STARTPOS + 1, and so on.
3055    
3056    STRING1 and STRING2 have length SIZE1 and SIZE2, respectively.
3057    
3058    RANGE is how far to scan while trying to match.  RANGE = 0 means try
3059    only at STARTPOS; in general, the last start tried is STARTPOS +
3060    RANGE.
3061    
3062    In REGS, return the indices of the virtual concatenation of STRING1
3063    and STRING2 that matched the entire BUFP->buffer and its contained
3064    subexpressions.
3065    
3066    Do not consider matching one past the index STOP in the virtual
3067    concatenation of STRING1 and STRING2.
3068
3069    We return either the position in the strings at which the match was
3070    found, -1 if no match, or -2 if error (such as failure
3071    stack overflow).  */
3072
3073 int
3074 re_search_2 (bufp, string1, size1, string2, size2, startpos, range, regs, stop)
3075      struct re_pattern_buffer *bufp;
3076      const char *string1, *string2;
3077      int size1, size2;
3078      int startpos;
3079      int range;
3080      struct re_registers *regs;
3081      int stop;
3082 {
3083   int val;
3084   register char *fastmap = bufp->fastmap;
3085   register char *translate = bufp->translate;
3086   int total_size = size1 + size2;
3087   int endpos = startpos + range;
3088
3089   /* Check for out-of-range STARTPOS.  */
3090   if (startpos < 0 || startpos > total_size)
3091     return -1;
3092     
3093   /* Fix up RANGE if it might eventually take us outside
3094      the virtual concatenation of STRING1 and STRING2.  */
3095   if (endpos < -1)
3096     range = -1 - startpos;
3097   else if (endpos > total_size)
3098     range = total_size - startpos;
3099
3100   /* If the search isn't to be a backwards one, don't waste time in a
3101      search for a pattern that must be anchored.  */
3102   if (bufp->used > 0 && (re_opcode_t) bufp->buffer[0] == begbuf && range > 0)
3103     {
3104       if (startpos > 0)
3105         return -1;
3106       else
3107         range = 1;
3108     }
3109
3110   /* Update the fastmap now if not correct already.  */
3111   if (fastmap && !bufp->fastmap_accurate)
3112     if (re_compile_fastmap (bufp) == -2)
3113       return -2;
3114   
3115   /* Loop through the string, looking for a place to start matching.  */
3116   for (;;)
3117     { 
3118       /* If a fastmap is supplied, skip quickly over characters that
3119          cannot be the start of a match.  If the pattern can match the
3120          null string, however, we don't need to skip characters; we want
3121          the first null string.  */
3122       if (fastmap && startpos < total_size && !bufp->can_be_null)
3123         {
3124           if (range > 0)        /* Searching forwards.  */
3125             {
3126               register const char *d;
3127               register int lim = 0;
3128               int irange = range;
3129
3130               if (startpos < size1 && startpos + range >= size1)
3131                 lim = range - (size1 - startpos);
3132
3133               d = (startpos >= size1 ? string2 - size1 : string1) + startpos;
3134    
3135               /* Written out as an if-else to avoid testing `translate'
3136                  inside the loop.  */
3137               if (translate)
3138                 while (range > lim
3139                        && !fastmap[(unsigned char)
3140                                    translate[(unsigned char) *d++]])
3141                   range--;
3142               else
3143                 while (range > lim && !fastmap[(unsigned char) *d++])
3144                   range--;
3145
3146               startpos += irange - range;
3147             }
3148           else                          /* Searching backwards.  */
3149             {
3150               register char c = (size1 == 0 || startpos >= size1
3151                                  ? string2[startpos - size1] 
3152                                  : string1[startpos]);
3153
3154               if (!fastmap[(unsigned char) TRANSLATE (c)])
3155                 goto advance;
3156             }
3157         }
3158
3159       /* If can't match the null string, and that's all we have left, fail.  */
3160       if (range >= 0 && startpos == total_size && fastmap
3161           && !bufp->can_be_null)
3162         return -1;
3163
3164       val = re_match_2_internal (bufp, string1, size1, string2, size2,
3165                                  startpos, regs, stop);
3166       alloca (0);
3167
3168       if (val >= 0)
3169         return startpos;
3170         
3171       if (val == -2)
3172         return -2;
3173
3174     advance:
3175       if (!range) 
3176         break;
3177       else if (range > 0) 
3178         {
3179           range--; 
3180           startpos++;
3181         }
3182       else
3183         {
3184           range++; 
3185           startpos--;
3186         }
3187     }
3188   return -1;
3189 } /* re_search_2 */
3190 \f
3191 /* Declarations and macros for re_match_2.  */
3192
3193 static int bcmp_translate ();
3194 static boolean alt_match_null_string_p (),
3195                common_op_match_null_string_p (),
3196                group_match_null_string_p ();
3197
3198 /* This converts PTR, a pointer into one of the search strings `string1'
3199    and `string2' into an offset from the beginning of that string.  */
3200 #define POINTER_TO_OFFSET(ptr)                  \
3201   (FIRST_STRING_P (ptr)                         \
3202    ? ((regoff_t) ((ptr) - string1))             \
3203    : ((regoff_t) ((ptr) - string2 + size1)))
3204
3205 /* Macros for dealing with the split strings in re_match_2.  */
3206
3207 #define MATCHING_IN_FIRST_STRING  (dend == end_match_1)
3208
3209 /* Call before fetching a character with *d.  This switches over to
3210    string2 if necessary.  */
3211 #define PREFETCH()                                                      \
3212   while (d == dend)                                                     \
3213     {                                                                   \
3214       /* End of string2 => fail.  */                                    \
3215       if (dend == end_match_2)                                          \
3216         goto fail;                                                      \
3217       /* End of string1 => advance to string2.  */                      \
3218       d = string2;                                                      \
3219       dend = end_match_2;                                               \
3220     }
3221
3222
3223 /* Test if at very beginning or at very end of the virtual concatenation
3224    of `string1' and `string2'.  If only one string, it's `string2'.  */
3225 #define AT_STRINGS_BEG(d) ((d) == (size1 ? string1 : string2) || !size2)
3226 #define AT_STRINGS_END(d) ((d) == end2) 
3227
3228
3229 /* Test if D points to a character which is word-constituent.  We have
3230    two special cases to check for: if past the end of string1, look at
3231    the first character in string2; and if before the beginning of
3232    string2, look at the last character in string1.  */
3233 #define WORDCHAR_P(d)                                                   \
3234   (SYNTAX ((d) == end1 ? *string2                                       \
3235            : (d) == string2 - 1 ? *(end1 - 1) : *(d))                   \
3236    == Sword)
3237
3238 /* Test if the character before D and the one at D differ with respect
3239    to being word-constituent.  */
3240 #define AT_WORD_BOUNDARY(d)                                             \
3241   (AT_STRINGS_BEG (d) || AT_STRINGS_END (d)                             \
3242    || WORDCHAR_P (d - 1) != WORDCHAR_P (d))
3243
3244
3245 /* Free everything we malloc.  */
3246 #ifdef MATCH_MAY_ALLOCATE
3247 #ifdef REGEX_MALLOC
3248 #define FREE_VAR(var) if (var) free (var); var = NULL
3249 #define FREE_VARIABLES()                                                \
3250   do {                                                                  \
3251     FREE_VAR (fail_stack.stack);                                        \
3252     FREE_VAR (regstart);                                                \
3253     FREE_VAR (regend);                                                  \
3254     FREE_VAR (old_regstart);                                            \
3255     FREE_VAR (old_regend);                                              \
3256     FREE_VAR (best_regstart);                                           \
3257     FREE_VAR (best_regend);                                             \
3258     FREE_VAR (reg_info);                                                \
3259     FREE_VAR (reg_dummy);                                               \
3260     FREE_VAR (reg_info_dummy);                                          \
3261   } while (0)
3262 #else /* not REGEX_MALLOC */
3263 /* This used to do alloca (0), but now we do that in the caller.  */
3264 #define FREE_VARIABLES() /* Nothing */
3265 #endif /* not REGEX_MALLOC */
3266 #else
3267 #define FREE_VARIABLES() /* Do nothing!  */
3268 #endif /* not MATCH_MAY_ALLOCATE */
3269
3270 /* These values must meet several constraints.  They must not be valid
3271    register values; since we have a limit of 255 registers (because
3272    we use only one byte in the pattern for the register number), we can
3273    use numbers larger than 255.  They must differ by 1, because of
3274    NUM_FAILURE_ITEMS above.  And the value for the lowest register must
3275    be larger than the value for the highest register, so we do not try
3276    to actually save any registers when none are active.  */
3277 #define NO_HIGHEST_ACTIVE_REG (1 << BYTEWIDTH)
3278 #define NO_LOWEST_ACTIVE_REG (NO_HIGHEST_ACTIVE_REG + 1)
3279 \f
3280 /* Matching routines.  */
3281
3282 #ifndef emacs   /* Emacs never uses this.  */
3283 /* re_match is like re_match_2 except it takes only a single string.  */
3284
3285 int
3286 re_match (bufp, string, size, pos, regs)
3287      struct re_pattern_buffer *bufp;
3288      const char *string;
3289      int size, pos;
3290      struct re_registers *regs;
3291 {
3292   int result = re_match_2_internal (bufp, NULL, 0, string, size,
3293                                     pos, regs, size);
3294   alloca (0);
3295   return result;
3296 }
3297 #endif /* not emacs */
3298
3299
3300 /* re_match_2 matches the compiled pattern in BUFP against the
3301    the (virtual) concatenation of STRING1 and STRING2 (of length SIZE1
3302    and SIZE2, respectively).  We start matching at POS, and stop
3303    matching at STOP.
3304    
3305    If REGS is non-null and the `no_sub' field of BUFP is nonzero, we
3306    store offsets for the substring each group matched in REGS.  See the
3307    documentation for exactly how many groups we fill.
3308
3309    We return -1 if no match, -2 if an internal error (such as the
3310    failure stack overflowing).  Otherwise, we return the length of the
3311    matched substring.  */
3312
3313 int
3314 re_match_2 (bufp, string1, size1, string2, size2, pos, regs, stop)
3315      struct re_pattern_buffer *bufp;
3316      const char *string1, *string2;
3317      int size1, size2;
3318      int pos;
3319      struct re_registers *regs;
3320      int stop;
3321 {
3322   int result = re_match_2_internal (bufp, string1, size1, string2, size2,
3323                                     pos, regs, stop);
3324   alloca (0);
3325   return result;
3326 }
3327
3328 /* This is a separate function so that we can force an alloca cleanup
3329    afterwards.  */
3330 static int
3331 re_match_2_internal (bufp, string1, size1, string2, size2, pos, regs, stop)
3332      struct re_pattern_buffer *bufp;
3333      const char *string1, *string2;
3334      int size1, size2;
3335      int pos;
3336      struct re_registers *regs;
3337      int stop;
3338 {
3339   /* General temporaries.  */
3340   int mcnt;
3341   unsigned char *p1;
3342
3343   /* Just past the end of the corresponding string.  */
3344   const char *end1, *end2;
3345
3346   /* Pointers into string1 and string2, just past the last characters in
3347      each to consider matching.  */
3348   const char *end_match_1, *end_match_2;
3349
3350   /* Where we are in the data, and the end of the current string.  */
3351   const char *d, *dend;
3352   
3353   /* Where we are in the pattern, and the end of the pattern.  */
3354   unsigned char *p = bufp->buffer;
3355   register unsigned char *pend = p + bufp->used;
3356
3357   /* Mark the opcode just after a start_memory, so we can test for an
3358      empty subpattern when we get to the stop_memory.  */
3359   unsigned char *just_past_start_mem = 0;
3360
3361   /* We use this to map every character in the string.  */
3362   char *translate = bufp->translate;
3363
3364   /* Failure point stack.  Each place that can handle a failure further
3365      down the line pushes a failure point on this stack.  It consists of
3366      restart, regend, and reg_info for all registers corresponding to
3367      the subexpressions we're currently inside, plus the number of such
3368      registers, and, finally, two char *'s.  The first char * is where
3369      to resume scanning the pattern; the second one is where to resume
3370      scanning the strings.  If the latter is zero, the failure point is
3371      a ``dummy''; if a failure happens and the failure point is a dummy,
3372      it gets discarded and the next next one is tried.  */
3373 #ifdef MATCH_MAY_ALLOCATE /* otherwise, this is global.  */
3374   fail_stack_type fail_stack;
3375 #endif
3376 #ifdef DEBUG
3377   static unsigned failure_id = 0;
3378   unsigned nfailure_points_pushed = 0, nfailure_points_popped = 0;
3379 #endif
3380
3381   /* We fill all the registers internally, independent of what we
3382      return, for use in backreferences.  The number here includes
3383      an element for register zero.  */
3384   unsigned num_regs = bufp->re_nsub + 1;
3385   
3386   /* The currently active registers.  */
3387   unsigned lowest_active_reg = NO_LOWEST_ACTIVE_REG;
3388   unsigned highest_active_reg = NO_HIGHEST_ACTIVE_REG;
3389
3390   /* Information on the contents of registers. These are pointers into
3391      the input strings; they record just what was matched (on this
3392      attempt) by a subexpression part of the pattern, that is, the
3393      regnum-th regstart pointer points to where in the pattern we began
3394      matching and the regnum-th regend points to right after where we
3395      stopped matching the regnum-th subexpression.  (The zeroth register
3396      keeps track of what the whole pattern matches.)  */
3397 #ifdef MATCH_MAY_ALLOCATE /* otherwise, these are global.  */
3398   const char **regstart, **regend;
3399 #endif
3400
3401   /* If a group that's operated upon by a repetition operator fails to
3402      match anything, then the register for its start will need to be
3403      restored because it will have been set to wherever in the string we
3404      are when we last see its open-group operator.  Similarly for a
3405      register's end.  */
3406 #ifdef MATCH_MAY_ALLOCATE /* otherwise, these are global.  */
3407   const char **old_regstart, **old_regend;
3408 #endif
3409
3410   /* The is_active field of reg_info helps us keep track of which (possibly
3411      nested) subexpressions we are currently in. The matched_something
3412      field of reg_info[reg_num] helps us tell whether or not we have
3413      matched any of the pattern so far this time through the reg_num-th
3414      subexpression.  These two fields get reset each time through any
3415      loop their register is in.  */
3416 #ifdef MATCH_MAY_ALLOCATE /* otherwise, this is global.  */
3417   register_info_type *reg_info; 
3418 #endif
3419
3420   /* The following record the register info as found in the above
3421      variables when we find a match better than any we've seen before. 
3422      This happens as we backtrack through the failure points, which in
3423      turn happens only if we have not yet matched the entire string. */
3424   unsigned best_regs_set = false;
3425 #ifdef MATCH_MAY_ALLOCATE /* otherwise, these are global.  */
3426   const char **best_regstart, **best_regend;
3427 #endif
3428   
3429   /* Logically, this is `best_regend[0]'.  But we don't want to have to
3430      allocate space for that if we're not allocating space for anything
3431      else (see below).  Also, we never need info about register 0 for
3432      any of the other register vectors, and it seems rather a kludge to
3433      treat `best_regend' differently than the rest.  So we keep track of
3434      the end of the best match so far in a separate variable.  We
3435      initialize this to NULL so that when we backtrack the first time
3436      and need to test it, it's not garbage.  */
3437   const char *match_end = NULL;
3438
3439   /* Used when we pop values we don't care about.  */
3440 #ifdef MATCH_MAY_ALLOCATE /* otherwise, these are global.  */
3441   const char **reg_dummy;
3442   register_info_type *reg_info_dummy;
3443 #endif
3444
3445 #ifdef DEBUG
3446   /* Counts the total number of registers pushed.  */
3447   unsigned num_regs_pushed = 0;         
3448 #endif
3449
3450   DEBUG_PRINT1 ("\n\nEntering re_match_2.\n");
3451   
3452   INIT_FAIL_STACK ();
3453   
3454 #ifdef MATCH_MAY_ALLOCATE
3455   /* Do not bother to initialize all the register variables if there are
3456      no groups in the pattern, as it takes a fair amount of time.  If
3457      there are groups, we include space for register 0 (the whole
3458      pattern), even though we never use it, since it simplifies the
3459      array indexing.  We should fix this.  */
3460   if (bufp->re_nsub)
3461     {
3462       regstart = REGEX_TALLOC (num_regs, const char *);
3463       regend = REGEX_TALLOC (num_regs, const char *);
3464       old_regstart = REGEX_TALLOC (num_regs, const char *);
3465       old_regend = REGEX_TALLOC (num_regs, const char *);
3466       best_regstart = REGEX_TALLOC (num_regs, const char *);
3467       best_regend = REGEX_TALLOC (num_regs, const char *);
3468       reg_info = REGEX_TALLOC (num_regs, register_info_type);
3469       reg_dummy = REGEX_TALLOC (num_regs, const char *);
3470       reg_info_dummy = REGEX_TALLOC (num_regs, register_info_type);
3471
3472       if (!(regstart && regend && old_regstart && old_regend && reg_info 
3473             && best_regstart && best_regend && reg_dummy && reg_info_dummy)) 
3474         {
3475           FREE_VARIABLES ();
3476           return -2;
3477         }
3478     }
3479 #if defined (REGEX_MALLOC)
3480   else
3481     {
3482       /* We must initialize all our variables to NULL, so that
3483          `FREE_VARIABLES' doesn't try to free them.  */
3484       regstart = regend = old_regstart = old_regend = best_regstart
3485         = best_regend = reg_dummy = NULL;
3486       reg_info = reg_info_dummy = (register_info_type *) NULL;
3487     }
3488 #endif /* REGEX_MALLOC */
3489 #endif /* MATCH_MAY_ALLOCATE */
3490
3491   /* The starting position is bogus.  */
3492   if (pos < 0 || pos > size1 + size2)
3493     {
3494       FREE_VARIABLES ();
3495       return -1;
3496     }
3497     
3498   /* Initialize subexpression text positions to -1 to mark ones that no
3499      start_memory/stop_memory has been seen for. Also initialize the
3500      register information struct.  */
3501   for (mcnt = 1; mcnt < num_regs; mcnt++)
3502     {
3503       regstart[mcnt] = regend[mcnt] 
3504         = old_regstart[mcnt] = old_regend[mcnt] = REG_UNSET_VALUE;
3505         
3506       REG_MATCH_NULL_STRING_P (reg_info[mcnt]) = MATCH_NULL_UNSET_VALUE;
3507       IS_ACTIVE (reg_info[mcnt]) = 0;
3508       MATCHED_SOMETHING (reg_info[mcnt]) = 0;
3509       EVER_MATCHED_SOMETHING (reg_info[mcnt]) = 0;
3510     }
3511   
3512   /* We move `string1' into `string2' if the latter's empty -- but not if
3513      `string1' is null.  */
3514   if (size2 == 0 && string1 != NULL)
3515     {
3516       string2 = string1;
3517       size2 = size1;
3518       string1 = 0;
3519       size1 = 0;
3520     }
3521   end1 = string1 + size1;
3522   end2 = string2 + size2;
3523
3524   /* Compute where to stop matching, within the two strings.  */
3525   if (stop <= size1)
3526     {
3527       end_match_1 = string1 + stop;
3528       end_match_2 = string2;
3529     }
3530   else
3531     {
3532       end_match_1 = end1;
3533       end_match_2 = string2 + stop - size1;
3534     }
3535
3536   /* `p' scans through the pattern as `d' scans through the data. 
3537      `dend' is the end of the input string that `d' points within.  `d'
3538      is advanced into the following input string whenever necessary, but
3539      this happens before fetching; therefore, at the beginning of the
3540      loop, `d' can be pointing at the end of a string, but it cannot
3541      equal `string2'.  */
3542   if (size1 > 0 && pos <= size1)
3543     {
3544       d = string1 + pos;
3545       dend = end_match_1;
3546     }
3547   else
3548     {
3549       d = string2 + pos - size1;
3550       dend = end_match_2;
3551     }
3552
3553   DEBUG_PRINT1 ("The compiled pattern is: ");
3554   DEBUG_PRINT_COMPILED_PATTERN (bufp, p, pend);
3555   DEBUG_PRINT1 ("The string to match is: `");
3556   DEBUG_PRINT_DOUBLE_STRING (d, string1, size1, string2, size2);
3557   DEBUG_PRINT1 ("'\n");
3558   
3559   /* This loops over pattern commands.  It exits by returning from the
3560      function if the match is complete, or it drops through if the match
3561      fails at this starting point in the input data.  */
3562   for (;;)
3563     {
3564       DEBUG_PRINT2 ("\n0x%x: ", p);
3565
3566       if (p == pend)
3567         { /* End of pattern means we might have succeeded.  */
3568           DEBUG_PRINT1 ("end of pattern ... ");
3569           
3570           /* If we haven't matched the entire string, and we want the
3571              longest match, try backtracking.  */
3572           if (d != end_match_2)
3573             {
3574               DEBUG_PRINT1 ("backtracking.\n");
3575               
3576               if (!FAIL_STACK_EMPTY ())
3577                 { /* More failure points to try.  */
3578                   boolean same_str_p = (FIRST_STRING_P (match_end) 
3579                                         == MATCHING_IN_FIRST_STRING);
3580
3581                   /* If exceeds best match so far, save it.  */
3582                   if (!best_regs_set
3583                       || (same_str_p && d > match_end)
3584                       || (!same_str_p && !MATCHING_IN_FIRST_STRING))
3585                     {
3586                       best_regs_set = true;
3587                       match_end = d;
3588                       
3589                       DEBUG_PRINT1 ("\nSAVING match as best so far.\n");
3590                       
3591                       for (mcnt = 1; mcnt < num_regs; mcnt++)
3592                         {
3593                           best_regstart[mcnt] = regstart[mcnt];
3594                           best_regend[mcnt] = regend[mcnt];
3595                         }
3596                     }
3597                   goto fail;           
3598                 }
3599
3600               /* If no failure points, don't restore garbage.  */
3601               else if (best_regs_set)   
3602                 {
3603                 restore_best_regs:
3604                   /* Restore best match.  It may happen that `dend ==
3605                      end_match_1' while the restored d is in string2.
3606                      For example, the pattern `x.*y.*z' against the
3607                      strings `x-' and `y-z-', if the two strings are
3608                      not consecutive in memory.  */
3609                   DEBUG_PRINT1 ("Restoring best registers.\n");
3610                   
3611                   d = match_end;
3612                   dend = ((d >= string1 && d <= end1)
3613                            ? end_match_1 : end_match_2);
3614
3615                   for (mcnt = 1; mcnt < num_regs; mcnt++)
3616                     {
3617                       regstart[mcnt] = best_regstart[mcnt];
3618                       regend[mcnt] = best_regend[mcnt];
3619                     }
3620                 }
3621             } /* d != end_match_2 */
3622
3623           DEBUG_PRINT1 ("Accepting match.\n");
3624
3625           /* If caller wants register contents data back, do it.  */
3626           if (regs && !bufp->no_sub)
3627             {
3628               /* Have the register data arrays been allocated?  */
3629               if (bufp->regs_allocated == REGS_UNALLOCATED)
3630                 { /* No.  So allocate them with malloc.  We need one
3631                      extra element beyond `num_regs' for the `-1' marker
3632                      GNU code uses.  */
3633                   regs->num_regs = MAX (RE_NREGS, num_regs + 1);
3634                   regs->start = TALLOC (regs->num_regs, regoff_t);
3635                   regs->end = TALLOC (regs->num_regs, regoff_t);
3636                   if (regs->start == NULL || regs->end == NULL)
3637                     return -2;
3638                   bufp->regs_allocated = REGS_REALLOCATE;
3639                 }
3640               else if (bufp->regs_allocated == REGS_REALLOCATE)
3641                 { /* Yes.  If we need more elements than were already
3642                      allocated, reallocate them.  If we need fewer, just
3643                      leave it alone.  */
3644                   if (regs->num_regs < num_regs + 1)
3645                     {
3646                       regs->num_regs = num_regs + 1;
3647                       RETALLOC (regs->start, regs->num_regs, regoff_t);
3648                       RETALLOC (regs->end, regs->num_regs, regoff_t);
3649                       if (regs->start == NULL || regs->end == NULL)
3650                         return -2;
3651                     }
3652                 }
3653               else
3654                 {
3655                   /* These braces fend off a "empty body in an else-statement"
3656                      warning under GCC when assert expands to nothing.  */
3657                   assert (bufp->regs_allocated == REGS_FIXED);
3658                 }
3659
3660               /* Convert the pointer data in `regstart' and `regend' to
3661                  indices.  Register zero has to be set differently,
3662                  since we haven't kept track of any info for it.  */
3663               if (regs->num_regs > 0)
3664                 {
3665                   regs->start[0] = pos;
3666                   regs->end[0] = (MATCHING_IN_FIRST_STRING
3667                                   ? ((regoff_t) (d - string1))
3668                                   : ((regoff_t) (d - string2 + size1)));
3669                 }
3670               
3671               /* Go through the first `min (num_regs, regs->num_regs)'
3672                  registers, since that is all we initialized.  */
3673               for (mcnt = 1; mcnt < MIN (num_regs, regs->num_regs); mcnt++)
3674                 {
3675                   if (REG_UNSET (regstart[mcnt]) || REG_UNSET (regend[mcnt]))
3676                     regs->start[mcnt] = regs->end[mcnt] = -1;
3677                   else
3678                     {
3679                       regs->start[mcnt]
3680                         = (regoff_t) POINTER_TO_OFFSET (regstart[mcnt]);
3681                       regs->end[mcnt]
3682                         = (regoff_t) POINTER_TO_OFFSET (regend[mcnt]);
3683                     }
3684                 }
3685               
3686               /* If the regs structure we return has more elements than
3687                  were in the pattern, set the extra elements to -1.  If
3688                  we (re)allocated the registers, this is the case,
3689                  because we always allocate enough to have at least one
3690                  -1 at the end.  */
3691               for (mcnt = num_regs; mcnt < regs->num_regs; mcnt++)
3692                 regs->start[mcnt] = regs->end[mcnt] = -1;
3693             } /* regs && !bufp->no_sub */
3694
3695           FREE_VARIABLES ();
3696           DEBUG_PRINT4 ("%u failure points pushed, %u popped (%u remain).\n",
3697                         nfailure_points_pushed, nfailure_points_popped,
3698                         nfailure_points_pushed - nfailure_points_popped);
3699           DEBUG_PRINT2 ("%u registers pushed.\n", num_regs_pushed);
3700
3701           mcnt = d - pos - (MATCHING_IN_FIRST_STRING 
3702                             ? string1 
3703                             : string2 - size1);
3704
3705           DEBUG_PRINT2 ("Returning %d from re_match_2.\n", mcnt);
3706
3707           return mcnt;
3708         }
3709
3710       /* Otherwise match next pattern command.  */
3711 #ifdef SWITCH_ENUM_BUG
3712       switch ((int) ((re_opcode_t) *p++))
3713 #else
3714       switch ((re_opcode_t) *p++)
3715 #endif
3716         {
3717         /* Ignore these.  Used to ignore the n of succeed_n's which
3718            currently have n == 0.  */
3719         case no_op:
3720           DEBUG_PRINT1 ("EXECUTING no_op.\n");
3721           break;
3722
3723
3724         /* Match the next n pattern characters exactly.  The following
3725            byte in the pattern defines n, and the n bytes after that
3726            are the characters to match.  */
3727         case exactn:
3728           mcnt = *p++;
3729           DEBUG_PRINT2 ("EXECUTING exactn %d.\n", mcnt);
3730
3731           /* This is written out as an if-else so we don't waste time
3732              testing `translate' inside the loop.  */
3733           if (translate)
3734             {
3735               do
3736                 {
3737                   PREFETCH ();
3738                   if (translate[(unsigned char) *d++] != (char) *p++)
3739                     goto fail;
3740                 }
3741               while (--mcnt);
3742             }
3743           else
3744             {
3745               do
3746                 {
3747                   PREFETCH ();
3748                   if (*d++ != (char) *p++) goto fail;
3749                 }
3750               while (--mcnt);
3751             }
3752           SET_REGS_MATCHED ();
3753           break;
3754
3755
3756         /* Match any character except possibly a newline or a null.  */
3757         case anychar:
3758           DEBUG_PRINT1 ("EXECUTING anychar.\n");
3759
3760           PREFETCH ();
3761
3762           if ((!(bufp->syntax & RE_DOT_NEWLINE) && TRANSLATE (*d) == '\n')
3763               || (bufp->syntax & RE_DOT_NOT_NULL && TRANSLATE (*d) == '\000'))
3764             goto fail;
3765
3766           SET_REGS_MATCHED ();
3767           DEBUG_PRINT2 ("  Matched `%d'.\n", *d);
3768           d++;
3769           break;
3770
3771
3772         case charset:
3773         case charset_not:
3774           {
3775             register unsigned char c;
3776             boolean not = (re_opcode_t) *(p - 1) == charset_not;
3777
3778             DEBUG_PRINT2 ("EXECUTING charset%s.\n", not ? "_not" : "");
3779
3780             PREFETCH ();
3781             c = TRANSLATE (*d); /* The character to match.  */
3782
3783             /* Cast to `unsigned' instead of `unsigned char' in case the
3784                bit list is a full 32 bytes long.  */
3785             if (c < (unsigned) (*p * BYTEWIDTH)
3786                 && p[1 + c / BYTEWIDTH] & (1 << (c % BYTEWIDTH)))
3787               not = !not;
3788
3789             p += 1 + *p;
3790
3791             if (!not) goto fail;
3792             
3793             SET_REGS_MATCHED ();
3794             d++;
3795             break;
3796           }
3797
3798
3799         /* The beginning of a group is represented by start_memory.
3800            The arguments are the register number in the next byte, and the
3801            number of groups inner to this one in the next.  The text
3802            matched within the group is recorded (in the internal
3803            registers data structure) under the register number.  */
3804         case start_memory:
3805           DEBUG_PRINT3 ("EXECUTING start_memory %d (%d):\n", *p, p[1]);
3806
3807           /* Find out if this group can match the empty string.  */
3808           p1 = p;               /* To send to group_match_null_string_p.  */
3809           
3810           if (REG_MATCH_NULL_STRING_P (reg_info[*p]) == MATCH_NULL_UNSET_VALUE)
3811             REG_MATCH_NULL_STRING_P (reg_info[*p]) 
3812               = group_match_null_string_p (&p1, pend, reg_info);
3813
3814           /* Save the position in the string where we were the last time
3815              we were at this open-group operator in case the group is
3816              operated upon by a repetition operator, e.g., with `(a*)*b'
3817              against `ab'; then we want to ignore where we are now in
3818              the string in case this attempt to match fails.  */
3819           old_regstart[*p] = REG_MATCH_NULL_STRING_P (reg_info[*p])
3820                              ? REG_UNSET (regstart[*p]) ? d : regstart[*p]
3821                              : regstart[*p];
3822           DEBUG_PRINT2 ("  old_regstart: %d\n", 
3823                          POINTER_TO_OFFSET (old_regstart[*p]));
3824
3825           regstart[*p] = d;
3826           DEBUG_PRINT2 ("  regstart: %d\n", POINTER_TO_OFFSET (regstart[*p]));
3827
3828           IS_ACTIVE (reg_info[*p]) = 1;
3829           MATCHED_SOMETHING (reg_info[*p]) = 0;
3830           
3831           /* This is the new highest active register.  */
3832           highest_active_reg = *p;
3833           
3834           /* If nothing was active before, this is the new lowest active
3835              register.  */
3836           if (lowest_active_reg == NO_LOWEST_ACTIVE_REG)
3837             lowest_active_reg = *p;
3838
3839           /* Move past the register number and inner group count.  */
3840           p += 2;
3841           just_past_start_mem = p;
3842           break;
3843
3844
3845         /* The stop_memory opcode represents the end of a group.  Its
3846            arguments are the same as start_memory's: the register
3847            number, and the number of inner groups.  */
3848         case stop_memory:
3849           DEBUG_PRINT3 ("EXECUTING stop_memory %d (%d):\n", *p, p[1]);
3850              
3851           /* We need to save the string position the last time we were at
3852              this close-group operator in case the group is operated
3853              upon by a repetition operator, e.g., with `((a*)*(b*)*)*'
3854              against `aba'; then we want to ignore where we are now in
3855              the string in case this attempt to match fails.  */
3856           old_regend[*p] = REG_MATCH_NULL_STRING_P (reg_info[*p])
3857                            ? REG_UNSET (regend[*p]) ? d : regend[*p]
3858                            : regend[*p];
3859           DEBUG_PRINT2 ("      old_regend: %d\n", 
3860                          POINTER_TO_OFFSET (old_regend[*p]));
3861
3862           regend[*p] = d;
3863           DEBUG_PRINT2 ("      regend: %d\n", POINTER_TO_OFFSET (regend[*p]));
3864
3865           /* This register isn't active anymore.  */
3866           IS_ACTIVE (reg_info[*p]) = 0;
3867           
3868           /* If this was the only register active, nothing is active
3869              anymore.  */
3870           if (lowest_active_reg == highest_active_reg)
3871             {
3872               lowest_active_reg = NO_LOWEST_ACTIVE_REG;
3873               highest_active_reg = NO_HIGHEST_ACTIVE_REG;
3874             }
3875           else
3876             { /* We must scan for the new highest active register, since
3877                  it isn't necessarily one less than now: consider
3878                  (a(b)c(d(e)f)g).  When group 3 ends, after the f), the
3879                  new highest active register is 1.  */
3880               unsigned char r = *p - 1;
3881               while (r > 0 && !IS_ACTIVE (reg_info[r]))
3882                 r--;
3883               
3884               /* If we end up at register zero, that means that we saved
3885                  the registers as the result of an `on_failure_jump', not
3886                  a `start_memory', and we jumped to past the innermost
3887                  `stop_memory'.  For example, in ((.)*) we save
3888                  registers 1 and 2 as a result of the *, but when we pop
3889                  back to the second ), we are at the stop_memory 1.
3890                  Thus, nothing is active.  */
3891               if (r == 0)
3892                 {
3893                   lowest_active_reg = NO_LOWEST_ACTIVE_REG;
3894                   highest_active_reg = NO_HIGHEST_ACTIVE_REG;
3895                 }
3896               else
3897                 highest_active_reg = r;
3898             }
3899           
3900           /* If just failed to match something this time around with a
3901              group that's operated on by a repetition operator, try to
3902              force exit from the ``loop'', and restore the register
3903              information for this group that we had before trying this
3904              last match.  */
3905           if ((!MATCHED_SOMETHING (reg_info[*p])
3906                || just_past_start_mem == p - 1)
3907               && (p + 2) < pend)              
3908             {
3909               boolean is_a_jump_n = false;
3910               
3911               p1 = p + 2;
3912               mcnt = 0;
3913               switch ((re_opcode_t) *p1++)
3914                 {
3915                   case jump_n:
3916                     is_a_jump_n = true;
3917                   case pop_failure_jump:
3918                   case maybe_pop_jump:
3919                   case jump:
3920                   case dummy_failure_jump:
3921                     EXTRACT_NUMBER_AND_INCR (mcnt, p1);
3922                     if (is_a_jump_n)
3923                       p1 += 2;
3924                     break;
3925                   
3926                   default:
3927                     /* do nothing */ ;
3928                 }
3929               p1 += mcnt;
3930         
3931               /* If the next operation is a jump backwards in the pattern
3932                  to an on_failure_jump right before the start_memory
3933                  corresponding to this stop_memory, exit from the loop
3934                  by forcing a failure after pushing on the stack the
3935                  on_failure_jump's jump in the pattern, and d.  */
3936               if (mcnt < 0 && (re_opcode_t) *p1 == on_failure_jump
3937                   && (re_opcode_t) p1[3] == start_memory && p1[4] == *p)
3938                 {
3939                   /* If this group ever matched anything, then restore
3940                      what its registers were before trying this last
3941                      failed match, e.g., with `(a*)*b' against `ab' for
3942                      regstart[1], and, e.g., with `((a*)*(b*)*)*'
3943                      against `aba' for regend[3].
3944                      
3945                      Also restore the registers for inner groups for,
3946                      e.g., `((a*)(b*))*' against `aba' (register 3 would
3947                      otherwise get trashed).  */
3948                      
3949                   if (EVER_MATCHED_SOMETHING (reg_info[*p]))
3950                     {
3951                       unsigned r; 
3952         
3953                       EVER_MATCHED_SOMETHING (reg_info[*p]) = 0;
3954                       
3955                       /* Restore this and inner groups' (if any) registers.  */
3956                       for (r = *p; r < *p + *(p + 1); r++)
3957                         {
3958                           regstart[r] = old_regstart[r];
3959
3960                           /* xx why this test?  */
3961                           if ((int) old_regend[r] >= (int) regstart[r])
3962                             regend[r] = old_regend[r];
3963                         }     
3964                     }
3965                   p1++;
3966                   EXTRACT_NUMBER_AND_INCR (mcnt, p1);
3967                   PUSH_FAILURE_POINT (p1 + mcnt, d, -2);
3968
3969                   goto fail;
3970                 }
3971             }
3972           
3973           /* Move past the register number and the inner group count.  */
3974           p += 2;
3975           break;
3976
3977
3978         /* \<digit> has been turned into a `duplicate' command which is
3979            followed by the numeric value of <digit> as the register number.  */
3980         case duplicate:
3981           {
3982             register const char *d2, *dend2;
3983             int regno = *p++;   /* Get which register to match against.  */
3984             DEBUG_PRINT2 ("EXECUTING duplicate %d.\n", regno);
3985
3986             /* Can't back reference a group which we've never matched.  */
3987             if (REG_UNSET (regstart[regno]) || REG_UNSET (regend[regno]))
3988               goto fail;
3989               
3990             /* Where in input to try to start matching.  */
3991             d2 = regstart[regno];
3992             
3993             /* Where to stop matching; if both the place to start and
3994                the place to stop matching are in the same string, then
3995                set to the place to stop, otherwise, for now have to use
3996                the end of the first string.  */
3997
3998             dend2 = ((FIRST_STRING_P (regstart[regno]) 
3999                       == FIRST_STRING_P (regend[regno]))
4000                      ? regend[regno] : end_match_1);
4001             for (;;)
4002               {
4003                 /* If necessary, advance to next segment in register
4004                    contents.  */
4005                 while (d2 == dend2)
4006                   {
4007                     if (dend2 == end_match_2) break;
4008                     if (dend2 == regend[regno]) break;
4009
4010                     /* End of string1 => advance to string2. */
4011                     d2 = string2;
4012                     dend2 = regend[regno];
4013                   }
4014                 /* At end of register contents => success */
4015                 if (d2 == dend2) break;
4016
4017                 /* If necessary, advance to next segment in data.  */
4018                 PREFETCH ();
4019
4020                 /* How many characters left in this segment to match.  */
4021                 mcnt = dend - d;
4022                 
4023                 /* Want how many consecutive characters we can match in
4024                    one shot, so, if necessary, adjust the count.  */
4025                 if (mcnt > dend2 - d2)
4026                   mcnt = dend2 - d2;
4027                   
4028                 /* Compare that many; failure if mismatch, else move
4029                    past them.  */
4030                 if (translate 
4031                     ? bcmp_translate (d, d2, mcnt, translate) 
4032                     : bcmp (d, d2, mcnt))
4033                   goto fail;
4034                 d += mcnt, d2 += mcnt;
4035               }
4036           }
4037           break;
4038
4039
4040         /* begline matches the empty string at the beginning of the string
4041            (unless `not_bol' is set in `bufp'), and, if
4042            `newline_anchor' is set, after newlines.  */
4043         case begline:
4044           DEBUG_PRINT1 ("EXECUTING begline.\n");
4045           
4046           if (AT_STRINGS_BEG (d))
4047             {
4048               if (!bufp->not_bol) break;
4049             }
4050           else if (d[-1] == '\n' && bufp->newline_anchor)
4051             {
4052               break;
4053             }
4054           /* In all other cases, we fail.  */
4055           goto fail;
4056
4057
4058         /* endline is the dual of begline.  */
4059         case endline:
4060           DEBUG_PRINT1 ("EXECUTING endline.\n");
4061
4062           if (AT_STRINGS_END (d))
4063             {
4064               if (!bufp->not_eol) break;
4065             }
4066           
4067           /* We have to ``prefetch'' the next character.  */
4068           else if ((d == end1 ? *string2 : *d) == '\n'
4069                    && bufp->newline_anchor)
4070             {
4071               break;
4072             }
4073           goto fail;
4074
4075
4076         /* Match at the very beginning of the data.  */
4077         case begbuf:
4078           DEBUG_PRINT1 ("EXECUTING begbuf.\n");
4079           if (AT_STRINGS_BEG (d))
4080             break;
4081           goto fail;
4082
4083
4084         /* Match at the very end of the data.  */
4085         case endbuf:
4086           DEBUG_PRINT1 ("EXECUTING endbuf.\n");
4087           if (AT_STRINGS_END (d))
4088             break;
4089           goto fail;
4090
4091
4092         /* on_failure_keep_string_jump is used to optimize `.*\n'.  It
4093            pushes NULL as the value for the string on the stack.  Then
4094            `pop_failure_point' will keep the current value for the
4095            string, instead of restoring it.  To see why, consider
4096            matching `foo\nbar' against `.*\n'.  The .* matches the foo;
4097            then the . fails against the \n.  But the next thing we want
4098            to do is match the \n against the \n; if we restored the
4099            string value, we would be back at the foo.
4100            
4101            Because this is used only in specific cases, we don't need to
4102            check all the things that `on_failure_jump' does, to make
4103            sure the right things get saved on the stack.  Hence we don't
4104            share its code.  The only reason to push anything on the
4105            stack at all is that otherwise we would have to change
4106            `anychar's code to do something besides goto fail in this
4107            case; that seems worse than this.  */
4108         case on_failure_keep_string_jump:
4109           DEBUG_PRINT1 ("EXECUTING on_failure_keep_string_jump");
4110           
4111           EXTRACT_NUMBER_AND_INCR (mcnt, p);
4112           DEBUG_PRINT3 (" %d (to 0x%x):\n", mcnt, p + mcnt);
4113
4114           PUSH_FAILURE_POINT (p + mcnt, NULL, -2);
4115           break;
4116
4117
4118         /* Uses of on_failure_jump:
4119         
4120            Each alternative starts with an on_failure_jump that points
4121            to the beginning of the next alternative.  Each alternative
4122            except the last ends with a jump that in effect jumps past
4123            the rest of the alternatives.  (They really jump to the
4124            ending jump of the following alternative, because tensioning
4125            these jumps is a hassle.)
4126
4127            Repeats start with an on_failure_jump that points past both
4128            the repetition text and either the following jump or
4129            pop_failure_jump back to this on_failure_jump.  */
4130         case on_failure_jump:
4131         on_failure:
4132           DEBUG_PRINT1 ("EXECUTING on_failure_jump");
4133
4134           EXTRACT_NUMBER_AND_INCR (mcnt, p);
4135           DEBUG_PRINT3 (" %d (to 0x%x)", mcnt, p + mcnt);
4136
4137           /* If this on_failure_jump comes right before a group (i.e.,
4138              the original * applied to a group), save the information
4139              for that group and all inner ones, so that if we fail back
4140              to this point, the group's information will be correct.
4141              For example, in \(a*\)*\1, we need the preceding group,
4142              and in \(\(a*\)b*\)\2, we need the inner group.  */
4143
4144           /* We can't use `p' to check ahead because we push
4145              a failure point to `p + mcnt' after we do this.  */
4146           p1 = p;
4147
4148           /* We need to skip no_op's before we look for the
4149              start_memory in case this on_failure_jump is happening as
4150              the result of a completed succeed_n, as in \(a\)\{1,3\}b\1
4151              against aba.  */
4152           while (p1 < pend && (re_opcode_t) *p1 == no_op)
4153             p1++;
4154
4155           if (p1 < pend && (re_opcode_t) *p1 == start_memory)
4156             {
4157               /* We have a new highest active register now.  This will
4158                  get reset at the start_memory we are about to get to,
4159                  but we will have saved all the registers relevant to
4160                  this repetition op, as described above.  */
4161               highest_active_reg = *(p1 + 1) + *(p1 + 2);
4162               if (lowest_active_reg == NO_LOWEST_ACTIVE_REG)
4163                 lowest_active_reg = *(p1 + 1);
4164             }
4165
4166           DEBUG_PRINT1 (":\n");
4167           PUSH_FAILURE_POINT (p + mcnt, d, -2);
4168           break;
4169
4170
4171         /* A smart repeat ends with `maybe_pop_jump'.
4172            We change it to either `pop_failure_jump' or `jump'.  */
4173         case maybe_pop_jump:
4174           EXTRACT_NUMBER_AND_INCR (mcnt, p);
4175           DEBUG_PRINT2 ("EXECUTING maybe_pop_jump %d.\n", mcnt);
4176           {
4177             register unsigned char *p2 = p;
4178
4179             /* Compare the beginning of the repeat with what in the
4180                pattern follows its end. If we can establish that there
4181                is nothing that they would both match, i.e., that we
4182                would have to backtrack because of (as in, e.g., `a*a')
4183                then we can change to pop_failure_jump, because we'll
4184                never have to backtrack.
4185                
4186                This is not true in the case of alternatives: in
4187                `(a|ab)*' we do need to backtrack to the `ab' alternative
4188                (e.g., if the string was `ab').  But instead of trying to
4189                detect that here, the alternative has put on a dummy
4190                failure point which is what we will end up popping.  */
4191
4192             /* Skip over open/close-group commands.
4193                If what follows this loop is a ...+ construct,
4194                look at what begins its body, since we will have to
4195                match at least one of that.  */
4196             while (1)
4197               {
4198                 if (p2 + 2 < pend
4199                     && ((re_opcode_t) *p2 == stop_memory
4200                         || (re_opcode_t) *p2 == start_memory))
4201                   p2 += 3;
4202                 else if (p2 + 6 < pend
4203                          && (re_opcode_t) *p2 == dummy_failure_jump)
4204                   p2 += 6;
4205                 else
4206                   break;
4207               }
4208
4209             p1 = p + mcnt;
4210             /* p1[0] ... p1[2] are the `on_failure_jump' corresponding
4211                to the `maybe_finalize_jump' of this case.  Examine what 
4212                follows.  */
4213
4214             /* If we're at the end of the pattern, we can change.  */
4215             if (p2 == pend)
4216               {
4217                 /* Consider what happens when matching ":\(.*\)"
4218                    against ":/".  I don't really understand this code
4219                    yet.  */
4220                 p[-3] = (unsigned char) pop_failure_jump;
4221                 DEBUG_PRINT1
4222                   ("  End of pattern: change to `pop_failure_jump'.\n");
4223               }
4224
4225             else if ((re_opcode_t) *p2 == exactn
4226                      || (bufp->newline_anchor && (re_opcode_t) *p2 == endline))
4227               {
4228                 register unsigned char c
4229                   = *p2 == (unsigned char) endline ? '\n' : p2[2];
4230
4231                 if ((re_opcode_t) p1[3] == exactn && p1[5] != c)
4232                   {
4233                     p[-3] = (unsigned char) pop_failure_jump;
4234                     DEBUG_PRINT3 ("  %c != %c => pop_failure_jump.\n",
4235                                   c, p1[5]);
4236                   }
4237                   
4238                 else if ((re_opcode_t) p1[3] == charset
4239                          || (re_opcode_t) p1[3] == charset_not)
4240                   {
4241                     int not = (re_opcode_t) p1[3] == charset_not;
4242                     
4243                     if (c < (unsigned char) (p1[4] * BYTEWIDTH)
4244                         && p1[5 + c / BYTEWIDTH] & (1 << (c % BYTEWIDTH)))
4245                       not = !not;
4246
4247                     /* `not' is equal to 1 if c would match, which means
4248                         that we can't change to pop_failure_jump.  */
4249                     if (!not)
4250                       {
4251                         p[-3] = (unsigned char) pop_failure_jump;
4252                         DEBUG_PRINT1 ("  No match => pop_failure_jump.\n");
4253                       }
4254                   }
4255               }
4256             else if ((re_opcode_t) *p2 == charset)
4257               {
4258                 register unsigned char c
4259                   = *p2 == (unsigned char) endline ? '\n' : p2[2];
4260
4261                 if ((re_opcode_t) p1[3] == exactn
4262                     && ! (p2[1] * BYTEWIDTH > p1[4]
4263                           && (p2[1 + p1[4] / BYTEWIDTH]
4264                               & (1 << (p1[4] % BYTEWIDTH)))))
4265                   {
4266                     p[-3] = (unsigned char) pop_failure_jump;
4267                     DEBUG_PRINT3 ("  %c != %c => pop_failure_jump.\n",
4268                                   c, p1[5]);
4269                   }
4270                   
4271                 else if ((re_opcode_t) p1[3] == charset_not)
4272                   {
4273                     int idx;
4274                     /* We win if the charset_not inside the loop
4275                        lists every character listed in the charset after.  */
4276                     for (idx = 0; idx < p2[1]; idx++)
4277                       if (! (p2[2 + idx] == 0
4278                              || (idx < p1[4]
4279                                  && ((p2[2 + idx] & ~ p1[5 + idx]) == 0))))
4280                         break;
4281
4282                     if (idx == p2[1])
4283                       {
4284                         p[-3] = (unsigned char) pop_failure_jump;
4285                         DEBUG_PRINT1 ("  No match => pop_failure_jump.\n");
4286                       }
4287                   }
4288                 else if ((re_opcode_t) p1[3] == charset)
4289                   {
4290                     int idx;
4291                     /* We win if the charset inside the loop
4292                        has no overlap with the one after the loop.  */
4293                     for (idx = 0; idx < p2[1] && idx < p1[4]; idx++)
4294                       if ((p2[2 + idx] & p1[5 + idx]) != 0)
4295                         break;
4296
4297                     if (idx == p2[1] || idx == p1[4])
4298                       {
4299                         p[-3] = (unsigned char) pop_failure_jump;
4300                         DEBUG_PRINT1 ("  No match => pop_failure_jump.\n");
4301                       }
4302                   }
4303               }
4304           }
4305           p -= 2;               /* Point at relative address again.  */
4306           if ((re_opcode_t) p[-1] != pop_failure_jump)
4307             {
4308               p[-1] = (unsigned char) jump;
4309               DEBUG_PRINT1 ("  Match => jump.\n");
4310               goto unconditional_jump;
4311             }
4312         /* Note fall through.  */
4313
4314
4315         /* The end of a simple repeat has a pop_failure_jump back to
4316            its matching on_failure_jump, where the latter will push a
4317            failure point.  The pop_failure_jump takes off failure
4318            points put on by this pop_failure_jump's matching
4319            on_failure_jump; we got through the pattern to here from the
4320            matching on_failure_jump, so didn't fail.  */
4321         case pop_failure_jump:
4322           {
4323             /* We need to pass separate storage for the lowest and
4324                highest registers, even though we don't care about the
4325                actual values.  Otherwise, we will restore only one
4326                register from the stack, since lowest will == highest in
4327                `pop_failure_point'.  */
4328             unsigned dummy_low_reg, dummy_high_reg;
4329             unsigned char *pdummy;
4330             const char *sdummy;
4331
4332             DEBUG_PRINT1 ("EXECUTING pop_failure_jump.\n");
4333             POP_FAILURE_POINT (sdummy, pdummy,
4334                                dummy_low_reg, dummy_high_reg,
4335                                reg_dummy, reg_dummy, reg_info_dummy);
4336           }
4337           /* Note fall through.  */
4338
4339           
4340         /* Unconditionally jump (without popping any failure points).  */
4341         case jump:
4342         unconditional_jump:
4343           EXTRACT_NUMBER_AND_INCR (mcnt, p);    /* Get the amount to jump.  */
4344           DEBUG_PRINT2 ("EXECUTING jump %d ", mcnt);
4345           p += mcnt;                            /* Do the jump.  */
4346           DEBUG_PRINT2 ("(to 0x%x).\n", p);
4347           break;
4348
4349         
4350         /* We need this opcode so we can detect where alternatives end
4351            in `group_match_null_string_p' et al.  */
4352         case jump_past_alt:
4353           DEBUG_PRINT1 ("EXECUTING jump_past_alt.\n");
4354           goto unconditional_jump;
4355
4356
4357         /* Normally, the on_failure_jump pushes a failure point, which
4358            then gets popped at pop_failure_jump.  We will end up at
4359            pop_failure_jump, also, and with a pattern of, say, `a+', we
4360            are skipping over the on_failure_jump, so we have to push
4361            something meaningless for pop_failure_jump to pop.  */
4362         case dummy_failure_jump:
4363           DEBUG_PRINT1 ("EXECUTING dummy_failure_jump.\n");
4364           /* It doesn't matter what we push for the string here.  What
4365              the code at `fail' tests is the value for the pattern.  */
4366           PUSH_FAILURE_POINT (0, 0, -2);
4367           goto unconditional_jump;
4368
4369
4370         /* At the end of an alternative, we need to push a dummy failure
4371            point in case we are followed by a `pop_failure_jump', because
4372            we don't want the failure point for the alternative to be
4373            popped.  For example, matching `(a|ab)*' against `aab'
4374            requires that we match the `ab' alternative.  */
4375         case push_dummy_failure:
4376           DEBUG_PRINT1 ("EXECUTING push_dummy_failure.\n");
4377           /* See comments just above at `dummy_failure_jump' about the
4378              two zeroes.  */
4379           PUSH_FAILURE_POINT (0, 0, -2);
4380           break;
4381
4382         /* Have to succeed matching what follows at least n times.
4383            After that, handle like `on_failure_jump'.  */
4384         case succeed_n: 
4385           EXTRACT_NUMBER (mcnt, p + 2);
4386           DEBUG_PRINT2 ("EXECUTING succeed_n %d.\n", mcnt);
4387
4388           assert (mcnt >= 0);
4389           /* Originally, this is how many times we HAVE to succeed.  */
4390           if (mcnt > 0)
4391             {
4392                mcnt--;
4393                p += 2;
4394                STORE_NUMBER_AND_INCR (p, mcnt);
4395                DEBUG_PRINT3 ("  Setting 0x%x to %d.\n", p, mcnt);
4396             }
4397           else if (mcnt == 0)
4398             {
4399               DEBUG_PRINT2 ("  Setting two bytes from 0x%x to no_op.\n", p+2);
4400               p[2] = (unsigned char) no_op;
4401               p[3] = (unsigned char) no_op;
4402               goto on_failure;
4403             }
4404           break;
4405         
4406         case jump_n: 
4407           EXTRACT_NUMBER (mcnt, p + 2);
4408           DEBUG_PRINT2 ("EXECUTING jump_n %d.\n", mcnt);
4409
4410           /* Originally, this is how many times we CAN jump.  */
4411           if (mcnt)
4412             {
4413                mcnt--;
4414                STORE_NUMBER (p + 2, mcnt);
4415                goto unconditional_jump;      
4416             }
4417           /* If don't have to jump any more, skip over the rest of command.  */
4418           else      
4419             p += 4;                  
4420           break;
4421         
4422         case set_number_at:
4423           {
4424             DEBUG_PRINT1 ("EXECUTING set_number_at.\n");
4425
4426             EXTRACT_NUMBER_AND_INCR (mcnt, p);
4427             p1 = p + mcnt;
4428             EXTRACT_NUMBER_AND_INCR (mcnt, p);
4429             DEBUG_PRINT3 ("  Setting 0x%x to %d.\n", p1, mcnt);
4430             STORE_NUMBER (p1, mcnt);
4431             break;
4432           }
4433
4434         case wordbound:
4435           DEBUG_PRINT1 ("EXECUTING wordbound.\n");
4436           if (AT_WORD_BOUNDARY (d))
4437             break;
4438           goto fail;
4439
4440         case notwordbound:
4441           DEBUG_PRINT1 ("EXECUTING notwordbound.\n");
4442           if (AT_WORD_BOUNDARY (d))
4443             goto fail;
4444           break;
4445
4446         case wordbeg:
4447           DEBUG_PRINT1 ("EXECUTING wordbeg.\n");
4448           if (WORDCHAR_P (d) && (AT_STRINGS_BEG (d) || !WORDCHAR_P (d - 1)))
4449             break;
4450           goto fail;
4451
4452         case wordend:
4453           DEBUG_PRINT1 ("EXECUTING wordend.\n");
4454           if (!AT_STRINGS_BEG (d) && WORDCHAR_P (d - 1)
4455               && (!WORDCHAR_P (d) || AT_STRINGS_END (d)))
4456             break;
4457           goto fail;
4458
4459 #ifdef emacs
4460         case before_dot:
4461           DEBUG_PRINT1 ("EXECUTING before_dot.\n");
4462           if (PTR_CHAR_POS ((unsigned char *) d) >= point)
4463             goto fail;
4464           break;
4465   
4466         case at_dot:
4467           DEBUG_PRINT1 ("EXECUTING at_dot.\n");
4468           if (PTR_CHAR_POS ((unsigned char *) d) != point)
4469             goto fail;
4470           break;
4471   
4472         case after_dot:
4473           DEBUG_PRINT1 ("EXECUTING after_dot.\n");
4474           if (PTR_CHAR_POS ((unsigned char *) d) <= point)
4475             goto fail;
4476           break;
4477 #if 0 /* not emacs19 */
4478         case at_dot:
4479           DEBUG_PRINT1 ("EXECUTING at_dot.\n");
4480           if (PTR_CHAR_POS ((unsigned char *) d) + 1 != point)
4481             goto fail;
4482           break;
4483 #endif /* not emacs19 */
4484
4485         case syntaxspec:
4486           DEBUG_PRINT2 ("EXECUTING syntaxspec %d.\n", mcnt);
4487           mcnt = *p++;
4488           goto matchsyntax;
4489
4490         case wordchar:
4491           DEBUG_PRINT1 ("EXECUTING Emacs wordchar.\n");
4492           mcnt = (int) Sword;
4493         matchsyntax:
4494           PREFETCH ();
4495           /* Can't use *d++ here; SYNTAX may be an unsafe macro.  */
4496           d++;
4497           if (SYNTAX (d[-1]) != (enum syntaxcode) mcnt)
4498             goto fail;
4499           SET_REGS_MATCHED ();
4500           break;
4501
4502         case notsyntaxspec:
4503           DEBUG_PRINT2 ("EXECUTING notsyntaxspec %d.\n", mcnt);
4504           mcnt = *p++;
4505           goto matchnotsyntax;
4506
4507         case notwordchar:
4508           DEBUG_PRINT1 ("EXECUTING Emacs notwordchar.\n");
4509           mcnt = (int) Sword;
4510         matchnotsyntax:
4511           PREFETCH ();
4512           /* Can't use *d++ here; SYNTAX may be an unsafe macro.  */
4513           d++;
4514           if (SYNTAX (d[-1]) == (enum syntaxcode) mcnt)
4515             goto fail;
4516           SET_REGS_MATCHED ();
4517           break;
4518
4519 #else /* not emacs */
4520         case wordchar:
4521           DEBUG_PRINT1 ("EXECUTING non-Emacs wordchar.\n");
4522           PREFETCH ();
4523           if (!WORDCHAR_P (d))
4524             goto fail;
4525           SET_REGS_MATCHED ();
4526           d++;
4527           break;
4528           
4529         case notwordchar:
4530           DEBUG_PRINT1 ("EXECUTING non-Emacs notwordchar.\n");
4531           PREFETCH ();
4532           if (WORDCHAR_P (d))
4533             goto fail;
4534           SET_REGS_MATCHED ();
4535           d++;
4536           break;
4537 #endif /* not emacs */
4538           
4539         default:
4540           abort ();
4541         }
4542       continue;  /* Successfully executed one pattern command; keep going.  */
4543
4544
4545     /* We goto here if a matching operation fails. */
4546     fail:
4547       if (!FAIL_STACK_EMPTY ())
4548         { /* A restart point is known.  Restore to that state.  */
4549           DEBUG_PRINT1 ("\nFAIL:\n");
4550           POP_FAILURE_POINT (d, p,
4551                              lowest_active_reg, highest_active_reg,
4552                              regstart, regend, reg_info);
4553
4554           /* If this failure point is a dummy, try the next one.  */
4555           if (!p)
4556             goto fail;
4557
4558           /* If we failed to the end of the pattern, don't examine *p.  */
4559           assert (p <= pend);
4560           if (p < pend)
4561             {
4562               boolean is_a_jump_n = false;
4563               
4564               /* If failed to a backwards jump that's part of a repetition
4565                  loop, need to pop this failure point and use the next one.  */
4566               switch ((re_opcode_t) *p)
4567                 {
4568                 case jump_n:
4569                   is_a_jump_n = true;
4570                 case maybe_pop_jump:
4571                 case pop_failure_jump:
4572                 case jump:
4573                   p1 = p + 1;
4574                   EXTRACT_NUMBER_AND_INCR (mcnt, p1);
4575                   p1 += mcnt;   
4576
4577                   if ((is_a_jump_n && (re_opcode_t) *p1 == succeed_n)
4578                       || (!is_a_jump_n
4579                           && (re_opcode_t) *p1 == on_failure_jump))
4580                     goto fail;
4581                   break;
4582                 default:
4583                   /* do nothing */ ;
4584                 }
4585             }
4586
4587           if (d >= string1 && d <= end1)
4588             dend = end_match_1;
4589         }
4590       else
4591         break;   /* Matching at this starting point really fails.  */
4592     } /* for (;;) */
4593
4594   if (best_regs_set)
4595     goto restore_best_regs;
4596
4597   FREE_VARIABLES ();
4598
4599   return -1;                            /* Failure to match.  */
4600 } /* re_match_2 */
4601 \f
4602 /* Subroutine definitions for re_match_2.  */
4603
4604
4605 /* We are passed P pointing to a register number after a start_memory.
4606    
4607    Return true if the pattern up to the corresponding stop_memory can
4608    match the empty string, and false otherwise.
4609    
4610    If we find the matching stop_memory, sets P to point to one past its number.
4611    Otherwise, sets P to an undefined byte less than or equal to END.
4612
4613    We don't handle duplicates properly (yet).  */
4614
4615 static boolean
4616 group_match_null_string_p (p, end, reg_info)
4617     unsigned char **p, *end;
4618     register_info_type *reg_info;
4619 {
4620   int mcnt;
4621   /* Point to after the args to the start_memory.  */
4622   unsigned char *p1 = *p + 2;
4623   
4624   while (p1 < end)
4625     {
4626       /* Skip over opcodes that can match nothing, and return true or
4627          false, as appropriate, when we get to one that can't, or to the
4628          matching stop_memory.  */
4629       
4630       switch ((re_opcode_t) *p1)
4631         {
4632         /* Could be either a loop or a series of alternatives.  */
4633         case on_failure_jump:
4634           p1++;
4635           EXTRACT_NUMBER_AND_INCR (mcnt, p1);
4636           
4637           /* If the next operation is not a jump backwards in the
4638              pattern.  */
4639
4640           if (mcnt >= 0)
4641             {
4642               /* Go through the on_failure_jumps of the alternatives,
4643                  seeing if any of the alternatives cannot match nothing.
4644                  The last alternative starts with only a jump,
4645                  whereas the rest start with on_failure_jump and end
4646                  with a jump, e.g., here is the pattern for `a|b|c':
4647
4648                  /on_failure_jump/0/6/exactn/1/a/jump_past_alt/0/6
4649                  /on_failure_jump/0/6/exactn/1/b/jump_past_alt/0/3
4650                  /exactn/1/c                                            
4651
4652                  So, we have to first go through the first (n-1)
4653                  alternatives and then deal with the last one separately.  */
4654
4655
4656               /* Deal with the first (n-1) alternatives, which start
4657                  with an on_failure_jump (see above) that jumps to right
4658                  past a jump_past_alt.  */
4659
4660               while ((re_opcode_t) p1[mcnt-3] == jump_past_alt)
4661                 {
4662                   /* `mcnt' holds how many bytes long the alternative
4663                      is, including the ending `jump_past_alt' and
4664                      its number.  */
4665
4666                   if (!alt_match_null_string_p (p1, p1 + mcnt - 3, 
4667                                                       reg_info))
4668                     return false;
4669
4670                   /* Move to right after this alternative, including the
4671                      jump_past_alt.  */
4672                   p1 += mcnt;   
4673
4674                   /* Break if it's the beginning of an n-th alternative
4675                      that doesn't begin with an on_failure_jump.  */
4676                   if ((re_opcode_t) *p1 != on_failure_jump)
4677                     break;
4678                 
4679                   /* Still have to check that it's not an n-th
4680                      alternative that starts with an on_failure_jump.  */
4681                   p1++;
4682                   EXTRACT_NUMBER_AND_INCR (mcnt, p1);
4683                   if ((re_opcode_t) p1[mcnt-3] != jump_past_alt)
4684                     {
4685                       /* Get to the beginning of the n-th alternative.  */
4686                       p1 -= 3;
4687                       break;
4688                     }
4689                 }
4690
4691               /* Deal with the last alternative: go back and get number
4692                  of the `jump_past_alt' just before it.  `mcnt' contains
4693                  the length of the alternative.  */
4694               EXTRACT_NUMBER (mcnt, p1 - 2);
4695
4696               if (!alt_match_null_string_p (p1, p1 + mcnt, reg_info))
4697                 return false;
4698
4699               p1 += mcnt;       /* Get past the n-th alternative.  */
4700             } /* if mcnt > 0 */
4701           break;
4702
4703           
4704         case stop_memory:
4705           assert (p1[1] == **p);
4706           *p = p1 + 2;
4707           return true;
4708
4709         
4710         default: 
4711           if (!common_op_match_null_string_p (&p1, end, reg_info))
4712             return false;
4713         }
4714     } /* while p1 < end */
4715
4716   return false;
4717 } /* group_match_null_string_p */
4718
4719
4720 /* Similar to group_match_null_string_p, but doesn't deal with alternatives:
4721    It expects P to be the first byte of a single alternative and END one
4722    byte past the last. The alternative can contain groups.  */
4723    
4724 static boolean
4725 alt_match_null_string_p (p, end, reg_info)
4726     unsigned char *p, *end;
4727     register_info_type *reg_info;
4728 {
4729   int mcnt;
4730   unsigned char *p1 = p;
4731   
4732   while (p1 < end)
4733     {
4734       /* Skip over opcodes that can match nothing, and break when we get 
4735          to one that can't.  */
4736       
4737       switch ((re_opcode_t) *p1)
4738         {
4739         /* It's a loop.  */
4740         case on_failure_jump:
4741           p1++;
4742           EXTRACT_NUMBER_AND_INCR (mcnt, p1);
4743           p1 += mcnt;
4744           break;
4745           
4746         default: 
4747           if (!common_op_match_null_string_p (&p1, end, reg_info))
4748             return false;
4749         }
4750     }  /* while p1 < end */
4751
4752   return true;
4753 } /* alt_match_null_string_p */
4754
4755
4756 /* Deals with the ops common to group_match_null_string_p and
4757    alt_match_null_string_p.  
4758    
4759    Sets P to one after the op and its arguments, if any.  */
4760
4761 static boolean
4762 common_op_match_null_string_p (p, end, reg_info)
4763     unsigned char **p, *end;
4764     register_info_type *reg_info;
4765 {
4766   int mcnt;
4767   boolean ret;
4768   int reg_no;
4769   unsigned char *p1 = *p;
4770
4771   switch ((re_opcode_t) *p1++)
4772     {
4773     case no_op:
4774     case begline:
4775     case endline:
4776     case begbuf:
4777     case endbuf:
4778     case wordbeg:
4779     case wordend:
4780     case wordbound:
4781     case notwordbound:
4782 #ifdef emacs
4783     case before_dot:
4784     case at_dot:
4785     case after_dot:
4786 #endif
4787       break;
4788
4789     case start_memory:
4790       reg_no = *p1;
4791       assert (reg_no > 0 && reg_no <= MAX_REGNUM);
4792       ret = group_match_null_string_p (&p1, end, reg_info);
4793       
4794       /* Have to set this here in case we're checking a group which
4795          contains a group and a back reference to it.  */
4796
4797       if (REG_MATCH_NULL_STRING_P (reg_info[reg_no]) == MATCH_NULL_UNSET_VALUE)
4798         REG_MATCH_NULL_STRING_P (reg_info[reg_no]) = ret;
4799
4800       if (!ret)
4801         return false;
4802       break;
4803           
4804     /* If this is an optimized succeed_n for zero times, make the jump.  */
4805     case jump:
4806       EXTRACT_NUMBER_AND_INCR (mcnt, p1);
4807       if (mcnt >= 0)
4808         p1 += mcnt;
4809       else
4810         return false;
4811       break;
4812
4813     case succeed_n:
4814       /* Get to the number of times to succeed.  */
4815       p1 += 2;          
4816       EXTRACT_NUMBER_AND_INCR (mcnt, p1);
4817
4818       if (mcnt == 0)
4819         {
4820           p1 -= 4;
4821           EXTRACT_NUMBER_AND_INCR (mcnt, p1);
4822           p1 += mcnt;
4823         }
4824       else
4825         return false;
4826       break;
4827
4828     case duplicate: 
4829       if (!REG_MATCH_NULL_STRING_P (reg_info[*p1]))
4830         return false;
4831       break;
4832
4833     case set_number_at:
4834       p1 += 4;
4835
4836     default:
4837       /* All other opcodes mean we cannot match the empty string.  */
4838       return false;
4839   }
4840
4841   *p = p1;
4842   return true;
4843 } /* common_op_match_null_string_p */
4844
4845
4846 /* Return zero if TRANSLATE[S1] and TRANSLATE[S2] are identical for LEN
4847    bytes; nonzero otherwise.  */
4848    
4849 static int
4850 bcmp_translate (s1, s2, len, translate)
4851      unsigned char *s1, *s2;
4852      register int len;
4853      char *translate;
4854 {
4855   register unsigned char *p1 = s1, *p2 = s2;
4856   while (len)
4857     {
4858       if (translate[*p1++] != translate[*p2++]) return 1;
4859       len--;
4860     }
4861   return 0;
4862 }
4863 \f
4864 /* Entry points for GNU code.  */
4865
4866 /* re_compile_pattern is the GNU regular expression compiler: it
4867    compiles PATTERN (of length SIZE) and puts the result in BUFP.
4868    Returns 0 if the pattern was valid, otherwise an error string.
4869    
4870    Assumes the `allocated' (and perhaps `buffer') and `translate' fields
4871    are set in BUFP on entry.
4872    
4873    We call regex_compile to do the actual compilation.  */
4874
4875 const char *
4876 re_compile_pattern (pattern, length, bufp)
4877      const char *pattern;
4878      int length;
4879      struct re_pattern_buffer *bufp;
4880 {
4881   reg_errcode_t ret;
4882   
4883   /* GNU code is written to assume at least RE_NREGS registers will be set
4884      (and at least one extra will be -1).  */
4885   bufp->regs_allocated = REGS_UNALLOCATED;
4886   
4887   /* And GNU code determines whether or not to get register information
4888      by passing null for the REGS argument to re_match, etc., not by
4889      setting no_sub.  */
4890   bufp->no_sub = 0;
4891   
4892   /* Match anchors at newline.  */
4893   bufp->newline_anchor = 1;
4894   
4895   ret = regex_compile (pattern, length, re_syntax_options, bufp);
4896
4897   return re_error_msg[(int) ret];
4898 }     
4899 \f
4900 /* Entry points compatible with 4.2 BSD regex library.  We don't define
4901    them if this is an Emacs or POSIX compilation.  */
4902
4903 #if !defined (emacs) && !defined (_POSIX_SOURCE)
4904
4905 /* BSD has one and only one pattern buffer.  */
4906 static struct re_pattern_buffer re_comp_buf;
4907
4908 char *
4909 re_comp (s)
4910     const char *s;
4911 {
4912   reg_errcode_t ret;
4913   
4914   if (!s)
4915     {
4916       if (!re_comp_buf.buffer)
4917         return "No previous regular expression";
4918       return 0;
4919     }
4920
4921   if (!re_comp_buf.buffer)
4922     {
4923       re_comp_buf.buffer = (unsigned char *) malloc (200);
4924       if (re_comp_buf.buffer == NULL)
4925         return "Memory exhausted";
4926       re_comp_buf.allocated = 200;
4927
4928       re_comp_buf.fastmap = (char *) malloc (1 << BYTEWIDTH);
4929       if (re_comp_buf.fastmap == NULL)
4930         return "Memory exhausted";
4931     }
4932
4933   /* Since `re_exec' always passes NULL for the `regs' argument, we
4934      don't need to initialize the pattern buffer fields which affect it.  */
4935
4936   /* Match anchors at newlines.  */
4937   re_comp_buf.newline_anchor = 1;
4938
4939   ret = regex_compile (s, strlen (s), re_syntax_options, &re_comp_buf);
4940   
4941   /* Yes, we're discarding `const' here.  */
4942   return (char *) re_error_msg[(int) ret];
4943 }
4944
4945
4946 int
4947 re_exec (s)
4948     const char *s;
4949 {
4950   const int len = strlen (s);
4951   return
4952     0 <= re_search (&re_comp_buf, s, len, 0, len, (struct re_registers *) 0);
4953 }
4954 #endif /* not emacs and not _POSIX_SOURCE */
4955 \f
4956 /* POSIX.2 functions.  Don't define these for Emacs.  */
4957
4958 #ifndef emacs
4959
4960 /* regcomp takes a regular expression as a string and compiles it.
4961
4962    PREG is a regex_t *.  We do not expect any fields to be initialized,
4963    since POSIX says we shouldn't.  Thus, we set
4964
4965      `buffer' to the compiled pattern;
4966      `used' to the length of the compiled pattern;
4967      `syntax' to RE_SYNTAX_POSIX_EXTENDED if the
4968        REG_EXTENDED bit in CFLAGS is set; otherwise, to
4969        RE_SYNTAX_POSIX_BASIC;
4970      `newline_anchor' to REG_NEWLINE being set in CFLAGS;
4971      `fastmap' and `fastmap_accurate' to zero;
4972      `re_nsub' to the number of subexpressions in PATTERN.
4973
4974    PATTERN is the address of the pattern string.
4975
4976    CFLAGS is a series of bits which affect compilation.
4977
4978      If REG_EXTENDED is set, we use POSIX extended syntax; otherwise, we
4979      use POSIX basic syntax.
4980
4981      If REG_NEWLINE is set, then . and [^...] don't match newline.
4982      Also, regexec will try a match beginning after every newline.
4983
4984      If REG_ICASE is set, then we considers upper- and lowercase
4985      versions of letters to be equivalent when matching.
4986
4987      If REG_NOSUB is set, then when PREG is passed to regexec, that
4988      routine will report only success or failure, and nothing about the
4989      registers.
4990
4991    It returns 0 if it succeeds, nonzero if it doesn't.  (See regex.h for
4992    the return codes and their meanings.)  */
4993
4994 int
4995 regcomp (preg, pattern, cflags)
4996     regex_t *preg;
4997     const char *pattern; 
4998     int cflags;
4999 {
5000   reg_errcode_t ret;
5001   unsigned syntax
5002     = (cflags & REG_EXTENDED) ?
5003       RE_SYNTAX_POSIX_EXTENDED : RE_SYNTAX_POSIX_BASIC;
5004
5005   /* regex_compile will allocate the space for the compiled pattern.  */
5006   preg->buffer = 0;
5007   preg->allocated = 0;
5008   preg->used = 0;
5009   
5010   /* Don't bother to use a fastmap when searching.  This simplifies the
5011      REG_NEWLINE case: if we used a fastmap, we'd have to put all the
5012      characters after newlines into the fastmap.  This way, we just try
5013      every character.  */
5014   preg->fastmap = 0;
5015   
5016   if (cflags & REG_ICASE)
5017     {
5018       unsigned i;
5019       
5020       preg->translate = (char *) malloc (CHAR_SET_SIZE);
5021       if (preg->translate == NULL)
5022         return (int) REG_ESPACE;
5023
5024       /* Map uppercase characters to corresponding lowercase ones.  */
5025       for (i = 0; i < CHAR_SET_SIZE; i++)
5026         preg->translate[i] = ISUPPER (i) ? tolower (i) : i;
5027     }
5028   else
5029     preg->translate = NULL;
5030
5031   /* If REG_NEWLINE is set, newlines are treated differently.  */
5032   if (cflags & REG_NEWLINE)
5033     { /* REG_NEWLINE implies neither . nor [^...] match newline.  */
5034       syntax &= ~RE_DOT_NEWLINE;
5035       syntax |= RE_HAT_LISTS_NOT_NEWLINE;
5036       /* It also changes the matching behavior.  */
5037       preg->newline_anchor = 1;
5038     }
5039   else
5040     preg->newline_anchor = 0;
5041
5042   preg->no_sub = !!(cflags & REG_NOSUB);
5043
5044   /* POSIX says a null character in the pattern terminates it, so we 
5045      can use strlen here in compiling the pattern.  */
5046   ret = regex_compile (pattern, strlen (pattern), syntax, preg);
5047   
5048   /* POSIX doesn't distinguish between an unmatched open-group and an
5049      unmatched close-group: both are REG_EPAREN.  */
5050   if (ret == REG_ERPAREN) ret = REG_EPAREN;
5051   
5052   return (int) ret;
5053 }
5054
5055
5056 /* regexec searches for a given pattern, specified by PREG, in the
5057    string STRING.
5058    
5059    If NMATCH is zero or REG_NOSUB was set in the cflags argument to
5060    `regcomp', we ignore PMATCH.  Otherwise, we assume PMATCH has at
5061    least NMATCH elements, and we set them to the offsets of the
5062    corresponding matched substrings.
5063    
5064    EFLAGS specifies `execution flags' which affect matching: if
5065    REG_NOTBOL is set, then ^ does not match at the beginning of the
5066    string; if REG_NOTEOL is set, then $ does not match at the end.
5067    
5068    We return 0 if we find a match and REG_NOMATCH if not.  */
5069
5070 int
5071 regexec (preg, string, nmatch, pmatch, eflags)
5072     const regex_t *preg;
5073     const char *string; 
5074     size_t nmatch; 
5075     regmatch_t pmatch[]; 
5076     int eflags;
5077 {
5078   int ret;
5079   struct re_registers regs;
5080   regex_t private_preg;
5081   int len = strlen (string);
5082   boolean want_reg_info = !preg->no_sub && nmatch > 0;
5083
5084   private_preg = *preg;
5085   
5086   private_preg.not_bol = !!(eflags & REG_NOTBOL);
5087   private_preg.not_eol = !!(eflags & REG_NOTEOL);
5088   
5089   /* The user has told us exactly how many registers to return
5090      information about, via `nmatch'.  We have to pass that on to the
5091      matching routines.  */
5092   private_preg.regs_allocated = REGS_FIXED;
5093   
5094   if (want_reg_info)
5095     {
5096       regs.num_regs = nmatch;
5097       regs.start = TALLOC (nmatch, regoff_t);
5098       regs.end = TALLOC (nmatch, regoff_t);
5099       if (regs.start == NULL || regs.end == NULL)
5100         return (int) REG_NOMATCH;
5101     }
5102
5103   /* Perform the searching operation.  */
5104   ret = re_search (&private_preg, string, len,
5105                    /* start: */ 0, /* range: */ len,
5106                    want_reg_info ? &regs : (struct re_registers *) 0);
5107   
5108   /* Copy the register information to the POSIX structure.  */
5109   if (want_reg_info)
5110     {
5111       if (ret >= 0)
5112         {
5113           unsigned r;
5114
5115           for (r = 0; r < nmatch; r++)
5116             {
5117               pmatch[r].rm_so = regs.start[r];
5118               pmatch[r].rm_eo = regs.end[r];
5119             }
5120         }
5121
5122       /* If we needed the temporary register info, free the space now.  */
5123       free (regs.start);
5124       free (regs.end);
5125     }
5126
5127   /* We want zero return to mean success, unlike `re_search'.  */
5128   return ret >= 0 ? (int) REG_NOERROR : (int) REG_NOMATCH;
5129 }
5130
5131
5132 /* Returns a message corresponding to an error code, ERRCODE, returned
5133    from either regcomp or regexec.   We don't use PREG here.  */
5134
5135 size_t
5136 regerror (errcode, preg, errbuf, errbuf_size)
5137     int errcode;
5138     const regex_t *preg;
5139     char *errbuf;
5140     size_t errbuf_size;
5141 {
5142   const char *msg;
5143   size_t msg_size;
5144
5145   if (errcode < 0
5146       || errcode >= (sizeof (re_error_msg) / sizeof (re_error_msg[0])))
5147     /* Only error codes returned by the rest of the code should be passed 
5148        to this routine.  If we are given anything else, or if other regex
5149        code generates an invalid error code, then the program has a bug.
5150        Dump core so we can fix it.  */
5151     abort ();
5152
5153   msg = re_error_msg[errcode];
5154
5155   /* POSIX doesn't require that we do anything in this case, but why
5156      not be nice.  */
5157   if (! msg)
5158     msg = "Success";
5159
5160   msg_size = strlen (msg) + 1; /* Includes the null.  */
5161   
5162   if (errbuf_size != 0)
5163     {
5164       if (msg_size > errbuf_size)
5165         {
5166           strncpy (errbuf, msg, errbuf_size - 1);
5167           errbuf[errbuf_size - 1] = 0;
5168         }
5169       else
5170         strcpy (errbuf, msg);
5171     }
5172
5173   return msg_size;
5174 }
5175
5176
5177 /* Free dynamically allocated space used by PREG.  */
5178
5179 void
5180 regfree (preg)
5181     regex_t *preg;
5182 {
5183   if (preg->buffer != NULL)
5184     free (preg->buffer);
5185   preg->buffer = NULL;
5186   
5187   preg->allocated = 0;
5188   preg->used = 0;
5189
5190   if (preg->fastmap != NULL)
5191     free (preg->fastmap);
5192   preg->fastmap = NULL;
5193   preg->fastmap_accurate = 0;
5194
5195   if (preg->translate != NULL)
5196     free (preg->translate);
5197   preg->translate = NULL;
5198 }
5199
5200 #endif /* not emacs  */
5201 \f
5202 /*
5203 Local variables:
5204 make-backup-files: t
5205 version-control: t
5206 trim-versions-without-asking: nil
5207 End:
5208 */