46f1a77bd11027ece6175522ffe16393401d8bf7
[oweals/busybox.git] / shell / hush.c
1 /* vi: set sw=4 ts=4: */
2 /*
3  * sh.c -- a prototype Bourne shell grammar parser
4  *      Intended to follow the original Thompson and Ritchie
5  *      "small and simple is beautiful" philosophy, which
6  *      incidentally is a good match to today's BusyBox.
7  *
8  * Copyright (C) 2000,2001  Larry Doolittle  <larry@doolittle.boa.org>
9  *
10  * Credits:
11  *      The parser routines proper are all original material, first
12  *      written Dec 2000 and Jan 2001 by Larry Doolittle.
13  *      The execution engine, the builtins, and much of the underlying
14  *      support has been adapted from busybox-0.49pre's lash,
15  *      which is Copyright (C) 2000 by Lineo, Inc., and
16  *      written by Erik Andersen <andersen@lineo.com>, <andersee@debian.org>.
17  *      That, in turn, is based in part on ladsh.c, by Michael K. Johnson and
18  *      Erik W. Troan, which they placed in the public domain.  I don't know
19  *      how much of the Johnson/Troan code has survived the repeated rewrites.
20  * Other credits:
21  *      simple_itoa() was lifted from boa-0.93.15
22  *      b_addchr() derived from similar w_addchar function in glibc-2.2
23  *      setup_redirect(), redirect_opt_num(), and big chunks of main()
24  *        and many builtins derived from contributions by Erik Andersen
25  *      miscellaneous bugfixes from Matt Kraai
26  *
27  * There are two big (and related) architecture differences between
28  * this parser and the lash parser.  One is that this version is
29  * actually designed from the ground up to understand nearly all
30  * of the Bourne grammar.  The second, consequential change is that
31  * the parser and input reader have been turned inside out.  Now,
32  * the parser is in control, and asks for input as needed.  The old
33  * way had the input reader in control, and it asked for parsing to
34  * take place as needed.  The new way makes it much easier to properly
35  * handle the recursion implicit in the various substitutions, especially
36  * across continuation lines.
37  *
38  * Bash grammar not implemented: (how many of these were in original sh?)
39  *      $@ (those sure look like weird quoting rules)
40  *      $_
41  *      ! negation operator for pipes
42  *      &> and >& redirection of stdout+stderr
43  *      Brace Expansion
44  *      Tilde Expansion
45  *      fancy forms of Parameter Expansion
46  *      aliases
47  *      Arithmetic Expansion
48  *      <(list) and >(list) Process Substitution
49  *      reserved words: case, esac, select, function
50  *      Here Documents ( << word )
51  *      Functions
52  * Major bugs:
53  *      job handling woefully incomplete and buggy
54  *      reserved word execution woefully incomplete and buggy
55  * to-do:
56  *      port selected bugfixes from post-0.49 busybox lash - done?
57  *      finish implementing reserved words: for, while, until, do, done
58  *      change { and } from special chars to reserved words
59  *      builtins: break, continue, eval, return, set, trap, ulimit
60  *      test magic exec
61  *      handle children going into background
62  *      clean up recognition of null pipes
63  *      check setting of global_argc and global_argv
64  *      control-C handling, probably with longjmp
65  *      follow IFS rules more precisely, including update semantics
66  *      figure out what to do with backslash-newline
67  *      explain why we use signal instead of sigaction
68  *      propagate syntax errors, die on resource errors?
69  *      continuation lines, both explicit and implicit - done?
70  *      memory leak finding and plugging - done?
71  *      more testing, especially quoting rules and redirection
72  *      document how quoting rules not precisely followed for variable assignments
73  *      maybe change map[] to use 2-bit entries
74  *      (eventually) remove all the printf's
75  *
76  * This program is free software; you can redistribute it and/or modify
77  * it under the terms of the GNU General Public License as published by
78  * the Free Software Foundation; either version 2 of the License, or
79  * (at your option) any later version.
80  *
81  * This program is distributed in the hope that it will be useful,
82  * but WITHOUT ANY WARRANTY; without even the implied warranty of
83  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU
84  * General Public License for more details.
85  *
86  * You should have received a copy of the GNU General Public License
87  * along with this program; if not, write to the Free Software
88  * Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA 02111-1307 USA
89  */
90 #include <ctype.h>     /* isalpha, isdigit */
91 #include <unistd.h>    /* getpid */
92 #include <stdlib.h>    /* getenv, atoi */
93 #include <string.h>    /* strchr */
94 #include <stdio.h>     /* popen etc. */
95 #include <glob.h>      /* glob, of course */
96 #include <stdarg.h>    /* va_list */
97 #include <errno.h>
98 #include <fcntl.h>
99 #include <getopt.h>    /* should be pretty obvious */
100
101 #include <sys/stat.h>  /* ulimit */
102 #include <sys/types.h>
103 #include <sys/wait.h>
104 #include <signal.h>
105
106 /* #include <dmalloc.h> */
107 /* #define DEBUG_SHELL */
108
109 #ifdef BB_VER
110 #include "busybox.h"
111 #include "cmdedit.h"
112 #else
113 #define applet_name "hush"
114 #include "standalone.h"
115 #define shell_main main
116 #undef BB_FEATURE_SH_FANCY_PROMPT
117 #endif
118
119 typedef enum {
120         REDIRECT_INPUT     = 1,
121         REDIRECT_OVERWRITE = 2,
122         REDIRECT_APPEND    = 3,
123         REDIRECT_HEREIS    = 4,
124         REDIRECT_IO        = 5
125 } redir_type;
126
127 /* The descrip member of this structure is only used to make debugging
128  * output pretty */
129 struct {int mode; int default_fd; char *descrip;} redir_table[] = {
130         { 0,                         0, "()" },
131         { O_RDONLY,                  0, "<"  },
132         { O_CREAT|O_TRUNC|O_WRONLY,  1, ">"  },
133         { O_CREAT|O_APPEND|O_WRONLY, 1, ">>" },
134         { O_RDONLY,                 -1, "<<" },
135         { O_RDWR,                    1, "<>" }
136 };
137
138 typedef enum {
139         PIPE_SEQ = 1,
140         PIPE_AND = 2,
141         PIPE_OR  = 3,
142         PIPE_BG  = 4,
143 } pipe_style;
144
145 /* might eventually control execution */
146 typedef enum {
147         RES_NONE  = 0,
148         RES_IF    = 1,
149         RES_THEN  = 2,
150         RES_ELIF  = 3,
151         RES_ELSE  = 4,
152         RES_FI    = 5,
153         RES_FOR   = 6,
154         RES_WHILE = 7,
155         RES_UNTIL = 8,
156         RES_DO    = 9,
157         RES_DONE  = 10,
158         RES_XXXX  = 11,
159         RES_SNTX  = 12
160 } reserved_style;
161 #define FLAG_END   (1<<RES_NONE)
162 #define FLAG_IF    (1<<RES_IF)
163 #define FLAG_THEN  (1<<RES_THEN)
164 #define FLAG_ELIF  (1<<RES_ELIF)
165 #define FLAG_ELSE  (1<<RES_ELSE)
166 #define FLAG_FI    (1<<RES_FI)
167 #define FLAG_FOR   (1<<RES_FOR)
168 #define FLAG_WHILE (1<<RES_WHILE)
169 #define FLAG_UNTIL (1<<RES_UNTIL)
170 #define FLAG_DO    (1<<RES_DO)
171 #define FLAG_DONE  (1<<RES_DONE)
172 #define FLAG_START (1<<RES_XXXX)
173
174 /* This holds pointers to the various results of parsing */
175 struct p_context {
176         struct child_prog *child;
177         struct pipe *list_head;
178         struct pipe *pipe;
179         struct redir_struct *pending_redirect;
180         reserved_style w;
181         int old_flag;                           /* for figuring out valid reserved words */
182         struct p_context *stack;
183         /* How about quoting status? */
184 };
185
186 struct redir_struct {
187         redir_type type;                        /* type of redirection */
188         int fd;                                         /* file descriptor being redirected */
189         int dup;                                        /* -1, or file descriptor being duplicated */
190         struct redir_struct *next;      /* pointer to the next redirect in the list */ 
191         glob_t word;                            /* *word.gl_pathv is the filename */
192 };
193
194 struct child_prog {
195         pid_t pid;                                      /* 0 if exited */
196         char **argv;                            /* program name and arguments */
197         struct pipe *group;                     /* if non-NULL, first in group or subshell */
198         int subshell;                           /* flag, non-zero if group must be forked */
199         struct redir_struct *redirects; /* I/O redirections */
200         glob_t glob_result;                     /* result of parameter globbing */
201         int is_stopped;                         /* is the program currently running? */
202         struct pipe *family;            /* pointer back to the child's parent pipe */
203 };
204
205 struct pipe {
206         int jobid;                                      /* job number */
207         int num_progs;                          /* total number of programs in job */
208         int running_progs;                      /* number of programs running */
209         char *text;                                     /* name of job */
210         char *cmdbuf;                           /* buffer various argv's point into */
211         pid_t pgrp;                                     /* process group ID for the job */
212         struct child_prog *progs;       /* array of commands in pipe */
213         struct pipe *next;                      /* to track background commands */
214         int stopped_progs;                      /* number of programs alive, but stopped */
215         int job_context;                        /* bitmask defining current context */
216         pipe_style followup;            /* PIPE_BG, PIPE_SEQ, PIPE_OR, PIPE_AND */
217         reserved_style r_mode;          /* supports if, for, while, until */
218 };
219
220 struct jobset {
221         struct pipe *head;                      /* head of list of running jobs */
222         struct pipe *fg;                        /* current foreground job */
223 };
224
225 struct close_me {
226         int fd;
227         struct close_me *next;
228 };
229
230 struct variables {
231         char *name;
232         char *value;
233         int flg_export;
234         int flg_read_only;
235         struct variables *next;
236 };
237
238 /* globals, connect us to the outside world
239  * the first three support $?, $#, and $1 */
240 char **global_argv;
241 unsigned int global_argc;
242 unsigned int last_return_code;
243 extern char **environ; /* This is in <unistd.h>, but protected with __USE_GNU */
244  
245 /* Variables we export */
246 unsigned int shell_context;  /* Used in cmdedit.c to reset the
247                               * context when someone hits ^C */
248
249 /* "globals" within this file */
250 static char *ifs;
251 static char map[256];
252 static int fake_mode;
253 static int interactive;
254 static struct close_me *close_me_head;
255 static const char *cwd;
256 static struct jobset *job_list;
257 static unsigned int last_bg_pid;
258 static char *PS1;
259 static char *PS2;
260 struct variables shell_ver = { "HUSH_VERSION", "0.01", 1, 1, 0 };
261 struct variables *top_vars = &shell_ver;
262
263 #define B_CHUNK (100)
264 #define B_NOSPAC 1
265
266 typedef struct {
267         char *data;
268         int length;
269         int maxlen;
270         int quote;
271         int nonnull;
272 } o_string;
273 #define NULL_O_STRING {NULL,0,0,0,0}
274 /* used for initialization:
275         o_string foo = NULL_O_STRING; */
276
277 /* I can almost use ordinary FILE *.  Is open_memstream() universally
278  * available?  Where is it documented? */
279 struct in_str {
280         const char *p;
281         int __promptme;
282         int promptmode;
283         FILE *file;
284         int (*get) (struct in_str *);
285         int (*peek) (struct in_str *);
286 };
287 #define b_getch(input) ((input)->get(input))
288 #define b_peek(input) ((input)->peek(input))
289
290 #define JOB_STATUS_FORMAT "[%d] %-22s %.40s\n"
291
292 struct built_in_command {
293         char *cmd;                                      /* name */
294         char *descr;                            /* description */
295         int (*function) (struct child_prog *);  /* function ptr */
296 };
297
298 /* belongs in busybox.h */
299 static inline int max(int a, int b) {
300         return (a>b)?a:b;
301 }
302
303 /* This should be in utility.c */
304 #ifdef DEBUG_SHELL
305 static void debug_printf(const char *format, ...)
306 {
307         va_list args;
308         va_start(args, format);
309         vfprintf(stderr, format, args);
310         va_end(args);
311 }
312 #else
313 static inline void debug_printf(const char *format, ...) { }
314 #endif
315 #define final_printf debug_printf
316
317 static void __syntax(char *file, int line) {
318         error_msg("syntax error %s:%d", file, line);
319 }
320 #define syntax() __syntax(__FILE__, __LINE__)
321
322 /* Index of subroutines: */
323 /*   function prototypes for builtins */
324 static int builtin_cd(struct child_prog *child);
325 static int builtin_env(struct child_prog *child);
326 static int builtin_exec(struct child_prog *child);
327 static int builtin_exit(struct child_prog *child);
328 static int builtin_export(struct child_prog *child);
329 static int builtin_fg_bg(struct child_prog *child);
330 static int builtin_help(struct child_prog *child);
331 static int builtin_jobs(struct child_prog *child);
332 static int builtin_pwd(struct child_prog *child);
333 static int builtin_read(struct child_prog *child);
334 static int builtin_set(struct child_prog *child);
335 static int builtin_shift(struct child_prog *child);
336 static int builtin_source(struct child_prog *child);
337 static int builtin_umask(struct child_prog *child);
338 static int builtin_unset(struct child_prog *child);
339 static int builtin_not_written(struct child_prog *child);
340 /*   o_string manipulation: */
341 static int b_check_space(o_string *o, int len);
342 static int b_addchr(o_string *o, int ch);
343 static void b_reset(o_string *o);
344 static int b_addqchr(o_string *o, int ch, int quote);
345 static int b_adduint(o_string *o, unsigned int i);
346 /*  in_str manipulations: */
347 static int static_get(struct in_str *i);
348 static int static_peek(struct in_str *i);
349 static int file_get(struct in_str *i);
350 static int file_peek(struct in_str *i);
351 static void setup_file_in_str(struct in_str *i, FILE *f);
352 static void setup_string_in_str(struct in_str *i, const char *s);
353 /*  close_me manipulations: */
354 static void mark_open(int fd);
355 static void mark_closed(int fd);
356 static void close_all();
357 /*  "run" the final data structures: */
358 static char *indenter(int i);
359 static int run_list_test(struct pipe *head, int indent);
360 static int run_pipe_test(struct pipe *pi, int indent);
361 /*  really run the final data structures: */
362 static int setup_redirects(struct child_prog *prog, int squirrel[]);
363 static int pipe_wait(struct pipe *pi);
364 static int run_list_real(struct pipe *pi);
365 static void pseudo_exec(struct child_prog *child) __attribute__ ((noreturn));
366 int controlling_tty(int check_pgrp);
367 static int run_pipe_real(struct pipe *pi);
368 /*   extended glob support: */
369 static int globhack(const char *src, int flags, glob_t *pglob);
370 static int glob_needed(const char *s);
371 static int xglob(o_string *dest, int flags, glob_t *pglob);
372 /*   variable assignment: */
373 static int is_assignment(const char *s);
374 /*   data structure manipulation: */
375 static int setup_redirect(struct p_context *ctx, int fd, redir_type style, struct in_str *input);
376 static void initialize_context(struct p_context *ctx);
377 static int done_word(o_string *dest, struct p_context *ctx);
378 static int done_command(struct p_context *ctx);
379 static int done_pipe(struct p_context *ctx, pipe_style type);
380 /*   primary string parsing: */
381 static int redirect_dup_num(struct in_str *input);
382 static int redirect_opt_num(o_string *o);
383 static int process_command_subs(o_string *dest, struct p_context *ctx, struct in_str *input, int subst_end);
384 static int parse_group(o_string *dest, struct p_context *ctx, struct in_str *input, int ch);
385 static void lookup_param(o_string *dest, struct p_context *ctx, o_string *src);
386 static int handle_dollar(o_string *dest, struct p_context *ctx, struct in_str *input);
387 static int parse_string(o_string *dest, struct p_context *ctx, const char *src);
388 static int parse_stream(o_string *dest, struct p_context *ctx, struct in_str *input0, int end_trigger);
389 /*   setup: */
390 static int parse_stream_outer(struct in_str *inp);
391 static int parse_string_outer(const char *s);
392 static int parse_file_outer(FILE *f);
393 /*   job management: */
394 static void checkjobs();
395 static void insert_bg_job(struct pipe *pi);
396 static void remove_bg_job(struct pipe *pi);
397 static void free_pipe(struct pipe *pi);
398 /*     local variable support */
399 static char *get_local_var(const char *var);
400 static void  unset_local_var(const char *name);
401 static int set_local_var(const char *s, int flg_export);
402
403
404 /* Table of built-in functions.  They can be forked or not, depending on
405  * context: within pipes, they fork.  As simple commands, they do not.
406  * When used in non-forking context, they can change global variables
407  * in the parent shell process.  If forked, of course they can not.
408  * For example, 'unset foo | whatever' will parse and run, but foo will
409  * still be set at the end. */
410 static struct built_in_command bltins[] = {
411         {"bg", "Resume a job in the background", builtin_fg_bg},
412         {"break", "Exit for, while or until loop", builtin_not_written},
413         {"cd", "Change working directory", builtin_cd},
414         {"continue", "Continue for, while or until loop", builtin_not_written},
415         {"env", "Print all environment variables", builtin_env},
416         {"eval", "Construct and run shell command", builtin_not_written},
417         {"exec", "Exec command, replacing this shell with the exec'd process", 
418                 builtin_exec},
419         {"exit", "Exit from shell()", builtin_exit},
420         {"export", "Set environment variable", builtin_export},
421         {"fg", "Bring job into the foreground", builtin_fg_bg},
422         {"jobs", "Lists the active jobs", builtin_jobs},
423         {"pwd", "Print current directory", builtin_pwd},
424         {"read", "Input environment variable", builtin_read},
425         {"return", "Return from a function", builtin_not_written},
426         {"set", "Set/unset shell local variables", builtin_set},
427         {"shift", "Shift positional parameters", builtin_shift},
428         {"trap", "Trap signals", builtin_not_written},
429         {"ulimit","Controls resource limits", builtin_not_written},
430         {"umask","Sets file creation mask", builtin_umask},
431         {"unset", "Unset environment variable", builtin_unset},
432         {".", "Source-in and run commands in a file", builtin_source},
433         {"help", "List shell built-in commands", builtin_help},
434         {NULL, NULL, NULL}
435 };
436
437 static const char *set_cwd(void)
438 {
439         if(cwd==unknown)
440                 cwd = NULL;     /* xgetcwd(arg) called free(arg) */
441         cwd = xgetcwd((char *)cwd);
442         if (!cwd)
443                 cwd = unknown;
444         return cwd;
445 }
446
447
448 /* built-in 'cd <path>' handler */
449 static int builtin_cd(struct child_prog *child)
450 {
451         char *newdir;
452         if (child->argv[1] == NULL)
453                 newdir = getenv("HOME");
454         else
455                 newdir = child->argv[1];
456         if (chdir(newdir)) {
457                 printf("cd: %s: %s\n", newdir, strerror(errno));
458                 return EXIT_FAILURE;
459         }
460         set_cwd();
461         return EXIT_SUCCESS;
462 }
463
464 /* built-in 'env' handler */
465 static int builtin_env(struct child_prog *dummy)
466 {
467         char **e = environ;
468         if (e == NULL) return EXIT_FAILURE;
469         for (; *e; e++) {
470                 puts(*e);
471         }
472         return EXIT_SUCCESS;
473 }
474
475 /* built-in 'exec' handler */
476 static int builtin_exec(struct child_prog *child)
477 {
478         if (child->argv[1] == NULL)
479                 return EXIT_SUCCESS;   /* Really? */
480         child->argv++;
481         pseudo_exec(child);
482         /* never returns */
483 }
484
485 /* built-in 'exit' handler */
486 static int builtin_exit(struct child_prog *child)
487 {
488         if (child->argv[1] == NULL)
489                 exit(last_return_code);
490         exit (atoi(child->argv[1]));
491 }
492
493 /* built-in 'export VAR=value' handler */
494 static int builtin_export(struct child_prog *child)
495 {
496         int res = 0;
497         char *name = child->argv[1];
498
499         if (name == NULL) {
500                 return (builtin_env(child));
501         }
502
503         name = strdup(name);
504
505         if(name) {
506                 char *value = strchr(name, '=');
507
508                 if (!value) {
509                         char *tmp;
510                         /* They are exporting something without an =VALUE */
511
512                         value = get_local_var(name);
513                         if (value) {
514                                 size_t ln = strlen(name);
515
516                                 tmp = realloc(name, ln+strlen(value)+2);
517                                 if(tmp==NULL)
518                                         res = -1;
519                                 else {
520                                         sprintf(tmp+ln, "=%s", value);
521                                         name = tmp;
522                                 }
523                         } else {
524                                 /* bash does not return an error when trying to export
525                                  * an undefined variable.  Do likewise. */
526                                 res = 1;
527                         }
528                 }
529         }
530         if (res<0)
531                 perror_msg("export");
532         else if(res==0)
533                 res = set_local_var(name, 1);
534         else
535                 res = 0;
536         free(name);
537         return res;
538 }
539
540 /* built-in 'fg' and 'bg' handler */
541 static int builtin_fg_bg(struct child_prog *child)
542 {
543         int i, jobnum;
544         struct pipe *pi=NULL;
545
546         /* If they gave us no args, assume they want the last backgrounded task */
547         if (!child->argv[1]) {
548                 for (pi = job_list->head; pi; pi = pi->next) {
549                         if (pi->progs && pi->progs->pid == last_bg_pid) {
550                                 break;
551                         }
552                 }
553                 if (!pi) {
554                         error_msg("%s: no current job", child->argv[0]);
555                         return EXIT_FAILURE;
556                 }
557         } else {
558                 if (sscanf(child->argv[1], "%%%d", &jobnum) != 1) {
559                         error_msg("%s: bad argument '%s'", child->argv[0], child->argv[1]);
560                         return EXIT_FAILURE;
561                 }
562
563                 for (pi = job_list->head; pi; pi = pi->next) {
564                         if (pi->jobid == jobnum) {
565                                 break;
566                         }
567                 }
568                 if (!pi) {
569                         error_msg("%s: %d: no such job", child->argv[0], jobnum);
570                         return EXIT_FAILURE;
571                 }
572         }
573         if (*child->argv[0] == 'f') {
574                 /* Make this job the foreground job */
575                 signal(SIGTTOU, SIG_IGN);
576                 /* suppress messages when run from /linuxrc mag@sysgo.de */
577                 if (tcsetpgrp(0, pi->pgrp) && errno != ENOTTY)
578                         perror_msg("tcsetpgrp-1"); 
579                 signal(SIGTTOU, SIG_DFL);
580                 job_list->fg = pi;
581         }
582
583         /* Restart the processes in the job */
584         for (i = 0; i < pi->num_progs; i++)
585                 pi->progs[i].is_stopped = 0;
586
587         kill(-pi->pgrp, SIGCONT);
588
589         pi->stopped_progs = 0;
590         return EXIT_SUCCESS;
591 }
592
593 /* built-in 'help' handler */
594 static int builtin_help(struct child_prog *dummy)
595 {
596         struct built_in_command *x;
597
598         printf("\nBuilt-in commands:\n");
599         printf("-------------------\n");
600         for (x = bltins; x->cmd; x++) {
601                 if (x->descr==NULL)
602                         continue;
603                 printf("%s\t%s\n", x->cmd, x->descr);
604         }
605         printf("\n\n");
606         return EXIT_SUCCESS;
607 }
608
609 /* built-in 'jobs' handler */
610 static int builtin_jobs(struct child_prog *child)
611 {
612         struct pipe *job;
613         char *status_string;
614
615         for (job = job_list->head; job; job = job->next) {
616                 if (job->running_progs == job->stopped_progs)
617                         status_string = "Stopped";
618                 else
619                         status_string = "Running";
620                 printf(JOB_STATUS_FORMAT, job->jobid, status_string, job->text);
621         }
622         return EXIT_SUCCESS;
623 }
624
625
626 /* built-in 'pwd' handler */
627 static int builtin_pwd(struct child_prog *dummy)
628 {
629         puts(set_cwd());
630         return EXIT_SUCCESS;
631 }
632
633 /* built-in 'read VAR' handler */
634 static int builtin_read(struct child_prog *child)
635 {
636         int res;
637
638         if (child->argv[1]) {
639                 char string[BUFSIZ];
640                 char *var = 0;
641
642                 string[0] = 0;  /* In case stdin has only EOF */
643                 /* read string */
644                 fgets(string, sizeof(string), stdin);
645                 chomp(string);
646                 var = malloc(strlen(child->argv[1])+strlen(string)+2);
647                 if(var) {
648                         sprintf(var, "%s=%s", child->argv[1], string);
649                         res = set_local_var(var, 0);
650                 } else
651                         res = -1;
652                 if (res)
653                         fprintf(stderr, "read: %m\n");
654                 free(var);      /* So not move up to avoid breaking errno */
655                 return res;
656         } else {
657                 do res=getchar(); while(res!='\n' && res!=EOF);
658                 return 0;
659         }
660 }
661
662 /* built-in 'set VAR=value' handler */
663 static int builtin_set(struct child_prog *child)
664 {
665         char *temp = child->argv[1];
666         struct variables *e;
667
668         if (temp == NULL)
669                 for(e = top_vars; e; e=e->next)
670                         printf("%s=%s\n", e->name, e->value);
671         else
672                 set_local_var(temp, 0);
673
674                 return EXIT_SUCCESS;
675 }
676
677
678 /* Built-in 'shift' handler */
679 static int builtin_shift(struct child_prog *child)
680 {
681         int n=1;
682         if (child->argv[1]) {
683                 n=atoi(child->argv[1]);
684         }
685         if (n>=0 && n<global_argc) {
686                 /* XXX This probably breaks $0 */
687                 global_argc -= n;
688                 global_argv += n;
689                 return EXIT_SUCCESS;
690         } else {
691                 return EXIT_FAILURE;
692         }
693 }
694
695 /* Built-in '.' handler (read-in and execute commands from file) */
696 static int builtin_source(struct child_prog *child)
697 {
698         FILE *input;
699         int status;
700
701         if (child->argv[1] == NULL)
702                 return EXIT_FAILURE;
703
704         /* XXX search through $PATH is missing */
705         input = fopen(child->argv[1], "r");
706         if (!input) {
707                 error_msg("Couldn't open file '%s'", child->argv[1]);
708                 return EXIT_FAILURE;
709         }
710
711         /* Now run the file */
712         /* XXX argv and argc are broken; need to save old global_argv
713          * (pointer only is OK!) on this stack frame,
714          * set global_argv=child->argv+1, recurse, and restore. */
715         mark_open(fileno(input));
716         status = parse_file_outer(input);
717         mark_closed(fileno(input));
718         fclose(input);
719         return (status);
720 }
721
722 static int builtin_umask(struct child_prog *child)
723 {
724         mode_t new_umask;
725         const char *arg = child->argv[1];
726         char *end;
727         if (arg) {
728                 new_umask=strtoul(arg, &end, 8);
729                 if (*end!='\0' || end == arg) {
730                         return EXIT_FAILURE;
731                 }
732         } else {
733                 printf("%.3o\n", (unsigned int) (new_umask=umask(0)));
734         }
735         umask(new_umask);
736         return EXIT_SUCCESS;
737 }
738
739 /* built-in 'unset VAR' handler */
740 static int builtin_unset(struct child_prog *child)
741 {
742         /* bash returned already true */
743         unset_local_var(child->argv[1]);
744         return EXIT_SUCCESS;
745 }
746
747 static int builtin_not_written(struct child_prog *child)
748 {
749         printf("builtin_%s not written\n",child->argv[0]);
750         return EXIT_FAILURE;
751 }
752
753 static int b_check_space(o_string *o, int len)
754 {
755         /* It would be easy to drop a more restrictive policy
756          * in here, such as setting a maximum string length */
757         if (o->length + len > o->maxlen) {
758                 char *old_data = o->data;
759                 /* assert (data == NULL || o->maxlen != 0); */
760                 o->maxlen += max(2*len, B_CHUNK);
761                 o->data = realloc(o->data, 1 + o->maxlen);
762                 if (o->data == NULL) {
763                         free(old_data);
764                 }
765         }
766         return o->data == NULL;
767 }
768
769 static int b_addchr(o_string *o, int ch)
770 {
771         debug_printf("b_addchr: %c %d %p\n", ch, o->length, o);
772         if (b_check_space(o, 1)) return B_NOSPAC;
773         o->data[o->length] = ch;
774         o->length++;
775         o->data[o->length] = '\0';
776         return 0;
777 }
778
779 static void b_reset(o_string *o)
780 {
781         o->length = 0;
782         o->nonnull = 0;
783         if (o->data != NULL) *o->data = '\0';
784 }
785
786 static void b_free(o_string *o)
787 {
788         b_reset(o);
789         if (o->data != NULL) free(o->data);
790         o->data = NULL;
791         o->maxlen = 0;
792 }
793
794 /* My analysis of quoting semantics tells me that state information
795  * is associated with a destination, not a source.
796  */
797 static int b_addqchr(o_string *o, int ch, int quote)
798 {
799         if (quote && strchr("*?[\\",ch)) {
800                 int rc;
801                 rc = b_addchr(o, '\\');
802                 if (rc) return rc;
803         }
804         return b_addchr(o, ch);
805 }
806
807 /* belongs in utility.c */
808 char *simple_itoa(unsigned int i)
809 {
810         /* 21 digits plus null terminator, good for 64-bit or smaller ints */
811         static char local[22];
812         char *p = &local[21];
813         *p-- = '\0';
814         do {
815                 *p-- = '0' + i % 10;
816                 i /= 10;
817         } while (i > 0);
818         return p + 1;
819 }
820
821 static int b_adduint(o_string *o, unsigned int i)
822 {
823         int r;
824         char *p = simple_itoa(i);
825         /* no escape checking necessary */
826         do r=b_addchr(o, *p++); while (r==0 && *p);
827         return r;
828 }
829
830 static int static_get(struct in_str *i)
831 {
832         int ch=*i->p++;
833         if (ch=='\0') return EOF;
834         return ch;
835 }
836
837 static int static_peek(struct in_str *i)
838 {
839         return *i->p;
840 }
841
842 static inline void cmdedit_set_initial_prompt(void)
843 {
844 #ifndef BB_FEATURE_SH_FANCY_PROMPT
845         PS1 = NULL;
846 #else
847         PS1 = getenv("PS1");
848         if(PS1==0)
849                 PS1 = "\\w \\$ ";
850 #endif  
851 }
852
853 static inline void setup_prompt_string(int promptmode, char **prompt_str)
854 {
855         debug_printf("setup_prompt_string %d ",promptmode);
856 #ifndef BB_FEATURE_SH_FANCY_PROMPT
857         /* Set up the prompt */
858         if (promptmode == 1) {
859                 if (PS1)
860                         free(PS1);
861                 PS1=xmalloc(strlen(cwd)+4);
862                 sprintf(PS1, "%s %s", cwd, ( geteuid() != 0 ) ?  "$ ":"# ");
863                 *prompt_str = PS1;
864         } else {
865                 *prompt_str = PS2;
866         }
867 #else
868         *prompt_str = (promptmode==0)? PS1 : PS2;
869 #endif
870         debug_printf("result %s\n",*prompt_str);
871 }
872
873 static void get_user_input(struct in_str *i)
874 {
875         char *prompt_str;
876         static char the_command[BUFSIZ];
877
878         setup_prompt_string(i->promptmode, &prompt_str);
879 #ifdef BB_FEATURE_COMMAND_EDITING
880         /*
881          ** enable command line editing only while a command line
882          ** is actually being read; otherwise, we'll end up bequeathing
883          ** atexit() handlers and other unwanted stuff to our
884          ** child processes (rob@sysgo.de)
885          */
886         cmdedit_read_input(prompt_str, the_command);
887         cmdedit_terminate();
888 #else
889         fputs(prompt_str, stdout);
890         fflush(stdout);
891         the_command[0]=fgetc(i->file);
892         the_command[1]='\0';
893 #endif
894         i->p = the_command;
895 }
896
897 /* This is the magic location that prints prompts 
898  * and gets data back from the user */
899 static int file_get(struct in_str *i)
900 {
901         int ch;
902
903         ch = 0;
904         /* If there is data waiting, eat it up */
905         if (i->p && *i->p) {
906                 ch=*i->p++;
907         } else {
908                 /* need to double check i->file because we might be doing something
909                  * more complicated by now, like sourcing or substituting. */
910                 if (i->__promptme && interactive && i->file == stdin) {
911                         get_user_input(i);
912                         i->promptmode=2;
913                         i->__promptme = 0;
914                         if (i->p && *i->p) {
915                                 ch=*i->p++;
916                         }
917                 } else {
918                         ch = fgetc(i->file);
919                 }
920
921                 debug_printf("b_getch: got a %d\n", ch);
922         }
923         if (ch == '\n') i->__promptme=1;
924         return ch;
925 }
926
927 /* All the callers guarantee this routine will never be
928  * used right after a newline, so prompting is not needed.
929  */
930 static int file_peek(struct in_str *i)
931 {
932         if (i->p && *i->p) {
933                 return *i->p;
934         } else {
935                 static char buffer[2];
936                 buffer[0] = fgetc(i->file);
937                 buffer[1] = '\0';
938                 i->p = buffer;
939                 debug_printf("b_peek: got a %d\n", *i->p);
940                 return *i->p; 
941         }
942 }
943
944 static void setup_file_in_str(struct in_str *i, FILE *f)
945 {
946         i->peek = file_peek;
947         i->get = file_get;
948         i->__promptme=1;
949         i->promptmode=1;
950         i->file = f;
951         i->p = NULL;
952 }
953
954 static void setup_string_in_str(struct in_str *i, const char *s)
955 {
956         i->peek = static_peek;
957         i->get = static_get;
958         i->__promptme=1;
959         i->promptmode=1;
960         i->p = s;
961 }
962
963 static void mark_open(int fd)
964 {
965         struct close_me *new = xmalloc(sizeof(struct close_me));
966         new->fd = fd;
967         new->next = close_me_head;
968         close_me_head = new;
969 }
970
971 static void mark_closed(int fd)
972 {
973         struct close_me *tmp;
974         if (close_me_head == NULL || close_me_head->fd != fd)
975                 error_msg_and_die("corrupt close_me");
976         tmp = close_me_head;
977         close_me_head = close_me_head->next;
978         free(tmp);
979 }
980
981 static void close_all()
982 {
983         struct close_me *c;
984         for (c=close_me_head; c; c=c->next) {
985                 close(c->fd);
986         }
987         close_me_head = NULL;
988 }
989
990 /* squirrel != NULL means we squirrel away copies of stdin, stdout,
991  * and stderr if they are redirected. */
992 static int setup_redirects(struct child_prog *prog, int squirrel[])
993 {
994         int openfd, mode;
995         struct redir_struct *redir;
996
997         for (redir=prog->redirects; redir; redir=redir->next) {
998                 if (redir->dup == -1) {
999                         mode=redir_table[redir->type].mode;
1000                         openfd = open(redir->word.gl_pathv[0], mode, 0666);
1001                         if (openfd < 0) {
1002                         /* this could get lost if stderr has been redirected, but
1003                            bash and ash both lose it as well (though zsh doesn't!) */
1004                                 perror_msg("error opening %s", redir->word.gl_pathv[0]);
1005                                 return 1;
1006                         }
1007                 } else {
1008                         openfd = redir->dup;
1009                 }
1010
1011                 if (openfd != redir->fd) {
1012                         if (squirrel && redir->fd < 3) {
1013                                 squirrel[redir->fd] = dup(redir->fd);
1014                         }
1015                         if (openfd == -3) {
1016                                 close(openfd);
1017                         } else {
1018                                 dup2(openfd, redir->fd);
1019                                 close(openfd);
1020                         }
1021                 }
1022         }
1023         return 0;
1024 }
1025
1026 static void restore_redirects(int squirrel[])
1027 {
1028         int i, fd;
1029         for (i=0; i<3; i++) {
1030                 fd = squirrel[i];
1031                 if (fd != -1) {
1032                         /* No error checking.  I sure wouldn't know what
1033                          * to do with an error if I found one! */
1034                         dup2(fd, i);
1035                         close(fd);
1036                 }
1037         }
1038 }
1039
1040 /* XXX this definitely needs some more thought, work, and
1041  * cribbing from other shells */
1042 static int pipe_wait(struct pipe *pi)
1043 {
1044         int rcode=0, i, pid, running, status;
1045         running = pi->num_progs;
1046         while (running) {
1047                 pid=waitpid(-1, &status, 0);
1048                 if (pid < 0) perror_msg_and_die("waitpid");
1049                 for (i=0; i < pi->num_progs; i++) {
1050                         if (pi->progs[i].pid == pid) {
1051                                 if (i==pi->num_progs-1) rcode=WEXITSTATUS(status);
1052                                 pi->progs[i].pid = 0;
1053                                 running--;
1054                                 break;
1055                         }
1056                 }
1057         }
1058         return rcode;
1059 }
1060
1061 /* never returns */
1062 /* XXX no exit() here.  If you don't exec, use _exit instead.
1063  * The at_exit handlers apparently confuse the calling process,
1064  * in particular stdin handling.  Not sure why? */
1065 static void pseudo_exec(struct child_prog *child)
1066 {
1067         int i, rcode;
1068         struct built_in_command *x;
1069         if (child->argv) {
1070                 for (i=0; is_assignment(child->argv[i]); i++) {
1071                         debug_printf("pid %d environment modification: %s\n",getpid(),child->argv[i]);
1072                         putenv(strdup(child->argv[i]));
1073                 }
1074                 child->argv+=i;  /* XXX this hack isn't so horrible, since we are about
1075                                         to exit, and therefore don't need to keep data
1076                                         structures consistent for free() use. */
1077                 /* If a variable is assigned in a forest, and nobody listens,
1078                  * was it ever really set?
1079                  */
1080                 if (child->argv[0] == NULL) {
1081                         _exit(EXIT_SUCCESS);
1082                 }
1083
1084                 /*
1085                  * Check if the command matches any of the builtins.
1086                  * Depending on context, this might be redundant.  But it's
1087                  * easier to waste a few CPU cycles than it is to figure out
1088                  * if this is one of those cases.
1089                  */
1090                 for (x = bltins; x->cmd; x++) {
1091                         if (strcmp(child->argv[0], x->cmd) == 0 ) {
1092                                 debug_printf("builtin exec %s\n", child->argv[0]);
1093                                 _exit(x->function(child));
1094                         }
1095                 }
1096
1097                 /* Check if the command matches any busybox internal commands
1098                  * ("applets") here.  
1099                  * FIXME: This feature is not 100% safe, since
1100                  * BusyBox is not fully reentrant, so we have no guarantee the things
1101                  * from the .bss are still zeroed, or that things from .data are still
1102                  * at their defaults.  We could exec ourself from /proc/self/exe, but I
1103                  * really dislike relying on /proc for things.  We could exec ourself
1104                  * from global_argv[0], but if we are in a chroot, we may not be able
1105                  * to find ourself... */ 
1106 #ifdef BB_FEATURE_SH_STANDALONE_SHELL
1107                 {
1108                         int argc_l;
1109                         char** argv_l=child->argv;
1110                         char *name = child->argv[0];
1111
1112 #ifdef BB_FEATURE_SH_APPLETS_ALWAYS_WIN
1113                         /* Following discussions from November 2000 on the busybox mailing
1114                          * list, the default configuration, (without
1115                          * get_last_path_component()) lets the user force use of an
1116                          * external command by specifying the full (with slashes) filename.
1117                          * If you enable BB_FEATURE_SH_APPLETS_ALWAYS_WIN, then applets
1118                          * _aways_ override external commands, so if you want to run
1119                          * /bin/cat, it will use BusyBox cat even if /bin/cat exists on the
1120                          * filesystem and is _not_ busybox.  Some systems may want this,
1121                          * most do not.  */
1122                         name = get_last_path_component(name);
1123 #endif
1124                         /* Count argc for use in a second... */
1125                         for(argc_l=0;*argv_l!=NULL; argv_l++, argc_l++);
1126                         optind = 1;
1127                         debug_printf("running applet %s\n", name);
1128                         run_applet_by_name(name, argc_l, child->argv);
1129                 }
1130 #endif
1131                 debug_printf("exec of %s\n",child->argv[0]);
1132                 execvp(child->argv[0],child->argv);
1133                 perror_msg("couldn't exec: %s",child->argv[0]);
1134                 _exit(1);
1135         } else if (child->group) {
1136                 debug_printf("runtime nesting to group\n");
1137                 interactive=0;    /* crucial!!!! */
1138                 rcode = run_list_real(child->group);
1139                 /* OK to leak memory by not calling run_list_test,
1140                  * since this process is about to exit */
1141                 _exit(rcode);
1142         } else {
1143                 /* Can happen.  See what bash does with ">foo" by itself. */
1144                 debug_printf("trying to pseudo_exec null command\n");
1145                 _exit(EXIT_SUCCESS);
1146         }
1147 }
1148
1149 static void insert_bg_job(struct pipe *pi)
1150 {
1151         struct pipe *thejob;
1152
1153         /* Linear search for the ID of the job to use */
1154         pi->jobid = 1;
1155         for (thejob = job_list->head; thejob; thejob = thejob->next)
1156                 if (thejob->jobid >= pi->jobid)
1157                         pi->jobid = thejob->jobid + 1;
1158
1159         /* add thejob to the list of running jobs */
1160         if (!job_list->head) {
1161                 thejob = job_list->head = xmalloc(sizeof(*thejob));
1162         } else {
1163                 for (thejob = job_list->head; thejob->next; thejob = thejob->next) /* nothing */;
1164                 thejob->next = xmalloc(sizeof(*thejob));
1165                 thejob = thejob->next;
1166         }
1167
1168         /* physically copy the struct job */
1169         memcpy(thejob, pi, sizeof(struct pipe));
1170         thejob->next = NULL;
1171         thejob->running_progs = thejob->num_progs;
1172         thejob->stopped_progs = 0;
1173         thejob->text = xmalloc(BUFSIZ); /* cmdedit buffer size */
1174
1175         //if (pi->progs[0] && pi->progs[0].argv && pi->progs[0].argv[0])
1176         {
1177                 char *bar=thejob->text;
1178                 char **foo=pi->progs[0].argv;
1179                 while(foo && *foo) {
1180                         bar += sprintf(bar, "%s ", *foo++);
1181                 }
1182         }
1183
1184         /* we don't wait for background thejobs to return -- append it 
1185            to the list of backgrounded thejobs and leave it alone */
1186         printf("[%d] %d\n", thejob->jobid, thejob->progs[0].pid);
1187         last_bg_pid = thejob->progs[0].pid;
1188 }
1189
1190 /* remove a backgrounded job from a jobset */
1191 static void remove_bg_job(struct pipe *pi)
1192 {
1193         struct pipe *prev_pipe;
1194
1195         if (pi == job_list->head) {
1196                 job_list->head = pi->next;
1197         } else {
1198                 prev_pipe = job_list->head;
1199                 while (prev_pipe->next != pi)
1200                         prev_pipe = prev_pipe->next;
1201                 prev_pipe->next = pi->next;
1202         }
1203
1204         free_pipe(pi);
1205         free(pi);
1206 }
1207
1208 /* free up all memory from a pipe */
1209 static void free_pipe(struct pipe *pi)
1210 {
1211         int i;
1212
1213         for (i = 0; i < pi->num_progs; i++) {
1214                 free(pi->progs[i].argv);
1215                 if (pi->progs[i].redirects)
1216                         free(pi->progs[i].redirects);
1217         }
1218         if (pi->progs)
1219                 free(pi->progs);
1220         if (pi->text)
1221                 free(pi->text);
1222         if (pi->cmdbuf)
1223                 free(pi->cmdbuf);
1224         memset(pi, 0, sizeof(struct pipe));
1225 }
1226
1227
1228 /* Checks to see if any background processes have exited -- if they 
1229    have, figure out why and see if a job has completed */
1230 static void checkjobs()
1231 {
1232         int status, ctty;
1233         int prognum = 0;
1234         struct pipe *pi;
1235         pid_t childpid;
1236
1237         while ((childpid = waitpid(-1, &status, WNOHANG | WUNTRACED)) > 0) {
1238                 for (pi = job_list->head; pi; pi = pi->next) {
1239                         prognum = 0;
1240                         while (prognum < pi->num_progs &&
1241                                    pi->progs[prognum].pid != childpid) prognum++;
1242                         if (prognum < pi->num_progs)
1243                                 break;
1244                 }
1245
1246                 if (WIFEXITED(status) || WIFSIGNALED(status)) {
1247                         /* child exited */
1248                         pi->running_progs--;
1249                         pi->progs[prognum].pid = 0;
1250
1251                         if (!pi->running_progs) {
1252                                 printf(JOB_STATUS_FORMAT, pi->jobid, "Done", pi->text);
1253                                 remove_bg_job(pi);
1254                         }
1255                 } else {
1256                         if(pi==NULL)
1257                                 break;
1258                         /* child stopped */
1259                         pi->stopped_progs++;
1260                         pi->progs[prognum].is_stopped = 1;
1261
1262                         if (pi->stopped_progs == pi->num_progs) {
1263                                 printf(JOB_STATUS_FORMAT, pi->jobid, "Stopped", pi->text);
1264                         }
1265                 }
1266         }
1267
1268         if (childpid == -1 && errno != ECHILD)
1269                 perror_msg("waitpid");
1270
1271         /* move the shell to the foreground */
1272         if (interactive && (ctty=controlling_tty(0))!=-1) {
1273                 if (tcsetpgrp(ctty, getpgrp()))
1274                         perror_msg("tcsetpgrp-2");
1275         }
1276 }
1277
1278 /* Figure out our controlling tty, checking in order stderr,
1279  * stdin, and stdout.  If check_pgrp is set, also check that
1280  * we belong to the foreground process group associated with
1281  * that tty.  The value of ctty is needed in order to call
1282  * tcsetpgrp(ctty, ...); */
1283 int controlling_tty(int check_pgrp)
1284 {
1285         pid_t curpgrp;
1286         int ctty;
1287
1288         if ((curpgrp = tcgetpgrp(ctty = 2)) < 0
1289                 && (curpgrp = tcgetpgrp(ctty = 0)) < 0
1290                 && (curpgrp = tcgetpgrp(ctty = 1)) < 0)
1291                 return errno = ENOTTY, -1;
1292
1293         if (check_pgrp && curpgrp != getpgrp())
1294                 return errno = EPERM, -1;
1295
1296         return ctty;
1297 }
1298
1299 /* run_pipe_real() starts all the jobs, but doesn't wait for anything
1300  * to finish.  See pipe_wait().
1301  *
1302  * return code is normally -1, when the caller has to wait for children
1303  * to finish to determine the exit status of the pipe.  If the pipe
1304  * is a simple builtin command, however, the action is done by the
1305  * time run_pipe_real returns, and the exit code is provided as the
1306  * return value.
1307  *
1308  * The input of the pipe is always stdin, the output is always
1309  * stdout.  The outpipe[] mechanism in BusyBox-0.48 lash is bogus,
1310  * because it tries to avoid running the command substitution in
1311  * subshell, when that is in fact necessary.  The subshell process
1312  * now has its stdout directed to the input of the appropriate pipe,
1313  * so this routine is noticeably simpler.
1314  */
1315 static int run_pipe_real(struct pipe *pi)
1316 {
1317         int i;
1318         int ctty;
1319         int nextin, nextout;
1320         int pipefds[2];                         /* pipefds[0] is for reading */
1321         struct child_prog *child;
1322         struct built_in_command *x;
1323
1324         ctty = -1;
1325         nextin = 0;
1326         pi->pgrp = -1;
1327
1328         /* Check if we are supposed to run in the foreground */
1329         if (interactive && pi->followup!=PIPE_BG) {
1330                 if ((ctty = controlling_tty(pi->pgrp<0)) < 0) return -1;
1331         }
1332
1333         /* Check if this is a simple builtin (not part of a pipe).
1334          * Builtins within pipes have to fork anyway, and are handled in
1335          * pseudo_exec.  "echo foo | read bar" doesn't work on bash, either.
1336          */
1337         if (pi->num_progs == 1 && pi->progs[0].argv != NULL) {
1338                 child = & (pi->progs[0]);
1339                 if (child->group && ! child->subshell) {
1340                         int squirrel[] = {-1, -1, -1};
1341                         int rcode;
1342                         debug_printf("non-subshell grouping\n");
1343                         setup_redirects(child, squirrel);
1344                         /* XXX could we merge code with following builtin case,
1345                          * by creating a pseudo builtin that calls run_list_real? */
1346                         rcode = run_list_real(child->group);
1347                         restore_redirects(squirrel);
1348                         return rcode;
1349                 }
1350                 for (i=0; is_assignment(child->argv[i]); i++) { /* nothing */ }
1351                 if (i!=0 && child->argv[i]==NULL) {
1352                         /* assignments, but no command: set the local environment */
1353                         for (i=0; child->argv[i]!=NULL; i++) {
1354                                 set_local_var(child->argv[i], 0);
1355                         }
1356                         return EXIT_SUCCESS;   /* don't worry about errors in set_local_var() yet */
1357                 }
1358                 for (x = bltins; x->cmd; x++) {
1359                         if (strcmp(child->argv[i], x->cmd) == 0 ) {
1360                                 int squirrel[] = {-1, -1, -1};
1361                                 int rcode;
1362                                 if (x->function == builtin_exec && child->argv[i+1]==NULL) {
1363                                         debug_printf("magic exec\n");
1364                                         setup_redirects(child,NULL);
1365                                         return EXIT_SUCCESS;
1366                                 }
1367                                 debug_printf("builtin inline %s\n", child->argv[0]);
1368                                 /* XXX setup_redirects acts on file descriptors, not FILEs.
1369                                  * This is perfect for work that comes after exec().
1370                                  * Is it really safe for inline use?  Experimentally,
1371                                  * things seem to work with glibc. */
1372                                 setup_redirects(child, squirrel);
1373                                 for (i=0; is_assignment(child->argv[i]); i++) {
1374                                         putenv(strdup(child->argv[i]));
1375                                 }
1376                                 child->argv+=i;  /* XXX horrible hack */
1377                                 rcode = x->function(child);
1378                                 child->argv-=i;  /* XXX restore hack so free() can work right */
1379                                 restore_redirects(squirrel);
1380                                 return rcode;
1381                         }
1382                 }
1383         }
1384
1385         for (i = 0; i < pi->num_progs; i++) {
1386                 child = & (pi->progs[i]);
1387
1388                 /* pipes are inserted between pairs of commands */
1389                 if ((i + 1) < pi->num_progs) {
1390                         if (pipe(pipefds)<0) perror_msg_and_die("pipe");
1391                         nextout = pipefds[1];
1392                 } else {
1393                         nextout=1;
1394                         pipefds[0] = -1;
1395                 }
1396
1397                 /* XXX test for failed fork()? */
1398                 if (!(child->pid = fork())) {
1399
1400                         signal(SIGTTOU, SIG_DFL);
1401                         
1402                         close_all();
1403
1404                         if (nextin != 0) {
1405                                 dup2(nextin, 0);
1406                                 close(nextin);
1407                         }
1408                         if (nextout != 1) {
1409                                 dup2(nextout, 1);
1410                                 close(nextout);
1411                         }
1412                         if (pipefds[0]!=-1) {
1413                                 close(pipefds[0]);  /* opposite end of our output pipe */
1414                         }
1415
1416                         /* Like bash, explicit redirects override pipes,
1417                          * and the pipe fd is available for dup'ing. */
1418                         setup_redirects(child,NULL);
1419                         
1420                         if (interactive && pi->followup!=PIPE_BG) {
1421                                 /* If we (the child) win the race, put ourselves in the process
1422                                  * group whose leader is the first process in this pipe. */
1423                                 if (pi->pgrp < 0) {
1424                                         pi->pgrp = getpid();
1425                                 }
1426                                 if (setpgid(0, pi->pgrp) == 0) {
1427                                         signal(SIGTTOU, SIG_IGN);
1428                                         tcsetpgrp(ctty, pi->pgrp);
1429                                         signal(SIGTTOU, SIG_DFL);
1430                                 }
1431                         }
1432
1433                         pseudo_exec(child);
1434                 }
1435                 /* Put our child in the process group whose leader is the
1436                  * first process in this pipe. */
1437                 if (pi->pgrp < 0) {
1438                         pi->pgrp = child->pid;
1439                 }
1440                 /* Don't check for errors.  The child may be dead already,
1441                  * in which case setpgid returns error code EACCES. */
1442                 setpgid(child->pid, pi->pgrp);
1443
1444                 if (nextin != 0)
1445                         close(nextin);
1446                 if (nextout != 1)
1447                         close(nextout);
1448
1449                 /* If there isn't another process, nextin is garbage 
1450                    but it doesn't matter */
1451                 nextin = pipefds[0];
1452         }
1453         return -1;
1454 }
1455
1456 static int run_list_real(struct pipe *pi)
1457 {
1458         int rcode=0;
1459         int if_code=0, next_if_code=0;  /* need double-buffer to handle elif */
1460         reserved_style rmode, skip_more_in_this_rmode=RES_XXXX;
1461         for (;pi;pi=pi->next) {
1462                 rmode = pi->r_mode;
1463                 debug_printf("rmode=%d  if_code=%d  next_if_code=%d skip_more=%d\n", rmode, if_code, next_if_code, skip_more_in_this_rmode);
1464                 if (rmode == skip_more_in_this_rmode) continue;
1465                 skip_more_in_this_rmode = RES_XXXX;
1466                 if (rmode == RES_THEN || rmode == RES_ELSE) if_code = next_if_code;
1467                 if (rmode == RES_THEN &&  if_code) continue;
1468                 if (rmode == RES_ELSE && !if_code) continue;
1469                 if (rmode == RES_ELIF && !if_code) continue;
1470                 if (pi->num_progs == 0) continue;
1471                 rcode = run_pipe_real(pi);
1472                 if (rcode!=-1) {
1473                         /* We only ran a builtin: rcode was set by the return value
1474                          * of run_pipe_real(), and we don't need to wait for anything. */
1475                 } else if (pi->followup==PIPE_BG) {
1476                         /* XXX check bash's behavior with nontrivial pipes */
1477                         /* XXX compute jobid */
1478                         /* XXX what does bash do with attempts to background builtins? */
1479                         insert_bg_job(pi);
1480                         rcode = EXIT_SUCCESS;
1481                 } else {
1482
1483                         if (interactive) {
1484                                 /* move the new process group into the foreground */
1485                                 /* suppress messages when run from /linuxrc mag@sysgo.de */
1486                                 /* XXX probably this "0" should come from controlling_tty() */
1487                                 if (tcsetpgrp(0, pi->pgrp) && errno != ENOTTY)
1488                                         perror_msg("tcsetpgrp-3");
1489                                 rcode = pipe_wait(pi);
1490                                 if (tcsetpgrp(0, getpgrp()) && errno != ENOTTY)
1491                                         perror_msg("tcsetpgrp-4");
1492                         } else {
1493                                 rcode = pipe_wait(pi);
1494                                 debug_printf("pipe_wait returned %d\n",rcode);
1495                         }
1496                 }
1497                 last_return_code=rcode;
1498                 if ( rmode == RES_IF || rmode == RES_ELIF )
1499                         next_if_code=rcode;  /* can be overwritten a number of times */
1500                 if ( (rcode==EXIT_SUCCESS && pi->followup==PIPE_OR) ||
1501                      (rcode!=EXIT_SUCCESS && pi->followup==PIPE_AND) )
1502                         skip_more_in_this_rmode=rmode;
1503         }
1504         checkjobs();
1505         return rcode;
1506 }
1507
1508 /* broken, of course, but OK for testing */
1509 static char *indenter(int i)
1510 {
1511         static char blanks[]="                                    ";
1512         return &blanks[sizeof(blanks)-i-1];
1513 }
1514
1515 /* return code is the exit status of the pipe */
1516 static int run_pipe_test(struct pipe *pi, int indent)
1517 {
1518         char **p;
1519         struct child_prog *child;
1520         struct redir_struct *r, *rnext;
1521         int a, i, ret_code=0;
1522         char *ind = indenter(indent);
1523         final_printf("%s run pipe: (pid %d)\n",ind,getpid());
1524         for (i=0; i<pi->num_progs; i++) {
1525                 child = &pi->progs[i];
1526                 final_printf("%s  command %d:\n",ind,i);
1527                 if (child->argv) {
1528                         for (a=0,p=child->argv; *p; a++,p++) {
1529                                 final_printf("%s   argv[%d] = %s\n",ind,a,*p);
1530                         }
1531                         globfree(&child->glob_result);
1532                         child->argv=NULL;
1533                 } else if (child->group) {
1534                         final_printf("%s   begin group (subshell:%d)\n",ind, child->subshell);
1535                         ret_code = run_list_test(child->group,indent+3);
1536                         final_printf("%s   end group\n",ind);
1537                 } else {
1538                         final_printf("%s   (nil)\n",ind);
1539                 }
1540                 for (r=child->redirects; r; r=rnext) {
1541                         final_printf("%s   redirect %d%s", ind, r->fd, redir_table[r->type].descrip);
1542                         if (r->dup == -1) {
1543                                 final_printf(" %s\n", *r->word.gl_pathv);
1544                                 globfree(&r->word);
1545                         } else {
1546                                 final_printf("&%d\n", r->dup);
1547                         }
1548                         rnext=r->next;
1549                         free(r);
1550                 }
1551                 child->redirects=NULL;
1552         }
1553         free(pi->progs);   /* children are an array, they get freed all at once */
1554         pi->progs=NULL;
1555         return ret_code;
1556 }
1557
1558 static int run_list_test(struct pipe *head, int indent)
1559 {
1560         int rcode=0;   /* if list has no members */
1561         struct pipe *pi, *next;
1562         char *ind = indenter(indent);
1563         for (pi=head; pi; pi=next) {
1564                 if (pi->num_progs == 0) break;
1565                 final_printf("%s pipe reserved mode %d\n", ind, pi->r_mode);
1566                 rcode = run_pipe_test(pi, indent);
1567                 final_printf("%s pipe followup code %d\n", ind, pi->followup);
1568                 next=pi->next;
1569                 pi->next=NULL;
1570                 free(pi);
1571         }
1572         return rcode;   
1573 }
1574
1575 /* Select which version we will use */
1576 static int run_list(struct pipe *pi)
1577 {
1578         int rcode=0;
1579         if (fake_mode==0) {
1580                 rcode = run_list_real(pi);
1581         } 
1582         /* run_list_test has the side effect of clearing memory
1583          * In the long run that function can be merged with run_list_real,
1584          * but doing that now would hobble the debugging effort. */
1585         run_list_test(pi,0);
1586         return rcode;
1587 }
1588
1589 /* The API for glob is arguably broken.  This routine pushes a non-matching
1590  * string into the output structure, removing non-backslashed backslashes.
1591  * If someone can prove me wrong, by performing this function within the
1592  * original glob(3) api, feel free to rewrite this routine into oblivion.
1593  * Return code (0 vs. GLOB_NOSPACE) matches glob(3).
1594  * XXX broken if the last character is '\\', check that before calling.
1595  */
1596 static int globhack(const char *src, int flags, glob_t *pglob)
1597 {
1598         int cnt, pathc;
1599         const char *s;
1600         char *dest;
1601         for (cnt=1, s=src; *s; s++) {
1602                 if (*s == '\\') s++;
1603                 cnt++;
1604         }
1605         dest = malloc(cnt);
1606         if (!dest) return GLOB_NOSPACE;
1607         if (!(flags & GLOB_APPEND)) {
1608                 pglob->gl_pathv=NULL;
1609                 pglob->gl_pathc=0;
1610                 pglob->gl_offs=0;
1611                 pglob->gl_offs=0;
1612         }
1613         pathc = ++pglob->gl_pathc;
1614         pglob->gl_pathv = realloc(pglob->gl_pathv, (pathc+1)*sizeof(*pglob->gl_pathv));
1615         if (pglob->gl_pathv == NULL) return GLOB_NOSPACE;
1616         pglob->gl_pathv[pathc-1]=dest;
1617         pglob->gl_pathv[pathc]=NULL;
1618         for (s=src; *s; s++, dest++) {
1619                 if (*s == '\\') s++;
1620                 *dest = *s;
1621         }
1622         *dest='\0';
1623         return 0;
1624 }
1625
1626 /* XXX broken if the last character is '\\', check that before calling */
1627 static int glob_needed(const char *s)
1628 {
1629         for (; *s; s++) {
1630                 if (*s == '\\') s++;
1631                 if (strchr("*[?",*s)) return 1;
1632         }
1633         return 0;
1634 }
1635
1636 #if 0
1637 static void globprint(glob_t *pglob)
1638 {
1639         int i;
1640         debug_printf("glob_t at %p:\n", pglob);
1641         debug_printf("  gl_pathc=%d  gl_pathv=%p  gl_offs=%d  gl_flags=%d\n",
1642                 pglob->gl_pathc, pglob->gl_pathv, pglob->gl_offs, pglob->gl_flags);
1643         for (i=0; i<pglob->gl_pathc; i++)
1644                 debug_printf("pglob->gl_pathv[%d] = %p = %s\n", i,
1645                         pglob->gl_pathv[i], pglob->gl_pathv[i]);
1646 }
1647 #endif
1648
1649 static int xglob(o_string *dest, int flags, glob_t *pglob)
1650 {
1651         int gr;
1652
1653         /* short-circuit for null word */
1654         /* we can code this better when the debug_printf's are gone */
1655         if (dest->length == 0) {
1656                 if (dest->nonnull) {
1657                         /* bash man page calls this an "explicit" null */
1658                         gr = globhack(dest->data, flags, pglob);
1659                         debug_printf("globhack returned %d\n",gr);
1660                 } else {
1661                         return 0;
1662                 }
1663         } else if (glob_needed(dest->data)) {
1664                 gr = glob(dest->data, flags, NULL, pglob);
1665                 debug_printf("glob returned %d\n",gr);
1666                 if (gr == GLOB_NOMATCH) {
1667                         /* quote removal, or more accurately, backslash removal */
1668                         gr = globhack(dest->data, flags, pglob);
1669                         debug_printf("globhack returned %d\n",gr);
1670                 }
1671         } else {
1672                 gr = globhack(dest->data, flags, pglob);
1673                 debug_printf("globhack returned %d\n",gr);
1674         }
1675         if (gr == GLOB_NOSPACE)
1676                 error_msg_and_die("out of memory during glob");
1677         if (gr != 0) { /* GLOB_ABORTED ? */
1678                 error_msg("glob(3) error %d",gr);
1679         }
1680         /* globprint(glob_target); */
1681         return gr;
1682 }
1683
1684 /* This is used to get/check local shell variables */
1685 static char *get_local_var(const char *s)
1686 {
1687         struct variables *cur;
1688
1689         if (!s)
1690                 return NULL;
1691         for (cur = top_vars; cur; cur=cur->next)
1692                 if(strcmp(cur->name, s)==0)
1693                         return cur->value;
1694         return NULL;
1695 }
1696
1697 /* This is used to set local shell variables
1698    flg_export==0 if only local (not exporting) variable
1699    flg_export==1 if "new" exporting environ
1700    flg_export>1  if current startup environ (not call putenv()) */
1701 static int set_local_var(const char *s, int flg_export)
1702 {
1703         char *name, *value;
1704         int result=0;
1705         struct variables *cur;
1706         char *newval = 0;
1707
1708         name=strdup(s);
1709
1710         /* Assume when we enter this function that we are already in
1711          * NAME=VALUE format.  So the first order of business is to
1712          * split 's' on the '=' into 'name' and 'value' */ 
1713         value = strchr(name, '=');
1714         if (value==0 || (newval = strdup(value+1))==0) {
1715                 result = -1;
1716         } else {
1717                 *value++ = 0;
1718
1719                 for(cur = top_vars; cur; cur = cur->next) {
1720                         if(strcmp(cur->name, name)==0)
1721                                 break;
1722                 }
1723
1724                 if(cur) {
1725                         if(strcmp(cur->value, value)==0) {
1726                                 if(flg_export>0 && cur->flg_export==0)
1727                                         cur->flg_export=flg_export;
1728                                 else
1729                                         result++;
1730                         } else {
1731                                 if(cur->flg_read_only) {
1732                                         result = -1;
1733                                         error_msg("%s: readonly variable", name);
1734                                 } else {
1735                                         if(flg_export>0 || cur->flg_export>1)
1736                                                 cur->flg_export=1;
1737                                         free(cur->value);
1738                                         cur->value = newval;
1739                                         newval = 0; /* protect free */
1740                                 }
1741                         }
1742                 } else {
1743                         cur = malloc(sizeof(struct variables));
1744                         if(cur==0) {
1745                                 result = -1;
1746                         } else {
1747                                 cur->name = strdup(name);
1748                                 if(cur->name == 0) {
1749                                         free(cur);
1750                                         result = -1;
1751                                 } else {
1752                                         struct variables *bottom = top_vars;
1753                                         cur->value = newval;
1754                                         newval = 0;     /* protect free */
1755                                         cur->next = 0;
1756                                         cur->flg_export = flg_export;
1757                                         cur->flg_read_only = 0;
1758                                         while(bottom->next) bottom=bottom->next;
1759                                         bottom->next = cur;
1760                                 }
1761                         }
1762                 }
1763         }
1764
1765         if(result==0 && cur->flg_export==1) {
1766                 *(value-1) = '=';
1767                 result = putenv(name);
1768         } else {
1769                 free(name);
1770                 if(result>0)            /* equivalent to previous set */
1771                         result = 0;
1772         }
1773         free(newval);
1774         return result;
1775 }
1776
1777 static void unset_local_var(const char *name)
1778 {
1779         struct variables *cur;
1780
1781         if (name) {
1782                 for (cur = top_vars; cur; cur=cur->next) {
1783                         if(strcmp(cur->name, name)==0)
1784                                 break;
1785                 }
1786                 if(cur!=0) {
1787                         struct variables *next = top_vars;
1788                         if(cur->flg_read_only) {
1789                                 error_msg("%s: readonly variable", name);
1790                                 return;
1791                         } else {
1792                                 if(cur->flg_export)
1793                                         unsetenv(cur->name);
1794                                 free(cur->name);
1795                                 free(cur->value);
1796                                 while (next->next != cur)
1797                                         next = next->next;
1798                                 next->next = cur->next;
1799                         }
1800                         free(cur);
1801                 }
1802         }
1803 }
1804
1805 static int is_assignment(const char *s)
1806 {
1807         if (s==NULL || !isalpha(*s)) return 0;
1808         ++s;
1809         while(isalnum(*s) || *s=='_') ++s;
1810         return *s=='=';
1811 }
1812
1813 /* the src parameter allows us to peek forward to a possible &n syntax
1814  * for file descriptor duplication, e.g., "2>&1".
1815  * Return code is 0 normally, 1 if a syntax error is detected in src.
1816  * Resource errors (in xmalloc) cause the process to exit */
1817 static int setup_redirect(struct p_context *ctx, int fd, redir_type style,
1818         struct in_str *input)
1819 {
1820         struct child_prog *child=ctx->child;
1821         struct redir_struct *redir = child->redirects;
1822         struct redir_struct *last_redir=NULL;
1823
1824         /* Create a new redir_struct and drop it onto the end of the linked list */
1825         while(redir) {
1826                 last_redir=redir;
1827                 redir=redir->next;
1828         }
1829         redir = xmalloc(sizeof(struct redir_struct));
1830         redir->next=NULL;
1831         if (last_redir) {
1832                 last_redir->next=redir;
1833         } else {
1834                 child->redirects=redir;
1835         }
1836
1837         redir->type=style;
1838         redir->fd= (fd==-1) ? redir_table[style].default_fd : fd ;
1839
1840         debug_printf("Redirect type %d%s\n", redir->fd, redir_table[style].descrip);
1841
1842         /* Check for a '2>&1' type redirect */ 
1843         redir->dup = redirect_dup_num(input);
1844         if (redir->dup == -2) return 1;  /* syntax error */
1845         if (redir->dup != -1) {
1846                 /* Erik had a check here that the file descriptor in question
1847                  * is legit; I postpone that to "run time"
1848                  * A "-" representation of "close me" shows up as a -3 here */
1849                 debug_printf("Duplicating redirect '%d>&%d'\n", redir->fd, redir->dup);
1850         } else {
1851                 /* We do _not_ try to open the file that src points to,
1852                  * since we need to return and let src be expanded first.
1853                  * Set ctx->pending_redirect, so we know what to do at the
1854                  * end of the next parsed word.
1855                  */
1856                 ctx->pending_redirect = redir;
1857         }
1858         return 0;
1859 }
1860
1861 struct pipe *new_pipe(void) {
1862         struct pipe *pi;
1863         pi = xmalloc(sizeof(struct pipe));
1864         pi->num_progs = 0;
1865         pi->progs = NULL;
1866         pi->next = NULL;
1867         pi->followup = 0;  /* invalid */
1868         return pi;
1869 }
1870
1871 static void initialize_context(struct p_context *ctx)
1872 {
1873         ctx->pipe=NULL;
1874         ctx->pending_redirect=NULL;
1875         ctx->child=NULL;
1876         ctx->list_head=new_pipe();
1877         ctx->pipe=ctx->list_head;
1878         ctx->w=RES_NONE;
1879         ctx->stack=NULL;
1880         done_command(ctx);   /* creates the memory for working child */
1881 }
1882
1883 /* normal return is 0
1884  * if a reserved word is found, and processed, return 1
1885  * should handle if, then, elif, else, fi, for, while, until, do, done.
1886  * case, function, and select are obnoxious, save those for later.
1887  */
1888 int reserved_word(o_string *dest, struct p_context *ctx)
1889 {
1890         struct reserved_combo {
1891                 char *literal;
1892                 int code;
1893                 long flag;
1894         };
1895         /* Mostly a list of accepted follow-up reserved words.
1896          * FLAG_END means we are done with the sequence, and are ready
1897          * to turn the compound list into a command.
1898          * FLAG_START means the word must start a new compound list.
1899          */
1900         static struct reserved_combo reserved_list[] = {
1901                 { "if",    RES_IF,    FLAG_THEN | FLAG_START },
1902                 { "then",  RES_THEN,  FLAG_ELIF | FLAG_ELSE | FLAG_FI },
1903                 { "elif",  RES_ELIF,  FLAG_THEN },
1904                 { "else",  RES_ELSE,  FLAG_FI   },
1905                 { "fi",    RES_FI,    FLAG_END  },
1906                 { "for",   RES_FOR,   FLAG_DO   | FLAG_START },
1907                 { "while", RES_WHILE, FLAG_DO   | FLAG_START },
1908                 { "until", RES_UNTIL, FLAG_DO   | FLAG_START },
1909                 { "do",    RES_DO,    FLAG_DONE },
1910                 { "done",  RES_DONE,  FLAG_END  }
1911         };
1912         struct reserved_combo *r;
1913         for (r=reserved_list;
1914 #define NRES sizeof(reserved_list)/sizeof(struct reserved_combo)
1915                 r<reserved_list+NRES; r++) {
1916                 if (strcmp(dest->data, r->literal) == 0) {
1917                         debug_printf("found reserved word %s, code %d\n",r->literal,r->code);
1918                         if (r->flag & FLAG_START) {
1919                                 struct p_context *new = xmalloc(sizeof(struct p_context));
1920                                 debug_printf("push stack\n");
1921                                 *new = *ctx;   /* physical copy */
1922                                 initialize_context(ctx);
1923                                 ctx->stack=new;
1924                         } else if ( ctx->w == RES_NONE || ! (ctx->old_flag & (1<<r->code))) {
1925                                 syntax();
1926                                 ctx->w = RES_SNTX;
1927                                 b_reset (dest);
1928                                 return 1;
1929                         }
1930                         ctx->w=r->code;
1931                         ctx->old_flag = r->flag;
1932                         if (ctx->old_flag & FLAG_END) {
1933                                 struct p_context *old;
1934                                 debug_printf("pop stack\n");
1935                                 old = ctx->stack;
1936                                 old->child->group = ctx->list_head;
1937                                 *ctx = *old;   /* physical copy */
1938                                 free(old);
1939                         }
1940                         b_reset (dest);
1941                         return 1;
1942                 }
1943         }
1944         return 0;
1945 }
1946
1947 /* normal return is 0.
1948  * Syntax or xglob errors return 1. */
1949 static int done_word(o_string *dest, struct p_context *ctx)
1950 {
1951         struct child_prog *child=ctx->child;
1952         glob_t *glob_target;
1953         int gr, flags = 0;
1954
1955         debug_printf("done_word: %s %p\n", dest->data, child);
1956         if (dest->length == 0 && !dest->nonnull) {
1957                 debug_printf("  true null, ignored\n");
1958                 return 0;
1959         }
1960         if (ctx->pending_redirect) {
1961                 glob_target = &ctx->pending_redirect->word;
1962         } else {
1963                 if (child->group) {
1964                         syntax();
1965                         return 1;  /* syntax error, groups and arglists don't mix */
1966                 }
1967                 if (!child->argv) {
1968                         debug_printf("checking %s for reserved-ness\n",dest->data);
1969                         if (reserved_word(dest,ctx)) return ctx->w==RES_SNTX;
1970                 }
1971                 glob_target = &child->glob_result;
1972                 if (child->argv) flags |= GLOB_APPEND;
1973         }
1974         gr = xglob(dest, flags, glob_target);
1975         if (gr != 0) return 1;
1976
1977         b_reset(dest);
1978         if (ctx->pending_redirect) {
1979                 ctx->pending_redirect=NULL;
1980                 if (glob_target->gl_pathc != 1) {
1981                         error_msg("ambiguous redirect");
1982                         return 1;
1983                 }
1984         } else {
1985                 child->argv = glob_target->gl_pathv;
1986         }
1987         return 0;
1988 }
1989
1990 /* The only possible error here is out of memory, in which case
1991  * xmalloc exits. */
1992 static int done_command(struct p_context *ctx)
1993 {
1994         /* The child is really already in the pipe structure, so
1995          * advance the pipe counter and make a new, null child.
1996          * Only real trickiness here is that the uncommitted
1997          * child structure, to which ctx->child points, is not
1998          * counted in pi->num_progs. */
1999         struct pipe *pi=ctx->pipe;
2000         struct child_prog *prog=ctx->child;
2001
2002         if (prog && prog->group == NULL
2003                  && prog->argv == NULL
2004                  && prog->redirects == NULL) {
2005                 debug_printf("done_command: skipping null command\n");
2006                 return 0;
2007         } else if (prog) {
2008                 pi->num_progs++;
2009                 debug_printf("done_command: num_progs incremented to %d\n",pi->num_progs);
2010         } else {
2011                 debug_printf("done_command: initializing\n");
2012         }
2013         pi->progs = xrealloc(pi->progs, sizeof(*pi->progs) * (pi->num_progs+1));
2014
2015         prog = pi->progs + pi->num_progs;
2016         prog->redirects = NULL;
2017         prog->argv = NULL;
2018         prog->is_stopped = 0;
2019         prog->group = NULL;
2020         prog->glob_result.gl_pathv = NULL;
2021         prog->family = pi;
2022
2023         ctx->child=prog;
2024         /* but ctx->pipe and ctx->list_head remain unchanged */
2025         return 0;
2026 }
2027
2028 static int done_pipe(struct p_context *ctx, pipe_style type)
2029 {
2030         struct pipe *new_p;
2031         done_command(ctx);  /* implicit closure of previous command */
2032         debug_printf("done_pipe, type %d\n", type);
2033         ctx->pipe->followup = type;
2034         ctx->pipe->r_mode = ctx->w;
2035         new_p=new_pipe();
2036         ctx->pipe->next = new_p;
2037         ctx->pipe = new_p;
2038         ctx->child = NULL;
2039         done_command(ctx);  /* set up new pipe to accept commands */
2040         return 0;
2041 }
2042
2043 /* peek ahead in the in_str to find out if we have a "&n" construct,
2044  * as in "2>&1", that represents duplicating a file descriptor.
2045  * returns either -2 (syntax error), -1 (no &), or the number found.
2046  */
2047 static int redirect_dup_num(struct in_str *input)
2048 {
2049         int ch, d=0, ok=0;
2050         ch = b_peek(input);
2051         if (ch != '&') return -1;
2052
2053         b_getch(input);  /* get the & */
2054         ch=b_peek(input);
2055         if (ch == '-') {
2056                 b_getch(input);
2057                 return -3;  /* "-" represents "close me" */
2058         }
2059         while (isdigit(ch)) {
2060                 d = d*10+(ch-'0');
2061                 ok=1;
2062                 b_getch(input);
2063                 ch = b_peek(input);
2064         }
2065         if (ok) return d;
2066
2067         error_msg("ambiguous redirect");
2068         return -2;
2069 }
2070
2071 /* If a redirect is immediately preceded by a number, that number is
2072  * supposed to tell which file descriptor to redirect.  This routine
2073  * looks for such preceding numbers.  In an ideal world this routine
2074  * needs to handle all the following classes of redirects...
2075  *     echo 2>foo     # redirects fd  2 to file "foo", nothing passed to echo
2076  *     echo 49>foo    # redirects fd 49 to file "foo", nothing passed to echo
2077  *     echo -2>foo    # redirects fd  1 to file "foo",    "-2" passed to echo
2078  *     echo 49x>foo   # redirects fd  1 to file "foo",   "49x" passed to echo
2079  * A -1 output from this program means no valid number was found, so the
2080  * caller should use the appropriate default for this redirection.
2081  */
2082 static int redirect_opt_num(o_string *o)
2083 {
2084         int num;
2085
2086         if (o->length==0) return -1;
2087         for(num=0; num<o->length; num++) {
2088                 if (!isdigit(*(o->data+num))) {
2089                         return -1;
2090                 }
2091         }
2092         /* reuse num (and save an int) */
2093         num=atoi(o->data);
2094         b_reset(o);
2095         return num;
2096 }
2097
2098 FILE *generate_stream_from_list(struct pipe *head)
2099 {
2100         FILE *pf;
2101 #if 1
2102         int pid, channel[2];
2103         if (pipe(channel)<0) perror_msg_and_die("pipe");
2104         pid=fork();
2105         if (pid<0) {
2106                 perror_msg_and_die("fork");
2107         } else if (pid==0) {
2108                 close(channel[0]);
2109                 if (channel[1] != 1) {
2110                         dup2(channel[1],1);
2111                         close(channel[1]);
2112                 }
2113 #if 0
2114 #define SURROGATE "surrogate response"
2115                 write(1,SURROGATE,sizeof(SURROGATE));
2116                 _exit(run_list(head));
2117 #else
2118                 _exit(run_list_real(head));   /* leaks memory */
2119 #endif
2120         }
2121         debug_printf("forked child %d\n",pid);
2122         close(channel[1]);
2123         pf = fdopen(channel[0],"r");
2124         debug_printf("pipe on FILE *%p\n",pf);
2125 #else
2126         run_list_test(head,0);
2127         pf=popen("echo surrogate response","r");
2128         debug_printf("started fake pipe on FILE *%p\n",pf);
2129 #endif
2130         return pf;
2131 }
2132
2133 /* this version hacked for testing purposes */
2134 /* return code is exit status of the process that is run. */
2135 static int process_command_subs(o_string *dest, struct p_context *ctx, struct in_str *input, int subst_end)
2136 {
2137         int retcode;
2138         o_string result=NULL_O_STRING;
2139         struct p_context inner;
2140         FILE *p;
2141         struct in_str pipe_str;
2142         initialize_context(&inner);
2143
2144         /* recursion to generate command */
2145         retcode = parse_stream(&result, &inner, input, subst_end);
2146         if (retcode != 0) return retcode;  /* syntax error or EOF */
2147         done_word(&result, &inner);
2148         done_pipe(&inner, PIPE_SEQ);
2149         b_free(&result);
2150
2151         p=generate_stream_from_list(inner.list_head);
2152         if (p==NULL) return 1;
2153         mark_open(fileno(p));
2154         setup_file_in_str(&pipe_str, p);
2155
2156         /* now send results of command back into original context */
2157         retcode = parse_stream(dest, ctx, &pipe_str, '\0');
2158         /* XXX In case of a syntax error, should we try to kill the child?
2159          * That would be tough to do right, so just read until EOF. */
2160         if (retcode == 1) {
2161                 while (b_getch(&pipe_str)!=EOF) { /* discard */ };
2162         }
2163
2164         debug_printf("done reading from pipe, pclose()ing\n");
2165         /* This is the step that wait()s for the child.  Should be pretty
2166          * safe, since we just read an EOF from its stdout.  We could try
2167          * to better, by using wait(), and keeping track of background jobs
2168          * at the same time.  That would be a lot of work, and contrary
2169          * to the KISS philosophy of this program. */
2170         mark_closed(fileno(p));
2171         retcode=pclose(p);
2172         debug_printf("pclosed, retcode=%d\n",retcode);
2173         /* XXX this process fails to trim a single trailing newline */
2174         return retcode;
2175 }
2176
2177 static int parse_group(o_string *dest, struct p_context *ctx,
2178         struct in_str *input, int ch)
2179 {
2180         int rcode, endch=0;
2181         struct p_context sub;
2182         struct child_prog *child = ctx->child;
2183         if (child->argv) {
2184                 syntax();
2185                 return 1;  /* syntax error, groups and arglists don't mix */
2186         }
2187         initialize_context(&sub);
2188         switch(ch) {
2189                 case '(': endch=')'; child->subshell=1; break;
2190                 case '{': endch='}'; break;
2191                 default: syntax();   /* really logic error */
2192         }
2193         rcode=parse_stream(dest,&sub,input,endch);
2194         done_word(dest,&sub); /* finish off the final word in the subcontext */
2195         done_pipe(&sub, PIPE_SEQ);  /* and the final command there, too */
2196         child->group = sub.list_head;
2197         return rcode;
2198         /* child remains "open", available for possible redirects */
2199 }
2200
2201 /* basically useful version until someone wants to get fancier,
2202  * see the bash man page under "Parameter Expansion" */
2203 static void lookup_param(o_string *dest, struct p_context *ctx, o_string *src)
2204 {
2205         const char *p=NULL;
2206         if (src->data) { 
2207                 p = getenv(src->data);
2208                 if (!p) 
2209                         p = get_local_var(src->data);
2210         }
2211         if (p) parse_string(dest, ctx, p);   /* recursion */
2212         b_free(src);
2213 }
2214
2215 /* return code: 0 for OK, 1 for syntax error */
2216 static int handle_dollar(o_string *dest, struct p_context *ctx, struct in_str *input)
2217 {
2218         int i, advance=0;
2219         o_string alt=NULL_O_STRING;
2220         char sep[]=" ";
2221         int ch = input->peek(input);  /* first character after the $ */
2222         debug_printf("handle_dollar: ch=%c\n",ch);
2223         if (isalpha(ch)) {
2224                 while(ch=b_peek(input),isalnum(ch) || ch=='_') {
2225                         b_getch(input);
2226                         b_addchr(&alt,ch);
2227                 }
2228                 lookup_param(dest, ctx, &alt);
2229         } else if (isdigit(ch)) {
2230                 i = ch-'0';  /* XXX is $0 special? */
2231                 if (i<global_argc) {
2232                         parse_string(dest, ctx, global_argv[i]); /* recursion */
2233                 }
2234                 advance = 1;
2235         } else switch (ch) {
2236                 case '$':
2237                         b_adduint(dest,getpid());
2238                         advance = 1;
2239                         break;
2240                 case '!':
2241                         if (last_bg_pid > 0) b_adduint(dest, last_bg_pid);
2242                         advance = 1;
2243                         break;
2244                 case '?':
2245                         b_adduint(dest,last_return_code);
2246                         advance = 1;
2247                         break;
2248                 case '#':
2249                         b_adduint(dest,global_argc ? global_argc-1 : 0);
2250                         advance = 1;
2251                         break;
2252                 case '{':
2253                         b_getch(input);
2254                         /* XXX maybe someone will try to escape the '}' */
2255                         while(ch=b_getch(input),ch!=EOF && ch!='}') {
2256                                 b_addchr(&alt,ch);
2257                         }
2258                         if (ch != '}') {
2259                                 syntax();
2260                                 return 1;
2261                         }
2262                         lookup_param(dest, ctx, &alt);
2263                         break;
2264                 case '(':
2265                         b_getch(input);
2266                         process_command_subs(dest, ctx, input, ')');
2267                         break;
2268                 case '*':
2269                         sep[0]=ifs[0];
2270                         for (i=1; i<global_argc; i++) {
2271                                 parse_string(dest, ctx, global_argv[i]);
2272                                 if (i+1 < global_argc) parse_string(dest, ctx, sep);
2273                         }
2274                         break;
2275                 case '@':
2276                 case '-':
2277                 case '_':
2278                         /* still unhandled, but should be eventually */
2279                         error_msg("unhandled syntax: $%c",ch);
2280                         return 1;
2281                         break;
2282                 default:
2283                         b_addqchr(dest,'$',dest->quote);
2284         }
2285         /* Eat the character if the flag was set.  If the compiler
2286          * is smart enough, we could substitute "b_getch(input);"
2287          * for all the "advance = 1;" above, and also end up with
2288          * a nice size-optimized program.  Hah!  That'll be the day.
2289          */
2290         if (advance) b_getch(input);
2291         return 0;
2292 }
2293
2294 int parse_string(o_string *dest, struct p_context *ctx, const char *src)
2295 {
2296         struct in_str foo;
2297         setup_string_in_str(&foo, src);
2298         return parse_stream(dest, ctx, &foo, '\0');
2299 }
2300
2301 /* return code is 0 for normal exit, 1 for syntax error */
2302 int parse_stream(o_string *dest, struct p_context *ctx,
2303         struct in_str *input, int end_trigger)
2304 {
2305         unsigned int ch, m;
2306         int redir_fd;
2307         redir_type redir_style;
2308         int next;
2309
2310         /* Only double-quote state is handled in the state variable dest->quote.
2311          * A single-quote triggers a bypass of the main loop until its mate is
2312          * found.  When recursing, quote state is passed in via dest->quote. */
2313
2314         debug_printf("parse_stream, end_trigger=%d\n",end_trigger);
2315         while ((ch=b_getch(input))!=EOF) {
2316                 m = map[ch];
2317                 next = (ch == '\n') ? 0 : b_peek(input);
2318                 debug_printf("parse_stream: ch=%c (%d) m=%d quote=%d\n",
2319                         ch,ch,m,dest->quote);
2320                 if (m==0 || ((m==1 || m==2) && dest->quote)) {
2321                         b_addqchr(dest, ch, dest->quote);
2322                 } else {
2323                         if (m==2) {  /* unquoted IFS */
2324                                 done_word(dest, ctx);
2325                                 /* If we aren't performing a substitution, treat a newline as a
2326                                  * command separator.  */
2327                                 if (end_trigger != '\0' && ch=='\n')
2328                                         done_pipe(ctx,PIPE_SEQ);
2329                         }
2330                         if (ch == end_trigger && !dest->quote && ctx->w==RES_NONE) {
2331                                 debug_printf("leaving parse_stream\n");
2332                                 return 0;
2333                         }
2334 #if 0
2335                         if (ch=='\n') {
2336                                 /* Yahoo!  Time to run with it! */
2337                                 done_pipe(ctx,PIPE_SEQ);
2338                                 run_list(ctx->list_head);
2339                                 initialize_context(ctx);
2340                         }
2341 #endif
2342                         if (m!=2) switch (ch) {
2343                 case '#':
2344                         if (dest->length == 0 && !dest->quote) {
2345                                 while(ch=b_peek(input),ch!=EOF && ch!='\n') { b_getch(input); }
2346                         } else {
2347                                 b_addqchr(dest, ch, dest->quote);
2348                         }
2349                         break;
2350                 case '\\':
2351                         if (next == EOF) {
2352                                 syntax();
2353                                 return 1;
2354                         }
2355                         b_addqchr(dest, '\\', dest->quote);
2356                         b_addqchr(dest, b_getch(input), dest->quote);
2357                         break;
2358                 case '$':
2359                         if (handle_dollar(dest, ctx, input)!=0) return 1;
2360                         break;
2361                 case '\'':
2362                         dest->nonnull = 1;
2363                         while(ch=b_getch(input),ch!=EOF && ch!='\'') {
2364                                 b_addchr(dest,ch);
2365                         }
2366                         if (ch==EOF) {
2367                                 syntax();
2368                                 return 1;
2369                         }
2370                         break;
2371                 case '"':
2372                         dest->nonnull = 1;
2373                         dest->quote = !dest->quote;
2374                         break;
2375                 case '`':
2376                         process_command_subs(dest, ctx, input, '`');
2377                         break;
2378                 case '>':
2379                         redir_fd = redirect_opt_num(dest);
2380                         done_word(dest, ctx);
2381                         redir_style=REDIRECT_OVERWRITE;
2382                         if (next == '>') {
2383                                 redir_style=REDIRECT_APPEND;
2384                                 b_getch(input);
2385                         } else if (next == '(') {
2386                                 syntax();   /* until we support >(list) Process Substitution */
2387                                 return 1;
2388                         }
2389                         setup_redirect(ctx, redir_fd, redir_style, input);
2390                         break;
2391                 case '<':
2392                         redir_fd = redirect_opt_num(dest);
2393                         done_word(dest, ctx);
2394                         redir_style=REDIRECT_INPUT;
2395                         if (next == '<') {
2396                                 redir_style=REDIRECT_HEREIS;
2397                                 b_getch(input);
2398                         } else if (next == '>') {
2399                                 redir_style=REDIRECT_IO;
2400                                 b_getch(input);
2401                         } else if (next == '(') {
2402                                 syntax();   /* until we support <(list) Process Substitution */
2403                                 return 1;
2404                         }
2405                         setup_redirect(ctx, redir_fd, redir_style, input);
2406                         break;
2407                 case ';':
2408                         done_word(dest, ctx);
2409                         done_pipe(ctx,PIPE_SEQ);
2410                         break;
2411                 case '&':
2412                         done_word(dest, ctx);
2413                         if (next=='&') {
2414                                 b_getch(input);
2415                                 done_pipe(ctx,PIPE_AND);
2416                         } else {
2417                                 done_pipe(ctx,PIPE_BG);
2418                         }
2419                         break;
2420                 case '|':
2421                         done_word(dest, ctx);
2422                         if (next=='|') {
2423                                 b_getch(input);
2424                                 done_pipe(ctx,PIPE_OR);
2425                         } else {
2426                                 /* we could pick up a file descriptor choice here
2427                                  * with redirect_opt_num(), but bash doesn't do it.
2428                                  * "echo foo 2| cat" yields "foo 2". */
2429                                 done_command(ctx);
2430                         }
2431                         break;
2432                 case '(':
2433                 case '{':
2434                         if (parse_group(dest, ctx, input, ch)!=0) return 1;
2435                         break;
2436                 case ')':
2437                 case '}':
2438                         syntax();   /* Proper use of this character caught by end_trigger */
2439                         return 1;
2440                         break;
2441                 default:
2442                         syntax();   /* this is really an internal logic error */
2443                         return 1;
2444                         }
2445                 }
2446         }
2447         /* complain if quote?  No, maybe we just finished a command substitution
2448          * that was quoted.  Example:
2449          * $ echo "`cat foo` plus more" 
2450          * and we just got the EOF generated by the subshell that ran "cat foo"
2451          * The only real complaint is if we got an EOF when end_trigger != '\0',
2452          * that is, we were really supposed to get end_trigger, and never got
2453          * one before the EOF.  Can't use the standard "syntax error" return code,
2454          * so that parse_stream_outer can distinguish the EOF and exit smoothly. */
2455         if (end_trigger != '\0') return -1;
2456         return 0;
2457 }
2458
2459 void mapset(const unsigned char *set, int code)
2460 {
2461         const unsigned char *s;
2462         for (s=set; *s; s++) map[*s] = code;
2463 }
2464
2465 void update_ifs_map(void)
2466 {
2467         /* char *ifs and char map[256] are both globals. */
2468         ifs = getenv("IFS");
2469         if (ifs == NULL) ifs=" \t\n";
2470         /* Precompute a list of 'flow through' behavior so it can be treated
2471          * quickly up front.  Computation is necessary because of IFS.
2472          * Special case handling of IFS == " \t\n" is not implemented.
2473          * The map[] array only really needs two bits each, and on most machines
2474          * that would be faster because of the reduced L1 cache footprint.
2475          */
2476         memset(map,0,sizeof(map));        /* most characters flow through always */
2477         mapset("\\$'\"`", 3);     /* never flow through */
2478         mapset("<>;&|(){}#", 1);  /* flow through if quoted */
2479         mapset(ifs, 2);           /* also flow through if quoted */
2480 }
2481
2482 /* most recursion does not come through here, the exeception is
2483  * from builtin_source() */
2484 int parse_stream_outer(struct in_str *inp)
2485 {
2486
2487         struct p_context ctx;
2488         o_string temp=NULL_O_STRING;
2489         int rcode;
2490         do {
2491                 initialize_context(&ctx);
2492                 update_ifs_map();
2493                 inp->promptmode=1;
2494                 rcode = parse_stream(&temp, &ctx, inp, '\n');
2495                 done_word(&temp, &ctx);
2496                 done_pipe(&ctx,PIPE_SEQ);
2497                 run_list(ctx.list_head);
2498         } while (rcode != -1);   /* loop on syntax errors, return on EOF */
2499         return 0;
2500 }
2501
2502 static int parse_string_outer(const char *s)
2503 {
2504         struct in_str input;
2505         setup_string_in_str(&input, s);
2506         return parse_stream_outer(&input);
2507 }
2508
2509 static int parse_file_outer(FILE *f)
2510 {
2511         int rcode;
2512         struct in_str input;
2513         setup_file_in_str(&input, f);
2514         rcode = parse_stream_outer(&input);
2515         return rcode;
2516 }
2517
2518
2519 /* I think Erik wrote this.  It looks imperfect at best */
2520 void grab_tty_control(void)
2521 {
2522         pid_t initialpgrp;
2523         do {
2524                 initialpgrp = tcgetpgrp(fileno(stderr));
2525                 if (initialpgrp < 0) {
2526                         error_msg("sh: can't access tty; job control disabled\n");
2527                 }
2528                 if (initialpgrp == -1)
2529                         initialpgrp = getpgrp();
2530                 else if (initialpgrp != getpgrp()) {
2531                         killpg(initialpgrp, SIGTTIN);
2532                         continue;
2533                 }
2534         } while (0);
2535 }
2536
2537 int shell_main(int argc, char **argv)
2538 {
2539         int opt;
2540         FILE *input;
2541         struct jobset joblist_end = { NULL, NULL };
2542         char **e = environ;
2543
2544         /* XXX what should these be while sourcing /etc/profile? */
2545         global_argc = argc;
2546         global_argv = argv;
2547         
2548         /* (re?) initialize globals.  Sometimes shell_main() ends up calling
2549          * shell_main(), therefore we cannot rely on the BSS to zero out this 
2550          * stuff.  Reset these to 0 every time. */
2551         ifs = NULL;
2552         memset(map,0,sizeof(map));
2553         fake_mode = 0;
2554         interactive = 0;
2555         close_me_head = NULL;
2556         last_bg_pid = 0;
2557
2558         /* Initialize some more globals to non-zero values */
2559         set_cwd();
2560         job_list = &joblist_end;
2561 #ifdef BB_FEATURE_COMMAND_EDITING
2562         cmdedit_set_initial_prompt();
2563 #else
2564         PS1 = NULL;
2565 #endif
2566         PS2 = "> ";
2567
2568         /* initialize our shell local variables with the values 
2569          * currently living in the environment */
2570         if (e) {
2571                 for (; *e; e++)
2572                         set_local_var(*e, 2);   /* without call putenv() */
2573         }
2574
2575         last_return_code=EXIT_SUCCESS;
2576
2577
2578         /* If we get started under a job aware app (like bash 
2579          * for example), make sure we are now in charge so we 
2580          * don't fight over who gets the foreground */
2581         /* don't pay any attention to this signal; it just confuses 
2582            things and isn't really meant for shells anyway */
2583         signal(SIGTTOU, SIG_IGN);
2584         setpgid(0, getpid());
2585         tcsetpgrp(fileno(stderr), getpid());
2586
2587         if (argv[0] && argv[0][0] == '-') {
2588                 debug_printf("\nsourcing /etc/profile\n");
2589                 input = xfopen("/etc/profile", "r");
2590                 mark_open(fileno(input));
2591                 parse_file_outer(input);
2592                 mark_closed(fileno(input));
2593                 fclose(input);
2594         }
2595         input=stdin;
2596         
2597         while ((opt = getopt(argc, argv, "c:xif")) > 0) {
2598                 switch (opt) {
2599                         case 'c':
2600                                 {
2601                                         global_argv = argv+optind;
2602                                         global_argc = argc-optind;
2603                                         opt = parse_string_outer(optarg);
2604                                         goto final_return;
2605                                 }
2606                                 break;
2607                         case 'i':
2608                                 interactive++;
2609                                 break;
2610                         case 'f':
2611                                 fake_mode++;
2612                                 break;
2613                         default:
2614 #ifndef BB_VER
2615                                 fprintf(stderr, "Usage: sh [FILE]...\n"
2616                                                 "   or: sh -c command [args]...\n\n");
2617                                 exit(EXIT_FAILURE);
2618 #else
2619                                 show_usage();
2620 #endif
2621                 }
2622         }
2623         /* A shell is interactive if the `-i' flag was given, or if all of
2624          * the following conditions are met:
2625          *        no -c command
2626          *    no arguments remaining or the -s flag given
2627          *    standard input is a terminal
2628          *    standard output is a terminal
2629          *    Refer to Posix.2, the description of the `sh' utility. */
2630         if (argv[optind]==NULL && input==stdin &&
2631                         isatty(fileno(stdin)) && isatty(fileno(stdout))) {
2632                 interactive++;
2633         }
2634
2635         debug_printf("\ninteractive=%d\n", interactive);
2636         if (interactive) {
2637                 /* Looks like they want an interactive shell */
2638                 fprintf(stdout, "\nhush -- the humble shell v0.01 (testing)\n\n");
2639                 grab_tty_control();
2640         }
2641         if (argv[optind]==NULL) {
2642                 opt=parse_file_outer(stdin);
2643                 goto final_return;
2644         }
2645
2646         debug_printf("\nrunning script '%s'\n", argv[optind]);
2647         global_argv = argv+optind;
2648         global_argc = argc-optind;
2649         input = xfopen(argv[optind], "r");
2650         opt = parse_file_outer(input);
2651
2652 #ifdef BB_FEATURE_CLEAN_UP
2653         fclose(input.file);
2654 #endif
2655
2656 final_return:
2657         return(opt?opt:last_return_code);
2658 }