hush: simplify parse_stream
[oweals/busybox.git] / shell / hush.c
1 /* vi: set sw=4 ts=4: */
2 /*
3  * A prototype Bourne shell grammar parser.
4  * Intended to follow the original Thompson and Ritchie
5  * "small and simple is beautiful" philosophy, which
6  * incidentally is a good match to today's BusyBox.
7  *
8  * Copyright (C) 2000,2001  Larry Doolittle  <larry@doolittle.boa.org>
9  *
10  * Credits:
11  *      The parser routines proper are all original material, first
12  *      written Dec 2000 and Jan 2001 by Larry Doolittle.  The
13  *      execution engine, the builtins, and much of the underlying
14  *      support has been adapted from busybox-0.49pre's lash, which is
15  *      Copyright (C) 1999-2004 by Erik Andersen <andersen@codepoet.org>
16  *      written by Erik Andersen <andersen@codepoet.org>.  That, in turn,
17  *      is based in part on ladsh.c, by Michael K. Johnson and Erik W.
18  *      Troan, which they placed in the public domain.  I don't know
19  *      how much of the Johnson/Troan code has survived the repeated
20  *      rewrites.
21  *
22  * Other credits:
23  *      o_addchr() derived from similar w_addchar function in glibc-2.2.
24  *      setup_redirect(), redirect_opt_num(), and big chunks of main()
25  *      and many builtins derived from contributions by Erik Andersen.
26  *      Miscellaneous bugfixes from Matt Kraai.
27  *
28  * There are two big (and related) architecture differences between
29  * this parser and the lash parser.  One is that this version is
30  * actually designed from the ground up to understand nearly all
31  * of the Bourne grammar.  The second, consequential change is that
32  * the parser and input reader have been turned inside out.  Now,
33  * the parser is in control, and asks for input as needed.  The old
34  * way had the input reader in control, and it asked for parsing to
35  * take place as needed.  The new way makes it much easier to properly
36  * handle the recursion implicit in the various substitutions, especially
37  * across continuation lines.
38  *
39  * POSIX syntax not implemented:
40  *      aliases
41  *      <(list) and >(list) Process Substitution
42  *      Here Documents ( << word )
43  *      Functions
44  *      Tilde Expansion
45  *      Parameter Expansion for substring processing ${var#word} ${var%word}
46  *
47  * Bash stuff maybe optional enable:
48  *      &> and >& redirection of stdout+stderr
49  *      Brace expansion
50  *      reserved words: [[ ]] function select
51  *      substrings ${var:1:5}
52  *
53  * Major bugs:
54  *      job handling woefully incomplete and buggy (improved --vda)
55  * to-do:
56  *      port selected bugfixes from post-0.49 busybox lash - done?
57  *      change { and } from special chars to reserved words
58  *      builtins: return, trap, ulimit
59  *      test magic exec with redirection only
60  *      follow IFS rules more precisely, including update semantics
61  *      figure out what to do with backslash-newline
62  *      propagate syntax errors, die on resource errors?
63  *      continuation lines, both explicit and implicit - done?
64  *      maybe change charmap[] to use 2-bit entries
65  *
66  * Licensed under the GPL v2 or later, see the file LICENSE in this tarball.
67  */
68
69 #include "busybox.h" /* for APPLET_IS_NOFORK/NOEXEC */
70 //TODO: pull in some .h and find out whether we have SINGLE_APPLET_MAIN?
71 //#include "applet_tables.h" doesn't work
72 #include <glob.h>
73 /* #include <dmalloc.h> */
74 #if ENABLE_HUSH_CASE
75 #include <fnmatch.h>
76 #endif
77
78 #include "math.h"
79
80 #define HUSH_VER_STR "0.92"
81
82 #if defined SINGLE_APPLET_MAIN
83 /* STANDALONE does not make sense, and won't compile */
84 #undef CONFIG_FEATURE_SH_STANDALONE
85 #undef ENABLE_FEATURE_SH_STANDALONE
86 #undef USE_FEATURE_SH_STANDALONE
87 #define SKIP_FEATURE_SH_STANDALONE(...) __VA_ARGS__
88 #define ENABLE_FEATURE_SH_STANDALONE 0
89 #define USE_FEATURE_SH_STANDALONE(...)
90 #define SKIP_FEATURE_SH_STANDALONE(...) __VA_ARGS__
91 #endif
92
93 #if !BB_MMU && ENABLE_HUSH_TICK
94 //#undef ENABLE_HUSH_TICK
95 //#define ENABLE_HUSH_TICK 0
96 #warning On NOMMU, hush command substitution is dangerous.
97 #warning Dont use it for commands which produce lots of output.
98 #warning For more info see shell/hush.c, generate_stream_from_list().
99 #endif
100
101 #if !ENABLE_HUSH_INTERACTIVE
102 #undef ENABLE_FEATURE_EDITING
103 #define ENABLE_FEATURE_EDITING 0
104 #undef ENABLE_FEATURE_EDITING_FANCY_PROMPT
105 #define ENABLE_FEATURE_EDITING_FANCY_PROMPT 0
106 #endif
107
108 /* Do we support ANY keywords? */
109 #if ENABLE_HUSH_IF || ENABLE_HUSH_LOOPS || ENABLE_HUSH_CASE
110 #define HAS_KEYWORDS 1
111 #define IF_HAS_KEYWORDS(...) __VA_ARGS__
112 #define IF_HAS_NO_KEYWORDS(...)
113 #else
114 #define HAS_KEYWORDS 0
115 #define IF_HAS_KEYWORDS(...)
116 #define IF_HAS_NO_KEYWORDS(...) __VA_ARGS__
117 #endif
118
119 /* Keep unconditionally on for now */
120 #define HUSH_DEBUG 1
121 /* In progress... */
122 #define ENABLE_HUSH_FUNCTIONS 0
123
124
125 /* If you comment out one of these below, it will be #defined later
126  * to perform debug printfs to stderr: */
127 #define debug_printf(...)        do {} while (0)
128 /* Finer-grained debug switches */
129 #define debug_printf_parse(...)  do {} while (0)
130 #define debug_print_tree(a, b)   do {} while (0)
131 #define debug_printf_exec(...)   do {} while (0)
132 #define debug_printf_env(...)    do {} while (0)
133 #define debug_printf_jobs(...)   do {} while (0)
134 #define debug_printf_expand(...) do {} while (0)
135 #define debug_printf_glob(...)   do {} while (0)
136 #define debug_printf_list(...)   do {} while (0)
137 #define debug_printf_subst(...)  do {} while (0)
138 #define debug_printf_clean(...)  do {} while (0)
139
140 #ifndef debug_printf
141 #define debug_printf(...) fprintf(stderr, __VA_ARGS__)
142 #endif
143
144 #ifndef debug_printf_parse
145 #define debug_printf_parse(...) fprintf(stderr, __VA_ARGS__)
146 #endif
147
148 #ifndef debug_printf_exec
149 #define debug_printf_exec(...) fprintf(stderr, __VA_ARGS__)
150 #endif
151
152 #ifndef debug_printf_env
153 #define debug_printf_env(...) fprintf(stderr, __VA_ARGS__)
154 #endif
155
156 #ifndef debug_printf_jobs
157 #define debug_printf_jobs(...) fprintf(stderr, __VA_ARGS__)
158 #define DEBUG_JOBS 1
159 #else
160 #define DEBUG_JOBS 0
161 #endif
162
163 #ifndef debug_printf_expand
164 #define debug_printf_expand(...) fprintf(stderr, __VA_ARGS__)
165 #define DEBUG_EXPAND 1
166 #else
167 #define DEBUG_EXPAND 0
168 #endif
169
170 #ifndef debug_printf_glob
171 #define debug_printf_glob(...) fprintf(stderr, __VA_ARGS__)
172 #define DEBUG_GLOB 1
173 #else
174 #define DEBUG_GLOB 0
175 #endif
176
177 #ifndef debug_printf_list
178 #define debug_printf_list(...) fprintf(stderr, __VA_ARGS__)
179 #endif
180
181 #ifndef debug_printf_subst
182 #define debug_printf_subst(...) fprintf(stderr, __VA_ARGS__)
183 #endif
184
185 #ifndef debug_printf_clean
186 /* broken, of course, but OK for testing */
187 static const char *indenter(int i)
188 {
189         static const char blanks[] ALIGN1 =
190                 "                                    ";
191         return &blanks[sizeof(blanks) - i - 1];
192 }
193 #define debug_printf_clean(...) fprintf(stderr, __VA_ARGS__)
194 #define DEBUG_CLEAN 1
195 #endif
196
197 #if DEBUG_EXPAND
198 static void debug_print_strings(const char *prefix, char **vv)
199 {
200         fprintf(stderr, "%s:\n", prefix);
201         while (*vv)
202                 fprintf(stderr, " '%s'\n", *vv++);
203 }
204 #else
205 #define debug_print_strings(prefix, vv) ((void)0)
206 #endif
207
208 /*
209  * Leak hunting. Use hush_leaktool.sh for post-processing.
210  */
211 #ifdef FOR_HUSH_LEAKTOOL
212 /* suppress "warning: no previous prototype..." */
213 void *xxmalloc(int lineno, size_t size);
214 void *xxrealloc(int lineno, void *ptr, size_t size);
215 char *xxstrdup(int lineno, const char *str);
216 void xxfree(void *ptr);
217 void *xxmalloc(int lineno, size_t size)
218 {
219         void *ptr = xmalloc((size + 0xff) & ~0xff);
220         fprintf(stderr, "line %d: malloc %p\n", lineno, ptr);
221         return ptr;
222 }
223 void *xxrealloc(int lineno, void *ptr, size_t size)
224 {
225         ptr = xrealloc(ptr, (size + 0xff) & ~0xff);
226         fprintf(stderr, "line %d: realloc %p\n", lineno, ptr);
227         return ptr;
228 }
229 char *xxstrdup(int lineno, const char *str)
230 {
231         char *ptr = xstrdup(str);
232         fprintf(stderr, "line %d: strdup %p\n", lineno, ptr);
233         return ptr;
234 }
235 void xxfree(void *ptr)
236 {
237         fprintf(stderr, "free %p\n", ptr);
238         free(ptr);
239 }
240 #define xmalloc(s)     xxmalloc(__LINE__, s)
241 #define xrealloc(p, s) xxrealloc(__LINE__, p, s)
242 #define xstrdup(s)     xxstrdup(__LINE__, s)
243 #define free(p)        xxfree(p)
244 #endif
245
246
247 static const char hush_version_str[] ALIGN1 = "HUSH_VERSION="HUSH_VER_STR;
248
249 #define JOB_STATUS_FORMAT "[%d] %-22s %.40s\n"
250
251 #define SPECIAL_VAR_SYMBOL       3
252 #define PARSEFLAG_EXIT_FROM_LOOP 1
253
254 typedef enum redir_type {
255         REDIRECT_INPUT     = 1,
256         REDIRECT_OVERWRITE = 2,
257         REDIRECT_APPEND    = 3,
258         REDIRECT_HEREIS    = 4,
259         REDIRECT_IO        = 5
260 } redir_type;
261
262 /* The descrip member of this structure is only used to make
263  * debugging output pretty */
264 static const struct {
265         int mode;
266         signed char default_fd;
267         char descrip[3];
268 } redir_table[] = {
269         { 0,                         0, "()" },
270         { O_RDONLY,                  0, "<"  },
271         { O_CREAT|O_TRUNC|O_WRONLY,  1, ">"  },
272         { O_CREAT|O_APPEND|O_WRONLY, 1, ">>" },
273         { O_RDONLY,                 -1, "<<" },
274         { O_RDWR,                    1, "<>" }
275 };
276
277 typedef enum pipe_style {
278         PIPE_SEQ = 1,
279         PIPE_AND = 2,
280         PIPE_OR  = 3,
281         PIPE_BG  = 4,
282 } pipe_style;
283
284 typedef enum reserved_style {
285         RES_NONE  = 0,
286 #if ENABLE_HUSH_IF
287         RES_IF    ,
288         RES_THEN  ,
289         RES_ELIF  ,
290         RES_ELSE  ,
291         RES_FI    ,
292 #endif
293 #if ENABLE_HUSH_LOOPS
294         RES_FOR   ,
295         RES_WHILE ,
296         RES_UNTIL ,
297         RES_DO    ,
298         RES_DONE  ,
299 #endif
300 #if ENABLE_HUSH_LOOPS || ENABLE_HUSH_CASE
301         RES_IN    ,
302 #endif
303 #if ENABLE_HUSH_CASE
304         RES_CASE  ,
305         /* two pseudo-keywords support contrived "case" syntax: */
306         RES_MATCH , /* "word)" */
307         RES_CASEI , /* "this command is inside CASE" */
308         RES_ESAC  ,
309 #endif
310         RES_XXXX  ,
311         RES_SNTX
312 } reserved_style;
313
314 struct redir_struct {
315         struct redir_struct *next;
316         char *rd_filename;          /* filename */
317         int fd;                     /* file descriptor being redirected */
318         int dup;                    /* -1, or file descriptor being duplicated */
319         smallint /*enum redir_type*/ rd_type;
320 };
321
322 struct command {
323         pid_t pid;                  /* 0 if exited */
324         int assignment_cnt;         /* how many argv[i] are assignments? */
325         smallint is_stopped;        /* is the command currently running? */
326         smallint grp_type;          /* GRP_xxx */
327         struct pipe *group;         /* if non-NULL, this "prog" is {} group,
328                                      * subshell, or a compound statement */
329         char **argv;                /* command name and arguments */
330         struct redir_struct *redirects; /* I/O redirections */
331 };
332 /* argv vector may contain variable references (^Cvar^C, ^C0^C etc)
333  * and on execution these are substituted with their values.
334  * Substitution can make _several_ words out of one argv[n]!
335  * Example: argv[0]=='.^C*^C.' here: echo .$*.
336  * References of the form ^C`cmd arg^C are `cmd arg` substitutions.
337  */
338 #define GRP_NORMAL   0
339 #define GRP_SUBSHELL 1
340 #if ENABLE_HUSH_FUNCTIONS
341 #define GRP_FUNCTION 2
342 #endif
343
344 struct pipe {
345         struct pipe *next;
346         int num_cmds;               /* total number of commands in job */
347         int alive_cmds;             /* number of commands running (not exited) */
348         int stopped_cmds;           /* number of commands alive, but stopped */
349 #if ENABLE_HUSH_JOB
350         int jobid;                  /* job number */
351         pid_t pgrp;                 /* process group ID for the job */
352         char *cmdtext;              /* name of job */
353 #endif
354         struct command *cmds;       /* array of commands in pipe */
355         smallint followup;          /* PIPE_BG, PIPE_SEQ, PIPE_OR, PIPE_AND */
356         IF_HAS_KEYWORDS(smallint pi_inverted;) /* "! cmd | cmd" */
357         IF_HAS_KEYWORDS(smallint res_word;) /* needed for if, for, while, until... */
358 };
359
360 /* This holds pointers to the various results of parsing */
361 struct parse_context {
362         /* linked list of pipes */
363         struct pipe *list_head;
364         /* last pipe (being constructed right now) */
365         struct pipe *pipe;
366         /* last command in pipe (being constructed right now) */
367         struct command *command;
368         /* last redirect in command->redirects list */
369         struct redir_struct *pending_redirect;
370 #if HAS_KEYWORDS
371         smallint ctx_res_w;
372         smallint ctx_inverted; /* "! cmd | cmd" */
373 #if ENABLE_HUSH_CASE
374         smallint ctx_dsemicolon; /* ";;" seen */
375 #endif
376         /* bitmask of FLAG_xxx, for figuring out valid reserved words */
377         int old_flag;
378         /* group we are enclosed in:
379          * example 1: "{ { false; ..."
380          * example 2: "if true; then { false; ..."
381          * example 3: "if true; then if false; ..."
382          * when we find closing "}" / "fi" / whatever, we move list_head
383          * into stack->command->group and delete ourself.
384          */
385         struct parse_context *stack;
386 #endif
387 };
388
389 /* On program start, environ points to initial environment.
390  * putenv adds new pointers into it, unsetenv removes them.
391  * Neither of these (de)allocates the strings.
392  * setenv allocates new strings in malloc space and does putenv,
393  * and thus setenv is unusable (leaky) for shell's purposes */
394 #define setenv(...) setenv_is_leaky_dont_use()
395 struct variable {
396         struct variable *next;
397         char *varstr;        /* points to "name=" portion */
398         int max_len;         /* if > 0, name is part of initial env; else name is malloced */
399         smallint flg_export; /* putenv should be done on this var */
400         smallint flg_read_only;
401 };
402
403 typedef struct o_string {
404         char *data;
405         int length; /* position where data is appended */
406         int maxlen;
407         /* Protect newly added chars against globbing
408          * (by prepending \ to *, ?, [, \) */
409         smallint o_escape;
410         smallint o_glob;
411         smallint nonnull;
412         smallint has_empty_slot;
413         smallint o_assignment; /* 0:maybe, 1:yes, 2:no */
414 } o_string;
415 enum {
416         MAYBE_ASSIGNMENT = 0,
417         DEFINITELY_ASSIGNMENT = 1,
418         NOT_ASSIGNMENT = 2,
419         WORD_IS_KEYWORD = 3, /* not assigment, but next word may be: "if v=xyz cmd;" */
420 };
421 /* Used for initialization: o_string foo = NULL_O_STRING; */
422 #define NULL_O_STRING { NULL }
423
424 /* I can almost use ordinary FILE*.  Is open_memstream() universally
425  * available?  Where is it documented? */
426 typedef struct in_str {
427         const char *p;
428         /* eof_flag=1: last char in ->p is really an EOF */
429         char eof_flag; /* meaningless if ->p == NULL */
430         char peek_buf[2];
431 #if ENABLE_HUSH_INTERACTIVE
432         smallint promptme;
433         smallint promptmode; /* 0: PS1, 1: PS2 */
434 #endif
435         FILE *file;
436         int (*get) (struct in_str *);
437         int (*peek) (struct in_str *);
438 } in_str;
439 #define i_getch(input) ((input)->get(input))
440 #define i_peek(input) ((input)->peek(input))
441
442 enum {
443         CHAR_ORDINARY           = 0,
444         CHAR_ORDINARY_IF_QUOTED = 1, /* example: *, # */
445         CHAR_IFS                = 2, /* treated as ordinary if quoted */
446         CHAR_SPECIAL            = 3, /* \, $, ", maybe ` */
447 };
448
449 enum {
450         BC_BREAK = 1,
451         BC_CONTINUE = 2,
452 };
453
454
455 /* "Globals" within this file */
456 /* Sorted roughly by size (smaller offsets == smaller code) */
457 struct globals {
458 #if ENABLE_HUSH_INTERACTIVE
459         /* 'interactive_fd' is a fd# open to ctty, if we have one
460          * _AND_ if we decided to act interactively */
461         int interactive_fd;
462         const char *PS1;
463         const char *PS2;
464 #endif
465 #if ENABLE_FEATURE_EDITING
466         line_input_t *line_input_state;
467 #endif
468         pid_t root_pid;
469         pid_t last_bg_pid;
470 #if ENABLE_HUSH_JOB
471         int run_list_level;
472         pid_t saved_tty_pgrp;
473         int last_jobid;
474         struct pipe *job_list;
475         struct pipe *toplevel_list;
476 ////    smallint ctrl_z_flag;
477 #endif
478         smallint flag_SIGINT;
479 #if ENABLE_HUSH_LOOPS
480         smallint flag_break_continue;
481 #endif
482         smallint fake_mode;
483         /* These four support $?, $#, and $1 */
484         smalluint last_return_code;
485         /* is global_argv and global_argv[1..n] malloced? (note: not [0]) */
486         smalluint global_args_malloced;
487         /* how many non-NULL argv's we have. NB: $# + 1 */
488         int global_argc;
489         char **global_argv;
490 #if ENABLE_HUSH_LOOPS
491         unsigned depth_break_continue;
492         unsigned depth_of_loop;
493 #endif
494         const char *ifs;
495         const char *cwd;
496         struct variable *top_var; /* = &G.shell_ver (set in main()) */
497         struct variable shell_ver;
498 #if ENABLE_FEATURE_SH_STANDALONE
499         struct nofork_save_area nofork_save;
500 #endif
501 #if ENABLE_HUSH_JOB
502         sigjmp_buf toplevel_jb;
503 #endif
504         unsigned char charmap[256];
505         char user_input_buf[ENABLE_FEATURE_EDITING ? BUFSIZ : 2];
506         /* Signal and trap handling */
507 //      unsigned count_SIGCHLD;
508 //      unsigned handled_SIGCHLD;
509         /* which signals have non-DFL handler (even with no traps set)? */
510         unsigned non_DFL_mask;
511         char **traps; /* char *traps[NSIG] */
512         sigset_t blocked_set;
513         sigset_t inherited_set;
514 };
515 #define G (*ptr_to_globals)
516 /* Not #defining name to G.name - this quickly gets unwieldy
517  * (too many defines). Also, I actually prefer to see when a variable
518  * is global, thus "G." prefix is a useful hint */
519 #define INIT_G() do { \
520         SET_PTR_TO_GLOBALS(xzalloc(sizeof(G))); \
521 } while (0)
522
523
524 /* Function prototypes for builtins */
525 static int builtin_cd(char **argv);
526 static int builtin_echo(char **argv);
527 static int builtin_eval(char **argv);
528 static int builtin_exec(char **argv);
529 static int builtin_exit(char **argv);
530 static int builtin_export(char **argv);
531 #if ENABLE_HUSH_JOB
532 static int builtin_fg_bg(char **argv);
533 static int builtin_jobs(char **argv);
534 #endif
535 #if ENABLE_HUSH_HELP
536 static int builtin_help(char **argv);
537 #endif
538 static int builtin_pwd(char **argv);
539 static int builtin_read(char **argv);
540 static int builtin_test(char **argv);
541 static int builtin_trap(char **argv);
542 static int builtin_true(char **argv);
543 static int builtin_set(char **argv);
544 static int builtin_shift(char **argv);
545 static int builtin_source(char **argv);
546 static int builtin_umask(char **argv);
547 static int builtin_unset(char **argv);
548 static int builtin_wait(char **argv);
549 #if ENABLE_HUSH_LOOPS
550 static int builtin_break(char **argv);
551 static int builtin_continue(char **argv);
552 #endif
553 //static int builtin_not_written(char **argv);
554
555 /* Table of built-in functions.  They can be forked or not, depending on
556  * context: within pipes, they fork.  As simple commands, they do not.
557  * When used in non-forking context, they can change global variables
558  * in the parent shell process.  If forked, of course they cannot.
559  * For example, 'unset foo | whatever' will parse and run, but foo will
560  * still be set at the end. */
561 struct built_in_command {
562         const char *cmd;
563         int (*function)(char **argv);
564 #if ENABLE_HUSH_HELP
565         const char *descr;
566 #define BLTIN(cmd, func, help) { cmd, func, help }
567 #else
568 #define BLTIN(cmd, func, help) { cmd, func }
569 #endif
570 };
571
572 /* For now, echo and test are unconditionally enabled.
573  * Maybe make it configurable? */
574 static const struct built_in_command bltins[] = {
575         BLTIN("."     , builtin_source, "Run commands in a file"),
576         BLTIN(":"     , builtin_true, "No-op"),
577         BLTIN("["     , builtin_test, "Test condition"),
578 #if ENABLE_HUSH_JOB
579         BLTIN("bg"    , builtin_fg_bg, "Resume a job in the background"),
580 #endif
581 #if ENABLE_HUSH_LOOPS
582         BLTIN("break" , builtin_break, "Exit from a loop"),
583 #endif
584         BLTIN("cd"    , builtin_cd, "Change directory"),
585 #if ENABLE_HUSH_LOOPS
586         BLTIN("continue", builtin_continue, "Start new loop iteration"),
587 #endif
588         BLTIN("echo"  , builtin_echo, "Write to stdout"),
589         BLTIN("eval"  , builtin_eval, "Construct and run shell command"),
590         BLTIN("exec"  , builtin_exec, "Execute command, don't return to shell"),
591         BLTIN("exit"  , builtin_exit, "Exit"),
592         BLTIN("export", builtin_export, "Set environment variable"),
593 #if ENABLE_HUSH_JOB
594         BLTIN("fg"    , builtin_fg_bg, "Bring job into the foreground"),
595         BLTIN("jobs"  , builtin_jobs, "List active jobs"),
596 #endif
597         BLTIN("pwd"   , builtin_pwd, "Print current directory"),
598         BLTIN("read"  , builtin_read, "Input environment variable"),
599 //      BLTIN("return", builtin_not_written, "Return from a function"),
600         BLTIN("set"   , builtin_set, "Set/unset shell local variables"),
601         BLTIN("shift" , builtin_shift, "Shift positional parameters"),
602         BLTIN("test"  , builtin_test, "Test condition"),
603         BLTIN("trap"  , builtin_trap, "Trap signals"),
604 //      BLTIN("ulimit", builtin_not_written, "Control resource limits"),
605         BLTIN("umask" , builtin_umask, "Set file creation mask"),
606         BLTIN("unset" , builtin_unset, "Unset environment variable"),
607         BLTIN("wait"  , builtin_wait, "Wait for process"),
608 #if ENABLE_HUSH_HELP
609         BLTIN("help"  , builtin_help, "List shell built-in commands"),
610 #endif
611 };
612
613
614 /* Normal */
615 static void maybe_die(const char *notice, const char *msg)
616 {
617         /* Was using fancy stuff:
618          * (G.interactive_fd ? bb_error_msg : bb_error_msg_and_die)(...params...)
619          * but it SEGVs. ?! Oh well... explicit temp ptr works around that */
620         void FAST_FUNC (*fp)(const char *s, ...) = bb_error_msg_and_die;
621 #if ENABLE_HUSH_INTERACTIVE
622         fp = (G.interactive_fd ? bb_error_msg : bb_error_msg_and_die);
623 #endif
624         fp(msg ? "%s: %s" : notice, notice, msg);
625 }
626 #if 1
627 #define syntax(msg) maybe_die("syntax error", msg);
628 #else
629 /* Debug -- trick gcc to expand __LINE__ and convert to string */
630 #define __syntax(msg, line) maybe_die("syntax error hush.c:" # line, msg)
631 #define _syntax(msg, line) __syntax(msg, line)
632 #define syntax(msg) _syntax(msg, __LINE__)
633 #endif
634
635 static int glob_needed(const char *s)
636 {
637         while (*s) {
638                 if (*s == '\\')
639                         s++;
640                 if (*s == '*' || *s == '[' || *s == '?')
641                         return 1;
642                 s++;
643         }
644         return 0;
645 }
646
647 static int is_assignment(const char *s)
648 {
649         if (!s || !(isalpha(*s) || *s == '_'))
650                 return 0;
651         s++;
652         while (isalnum(*s) || *s == '_')
653                 s++;
654         return *s == '=';
655 }
656
657 /* Replace each \x with x in place, return ptr past NUL. */
658 static char *unbackslash(char *src)
659 {
660         char *dst = src;
661         while (1) {
662                 if (*src == '\\')
663                         src++;
664                 if ((*dst++ = *src++) == '\0')
665                         break;
666         }
667         return dst;
668 }
669
670 static char **add_strings_to_strings(char **strings, char **add, int need_to_dup)
671 {
672         int i;
673         unsigned count1;
674         unsigned count2;
675         char **v;
676
677         v = strings;
678         count1 = 0;
679         if (v) {
680                 while (*v) {
681                         count1++;
682                         v++;
683                 }
684         }
685         count2 = 0;
686         v = add;
687         while (*v) {
688                 count2++;
689                 v++;
690         }
691         v = xrealloc(strings, (count1 + count2 + 1) * sizeof(char*));
692         v[count1 + count2] = NULL;
693         i = count2;
694         while (--i >= 0)
695                 v[count1 + i] = (need_to_dup ? xstrdup(add[i]) : add[i]);
696         return v;
697 }
698
699 static char **add_string_to_strings(char **strings, char *add)
700 {
701         char *v[2];
702         v[0] = add;
703         v[1] = NULL;
704         return add_strings_to_strings(strings, v, /*dup:*/ 0);
705 }
706
707 static void putenv_all(char **strings)
708 {
709         if (!strings)
710                 return;
711         while (*strings) {
712                 debug_printf_env("putenv '%s'\n", *strings);
713                 putenv(*strings++);
714         }
715 }
716
717 static char **putenv_all_and_save_old(char **strings)
718 {
719         char **old = NULL;
720         char **s = strings;
721
722         if (!strings)
723                 return old;
724         while (*strings) {
725                 char *v, *eq;
726
727                 eq = strchr(*strings, '=');
728                 if (eq) {
729                         *eq = '\0';
730                         v = getenv(*strings);
731                         *eq = '=';
732                         if (v) {
733                                 /* v points to VAL in VAR=VAL, go back to VAR */
734                                 v -= (eq - *strings) + 1;
735                                 old = add_string_to_strings(old, v);
736                         }
737                 }
738                 strings++;
739         }
740         putenv_all(s);
741         return old;
742 }
743
744 static void free_strings_and_unsetenv(char **strings, int unset)
745 {
746         char **v;
747
748         if (!strings)
749                 return;
750
751         v = strings;
752         while (*v) {
753                 if (unset) {
754                         debug_printf_env("unsetenv '%s'\n", *v);
755                         bb_unsetenv(*v);
756                 }
757                 free(*v++);
758         }
759         free(strings);
760 }
761
762 static void free_strings(char **strings)
763 {
764         free_strings_and_unsetenv(strings, 0);
765 }
766
767
768 /* Basic theory of signal handling in shell
769  * ========================================
770  * This does not describe what hush does, rather, it is current understanding
771  * what it _should_ do. If it doesn't, it's a bug.
772  * http://www.opengroup.org/onlinepubs/9699919799/utilities/V3_chap02.html#trap
773  *
774  * Signals are handled only after each pipe ("cmd | cmd | cmd" thing)
775  * is finished or backgrounded. It is the same in interactive and
776  * non-interactive shells, and is the same regardless of whether
777  * a user trap handler is installed or a shell special one is in effect.
778  * ^C or ^Z from keyboard seem to execute "at once" because it usually
779  * backgrounds (i.e. stops) or kills all members of currently running
780  * pipe.
781  *
782  * Wait builtin in interruptible by signals for which user trap is set
783  * or by SIGINT in interactive shell.
784  *
785  * Trap handlers will execute even within trap handlers. (right?)
786  *
787  * User trap handlers are forgotten when subshell ("(cmd)") is entered. [TODO]
788  *
789  * If job control is off, backgrounded commands ("cmd &")
790  * have SIGINT, SIGQUIT set to SIG_IGN.
791  *
792  * Commands run in command substitution ("`cmd`")
793  * have SIGTTIN, SIGTTOU, SIGTSTP set to SIG_IGN.
794  *
795  * Ordinary commands have signals set to SIG_IGN/DFL set as inherited
796  * by the shell from its parent.
797  *
798  * Siganls which differ from SIG_DFL action
799  * (note: child (i.e., [v]forked) shell is not an interactive shell):
800  *
801  * SIGQUIT: ignore
802  * SIGTERM (interactive): ignore
803  * SIGHUP (interactive):
804  *    send SIGCONT to stopped jobs, send SIGHUP to all jobs and exit
805  * SIGTTIN, SIGTTOU, SIGTSTP (if job control is on): ignore
806  *    (note that ^Z is handled not by trapping SIGTSTP, but by seeing
807  *    that all pipe members are stopped) (right?)
808  * SIGINT (interactive): wait for last pipe, ignore the rest
809  *    of the command line, show prompt. NB: ^C does not send SIGINT
810  *    to interactive shell while shell is waiting for a pipe,
811  *    since shell is bg'ed (is not in foreground process group).
812  *    (check/expand this)
813  *    Example 1: this waits 5 sec, but does not execute ls:
814  *    "echo $$; sleep 5; ls -l" + "kill -INT <pid>"
815  *    Example 2: this does not wait and does not execute ls:
816  *    "echo $$; sleep 5 & wait; ls -l" + "kill -INT <pid>"
817  *    Example 3: this does not wait 5 sec, but executes ls:
818  *    "sleep 5; ls -l" + press ^C
819  *
820  * (What happens to signals which are IGN on shell start?)
821  * (What happens with signal mask on shell start?)
822  *
823  * Implementation in hush
824  * ======================
825  * We use in-kernel pending signal mask to determine which signals were sent.
826  * We block all signals which we don't want to take action immediately,
827  * i.e. we block all signals which need to have special handling as described
828  * above, and all signals which have traps set.
829  * After each pipe execution, we extract any pending signals via sigtimedwait()
830  * and act on them.
831  *
832  * unsigned non_DFL_mask: a mask of such "special" signals
833  * sigset_t blocked_set:  current blocked signal set
834  *
835  * "trap - SIGxxx":
836  *    clear bit in blocked_set unless it is also in non_DFL
837  * "trap 'cmd' SIGxxx":
838  *    set bit in blocked_set (even if 'cmd' is '')
839  * after [v]fork, if we plan to be a shell:
840  *    nothing for {} child shell (say, "true | { true; true; } | true")
841  *    unset all traps if () shell. [TODO]
842  * after [v]fork, if we plan to exec:
843  *    POSIX says pending signal mask is cleared in child - no need to clear it.
844  *    Restore blocked signal set to one inherited by shell just prior to exec.
845  *
846  * Note: as a result, we do not use signal handlers much. The only uses
847  * are to count SIGCHLDs [disabled - bug somewhere, + bloat]
848  * and to restore tty pgrp on signal-induced exit.
849  *
850  * TODO: check/fix wait builtin to be interruptible.
851  */
852
853 //static void SIGCHLD_handler(int sig UNUSED_PARAM)
854 //{
855 //      G.count_SIGCHLD++;
856 //}
857
858 /* called once at shell init */
859 static void init_signal_mask(void)
860 {
861         unsigned sig;
862         unsigned mask = (1 << SIGQUIT);
863 #if ENABLE_HUSH_INTERACTIVE
864         if (G.interactive_fd) {
865                 mask = 0
866                         | (1 << SIGQUIT)
867                         | (1 << SIGTERM)
868                         | (1 << SIGHUP)
869 #if ENABLE_HUSH_JOB
870                         | (1 << SIGTTIN) | (1 << SIGTTOU) | (1 << SIGTSTP)
871 #endif
872                         | (1 << SIGINT)
873                 ;
874         }
875 #endif
876         G.non_DFL_mask = mask;
877
878         sigprocmask(SIG_SETMASK, NULL, &G.blocked_set);
879         sig = 0;
880         while (mask) {
881                 if (mask & 1)
882                         sigaddset(&G.blocked_set, sig);
883                 mask >>= 1;
884                 sig++;
885         }
886         sigdelset(&G.blocked_set, SIGCHLD);
887         sigprocmask(SIG_SETMASK, &G.blocked_set, &G.inherited_set);
888 }
889
890 static int check_and_run_traps(int sig)
891 {
892         static const struct timespec zero_timespec = { 0, 0 };
893         smalluint save_rcode;
894         int last_sig = 0;
895
896         if (sig)
897                 goto jump_in;
898         while (1) {
899                 sig = sigtimedwait(&G.blocked_set, NULL, &zero_timespec);
900                 if (sig <= 0)
901                         break;
902  jump_in:
903                 last_sig = sig;
904                 if (G.traps && G.traps[sig]) {
905                         if (G.traps[sig][0]) {
906                                 /* We have user-defined handler */
907                                 char *argv[] = { NULL, xstrdup(G.traps[sig]), NULL };
908                                 save_rcode = G.last_return_code;
909                                 builtin_eval(argv);
910                                 free(argv[1]);
911                                 G.last_return_code = save_rcode;
912                         } /* else: "" trap, ignoring signal */
913                         continue;
914                 }
915                 /* not a trap: special action */
916                 switch (sig) {
917 //              case SIGCHLD:
918 //                      G.count_SIGCHLD++;
919 //                      break;
920                 case SIGINT:
921                         bb_putchar('\n');
922                         G.flag_SIGINT = 1;
923                         break;
924 //TODO
925 //              case SIGHUP: ...
926 //                      break;
927                 default: /* SIGTERM, SIGQUIT, SIGTTIN, SIGTTOU, SIGTSTP */
928                         break;
929                 }
930         }
931         return last_sig;
932 }
933
934 #if ENABLE_HUSH_JOB
935
936 /* Restores tty foreground process group, and exits.
937  * May be called as signal handler for fatal signal
938  * (will faithfully resend signal to itself, producing correct exit state)
939  * or called directly with -EXITCODE.
940  * We also call it if xfunc is exiting. */
941 static void sigexit(int sig) NORETURN;
942 static void sigexit(int sig)
943 {
944         /* Disable all signals: job control, SIGPIPE, etc. */
945         sigprocmask_allsigs(SIG_BLOCK);
946
947 #if ENABLE_HUSH_INTERACTIVE
948         /* Careful: we can end up here after [v]fork. Do not restore
949          * tty pgrp then, only top-level shell process does that */
950         if (G.interactive_fd && getpid() == G.root_pid)
951                 tcsetpgrp(G.interactive_fd, G.saved_tty_pgrp);
952 #endif
953
954         /* Not a signal, just exit */
955         if (sig <= 0)
956                 _exit(- sig);
957
958         kill_myself_with_sig(sig); /* does not return */
959 }
960
961 /* helper */
962 static void maybe_set_sighandler(int sig)
963 {
964         void (*handler)(int);
965         /* non_DFL_mask'ed signals are, well, masked,
966          * no need to set handler for them.
967          */
968         if (!((G.non_DFL_mask >> sig) & 1)) {
969                 handler = signal(sig, sigexit);
970                 if (handler == SIG_IGN) /* oops... restore back to IGN! */
971                         signal(sig, handler);
972         }
973 }
974 /* Used only to set handler to restore pgrp on exit */
975 static void set_fatal_signals_to_sigexit(void)
976 {
977         if (HUSH_DEBUG) {
978                 maybe_set_sighandler(SIGILL );
979                 maybe_set_sighandler(SIGFPE );
980                 maybe_set_sighandler(SIGBUS );
981                 maybe_set_sighandler(SIGSEGV);
982                 maybe_set_sighandler(SIGTRAP);
983         } /* else: hush is perfect. what SEGV? */
984
985         maybe_set_sighandler(SIGABRT);
986
987         /* bash 3.2 seems to handle these just like 'fatal' ones */
988         maybe_set_sighandler(SIGPIPE);
989         maybe_set_sighandler(SIGALRM);
990         maybe_set_sighandler(SIGHUP );
991
992         /* if we aren't interactive... but in this case
993          * we never want to restore pgrp on exit, and this fn is not called */
994         /*maybe_set_sighandler(SIGTERM);*/
995         /*maybe_set_sighandler(SIGINT );*/
996 }
997 /* Used only to suppress ^Z in `cmd` */
998 static void set_jobctrl_signals_to_IGN(void)
999 {
1000         bb_signals(0
1001                 + (1 << SIGTSTP)
1002                 + (1 << SIGTTIN)
1003                 + (1 << SIGTTOU)
1004                 , SIG_IGN);
1005 }
1006
1007 #else /* !JOB */
1008
1009 #define set_fatal_signals_to_sigexit(handler) ((void)0)
1010 #define set_jobctrl_signals_to_IGN(handler)  ((void)0)
1011
1012 #endif /* JOB */
1013
1014 /* Restores tty foreground process group, and exits. */
1015 static void hush_exit(int exitcode) NORETURN;
1016 static void hush_exit(int exitcode)
1017 {
1018         if (G.traps && G.traps[0] && G.traps[0][0]) {
1019                 char *argv[] = { NULL, xstrdup(G.traps[0]), NULL };
1020                 builtin_eval(argv);
1021                 free(argv[1]);
1022         }
1023
1024 #if ENABLE_HUSH_JOB
1025         fflush(NULL); /* flush all streams */
1026         sigexit(- (exitcode & 0xff));
1027 #else
1028         exit(exitcode);
1029 #endif
1030 }
1031
1032
1033 static const char *set_cwd(void)
1034 {
1035         /* xrealloc_getcwd_or_warn(arg) calls free(arg),
1036          * we must not try to free(bb_msg_unknown) */
1037         if (G.cwd == bb_msg_unknown)
1038                 G.cwd = NULL;
1039         G.cwd = xrealloc_getcwd_or_warn((char *)G.cwd);
1040         if (!G.cwd)
1041                 G.cwd = bb_msg_unknown;
1042         return G.cwd;
1043 }
1044
1045
1046 /* Get/check local shell variables */
1047 static struct variable *get_local_var(const char *name)
1048 {
1049         struct variable *cur;
1050         int len;
1051
1052         if (!name)
1053                 return NULL;
1054         len = strlen(name);
1055         for (cur = G.top_var; cur; cur = cur->next) {
1056                 if (strncmp(cur->varstr, name, len) == 0 && cur->varstr[len] == '=')
1057                         return cur;
1058         }
1059         return NULL;
1060 }
1061
1062 /* Basically useful version until someone wants to get fancier,
1063  * see the bash man page under "Parameter Expansion" */
1064 static const char *lookup_param(const char *src)
1065 {
1066         struct variable *var = get_local_var(src);
1067         if (var)
1068                 return strchr(var->varstr, '=') + 1;
1069         return NULL;
1070 }
1071
1072 /* str holds "NAME=VAL" and is expected to be malloced.
1073  * We take ownership of it.
1074  * flg_export is used by:
1075  *  0: do not export
1076  *  1: export
1077  * -1: if NAME is set, leave export status alone
1078  *     if NAME is not set, do not export
1079  */
1080 static int set_local_var(char *str, int flg_export)
1081 {
1082         struct variable *cur;
1083         char *value;
1084         int name_len;
1085
1086         value = strchr(str, '=');
1087         if (!value) { /* not expected to ever happen? */
1088                 free(str);
1089                 return -1;
1090         }
1091
1092         name_len = value - str + 1; /* including '=' */
1093         cur = G.top_var; /* cannot be NULL (we have HUSH_VERSION and it's RO) */
1094         while (1) {
1095                 if (strncmp(cur->varstr, str, name_len) != 0) {
1096                         if (!cur->next) {
1097                                 /* Bail out. Note that now cur points
1098                                  * to last var in linked list */
1099                                 break;
1100                         }
1101                         cur = cur->next;
1102                         continue;
1103                 }
1104                 /* We found an existing var with this name */
1105                 *value = '\0';
1106                 if (cur->flg_read_only) {
1107                         bb_error_msg("%s: readonly variable", str);
1108                         free(str);
1109                         return -1;
1110                 }
1111                 debug_printf_env("%s: unsetenv '%s'\n", __func__, str);
1112                 unsetenv(str); /* just in case */
1113                 *value = '=';
1114                 if (strcmp(cur->varstr, str) == 0) {
1115  free_and_exp:
1116                         free(str);
1117                         goto exp;
1118                 }
1119                 if (cur->max_len >= strlen(str)) {
1120                         /* This one is from startup env, reuse space */
1121                         strcpy(cur->varstr, str);
1122                         goto free_and_exp;
1123                 }
1124                 /* max_len == 0 signifies "malloced" var, which we can
1125                  * (and has to) free */
1126                 if (!cur->max_len)
1127                         free(cur->varstr);
1128                 cur->max_len = 0;
1129                 goto set_str_and_exp;
1130         }
1131
1132         /* Not found - create next variable struct */
1133         cur->next = xzalloc(sizeof(*cur));
1134         cur = cur->next;
1135
1136  set_str_and_exp:
1137         cur->varstr = str;
1138  exp:
1139         if (flg_export == 1)
1140                 cur->flg_export = 1;
1141         if (cur->flg_export) {
1142                 debug_printf_env("%s: putenv '%s'\n", __func__, cur->varstr);
1143                 return putenv(cur->varstr);
1144         }
1145         return 0;
1146 }
1147
1148 static int unset_local_var(const char *name)
1149 {
1150         struct variable *cur;
1151         struct variable *prev = prev; /* for gcc */
1152         int name_len;
1153
1154         if (!name)
1155                 return EXIT_SUCCESS;
1156         name_len = strlen(name);
1157         cur = G.top_var;
1158         while (cur) {
1159                 if (strncmp(cur->varstr, name, name_len) == 0 && cur->varstr[name_len] == '=') {
1160                         if (cur->flg_read_only) {
1161                                 bb_error_msg("%s: readonly variable", name);
1162                                 return EXIT_FAILURE;
1163                         }
1164                         /* prev is ok to use here because 1st variable, HUSH_VERSION,
1165                          * is ro, and we cannot reach this code on the 1st pass */
1166                         prev->next = cur->next;
1167                         debug_printf_env("%s: unsetenv '%s'\n", __func__, cur->varstr);
1168                         bb_unsetenv(cur->varstr);
1169                         if (!cur->max_len)
1170                                 free(cur->varstr);
1171                         free(cur);
1172                         return EXIT_SUCCESS;
1173                 }
1174                 prev = cur;
1175                 cur = cur->next;
1176         }
1177         return EXIT_SUCCESS;
1178 }
1179
1180 #if ENABLE_SH_MATH_SUPPORT
1181 #define is_name(c)      ((c) == '_' || isalpha((unsigned char)(c)))
1182 #define is_in_name(c)   ((c) == '_' || isalnum((unsigned char)(c)))
1183 static char *endofname(const char *name)
1184 {
1185         char *p;
1186
1187         p = (char *) name;
1188         if (!is_name(*p))
1189                 return p;
1190         while (*++p) {
1191                 if (!is_in_name(*p))
1192                         break;
1193         }
1194         return p;
1195 }
1196
1197 static void arith_set_local_var(const char *name, const char *val, int flags)
1198 {
1199         /* arith code doesnt malloc space, so do it for it */
1200         char *var = xasprintf("%s=%s", name, val);
1201         set_local_var(var, flags);
1202 }
1203 #endif
1204
1205
1206 /*
1207  * in_str support
1208  */
1209 static int static_get(struct in_str *i)
1210 {
1211         int ch = *i->p++;
1212         if (ch == '\0') return EOF;
1213         return ch;
1214 }
1215
1216 static int static_peek(struct in_str *i)
1217 {
1218         return *i->p;
1219 }
1220
1221 #if ENABLE_HUSH_INTERACTIVE
1222
1223 static void cmdedit_set_initial_prompt(void)
1224 {
1225         if (ENABLE_FEATURE_EDITING_FANCY_PROMPT) {
1226                 G.PS1 = getenv("PS1");
1227                 if (G.PS1 == NULL)
1228                         G.PS1 = "\\w \\$ ";
1229         } else
1230                 G.PS1 = NULL;
1231 }
1232
1233 static const char* setup_prompt_string(int promptmode)
1234 {
1235         const char *prompt_str;
1236         debug_printf("setup_prompt_string %d ", promptmode);
1237         if (!ENABLE_FEATURE_EDITING_FANCY_PROMPT) {
1238                 /* Set up the prompt */
1239                 if (promptmode == 0) { /* PS1 */
1240                         free((char*)G.PS1);
1241                         G.PS1 = xasprintf("%s %c ", G.cwd, (geteuid() != 0) ? '$' : '#');
1242                         prompt_str = G.PS1;
1243                 } else
1244                         prompt_str = G.PS2;
1245         } else
1246                 prompt_str = (promptmode == 0) ? G.PS1 : G.PS2;
1247         debug_printf("result '%s'\n", prompt_str);
1248         return prompt_str;
1249 }
1250
1251 static void get_user_input(struct in_str *i)
1252 {
1253         int r;
1254         const char *prompt_str;
1255
1256         prompt_str = setup_prompt_string(i->promptmode);
1257 #if ENABLE_FEATURE_EDITING
1258         /* Enable command line editing only while a command line
1259          * is actually being read */
1260         do {
1261                 G.flag_SIGINT = 0;
1262                 /* buglet: SIGINT will not make new prompt to appear _at once_,
1263                  * only after <Enter>. (^C will work) */
1264                 r = read_line_input(prompt_str, G.user_input_buf, BUFSIZ-1, G.line_input_state);
1265                 /* catch *SIGINT* etc (^C is handled by read_line_input) */
1266                 check_and_run_traps(0);
1267         } while (r == 0 || G.flag_SIGINT); /* repeat if ^C or SIGINT */
1268         i->eof_flag = (r < 0);
1269         if (i->eof_flag) { /* EOF/error detected */
1270                 G.user_input_buf[0] = EOF; /* yes, it will be truncated, it's ok */
1271                 G.user_input_buf[1] = '\0';
1272         }
1273 #else
1274         do {
1275                 G.flag_SIGINT = 0;
1276                 fputs(prompt_str, stdout);
1277                 fflush(stdout);
1278                 G.user_input_buf[0] = r = fgetc(i->file);
1279                 /*G.user_input_buf[1] = '\0'; - already is and never changed */
1280 //do we need check_and_run_traps(0)? (maybe only if stdin)
1281         } while (G.flag_SIGINT);
1282         i->eof_flag = (r == EOF);
1283 #endif
1284         i->p = G.user_input_buf;
1285 }
1286
1287 #endif  /* INTERACTIVE */
1288
1289 /* This is the magic location that prints prompts
1290  * and gets data back from the user */
1291 static int file_get(struct in_str *i)
1292 {
1293         int ch;
1294
1295         /* If there is data waiting, eat it up */
1296         if (i->p && *i->p) {
1297 #if ENABLE_HUSH_INTERACTIVE
1298  take_cached:
1299 #endif
1300                 ch = *i->p++;
1301                 if (i->eof_flag && !*i->p)
1302                         ch = EOF;
1303         } else {
1304                 /* need to double check i->file because we might be doing something
1305                  * more complicated by now, like sourcing or substituting. */
1306 #if ENABLE_HUSH_INTERACTIVE
1307                 if (G.interactive_fd && i->promptme && i->file == stdin) {
1308                         do {
1309                                 get_user_input(i);
1310                         } while (!*i->p); /* need non-empty line */
1311                         i->promptmode = 1; /* PS2 */
1312                         i->promptme = 0;
1313                         goto take_cached;
1314                 }
1315 #endif
1316                 ch = fgetc(i->file);
1317         }
1318         debug_printf("file_get: got a '%c' %d\n", ch, ch);
1319 #if ENABLE_HUSH_INTERACTIVE
1320         if (ch == '\n')
1321                 i->promptme = 1;
1322 #endif
1323         return ch;
1324 }
1325
1326 /* All the callers guarantee this routine will never be
1327  * used right after a newline, so prompting is not needed.
1328  */
1329 static int file_peek(struct in_str *i)
1330 {
1331         int ch;
1332         if (i->p && *i->p) {
1333                 if (i->eof_flag && !i->p[1])
1334                         return EOF;
1335                 return *i->p;
1336         }
1337         ch = fgetc(i->file);
1338         i->eof_flag = (ch == EOF);
1339         i->peek_buf[0] = ch;
1340         i->peek_buf[1] = '\0';
1341         i->p = i->peek_buf;
1342         debug_printf("file_peek: got a '%c' %d\n", *i->p, *i->p);
1343         return ch;
1344 }
1345
1346 static void setup_file_in_str(struct in_str *i, FILE *f)
1347 {
1348         i->peek = file_peek;
1349         i->get = file_get;
1350 #if ENABLE_HUSH_INTERACTIVE
1351         i->promptme = 1;
1352         i->promptmode = 0; /* PS1 */
1353 #endif
1354         i->file = f;
1355         i->p = NULL;
1356 }
1357
1358 static void setup_string_in_str(struct in_str *i, const char *s)
1359 {
1360         i->peek = static_peek;
1361         i->get = static_get;
1362 #if ENABLE_HUSH_INTERACTIVE
1363         i->promptme = 1;
1364         i->promptmode = 0; /* PS1 */
1365 #endif
1366         i->p = s;
1367         i->eof_flag = 0;
1368 }
1369
1370
1371 /*
1372  * o_string support
1373  */
1374 #define B_CHUNK  (32 * sizeof(char*))
1375
1376 static void o_reset(o_string *o)
1377 {
1378         o->length = 0;
1379         o->nonnull = 0;
1380         if (o->data)
1381                 o->data[0] = '\0';
1382 }
1383
1384 static void o_free(o_string *o)
1385 {
1386         free(o->data);
1387         memset(o, 0, sizeof(*o));
1388 }
1389
1390 static void o_grow_by(o_string *o, int len)
1391 {
1392         if (o->length + len > o->maxlen) {
1393                 o->maxlen += (2*len > B_CHUNK ? 2*len : B_CHUNK);
1394                 o->data = xrealloc(o->data, 1 + o->maxlen);
1395         }
1396 }
1397
1398 static void o_addchr(o_string *o, int ch)
1399 {
1400         debug_printf("o_addchr: '%c' o->length=%d o=%p\n", ch, o->length, o);
1401         o_grow_by(o, 1);
1402         o->data[o->length] = ch;
1403         o->length++;
1404         o->data[o->length] = '\0';
1405 }
1406
1407 static void o_addstr(o_string *o, const char *str, int len)
1408 {
1409         o_grow_by(o, len);
1410         memcpy(&o->data[o->length], str, len);
1411         o->length += len;
1412         o->data[o->length] = '\0';
1413 }
1414
1415 static void o_addstrauto(o_string *o, const char *str)
1416 {
1417         o_addstr(o, str, strlen(str) + 1);
1418 }
1419
1420 static void o_addstr_duplicate_backslash(o_string *o, const char *str, int len)
1421 {
1422         while (len) {
1423                 o_addchr(o, *str);
1424                 if (*str++ == '\\'
1425                  && (*str != '*' && *str != '?' && *str != '[')
1426                 ) {
1427                         o_addchr(o, '\\');
1428                 }
1429                 len--;
1430         }
1431 }
1432
1433 /* My analysis of quoting semantics tells me that state information
1434  * is associated with a destination, not a source.
1435  */
1436 static void o_addqchr(o_string *o, int ch)
1437 {
1438         int sz = 1;
1439         char *found = strchr("*?[\\", ch);
1440         if (found)
1441                 sz++;
1442         o_grow_by(o, sz);
1443         if (found) {
1444                 o->data[o->length] = '\\';
1445                 o->length++;
1446         }
1447         o->data[o->length] = ch;
1448         o->length++;
1449         o->data[o->length] = '\0';
1450 }
1451
1452 static void o_addQchr(o_string *o, int ch)
1453 {
1454         int sz = 1;
1455         if (o->o_escape && strchr("*?[\\", ch)) {
1456                 sz++;
1457                 o->data[o->length] = '\\';
1458                 o->length++;
1459         }
1460         o_grow_by(o, sz);
1461         o->data[o->length] = ch;
1462         o->length++;
1463         o->data[o->length] = '\0';
1464 }
1465
1466 static void o_addQstr(o_string *o, const char *str, int len)
1467 {
1468         if (!o->o_escape) {
1469                 o_addstr(o, str, len);
1470                 return;
1471         }
1472         while (len) {
1473                 char ch;
1474                 int sz;
1475                 int ordinary_cnt = strcspn(str, "*?[\\");
1476                 if (ordinary_cnt > len) /* paranoia */
1477                         ordinary_cnt = len;
1478                 o_addstr(o, str, ordinary_cnt);
1479                 if (ordinary_cnt == len)
1480                         return;
1481                 str += ordinary_cnt;
1482                 len -= ordinary_cnt + 1; /* we are processing + 1 char below */
1483
1484                 ch = *str++;
1485                 sz = 1;
1486                 if (ch) { /* it is necessarily one of "*?[\\" */
1487                         sz++;
1488                         o->data[o->length] = '\\';
1489                         o->length++;
1490                 }
1491                 o_grow_by(o, sz);
1492                 o->data[o->length] = ch;
1493                 o->length++;
1494                 o->data[o->length] = '\0';
1495         }
1496 }
1497
1498 /* A special kind of o_string for $VAR and `cmd` expansion.
1499  * It contains char* list[] at the beginning, which is grown in 16 element
1500  * increments. Actual string data starts at the next multiple of 16 * (char*).
1501  * list[i] contains an INDEX (int!) into this string data.
1502  * It means that if list[] needs to grow, data needs to be moved higher up
1503  * but list[i]'s need not be modified.
1504  * NB: remembering how many list[i]'s you have there is crucial.
1505  * o_finalize_list() operation post-processes this structure - calculates
1506  * and stores actual char* ptrs in list[]. Oh, it NULL terminates it as well.
1507  */
1508 #if DEBUG_EXPAND || DEBUG_GLOB
1509 static void debug_print_list(const char *prefix, o_string *o, int n)
1510 {
1511         char **list = (char**)o->data;
1512         int string_start = ((n + 0xf) & ~0xf) * sizeof(list[0]);
1513         int i = 0;
1514         fprintf(stderr, "%s: list:%p n:%d string_start:%d length:%d maxlen:%d\n",
1515                         prefix, list, n, string_start, o->length, o->maxlen);
1516         while (i < n) {
1517                 fprintf(stderr, " list[%d]=%d '%s' %p\n", i, (int)list[i],
1518                                 o->data + (int)list[i] + string_start,
1519                                 o->data + (int)list[i] + string_start);
1520                 i++;
1521         }
1522         if (n) {
1523                 const char *p = o->data + (int)list[n - 1] + string_start;
1524                 fprintf(stderr, " total_sz:%ld\n", (long)((p + strlen(p) + 1) - o->data));
1525         }
1526 }
1527 #else
1528 #define debug_print_list(prefix, o, n) ((void)0)
1529 #endif
1530
1531 /* n = o_save_ptr_helper(str, n) "starts new string" by storing an index value
1532  * in list[n] so that it points past last stored byte so far.
1533  * It returns n+1. */
1534 static int o_save_ptr_helper(o_string *o, int n)
1535 {
1536         char **list = (char**)o->data;
1537         int string_start;
1538         int string_len;
1539
1540         if (!o->has_empty_slot) {
1541                 string_start = ((n + 0xf) & ~0xf) * sizeof(list[0]);
1542                 string_len = o->length - string_start;
1543                 if (!(n & 0xf)) { /* 0, 0x10, 0x20...? */
1544                         debug_printf_list("list[%d]=%d string_start=%d (growing)\n", n, string_len, string_start);
1545                         /* list[n] points to string_start, make space for 16 more pointers */
1546                         o->maxlen += 0x10 * sizeof(list[0]);
1547                         o->data = xrealloc(o->data, o->maxlen + 1);
1548                         list = (char**)o->data;
1549                         memmove(list + n + 0x10, list + n, string_len);
1550                         o->length += 0x10 * sizeof(list[0]);
1551                 } else
1552                         debug_printf_list("list[%d]=%d string_start=%d\n", n, string_len, string_start);
1553         } else {
1554                 /* We have empty slot at list[n], reuse without growth */
1555                 string_start = ((n+1 + 0xf) & ~0xf) * sizeof(list[0]); /* NB: n+1! */
1556                 string_len = o->length - string_start;
1557                 debug_printf_list("list[%d]=%d string_start=%d (empty slot)\n", n, string_len, string_start);
1558                 o->has_empty_slot = 0;
1559         }
1560         list[n] = (char*)(ptrdiff_t)string_len;
1561         return n + 1;
1562 }
1563
1564 /* "What was our last o_save_ptr'ed position (byte offset relative o->data)?" */
1565 static int o_get_last_ptr(o_string *o, int n)
1566 {
1567         char **list = (char**)o->data;
1568         int string_start = ((n + 0xf) & ~0xf) * sizeof(list[0]);
1569
1570         return ((int)(ptrdiff_t)list[n-1]) + string_start;
1571 }
1572
1573 /* o_glob performs globbing on last list[], saving each result
1574  * as a new list[]. */
1575 static int o_glob(o_string *o, int n)
1576 {
1577         glob_t globdata;
1578         int gr;
1579         char *pattern;
1580
1581         debug_printf_glob("start o_glob: n:%d o->data:%p\n", n, o->data);
1582         if (!o->data)
1583                 return o_save_ptr_helper(o, n);
1584         pattern = o->data + o_get_last_ptr(o, n);
1585         debug_printf_glob("glob pattern '%s'\n", pattern);
1586         if (!glob_needed(pattern)) {
1587  literal:
1588                 o->length = unbackslash(pattern) - o->data;
1589                 debug_printf_glob("glob pattern '%s' is literal\n", pattern);
1590                 return o_save_ptr_helper(o, n);
1591         }
1592
1593         memset(&globdata, 0, sizeof(globdata));
1594         gr = glob(pattern, 0, NULL, &globdata);
1595         debug_printf_glob("glob('%s'):%d\n", pattern, gr);
1596         if (gr == GLOB_NOSPACE)
1597                 bb_error_msg_and_die("out of memory during glob");
1598         if (gr == GLOB_NOMATCH) {
1599                 globfree(&globdata);
1600                 goto literal;
1601         }
1602         if (gr != 0) { /* GLOB_ABORTED ? */
1603 //TODO: testcase for bad glob pattern behavior
1604                 bb_error_msg("glob(3) error %d on '%s'", gr, pattern);
1605         }
1606         if (globdata.gl_pathv && globdata.gl_pathv[0]) {
1607                 char **argv = globdata.gl_pathv;
1608                 o->length = pattern - o->data; /* "forget" pattern */
1609                 while (1) {
1610                         o_addstrauto(o, *argv);
1611                         n = o_save_ptr_helper(o, n);
1612                         argv++;
1613                         if (!*argv)
1614                                 break;
1615                 }
1616         }
1617         globfree(&globdata);
1618         if (DEBUG_GLOB)
1619                 debug_print_list("o_glob returning", o, n);
1620         return n;
1621 }
1622
1623 /* If o->o_glob == 1, glob the string so far remembered.
1624  * Otherwise, just finish current list[] and start new */
1625 static int o_save_ptr(o_string *o, int n)
1626 {
1627         if (o->o_glob) { /* if globbing is requested */
1628                 /* If o->has_empty_slot, list[n] was already globbed
1629                  * (if it was requested back then when it was filled)
1630                  * so don't do that again! */
1631                 if (!o->has_empty_slot)
1632                         return o_glob(o, n); /* o_save_ptr_helper is inside */
1633         }
1634         return o_save_ptr_helper(o, n);
1635 }
1636
1637 /* "Please convert list[n] to real char* ptrs, and NULL terminate it." */
1638 static char **o_finalize_list(o_string *o, int n)
1639 {
1640         char **list;
1641         int string_start;
1642
1643         n = o_save_ptr(o, n); /* force growth for list[n] if necessary */
1644         if (DEBUG_EXPAND)
1645                 debug_print_list("finalized", o, n);
1646         debug_printf_expand("finalized n:%d\n", n);
1647         list = (char**)o->data;
1648         string_start = ((n + 0xf) & ~0xf) * sizeof(list[0]);
1649         list[--n] = NULL;
1650         while (n) {
1651                 n--;
1652                 list[n] = o->data + (int)(ptrdiff_t)list[n] + string_start;
1653         }
1654         return list;
1655 }
1656
1657
1658 /* Expansion can recurse */
1659 #if ENABLE_HUSH_TICK
1660 static int process_command_subs(o_string *dest, struct in_str *input);
1661 #endif
1662 static char *expand_string_to_string(const char *str);
1663 static int parse_stream_dquoted(o_string *dest, struct in_str *input, int dquote_end);
1664
1665 /* expand_strvec_to_strvec() takes a list of strings, expands
1666  * all variable references within and returns a pointer to
1667  * a list of expanded strings, possibly with larger number
1668  * of strings. (Think VAR="a b"; echo $VAR).
1669  * This new list is allocated as a single malloc block.
1670  * NULL-terminated list of char* pointers is at the beginning of it,
1671  * followed by strings themself.
1672  * Caller can deallocate entire list by single free(list). */
1673
1674 /* Store given string, finalizing the word and starting new one whenever
1675  * we encounter IFS char(s). This is used for expanding variable values.
1676  * End-of-string does NOT finalize word: think about 'echo -$VAR-' */
1677 static int expand_on_ifs(o_string *output, int n, const char *str)
1678 {
1679         while (1) {
1680                 int word_len = strcspn(str, G.ifs);
1681                 if (word_len) {
1682                         if (output->o_escape || !output->o_glob)
1683                                 o_addQstr(output, str, word_len);
1684                         else /* protect backslashes against globbing up :) */
1685                                 o_addstr_duplicate_backslash(output, str, word_len);
1686                         str += word_len;
1687                 }
1688                 if (!*str)  /* EOL - do not finalize word */
1689                         break;
1690                 o_addchr(output, '\0');
1691                 debug_print_list("expand_on_ifs", output, n);
1692                 n = o_save_ptr(output, n);
1693                 str += strspn(str, G.ifs); /* skip ifs chars */
1694         }
1695         debug_print_list("expand_on_ifs[1]", output, n);
1696         return n;
1697 }
1698
1699 /* Expand all variable references in given string, adding words to list[]
1700  * at n, n+1,... positions. Return updated n (so that list[n] is next one
1701  * to be filled). This routine is extremely tricky: has to deal with
1702  * variables/parameters with whitespace, $* and $@, and constructs like
1703  * 'echo -$*-'. If you play here, you must run testsuite afterwards! */
1704 static int expand_vars_to_list(o_string *output, int n, char *arg, char or_mask)
1705 {
1706         /* or_mask is either 0 (normal case) or 0x80
1707          * (expansion of right-hand side of assignment == 1-element expand.
1708          * It will also do no globbing, and thus we must not backslash-quote!) */
1709
1710         char first_ch, ored_ch;
1711         int i;
1712         const char *val;
1713         char *p;
1714
1715         ored_ch = 0;
1716
1717         debug_printf_expand("expand_vars_to_list: arg '%s'\n", arg);
1718         debug_print_list("expand_vars_to_list", output, n);
1719         n = o_save_ptr(output, n);
1720         debug_print_list("expand_vars_to_list[0]", output, n);
1721
1722         while ((p = strchr(arg, SPECIAL_VAR_SYMBOL)) != NULL) {
1723 #if ENABLE_HUSH_TICK
1724                 o_string subst_result = NULL_O_STRING;
1725 #endif
1726 #if ENABLE_SH_MATH_SUPPORT
1727                 char arith_buf[sizeof(arith_t)*3 + 2];
1728 #endif
1729                 o_addstr(output, arg, p - arg);
1730                 debug_print_list("expand_vars_to_list[1]", output, n);
1731                 arg = ++p;
1732                 p = strchr(p, SPECIAL_VAR_SYMBOL);
1733
1734                 first_ch = arg[0] | or_mask; /* forced to "quoted" if or_mask = 0x80 */
1735                 /* "$@" is special. Even if quoted, it can still
1736                  * expand to nothing (not even an empty string) */
1737                 if ((first_ch & 0x7f) != '@')
1738                         ored_ch |= first_ch;
1739
1740                 val = NULL;
1741                 switch (first_ch & 0x7f) {
1742                 /* Highest bit in first_ch indicates that var is double-quoted */
1743                 case '$': /* pid */
1744                         val = utoa(G.root_pid);
1745                         break;
1746                 case '!': /* bg pid */
1747                         val = G.last_bg_pid ? utoa(G.last_bg_pid) : (char*)"";
1748                         break;
1749                 case '?': /* exitcode */
1750                         val = utoa(G.last_return_code);
1751                         break;
1752                 case '#': /* argc */
1753                         if (arg[1] != SPECIAL_VAR_SYMBOL)
1754                                 /* actually, it's a ${#var} */
1755                                 goto case_default;
1756                         val = utoa(G.global_argc ? G.global_argc-1 : 0);
1757                         break;
1758                 case '*':
1759                 case '@':
1760                         i = 1;
1761                         if (!G.global_argv[i])
1762                                 break;
1763                         ored_ch |= first_ch; /* do it for "$@" _now_, when we know it's not empty */
1764                         if (!(first_ch & 0x80)) { /* unquoted $* or $@ */
1765                                 smallint sv = output->o_escape;
1766                                 /* unquoted var's contents should be globbed, so don't escape */
1767                                 output->o_escape = 0;
1768                                 while (G.global_argv[i]) {
1769                                         n = expand_on_ifs(output, n, G.global_argv[i]);
1770                                         debug_printf_expand("expand_vars_to_list: argv %d (last %d)\n", i, G.global_argc - 1);
1771                                         if (G.global_argv[i++][0] && G.global_argv[i]) {
1772                                                 /* this argv[] is not empty and not last:
1773                                                  * put terminating NUL, start new word */
1774                                                 o_addchr(output, '\0');
1775                                                 debug_print_list("expand_vars_to_list[2]", output, n);
1776                                                 n = o_save_ptr(output, n);
1777                                                 debug_print_list("expand_vars_to_list[3]", output, n);
1778                                         }
1779                                 }
1780                                 output->o_escape = sv;
1781                         } else
1782                         /* If or_mask is nonzero, we handle assignment 'a=....$@.....'
1783                          * and in this case should treat it like '$*' - see 'else...' below */
1784                         if (first_ch == ('@'|0x80) && !or_mask) { /* quoted $@ */
1785                                 while (1) {
1786                                         o_addQstr(output, G.global_argv[i], strlen(G.global_argv[i]));
1787                                         if (++i >= G.global_argc)
1788                                                 break;
1789                                         o_addchr(output, '\0');
1790                                         debug_print_list("expand_vars_to_list[4]", output, n);
1791                                         n = o_save_ptr(output, n);
1792                                 }
1793                         } else { /* quoted $*: add as one word */
1794                                 while (1) {
1795                                         o_addQstr(output, G.global_argv[i], strlen(G.global_argv[i]));
1796                                         if (!G.global_argv[++i])
1797                                                 break;
1798                                         if (G.ifs[0])
1799                                                 o_addchr(output, G.ifs[0]);
1800                                 }
1801                         }
1802                         break;
1803                 case SPECIAL_VAR_SYMBOL: /* <SPECIAL_VAR_SYMBOL><SPECIAL_VAR_SYMBOL> */
1804                         /* "Empty variable", used to make "" etc to not disappear */
1805                         arg++;
1806                         ored_ch = 0x80;
1807                         break;
1808 #if ENABLE_HUSH_TICK
1809                 case '`': { /* <SPECIAL_VAR_SYMBOL>`cmd<SPECIAL_VAR_SYMBOL> */
1810                         struct in_str input;
1811                         *p = '\0';
1812                         arg++;
1813 //TODO: can we just stuff it into "output" directly?
1814                         debug_printf_subst("SUBST '%s' first_ch %x\n", arg, first_ch);
1815                         setup_string_in_str(&input, arg);
1816                         process_command_subs(&subst_result, &input);
1817                         debug_printf_subst("SUBST RES '%s'\n", subst_result.data);
1818                         val = subst_result.data;
1819                         goto store_val;
1820                 }
1821 #endif
1822 #if ENABLE_SH_MATH_SUPPORT
1823                 case '+': { /* <SPECIAL_VAR_SYMBOL>+cmd<SPECIAL_VAR_SYMBOL> */
1824                         arith_eval_hooks_t hooks;
1825                         arith_t res;
1826                         int errcode;
1827                         char *exp_str;
1828
1829                         arg++; /* skip '+' */
1830                         *p = '\0'; /* replace trailing <SPECIAL_VAR_SYMBOL> */
1831                         debug_printf_subst("ARITH '%s' first_ch %x\n", arg, first_ch);
1832
1833                         /* Optional: skip expansion if expr is simple ("a + 3", "i++" etc) */
1834                         exp_str = arg;
1835                         while (1) {
1836                                 unsigned char c = *exp_str++;
1837                                 if (c == '\0') {
1838                                         exp_str = NULL;
1839                                         goto skip_expand;
1840                                 }
1841                                 if (isdigit(c))
1842                                         continue;
1843                                 if (strchr(" \t+-*/%_", c) != NULL)
1844                                         continue;
1845                                 c |= 0x20; /* tolower */
1846                                 if (c >= 'a' && c <= 'z')
1847                                         continue;
1848                                 break;
1849                         }
1850                         /* We need to expand. Example: "echo $(($a + 1)) $((1 + $((2)) ))" */
1851                         {
1852                                 struct in_str input;
1853                                 o_string dest = NULL_O_STRING;
1854
1855                                 setup_string_in_str(&input, arg);
1856                                 parse_stream_dquoted(&dest, &input, EOF);
1857                                 //bb_error_msg("'%s' -> '%s'", arg, dest.data);
1858                                 exp_str = expand_string_to_string(dest.data);
1859                                 //bb_error_msg("'%s' -> '%s'", dest.data, exp_str);
1860                                 o_free(&dest);
1861                         }
1862  skip_expand:
1863                         hooks.lookupvar = lookup_param;
1864                         hooks.setvar = arith_set_local_var;
1865                         hooks.endofname = endofname;
1866                         res = arith(exp_str ? exp_str : arg, &errcode, &hooks);
1867                         free(exp_str);
1868
1869                         if (errcode < 0) {
1870                                 switch (errcode) {
1871                                 case -3: maybe_die("arith", "exponent less than 0"); break;
1872                                 case -2: maybe_die("arith", "divide by zero"); break;
1873                                 case -5: maybe_die("arith", "expression recursion loop detected"); break;
1874                                 default: maybe_die("arith", "syntax error"); break;
1875                                 }
1876                         }
1877                         debug_printf_subst("ARITH RES '"arith_t_fmt"'\n", res);
1878                         sprintf(arith_buf, arith_t_fmt, res);
1879                         val = arith_buf;
1880                         break;
1881                 }
1882 #endif
1883                 default: /* <SPECIAL_VAR_SYMBOL>varname<SPECIAL_VAR_SYMBOL> */
1884                 case_default: {
1885                         bool exp_len = false, exp_null = false;
1886                         char *var = arg, exp_save, exp_op, *exp_word;
1887                         size_t exp_off = 0;
1888                         *p = '\0';
1889                         arg[0] = first_ch & 0x7f;
1890
1891                         /* prepare for expansions */
1892                         if (var[0] == '#') {
1893                                 /* handle length expansion ${#var} */
1894                                 exp_len = true;
1895                                 ++var;
1896                         } else {
1897                                 /* maybe handle parameter expansion */
1898                                 exp_off = strcspn(var, ":-=+?");
1899                                 if (!var[exp_off])
1900                                         exp_off = 0;
1901                                 if (exp_off) {
1902                                         exp_save = var[exp_off];
1903                                         exp_null = exp_save == ':';
1904                                         exp_word = var + exp_off;
1905                                         if (exp_null) ++exp_word;
1906                                         exp_op = *exp_word++;
1907                                         var[exp_off] = '\0';
1908                                 }
1909                         }
1910
1911                         /* lookup the variable in question */
1912                         if (isdigit(var[0])) {
1913                                 /* handle_dollar() should have vetted var for us */
1914                                 i = xatoi_u(var);
1915                                 if (i < G.global_argc)
1916                                         val = G.global_argv[i];
1917                                 /* else val remains NULL: $N with too big N */
1918                         } else
1919                                 val = lookup_param(var);
1920
1921                         /* handle any expansions */
1922                         if (exp_len) {
1923                                 debug_printf_expand("expand: length of '%s' = ", val);
1924                                 val = utoa(val ? strlen(val) : 0);
1925                                 debug_printf_expand("%s\n", val);
1926                         } else if (exp_off) {
1927                                 /* we need to do an expansion */
1928                                 int exp_test = (!val || (exp_null && !val[0]));
1929                                 if (exp_op == '+')
1930                                         exp_test = !exp_test;
1931                                 debug_printf_expand("expand: op:%c (null:%s) test:%i\n", exp_op,
1932                                         exp_null ? "true" : "false", exp_test);
1933                                 if (exp_test) {
1934                                         if (exp_op == '?')
1935                                                 maybe_die(var, *exp_word ? exp_word : "parameter null or not set");
1936                                         else
1937                                                 val = exp_word;
1938
1939                                         if (exp_op == '=') {
1940                                                 if (isdigit(var[0]) || var[0] == '#') {
1941                                                         maybe_die(var, "special vars cannot assign in this way");
1942                                                         val = NULL;
1943                                                 } else {
1944                                                         char *new_var = xmalloc(strlen(var) + strlen(val) + 2);
1945                                                         sprintf(new_var, "%s=%s", var, val);
1946                                                         set_local_var(new_var, -1);
1947                                                 }
1948                                         }
1949                                 }
1950                                 var[exp_off] = exp_save;
1951                         }
1952
1953                         arg[0] = first_ch;
1954
1955 #if ENABLE_HUSH_TICK
1956  store_val:
1957 #endif
1958                         if (!(first_ch & 0x80)) { /* unquoted $VAR */
1959                                 debug_printf_expand("unquoted '%s', output->o_escape:%d\n", val, output->o_escape);
1960                                 if (val) {
1961                                         /* unquoted var's contents should be globbed, so don't escape */
1962                                         smallint sv = output->o_escape;
1963                                         output->o_escape = 0;
1964                                         n = expand_on_ifs(output, n, val);
1965                                         val = NULL;
1966                                         output->o_escape = sv;
1967                                 }
1968                         } else { /* quoted $VAR, val will be appended below */
1969                                 debug_printf_expand("quoted '%s', output->o_escape:%d\n", val, output->o_escape);
1970                         }
1971                 } /* default: */
1972                 } /* switch (char after <SPECIAL_VAR_SYMBOL>) */
1973                 if (val) {
1974                         o_addQstr(output, val, strlen(val));
1975                 }
1976                 /* Do the check to avoid writing to a const string */
1977                 if (*p != SPECIAL_VAR_SYMBOL)
1978                         *p = SPECIAL_VAR_SYMBOL;
1979
1980 #if ENABLE_HUSH_TICK
1981                 o_free(&subst_result);
1982 #endif
1983                 arg = ++p;
1984         } /* end of "while (SPECIAL_VAR_SYMBOL is found) ..." */
1985
1986         if (arg[0]) {
1987                 debug_print_list("expand_vars_to_list[a]", output, n);
1988                 /* this part is literal, and it was already pre-quoted
1989                  * if needed (much earlier), do not use o_addQstr here! */
1990                 o_addstrauto(output, arg);
1991                 debug_print_list("expand_vars_to_list[b]", output, n);
1992         } else if (output->length == o_get_last_ptr(output, n) /* expansion is empty */
1993          && !(ored_ch & 0x80) /* and all vars were not quoted. */
1994         ) {
1995                 n--;
1996                 /* allow to reuse list[n] later without re-growth */
1997                 output->has_empty_slot = 1;
1998         } else {
1999                 o_addchr(output, '\0');
2000         }
2001         return n;
2002 }
2003
2004 static char **expand_variables(char **argv, int or_mask)
2005 {
2006         int n;
2007         char **list;
2008         char **v;
2009         o_string output = NULL_O_STRING;
2010
2011         if (or_mask & 0x100) {
2012                 output.o_escape = 1; /* protect against globbing for "$var" */
2013                 /* (unquoted $var will temporarily switch it off) */
2014                 output.o_glob = 1;
2015         }
2016
2017         n = 0;
2018         v = argv;
2019         while (*v) {
2020                 n = expand_vars_to_list(&output, n, *v, (char)or_mask);
2021                 v++;
2022         }
2023         debug_print_list("expand_variables", &output, n);
2024
2025         /* output.data (malloced in one block) gets returned in "list" */
2026         list = o_finalize_list(&output, n);
2027         debug_print_strings("expand_variables[1]", list);
2028         return list;
2029 }
2030
2031 static char **expand_strvec_to_strvec(char **argv)
2032 {
2033         return expand_variables(argv, 0x100);
2034 }
2035
2036 /* Used for expansion of right hand of assignments */
2037 /* NB: should NOT do globbing! "export v=/bin/c*; env | grep ^v=" outputs
2038  * "v=/bin/c*" */
2039 static char *expand_string_to_string(const char *str)
2040 {
2041         char *argv[2], **list;
2042
2043         argv[0] = (char*)str;
2044         argv[1] = NULL;
2045         list = expand_variables(argv, 0x80); /* 0x80: make one-element expansion */
2046         if (HUSH_DEBUG)
2047                 if (!list[0] || list[1])
2048                         bb_error_msg_and_die("BUG in varexp2");
2049         /* actually, just move string 2*sizeof(char*) bytes back */
2050         overlapping_strcpy((char*)list, list[0]);
2051         debug_printf_expand("string_to_string='%s'\n", (char*)list);
2052         return (char*)list;
2053 }
2054
2055 /* Used for "eval" builtin */
2056 static char* expand_strvec_to_string(char **argv)
2057 {
2058         char **list;
2059
2060         list = expand_variables(argv, 0x80);
2061         /* Convert all NULs to spaces */
2062         if (list[0]) {
2063                 int n = 1;
2064                 while (list[n]) {
2065                         if (HUSH_DEBUG)
2066                                 if (list[n-1] + strlen(list[n-1]) + 1 != list[n])
2067                                         bb_error_msg_and_die("BUG in varexp3");
2068                         list[n][-1] = ' '; /* TODO: or to G.ifs[0]? */
2069                         n++;
2070                 }
2071         }
2072         overlapping_strcpy((char*)list, list[0]);
2073         debug_printf_expand("strvec_to_string='%s'\n", (char*)list);
2074         return (char*)list;
2075 }
2076
2077 static char **expand_assignments(char **argv, int count)
2078 {
2079         int i;
2080         char **p = NULL;
2081         /* Expand assignments into one string each */
2082         for (i = 0; i < count; i++) {
2083                 p = add_string_to_strings(p, expand_string_to_string(argv[i]));
2084         }
2085         return p;
2086 }
2087
2088
2089 /* squirrel != NULL means we squirrel away copies of stdin, stdout,
2090  * and stderr if they are redirected. */
2091 static int setup_redirects(struct command *prog, int squirrel[])
2092 {
2093         int openfd, mode;
2094         struct redir_struct *redir;
2095
2096         for (redir = prog->redirects; redir; redir = redir->next) {
2097                 if (redir->dup == -1 && redir->rd_filename == NULL) {
2098                         /* something went wrong in the parse.  Pretend it didn't happen */
2099                         continue;
2100                 }
2101                 if (redir->dup == -1) {
2102                         char *p;
2103                         mode = redir_table[redir->rd_type].mode;
2104 //TODO: check redir for names like '\\'
2105                         p = expand_string_to_string(redir->rd_filename);
2106                         openfd = open_or_warn(p, mode);
2107                         free(p);
2108                         if (openfd < 0) {
2109                         /* this could get lost if stderr has been redirected, but
2110                            bash and ash both lose it as well (though zsh doesn't!) */
2111                                 return 1;
2112                         }
2113                 } else {
2114                         openfd = redir->dup;
2115                 }
2116
2117                 if (openfd != redir->fd) {
2118                         if (squirrel && redir->fd < 3) {
2119                                 squirrel[redir->fd] = dup(redir->fd);
2120                         }
2121                         if (openfd == -3) {
2122                                 //close(openfd); // close(-3) ??!
2123                         } else {
2124                                 dup2(openfd, redir->fd);
2125                                 if (redir->dup == -1)
2126                                         close(openfd);
2127                         }
2128                 }
2129         }
2130         return 0;
2131 }
2132
2133 static void restore_redirects(int squirrel[])
2134 {
2135         int i, fd;
2136         for (i = 0; i < 3; i++) {
2137                 fd = squirrel[i];
2138                 if (fd != -1) {
2139                         /* We simply die on error */
2140                         xmove_fd(fd, i);
2141                 }
2142         }
2143 }
2144
2145
2146 #if !defined(DEBUG_CLEAN)
2147 #define free_pipe_list(head, indent) free_pipe_list(head)
2148 #define free_pipe(pi, indent)        free_pipe(pi)
2149 #endif
2150 static int free_pipe_list(struct pipe *head, int indent);
2151
2152 /* return code is the exit status of the pipe */
2153 static int free_pipe(struct pipe *pi, int indent)
2154 {
2155         char **p;
2156         struct command *command;
2157         struct redir_struct *r, *rnext;
2158         int a, i, ret_code = 0;
2159
2160         if (pi->stopped_cmds > 0)
2161                 return ret_code;
2162         debug_printf_clean("%s run pipe: (pid %d)\n", indenter(indent), getpid());
2163         for (i = 0; i < pi->num_cmds; i++) {
2164                 command = &pi->cmds[i];
2165                 debug_printf_clean("%s  command %d:\n", indenter(indent), i);
2166                 if (command->argv) {
2167                         for (a = 0, p = command->argv; *p; a++, p++) {
2168                                 debug_printf_clean("%s   argv[%d] = %s\n", indenter(indent), a, *p);
2169                         }
2170                         free_strings(command->argv);
2171                         command->argv = NULL;
2172                 } else if (command->group) {
2173                         debug_printf_clean("%s   begin group (grp_type:%d)\n", indenter(indent), command->grp_type);
2174                         ret_code = free_pipe_list(command->group, indent+3);
2175                         debug_printf_clean("%s   end group\n", indenter(indent));
2176                 } else {
2177                         debug_printf_clean("%s   (nil)\n", indenter(indent));
2178                 }
2179                 for (r = command->redirects; r; r = rnext) {
2180                         debug_printf_clean("%s   redirect %d%s", indenter(indent), r->fd, redir_table[r->rd_type].descrip);
2181                         if (r->dup == -1) {
2182                                 /* guard against the case >$FOO, where foo is unset or blank */
2183                                 if (r->rd_filename) {
2184                                         debug_printf_clean(" %s\n", r->rd_filename);
2185                                         free(r->rd_filename);
2186                                         r->rd_filename = NULL;
2187                                 }
2188                         } else {
2189                                 debug_printf_clean("&%d\n", r->dup);
2190                         }
2191                         rnext = r->next;
2192                         free(r);
2193                 }
2194                 command->redirects = NULL;
2195         }
2196         free(pi->cmds);   /* children are an array, they get freed all at once */
2197         pi->cmds = NULL;
2198 #if ENABLE_HUSH_JOB
2199         free(pi->cmdtext);
2200         pi->cmdtext = NULL;
2201 #endif
2202         return ret_code;
2203 }
2204
2205 static int free_pipe_list(struct pipe *head, int indent)
2206 {
2207         int rcode = 0;   /* if list has no members */
2208         struct pipe *pi, *next;
2209
2210         for (pi = head; pi; pi = next) {
2211 #if HAS_KEYWORDS
2212                 debug_printf_clean("%s pipe reserved mode %d\n", indenter(indent), pi->res_word);
2213 #endif
2214                 rcode = free_pipe(pi, indent);
2215                 debug_printf_clean("%s pipe followup code %d\n", indenter(indent), pi->followup);
2216                 next = pi->next;
2217                 /*pi->next = NULL;*/
2218                 free(pi);
2219         }
2220         return rcode;
2221 }
2222
2223
2224 #if !BB_MMU
2225 typedef struct nommu_save_t {
2226         char **new_env;
2227         char **old_env;
2228         char **argv;
2229 } nommu_save_t;
2230 #else
2231 #define pseudo_exec_argv(nommu_save, argv, assignment_cnt, argv_expanded) \
2232         pseudo_exec_argv(argv, assignment_cnt, argv_expanded)
2233 #define pseudo_exec(nommu_save, command, argv_expanded) \
2234         pseudo_exec(command, argv_expanded)
2235 #endif
2236
2237 /* Called after [v]fork() in run_pipe(), or from builtin_exec().
2238  * Never returns.
2239  * XXX no exit() here.  If you don't exec, use _exit instead.
2240  * The at_exit handlers apparently confuse the calling process,
2241  * in particular stdin handling.  Not sure why? -- because of vfork! (vda) */
2242 static void pseudo_exec_argv(nommu_save_t *nommu_save, char **argv, int assignment_cnt, char **argv_expanded) NORETURN;
2243 static void pseudo_exec_argv(nommu_save_t *nommu_save, char **argv, int assignment_cnt, char **argv_expanded)
2244 {
2245         int rcode;
2246         char **new_env;
2247         const struct built_in_command *x;
2248
2249         /* If a variable is assigned in a forest, and nobody listens,
2250          * was it ever really set?
2251          */
2252         if (!argv[assignment_cnt])
2253                 _exit(EXIT_SUCCESS);
2254
2255         new_env = expand_assignments(argv, assignment_cnt);
2256 #if BB_MMU
2257         putenv_all(new_env);
2258         free(new_env); /* optional */
2259 #else
2260         nommu_save->new_env = new_env;
2261         nommu_save->old_env = putenv_all_and_save_old(new_env);
2262 #endif
2263         if (argv_expanded) {
2264                 argv = argv_expanded;
2265         } else {
2266                 argv = expand_strvec_to_strvec(argv + assignment_cnt);
2267 #if !BB_MMU
2268                 nommu_save->argv = argv;
2269 #endif
2270         }
2271
2272         /*
2273          * Check if the command matches any of the builtins.
2274          * Depending on context, this might be redundant.  But it's
2275          * easier to waste a few CPU cycles than it is to figure out
2276          * if this is one of those cases.
2277          */
2278         for (x = bltins; x != &bltins[ARRAY_SIZE(bltins)]; x++) {
2279                 if (strcmp(argv[0], x->cmd) == 0) {
2280                         debug_printf_exec("running builtin '%s'\n", argv[0]);
2281                         rcode = x->function(argv);
2282                         fflush(stdout);
2283                         _exit(rcode);
2284                 }
2285         }
2286
2287         /* Check if the command matches any busybox applets */
2288 #if ENABLE_FEATURE_SH_STANDALONE
2289         if (strchr(argv[0], '/') == NULL) {
2290                 int a = find_applet_by_name(argv[0]);
2291                 if (a >= 0) {
2292                         if (APPLET_IS_NOEXEC(a)) {
2293                                 debug_printf_exec("running applet '%s'\n", argv[0]);
2294 // is it ok that run_applet_no_and_exit() does exit(), not _exit()?
2295                                 run_applet_no_and_exit(a, argv);
2296                         }
2297                         /* re-exec ourselves with the new arguments */
2298                         debug_printf_exec("re-execing applet '%s'\n", argv[0]);
2299                         execvp(bb_busybox_exec_path, argv);
2300                         /* If they called chroot or otherwise made the binary no longer
2301                          * executable, fall through */
2302                 }
2303         }
2304 #endif
2305
2306         sigprocmask(SIG_SETMASK, &G.inherited_set, NULL);
2307
2308         debug_printf_exec("execing '%s'\n", argv[0]);
2309         execvp(argv[0], argv);
2310         bb_perror_msg("can't exec '%s'", argv[0]);
2311         _exit(EXIT_FAILURE);
2312 }
2313
2314 static int run_list(struct pipe *pi);
2315
2316 /* Called after [v]fork() in run_pipe()
2317  */
2318 static void pseudo_exec(nommu_save_t *nommu_save, struct command *command, char **argv_expanded) NORETURN;
2319 static void pseudo_exec(nommu_save_t *nommu_save, struct command *command, char **argv_expanded)
2320 {
2321         if (command->argv)
2322                 pseudo_exec_argv(nommu_save, command->argv, command->assignment_cnt, argv_expanded);
2323
2324         if (command->group) {
2325 #if !BB_MMU
2326                 bb_error_msg_and_die("nested lists are not supported on NOMMU");
2327 #else
2328                 int rcode;
2329                 debug_printf_exec("pseudo_exec: run_list\n");
2330                 rcode = run_list(command->group);
2331                 /* OK to leak memory by not calling free_pipe_list,
2332                  * since this process is about to exit */
2333                 _exit(rcode);
2334 #endif
2335         }
2336
2337         /* Can happen.  See what bash does with ">foo" by itself. */
2338         debug_printf("trying to pseudo_exec null command\n");
2339         _exit(EXIT_SUCCESS);
2340 }
2341
2342 #if ENABLE_HUSH_JOB
2343 static const char *get_cmdtext(struct pipe *pi)
2344 {
2345         char **argv;
2346         char *p;
2347         int len;
2348
2349         /* This is subtle. ->cmdtext is created only on first backgrounding.
2350          * (Think "cat, <ctrl-z>, fg, <ctrl-z>, fg, <ctrl-z>...." here...)
2351          * On subsequent bg argv is trashed, but we won't use it */
2352         if (pi->cmdtext)
2353                 return pi->cmdtext;
2354         argv = pi->cmds[0].argv;
2355         if (!argv || !argv[0]) {
2356                 pi->cmdtext = xzalloc(1);
2357                 return pi->cmdtext;
2358         }
2359
2360         len = 0;
2361         do len += strlen(*argv) + 1; while (*++argv);
2362         pi->cmdtext = p = xmalloc(len);
2363         argv = pi->cmds[0].argv;
2364         do {
2365                 len = strlen(*argv);
2366                 memcpy(p, *argv, len);
2367                 p += len;
2368                 *p++ = ' ';
2369         } while (*++argv);
2370         p[-1] = '\0';
2371         return pi->cmdtext;
2372 }
2373
2374 static void insert_bg_job(struct pipe *pi)
2375 {
2376         struct pipe *thejob;
2377         int i;
2378
2379         /* Linear search for the ID of the job to use */
2380         pi->jobid = 1;
2381         for (thejob = G.job_list; thejob; thejob = thejob->next)
2382                 if (thejob->jobid >= pi->jobid)
2383                         pi->jobid = thejob->jobid + 1;
2384
2385         /* Add thejob to the list of running jobs */
2386         if (!G.job_list) {
2387                 thejob = G.job_list = xmalloc(sizeof(*thejob));
2388         } else {
2389                 for (thejob = G.job_list; thejob->next; thejob = thejob->next)
2390                         continue;
2391                 thejob->next = xmalloc(sizeof(*thejob));
2392                 thejob = thejob->next;
2393         }
2394
2395         /* Physically copy the struct job */
2396         memcpy(thejob, pi, sizeof(struct pipe));
2397         thejob->cmds = xzalloc(sizeof(pi->cmds[0]) * pi->num_cmds);
2398         /* We cannot copy entire pi->cmds[] vector! Double free()s will happen */
2399         for (i = 0; i < pi->num_cmds; i++) {
2400 // TODO: do we really need to have so many fields which are just dead weight
2401 // at execution stage?
2402                 thejob->cmds[i].pid = pi->cmds[i].pid;
2403                 /* all other fields are not used and stay zero */
2404         }
2405         thejob->next = NULL;
2406         thejob->cmdtext = xstrdup(get_cmdtext(pi));
2407
2408         /* We don't wait for background thejobs to return -- append it
2409            to the list of backgrounded thejobs and leave it alone */
2410         if (G.interactive_fd)
2411                 printf("[%d] %d %s\n", thejob->jobid, thejob->cmds[0].pid, thejob->cmdtext);
2412         G.last_bg_pid = thejob->cmds[0].pid;
2413         G.last_jobid = thejob->jobid;
2414 }
2415
2416 static void remove_bg_job(struct pipe *pi)
2417 {
2418         struct pipe *prev_pipe;
2419
2420         if (pi == G.job_list) {
2421                 G.job_list = pi->next;
2422         } else {
2423                 prev_pipe = G.job_list;
2424                 while (prev_pipe->next != pi)
2425                         prev_pipe = prev_pipe->next;
2426                 prev_pipe->next = pi->next;
2427         }
2428         if (G.job_list)
2429                 G.last_jobid = G.job_list->jobid;
2430         else
2431                 G.last_jobid = 0;
2432 }
2433
2434 /* Remove a backgrounded job */
2435 static void delete_finished_bg_job(struct pipe *pi)
2436 {
2437         remove_bg_job(pi);
2438         pi->stopped_cmds = 0;
2439         free_pipe(pi, 0);
2440         free(pi);
2441 }
2442 #endif /* JOB */
2443
2444 /* Check to see if any processes have exited -- if they
2445  * have, figure out why and see if a job has completed */
2446 static int checkjobs(struct pipe* fg_pipe)
2447 {
2448         int attributes;
2449         int status;
2450 #if ENABLE_HUSH_JOB
2451         struct pipe *pi;
2452 #endif
2453         pid_t childpid;
2454         int rcode = 0;
2455
2456         debug_printf_jobs("checkjobs %p\n", fg_pipe);
2457
2458         errno = 0;
2459 //      if (G.handled_SIGCHLD == G.count_SIGCHLD)
2460 //              /* avoid doing syscall, nothing there anyway */
2461 //              return rcode;
2462
2463         attributes = WUNTRACED;
2464         if (fg_pipe == NULL)
2465                 attributes |= WNOHANG;
2466
2467 /* Do we do this right?
2468  * bash-3.00# sleep 20 | false
2469  * <ctrl-Z pressed>
2470  * [3]+  Stopped          sleep 20 | false
2471  * bash-3.00# echo $?
2472  * 1   <========== bg pipe is not fully done, but exitcode is already known!
2473  */
2474
2475 //FIXME: non-interactive bash does not continue even if all processes in fg pipe
2476 //are stopped. Testcase: "cat | cat" in a script (not on command line)
2477 // + killall -STOP cat
2478
2479  wait_more:
2480         while (1) {
2481                 int i;
2482                 int dead;
2483
2484 //              i = G.count_SIGCHLD;
2485                 childpid = waitpid(-1, &status, attributes);
2486                 if (childpid <= 0) {
2487                         if (childpid && errno != ECHILD)
2488                                 bb_perror_msg("waitpid");
2489 //                      else /* Until next SIGCHLD, waitpid's are useless */
2490 //                              G.handled_SIGCHLD = i;
2491                         break;
2492                 }
2493                 dead = WIFEXITED(status) || WIFSIGNALED(status);
2494
2495 #if DEBUG_JOBS
2496                 if (WIFSTOPPED(status))
2497                         debug_printf_jobs("pid %d stopped by sig %d (exitcode %d)\n",
2498                                         childpid, WSTOPSIG(status), WEXITSTATUS(status));
2499                 if (WIFSIGNALED(status))
2500                         debug_printf_jobs("pid %d killed by sig %d (exitcode %d)\n",
2501                                         childpid, WTERMSIG(status), WEXITSTATUS(status));
2502                 if (WIFEXITED(status))
2503                         debug_printf_jobs("pid %d exited, exitcode %d\n",
2504                                         childpid, WEXITSTATUS(status));
2505 #endif
2506                 /* Were we asked to wait for fg pipe? */
2507                 if (fg_pipe) {
2508                         for (i = 0; i < fg_pipe->num_cmds; i++) {
2509                                 debug_printf_jobs("check pid %d\n", fg_pipe->cmds[i].pid);
2510                                 if (fg_pipe->cmds[i].pid != childpid)
2511                                         continue;
2512                                 /* printf("process %d exit %d\n", i, WEXITSTATUS(status)); */
2513                                 if (dead) {
2514                                         fg_pipe->cmds[i].pid = 0;
2515                                         fg_pipe->alive_cmds--;
2516                                         if (i == fg_pipe->num_cmds - 1) {
2517                                                 /* last process gives overall exitstatus */
2518                                                 rcode = WEXITSTATUS(status);
2519                                                 IF_HAS_KEYWORDS(if (fg_pipe->pi_inverted) rcode = !rcode;)
2520                                         }
2521                                 } else {
2522                                         fg_pipe->cmds[i].is_stopped = 1;
2523                                         fg_pipe->stopped_cmds++;
2524                                 }
2525                                 debug_printf_jobs("fg_pipe: alive_cmds %d stopped_cmds %d\n",
2526                                                 fg_pipe->alive_cmds, fg_pipe->stopped_cmds);
2527                                 if (fg_pipe->alive_cmds - fg_pipe->stopped_cmds <= 0) {
2528                                         /* All processes in fg pipe have exited/stopped */
2529 #if ENABLE_HUSH_JOB
2530                                         if (fg_pipe->alive_cmds)
2531                                                 insert_bg_job(fg_pipe);
2532 #endif
2533                                         return rcode;
2534                                 }
2535                                 /* There are still running processes in the fg pipe */
2536                                 goto wait_more; /* do waitpid again */
2537                         }
2538                         /* it wasnt fg_pipe, look for process in bg pipes */
2539                 }
2540
2541 #if ENABLE_HUSH_JOB
2542                 /* We asked to wait for bg or orphaned children */
2543                 /* No need to remember exitcode in this case */
2544                 for (pi = G.job_list; pi; pi = pi->next) {
2545                         for (i = 0; i < pi->num_cmds; i++) {
2546                                 if (pi->cmds[i].pid == childpid)
2547                                         goto found_pi_and_prognum;
2548                         }
2549                 }
2550                 /* Happens when shell is used as init process (init=/bin/sh) */
2551                 debug_printf("checkjobs: pid %d was not in our list!\n", childpid);
2552                 continue; /* do waitpid again */
2553
2554  found_pi_and_prognum:
2555                 if (dead) {
2556                         /* child exited */
2557                         pi->cmds[i].pid = 0;
2558                         pi->alive_cmds--;
2559                         if (!pi->alive_cmds) {
2560                                 if (G.interactive_fd)
2561                                         printf(JOB_STATUS_FORMAT, pi->jobid,
2562                                                         "Done", pi->cmdtext);
2563                                 delete_finished_bg_job(pi);
2564                         }
2565                 } else {
2566                         /* child stopped */
2567                         pi->cmds[i].is_stopped = 1;
2568                         pi->stopped_cmds++;
2569                 }
2570 #endif
2571         } /* while (waitpid succeeds)... */
2572
2573         return rcode;
2574 }
2575
2576 #if ENABLE_HUSH_JOB
2577 static int checkjobs_and_fg_shell(struct pipe* fg_pipe)
2578 {
2579         pid_t p;
2580         int rcode = checkjobs(fg_pipe);
2581         /* Job finished, move the shell to the foreground */
2582         p = getpgid(0); /* pgid of our process */
2583         debug_printf_jobs("fg'ing ourself: getpgid(0)=%d\n", (int)p);
2584         tcsetpgrp(G.interactive_fd, p);
2585         return rcode;
2586 }
2587 #endif
2588
2589 /* run_pipe() starts all the jobs, but doesn't wait for anything
2590  * to finish.  See checkjobs().
2591  *
2592  * return code is normally -1, when the caller has to wait for children
2593  * to finish to determine the exit status of the pipe.  If the pipe
2594  * is a simple builtin command, however, the action is done by the
2595  * time run_pipe returns, and the exit code is provided as the
2596  * return value.
2597  *
2598  * The input of the pipe is always stdin, the output is always
2599  * stdout.  The outpipe[] mechanism in BusyBox-0.48 lash is bogus,
2600  * because it tries to avoid running the command substitution in
2601  * subshell, when that is in fact necessary.  The subshell process
2602  * now has its stdout directed to the input of the appropriate pipe,
2603  * so this routine is noticeably simpler.
2604  *
2605  * Returns -1 only if started some children. IOW: we have to
2606  * mask out retvals of builtins etc with 0xff!
2607  */
2608 static int run_pipe(struct pipe *pi)
2609 {
2610         int i;
2611         int nextin;
2612         int pipefds[2];         /* pipefds[0] is for reading */
2613         struct command *command;
2614         char **argv_expanded;
2615         char **argv;
2616         const struct built_in_command *x;
2617         char *p;
2618         /* it is not always needed, but we aim to smaller code */
2619         int squirrel[] = { -1, -1, -1 };
2620         int rcode;
2621         const int single_and_fg = (pi->num_cmds == 1 && pi->followup != PIPE_BG);
2622
2623         debug_printf_exec("run_pipe start: single_and_fg=%d\n", single_and_fg);
2624
2625 #if ENABLE_HUSH_JOB
2626         pi->pgrp = -1;
2627 #endif
2628         pi->alive_cmds = 1;
2629         pi->stopped_cmds = 0;
2630
2631         /* Check if this is a simple builtin (not part of a pipe).
2632          * Builtins within pipes have to fork anyway, and are handled in
2633          * pseudo_exec.  "echo foo | read bar" doesn't work on bash, either.
2634          */
2635         command = &(pi->cmds[0]);
2636
2637 #if ENABLE_HUSH_FUNCTIONS
2638         if (single_and_fg && command->group && command->grp_type == GRP_FUNCTION) {
2639                 /* We "execute" function definition */
2640                 bb_error_msg("here we ought to remember function definition, and go on");
2641                 return EXIT_SUCCESS;
2642         }
2643 #endif
2644
2645         if (single_and_fg && command->group && command->grp_type == GRP_NORMAL) {
2646                 debug_printf("non-subshell grouping\n");
2647                 setup_redirects(command, squirrel);
2648                 debug_printf_exec(": run_list\n");
2649                 rcode = run_list(command->group) & 0xff;
2650                 restore_redirects(squirrel);
2651                 debug_printf_exec("run_pipe return %d\n", rcode);
2652                 IF_HAS_KEYWORDS(if (pi->pi_inverted) rcode = !rcode;)
2653                 return rcode;
2654         }
2655
2656         argv = command->argv;
2657         argv_expanded = NULL;
2658
2659         if (single_and_fg && argv != NULL) {
2660                 char **new_env = NULL;
2661                 char **old_env = NULL;
2662
2663                 i = command->assignment_cnt;
2664                 if (i != 0 && argv[i] == NULL) {
2665                         /* assignments, but no command: set local environment */
2666                         for (i = 0; argv[i] != NULL; i++) {
2667                                 debug_printf("local environment set: %s\n", argv[i]);
2668                                 p = expand_string_to_string(argv[i]);
2669                                 set_local_var(p, 0);
2670                         }
2671                         return EXIT_SUCCESS; /* don't worry about errors in set_local_var() yet */
2672                 }
2673
2674                 /* Expand the rest into (possibly) many strings each */
2675                 argv_expanded = expand_strvec_to_strvec(argv + i);
2676
2677                 for (x = bltins; x != &bltins[ARRAY_SIZE(bltins)]; x++) {
2678                         if (strcmp(argv_expanded[0], x->cmd) != 0)
2679                                 continue;
2680                         if (x->function == builtin_exec && argv_expanded[1] == NULL) {
2681                                 debug_printf("exec with redirects only\n");
2682                                 setup_redirects(command, NULL);
2683                                 rcode = EXIT_SUCCESS;
2684                                 goto clean_up_and_ret1;
2685                         }
2686                         debug_printf("builtin inline %s\n", argv_expanded[0]);
2687                         /* XXX setup_redirects acts on file descriptors, not FILEs.
2688                          * This is perfect for work that comes after exec().
2689                          * Is it really safe for inline use?  Experimentally,
2690                          * things seem to work with glibc. */
2691                         setup_redirects(command, squirrel);
2692                         new_env = expand_assignments(argv, command->assignment_cnt);
2693                         old_env = putenv_all_and_save_old(new_env);
2694                         debug_printf_exec(": builtin '%s' '%s'...\n", x->cmd, argv_expanded[1]);
2695                         rcode = x->function(argv_expanded) & 0xff;
2696 #if ENABLE_FEATURE_SH_STANDALONE
2697  clean_up_and_ret:
2698 #endif
2699                         restore_redirects(squirrel);
2700                         free_strings_and_unsetenv(new_env, 1);
2701                         putenv_all(old_env);
2702                         free(old_env); /* not free_strings()! */
2703  clean_up_and_ret1:
2704                         free(argv_expanded);
2705                         IF_HAS_KEYWORDS(if (pi->pi_inverted) rcode = !rcode;)
2706                         debug_printf_exec("run_pipe return %d\n", rcode);
2707                         return rcode;
2708                 }
2709 #if ENABLE_FEATURE_SH_STANDALONE
2710                 i = find_applet_by_name(argv_expanded[0]);
2711                 if (i >= 0 && APPLET_IS_NOFORK(i)) {
2712                         setup_redirects(command, squirrel);
2713                         save_nofork_data(&G.nofork_save);
2714                         new_env = expand_assignments(argv, command->assignment_cnt);
2715                         old_env = putenv_all_and_save_old(new_env);
2716                         debug_printf_exec(": run_nofork_applet '%s' '%s'...\n", argv_expanded[0], argv_expanded[1]);
2717                         rcode = run_nofork_applet_prime(&G.nofork_save, i, argv_expanded);
2718                         goto clean_up_and_ret;
2719                 }
2720 #endif
2721         }
2722
2723         /* NB: argv_expanded may already be created, and that
2724          * might include `cmd` runs! Do not rerun it! We *must*
2725          * use argv_expanded if it's non-NULL */
2726
2727         /* Going to fork a child per each pipe member */
2728         pi->alive_cmds = 0;
2729         nextin = 0;
2730
2731         for (i = 0; i < pi->num_cmds; i++) {
2732 #if !BB_MMU
2733                 volatile nommu_save_t nommu_save;
2734                 nommu_save.new_env = NULL;
2735                 nommu_save.old_env = NULL;
2736                 nommu_save.argv = NULL;
2737 #endif
2738                 command = &(pi->cmds[i]);
2739                 if (command->argv) {
2740                         debug_printf_exec(": pipe member '%s' '%s'...\n", command->argv[0], command->argv[1]);
2741                 } else
2742                         debug_printf_exec(": pipe member with no argv\n");
2743
2744                 /* pipes are inserted between pairs of commands */
2745                 pipefds[0] = 0;
2746                 pipefds[1] = 1;
2747                 if ((i + 1) < pi->num_cmds)
2748                         xpipe(pipefds);
2749
2750                 command->pid = BB_MMU ? fork() : vfork();
2751                 if (!command->pid) { /* child */
2752 #if ENABLE_HUSH_JOB
2753                         die_sleep = 0; /* let nofork's xfuncs die */
2754
2755                         /* Every child adds itself to new process group
2756                          * with pgid == pid_of_first_child_in_pipe */
2757                         if (G.run_list_level == 1 && G.interactive_fd) {
2758                                 pid_t pgrp;
2759                                 pgrp = pi->pgrp;
2760                                 if (pgrp < 0) /* true for 1st process only */
2761                                         pgrp = getpid();
2762                                 if (setpgid(0, pgrp) == 0 && pi->followup != PIPE_BG) {
2763                                         /* We do it in *every* child, not just first,
2764                                          * to avoid races */
2765                                         tcsetpgrp(G.interactive_fd, pgrp);
2766                                 }
2767                         }
2768 #endif
2769                         xmove_fd(nextin, 0);
2770                         xmove_fd(pipefds[1], 1); /* write end */
2771                         if (pipefds[0] > 1)
2772                                 close(pipefds[0]); /* read end */
2773                         /* Like bash, explicit redirects override pipes,
2774                          * and the pipe fd is available for dup'ing. */
2775                         setup_redirects(command, NULL);
2776
2777                         /* Restore default handlers just prior to exec */
2778                         /*signal(SIGCHLD, SIG_DFL); - so far we don't have any handlers */
2779
2780                         /* Stores to nommu_save list of env vars putenv'ed
2781                          * (NOMMU, on MMU we don't need that) */
2782                         /* cast away volatility... */
2783                         pseudo_exec((nommu_save_t*) &nommu_save, command, argv_expanded);
2784                         /* pseudo_exec() does not return */
2785                 }
2786                 /* parent */
2787 #if !BB_MMU
2788                 /* Clean up after vforked child */
2789                 free(nommu_save.argv);
2790                 free_strings_and_unsetenv(nommu_save.new_env, 1);
2791                 putenv_all(nommu_save.old_env);
2792 #endif
2793                 free(argv_expanded);
2794                 argv_expanded = NULL;
2795                 if (command->pid < 0) { /* [v]fork failed */
2796                         /* Clearly indicate, was it fork or vfork */
2797                         bb_perror_msg(BB_MMU ? "fork" : "vfork");
2798                 } else {
2799                         pi->alive_cmds++;
2800 #if ENABLE_HUSH_JOB
2801                         /* Second and next children need to know pid of first one */
2802                         if (pi->pgrp < 0)
2803                                 pi->pgrp = command->pid;
2804 #endif
2805                 }
2806
2807                 if (i)
2808                         close(nextin);
2809                 if ((i + 1) < pi->num_cmds)
2810                         close(pipefds[1]); /* write end */
2811                 /* Pass read (output) pipe end to next iteration */
2812                 nextin = pipefds[0];
2813         }
2814
2815         if (!pi->alive_cmds) {
2816                 debug_printf_exec("run_pipe return 1 (all forks failed, no children)\n");
2817                 return 1;
2818         }
2819
2820         debug_printf_exec("run_pipe return -1 (%u children started)\n", pi->alive_cmds);
2821         return -1;
2822 }
2823
2824 #ifndef debug_print_tree
2825 static void debug_print_tree(struct pipe *pi, int lvl)
2826 {
2827         static const char *const PIPE[] = {
2828                 [PIPE_SEQ] = "SEQ",
2829                 [PIPE_AND] = "AND",
2830                 [PIPE_OR ] = "OR" ,
2831                 [PIPE_BG ] = "BG" ,
2832         };
2833         static const char *RES[] = {
2834                 [RES_NONE ] = "NONE" ,
2835 #if ENABLE_HUSH_IF
2836                 [RES_IF   ] = "IF"   ,
2837                 [RES_THEN ] = "THEN" ,
2838                 [RES_ELIF ] = "ELIF" ,
2839                 [RES_ELSE ] = "ELSE" ,
2840                 [RES_FI   ] = "FI"   ,
2841 #endif
2842 #if ENABLE_HUSH_LOOPS
2843                 [RES_FOR  ] = "FOR"  ,
2844                 [RES_WHILE] = "WHILE",
2845                 [RES_UNTIL] = "UNTIL",
2846                 [RES_DO   ] = "DO"   ,
2847                 [RES_DONE ] = "DONE" ,
2848 #endif
2849 #if ENABLE_HUSH_LOOPS || ENABLE_HUSH_CASE
2850                 [RES_IN   ] = "IN"   ,
2851 #endif
2852 #if ENABLE_HUSH_CASE
2853                 [RES_CASE ] = "CASE" ,
2854                 [RES_MATCH] = "MATCH",
2855                 [RES_CASEI] = "CASEI",
2856                 [RES_ESAC ] = "ESAC" ,
2857 #endif
2858                 [RES_XXXX ] = "XXXX" ,
2859                 [RES_SNTX ] = "SNTX" ,
2860         };
2861         static const char *const GRPTYPE[] = {
2862                 "()",
2863                 "{}",
2864 #if ENABLE_HUSH_FUNCTIONS
2865                 "func()",
2866 #endif
2867         };
2868
2869         int pin, prn;
2870
2871         pin = 0;
2872         while (pi) {
2873                 fprintf(stderr, "%*spipe %d res_word=%s followup=%d %s\n", lvl*2, "",
2874                                 pin, RES[pi->res_word], pi->followup, PIPE[pi->followup]);
2875                 prn = 0;
2876                 while (prn < pi->num_cmds) {
2877                         struct command *command = &pi->cmds[prn];
2878                         char **argv = command->argv;
2879
2880                         fprintf(stderr, "%*s prog %d assignment_cnt:%d", lvl*2, "", prn, command->assignment_cnt);
2881                         if (command->group) {
2882                                 fprintf(stderr, " group %s: (argv=%p)\n",
2883                                                 GRPTYPE[command->grp_type],
2884                                                 argv);
2885                                 debug_print_tree(command->group, lvl+1);
2886                                 prn++;
2887                                 continue;
2888                         }
2889                         if (argv) while (*argv) {
2890                                 fprintf(stderr, " '%s'", *argv);
2891                                 argv++;
2892                         }
2893                         fprintf(stderr, "\n");
2894                         prn++;
2895                 }
2896                 pi = pi->next;
2897                 pin++;
2898         }
2899 }
2900 #endif
2901
2902 /* NB: called by pseudo_exec, and therefore must not modify any
2903  * global data until exec/_exit (we can be a child after vfork!) */
2904 static int run_list(struct pipe *pi)
2905 {
2906 #if ENABLE_HUSH_CASE
2907         char *case_word = NULL;
2908 #endif
2909 #if ENABLE_HUSH_LOOPS
2910         struct pipe *loop_top = NULL;
2911         char *for_varname = NULL;
2912         char **for_lcur = NULL;
2913         char **for_list = NULL;
2914 #endif
2915         smallint flag_skip = 1;
2916         smalluint rcode = 0; /* probably just for compiler */
2917 #if ENABLE_HUSH_IF || ENABLE_HUSH_CASE
2918         smalluint cond_code = 0;
2919 #else
2920         enum { cond_code = 0, };
2921 #endif
2922         /*enum reserved_style*/ smallint rword = RES_NONE;
2923         /*enum reserved_style*/ smallint skip_more_for_this_rword = RES_XXXX;
2924
2925         debug_printf_exec("run_list start lvl %d\n", G.run_list_level + 1);
2926
2927 #if ENABLE_HUSH_LOOPS
2928         /* Check syntax for "for" */
2929         for (struct pipe *cpipe = pi; cpipe; cpipe = cpipe->next) {
2930                 if (cpipe->res_word != RES_FOR && cpipe->res_word != RES_IN)
2931                         continue;
2932                 /* current word is FOR or IN (BOLD in comments below) */
2933                 if (cpipe->next == NULL) {
2934                         syntax("malformed for");
2935                         debug_printf_exec("run_list lvl %d return 1\n", G.run_list_level);
2936                         return 1;
2937                 }
2938                 /* "FOR v; do ..." and "for v IN a b; do..." are ok */
2939                 if (cpipe->next->res_word == RES_DO)
2940                         continue;
2941                 /* next word is not "do". It must be "in" then ("FOR v in ...") */
2942                 if (cpipe->res_word == RES_IN /* "for v IN a b; not_do..."? */
2943                  || cpipe->next->res_word != RES_IN /* FOR v not_do_and_not_in..."? */
2944                 ) {
2945                         syntax("malformed for");
2946                         debug_printf_exec("run_list lvl %d return 1\n", G.run_list_level);
2947                         return 1;
2948                 }
2949         }
2950 #endif
2951
2952         /* Past this point, all code paths should jump to ret: label
2953          * in order to return, no direct "return" statements please.
2954          * This helps to ensure that no memory is leaked. */
2955
2956 ////TODO: ctrl-Z handling needs re-thinking and re-testing
2957
2958 #if ENABLE_HUSH_JOB
2959         /* Example of nested list: "while true; do { sleep 1 | exit 2; } done".
2960          * We are saving state before entering outermost list ("while...done")
2961          * so that ctrl-Z will correctly background _entire_ outermost list,
2962          * not just a part of it (like "sleep 1 | exit 2") */
2963         if (++G.run_list_level == 1 && G.interactive_fd) {
2964                 if (sigsetjmp(G.toplevel_jb, 1)) {
2965                         /* ctrl-Z forked and we are parent; or ctrl-C.
2966                          * Sighandler has longjmped us here */
2967                         signal(SIGINT, SIG_IGN);
2968                         signal(SIGTSTP, SIG_IGN);
2969                         /* Restore level (we can be coming from deep inside
2970                          * nested levels) */
2971                         G.run_list_level = 1;
2972 #if ENABLE_FEATURE_SH_STANDALONE
2973                         if (G.nofork_save.saved) { /* if save area is valid */
2974                                 debug_printf_jobs("exiting nofork early\n");
2975                                 restore_nofork_data(&G.nofork_save);
2976                         }
2977 #endif
2978 ////                    if (G.ctrl_z_flag) {
2979 ////                            /* ctrl-Z has forked and stored pid of the child in pi->pid.
2980 ////                             * Remember this child as background job */
2981 ////                            insert_bg_job(pi);
2982 ////                    } else {
2983                                 /* ctrl-C. We just stop doing whatever we were doing */
2984                                 bb_putchar('\n');
2985 ////                    }
2986                         USE_HUSH_LOOPS(loop_top = NULL;)
2987                         USE_HUSH_LOOPS(G.depth_of_loop = 0;)
2988                         rcode = 0;
2989                         goto ret;
2990                 }
2991 ////            /* ctrl-Z handler will store pid etc in pi */
2992 ////            G.toplevel_list = pi;
2993 ////            G.ctrl_z_flag = 0;
2994 ////#if ENABLE_FEATURE_SH_STANDALONE
2995 ////            G.nofork_save.saved = 0; /* in case we will run a nofork later */
2996 ////#endif
2997 ////            signal_SA_RESTART_empty_mask(SIGTSTP, handler_ctrl_z);
2998 ////            signal(SIGINT, handler_ctrl_c);
2999         }
3000 #endif /* JOB */
3001
3002         /* Go through list of pipes, (maybe) executing them. */
3003         for (; pi; pi = USE_HUSH_LOOPS(rword == RES_DONE ? loop_top : ) pi->next) {
3004                 if (G.flag_SIGINT)
3005                         break;
3006
3007                 IF_HAS_KEYWORDS(rword = pi->res_word;)
3008                 IF_HAS_NO_KEYWORDS(rword = RES_NONE;)
3009                 debug_printf_exec(": rword=%d cond_code=%d skip_more=%d\n",
3010                                 rword, cond_code, skip_more_for_this_rword);
3011 #if ENABLE_HUSH_LOOPS
3012                 if ((rword == RES_WHILE || rword == RES_UNTIL || rword == RES_FOR)
3013                  && loop_top == NULL /* avoid bumping G.depth_of_loop twice */
3014                 ) {
3015                         /* start of a loop: remember where loop starts */
3016                         loop_top = pi;
3017                         G.depth_of_loop++;
3018                 }
3019 #endif
3020                 if (rword == skip_more_for_this_rword && flag_skip) {
3021                         if (pi->followup == PIPE_SEQ)
3022                                 flag_skip = 0;
3023                         /* it is "<false> && CMD" or "<true> || CMD"
3024                          * and we should not execute CMD */
3025                         continue;
3026                 }
3027                 flag_skip = 1;
3028                 skip_more_for_this_rword = RES_XXXX;
3029 #if ENABLE_HUSH_IF
3030                 if (cond_code) {
3031                         if (rword == RES_THEN) {
3032                                 /* "if <false> THEN cmd": skip cmd */
3033                                 continue;
3034                         }
3035                 } else {
3036                         if (rword == RES_ELSE || rword == RES_ELIF) {
3037                                 /* "if <true> then ... ELSE/ELIF cmd":
3038                                  * skip cmd and all following ones */
3039                                 break;
3040                         }
3041                 }
3042 #endif
3043 #if ENABLE_HUSH_LOOPS
3044                 if (rword == RES_FOR) { /* && pi->num_cmds - always == 1 */
3045                         if (!for_lcur) {
3046                                 /* first loop through for */
3047
3048                                 static const char encoded_dollar_at[] ALIGN1 = {
3049                                         SPECIAL_VAR_SYMBOL, '@' | 0x80, SPECIAL_VAR_SYMBOL, '\0'
3050                                 }; /* encoded representation of "$@" */
3051                                 static const char *const encoded_dollar_at_argv[] = {
3052                                         encoded_dollar_at, NULL
3053                                 }; /* argv list with one element: "$@" */
3054                                 char **vals;
3055
3056                                 vals = (char**)encoded_dollar_at_argv;
3057                                 if (pi->next->res_word == RES_IN) {
3058                                         /* if no variable values after "in" we skip "for" */
3059                                         if (!pi->next->cmds[0].argv)
3060                                                 break;
3061                                         vals = pi->next->cmds[0].argv;
3062                                 } /* else: "for var; do..." -> assume "$@" list */
3063                                 /* create list of variable values */
3064                                 debug_print_strings("for_list made from", vals);
3065                                 for_list = expand_strvec_to_strvec(vals);
3066                                 for_lcur = for_list;
3067                                 debug_print_strings("for_list", for_list);
3068                                 for_varname = pi->cmds[0].argv[0];
3069                                 pi->cmds[0].argv[0] = NULL;
3070                         }
3071                         free(pi->cmds[0].argv[0]);
3072                         if (!*for_lcur) {
3073                                 /* "for" loop is over, clean up */
3074                                 free(for_list);
3075                                 for_list = NULL;
3076                                 for_lcur = NULL;
3077                                 pi->cmds[0].argv[0] = for_varname;
3078                                 break;
3079                         }
3080                         /* insert next value from for_lcur */
3081 //TODO: does it need escaping?
3082                         pi->cmds[0].argv[0] = xasprintf("%s=%s", for_varname, *for_lcur++);
3083                         pi->cmds[0].assignment_cnt = 1;
3084                 }
3085                 if (rword == RES_IN) /* "for v IN list;..." - "in" has no cmds anyway */
3086                         continue;
3087                 if (rword == RES_DONE) {
3088                         continue; /* "done" has no cmds too */
3089                 }
3090 #endif
3091 #if ENABLE_HUSH_CASE
3092                 if (rword == RES_CASE) {
3093                         case_word = expand_strvec_to_string(pi->cmds->argv);
3094                         continue;
3095                 }
3096                 if (rword == RES_MATCH) {
3097                         char **argv;
3098
3099                         if (!case_word) /* "case ... matched_word) ... WORD)": we executed selected branch, stop */
3100                                 break;
3101                         /* all prev words didn't match, does this one match? */
3102                         argv = pi->cmds->argv;
3103                         while (*argv) {
3104                                 char *pattern = expand_string_to_string(*argv);
3105                                 /* TODO: which FNM_xxx flags to use? */
3106                                 cond_code = (fnmatch(pattern, case_word, /*flags:*/ 0) != 0);
3107                                 free(pattern);
3108                                 if (cond_code == 0) { /* match! we will execute this branch */
3109                                         free(case_word); /* make future "word)" stop */
3110                                         case_word = NULL;
3111                                         break;
3112                                 }
3113                                 argv++;
3114                         }
3115                         continue;
3116                 }
3117                 if (rword == RES_CASEI) { /* inside of a case branch */
3118                         if (cond_code != 0)
3119                                 continue; /* not matched yet, skip this pipe */
3120                 }
3121 #endif
3122                 /* Just pressing <enter> in shell should check for jobs.
3123                  * OTOH, in non-interactive shell this is useless
3124                  * and only leads to extra job checks */
3125                 if (pi->num_cmds == 0) {
3126                         if (G.interactive_fd)
3127                                 goto check_jobs_and_continue;
3128                         continue;
3129                 }
3130
3131                 /* After analyzing all keywords and conditions, we decided
3132                  * to execute this pipe. NB: have to do checkjobs(NULL)
3133                  * after run_pipe() to collect any background children,
3134                  * even if list execution is to be stopped. */
3135                 debug_printf_exec(": run_pipe with %d members\n", pi->num_cmds);
3136                 {
3137                         int r;
3138 #if ENABLE_HUSH_LOOPS
3139                         G.flag_break_continue = 0;
3140 #endif
3141                         rcode = r = run_pipe(pi); /* NB: rcode is a smallint */
3142                         if (r != -1) {
3143                                 /* we only ran a builtin: rcode is already known
3144                                  * and we don't need to wait for anything. */
3145                                 check_and_run_traps(0);
3146 #if ENABLE_HUSH_LOOPS
3147                                 /* was it "break" or "continue"? */
3148                                 if (G.flag_break_continue) {
3149                                         smallint fbc = G.flag_break_continue;
3150                                         /* we might fall into outer *loop*,
3151                                          * don't want to break it too */
3152                                         if (loop_top) {
3153                                                 G.depth_break_continue--;
3154                                                 if (G.depth_break_continue == 0)
3155                                                         G.flag_break_continue = 0;
3156                                                 /* else: e.g. "continue 2" should *break* once, *then* continue */
3157                                         } /* else: "while... do... { we are here (innermost list is not a loop!) };...done" */
3158                                         if (G.depth_break_continue != 0 || fbc == BC_BREAK)
3159                                                 goto check_jobs_and_break;
3160                                         /* "continue": simulate end of loop */
3161                                         rword = RES_DONE;
3162                                         continue;
3163                                 }
3164 #endif
3165                         } else if (pi->followup == PIPE_BG) {
3166                                 /* what does bash do with attempts to background builtins? */
3167                                 /* even bash 3.2 doesn't do that well with nested bg:
3168                                  * try "{ { sleep 10; echo DEEP; } & echo HERE; } &".
3169                                  * I'm NOT treating inner &'s as jobs */
3170                                 check_and_run_traps(0);
3171 #if ENABLE_HUSH_JOB
3172                                 if (G.run_list_level == 1)
3173                                         insert_bg_job(pi);
3174 #endif
3175                                 rcode = 0; /* EXIT_SUCCESS */
3176                         } else {
3177 #if ENABLE_HUSH_JOB
3178                                 if (G.run_list_level == 1 && G.interactive_fd) {
3179                                         /* waits for completion, then fg's main shell */
3180                                         rcode = checkjobs_and_fg_shell(pi);
3181                                         check_and_run_traps(0);
3182                                         debug_printf_exec(": checkjobs_and_fg_shell returned %d\n", rcode);
3183                                 } else
3184 #endif
3185                                 { /* this one just waits for completion */
3186                                         rcode = checkjobs(pi);
3187                                         check_and_run_traps(0);
3188                                         debug_printf_exec(": checkjobs returned %d\n", rcode);
3189                                 }
3190                         }
3191                 }
3192                 debug_printf_exec(": setting last_return_code=%d\n", rcode);
3193                 G.last_return_code = rcode;
3194
3195                 /* Analyze how result affects subsequent commands */
3196 #if ENABLE_HUSH_IF
3197                 if (rword == RES_IF || rword == RES_ELIF)
3198                         cond_code = rcode;
3199 #endif
3200 #if ENABLE_HUSH_LOOPS
3201                 if (rword == RES_WHILE) {
3202                         if (rcode) {
3203                                 rcode = 0; /* "while false; do...done" - exitcode 0 */
3204                                 goto check_jobs_and_break;
3205                         }
3206                 }
3207                 if (rword == RES_UNTIL) {
3208                         if (!rcode) {
3209  check_jobs_and_break:
3210                                 checkjobs(NULL);
3211                                 break;
3212                         }
3213                 }
3214 #endif
3215                 if ((rcode == 0 && pi->followup == PIPE_OR)
3216                  || (rcode != 0 && pi->followup == PIPE_AND)
3217                 ) {
3218                         skip_more_for_this_rword = rword;
3219                 }
3220
3221  check_jobs_and_continue:
3222                 checkjobs(NULL);
3223         } /* for (pi) */
3224
3225 #if ENABLE_HUSH_JOB
3226 ////    if (G.ctrl_z_flag) {
3227 ////            /* ctrl-Z forked somewhere in the past, we are the child,
3228 ////             * and now we completed running the list. Exit. */
3229 //////TODO: _exit?
3230 ////            exit(rcode);
3231 ////    }
3232  ret:
3233         G.run_list_level--;
3234 ////    if (!G.run_list_level && G.interactive_fd) {
3235 ////            signal(SIGTSTP, SIG_IGN);
3236 ////            signal(SIGINT, SIG_IGN);
3237 ////    }
3238 #endif
3239         debug_printf_exec("run_list lvl %d return %d\n", G.run_list_level + 1, rcode);
3240 #if ENABLE_HUSH_LOOPS
3241         if (loop_top)
3242                 G.depth_of_loop--;
3243         free(for_list);
3244 #endif
3245 #if ENABLE_HUSH_CASE
3246         free(case_word);
3247 #endif
3248         return rcode;
3249 }
3250
3251 /* Select which version we will use */
3252 static int run_and_free_list(struct pipe *pi)
3253 {
3254         int rcode = 0;
3255         debug_printf_exec("run_and_free_list entered\n");
3256         if (!G.fake_mode) {
3257                 debug_printf_exec(": run_list with %d members\n", pi->num_cmds);
3258                 rcode = run_list(pi);
3259         }
3260         /* free_pipe_list has the side effect of clearing memory.
3261          * In the long run that function can be merged with run_list,
3262          * but doing that now would hobble the debugging effort. */
3263         free_pipe_list(pi, /* indent: */ 0);
3264         debug_printf_exec("run_and_free_list return %d\n", rcode);
3265         return rcode;
3266 }
3267
3268
3269 /* Peek ahead in the in_str to find out if we have a "&n" construct,
3270  * as in "2>&1", that represents duplicating a file descriptor.
3271  * Return either -2 (syntax error), -1 (no &), or the number found.
3272  */
3273 static int redirect_dup_num(struct in_str *input)
3274 {
3275         int ch, d = 0, ok = 0;
3276         ch = i_peek(input);
3277         if (ch != '&') return -1;
3278
3279         i_getch(input);  /* get the & */
3280         ch = i_peek(input);
3281         if (ch == '-') {
3282                 i_getch(input);
3283                 return -3;  /* "-" represents "close me" */
3284         }
3285         while (isdigit(ch)) {
3286                 d = d*10 + (ch-'0');
3287                 ok = 1;
3288                 i_getch(input);
3289                 ch = i_peek(input);
3290         }
3291         if (ok) return d;
3292
3293         bb_error_msg("ambiguous redirect");
3294         return -2;
3295 }
3296
3297 /* The src parameter allows us to peek forward to a possible &n syntax
3298  * for file descriptor duplication, e.g., "2>&1".
3299  * Return code is 0 normally, 1 if a syntax error is detected in src.
3300  * Resource errors (in xmalloc) cause the process to exit */
3301 static int setup_redirect(struct parse_context *ctx,
3302                 int fd,
3303                 redir_type style,
3304                 struct in_str *input)
3305 {
3306         struct command *command = ctx->command;
3307         struct redir_struct *redir;
3308         struct redir_struct **redirp;
3309         int dup_num;
3310
3311         /* Check for a '2>&1' type redirect */
3312         dup_num = redirect_dup_num(input);
3313         if (dup_num == -2)
3314                 return 1;  /* syntax error */
3315
3316         /* Create a new redir_struct and drop it onto the end of the linked list */
3317         redirp = &command->redirects;
3318         while ((redir = *redirp) != NULL) {
3319                 redirp = &(redir->next);
3320         }
3321         *redirp = redir = xzalloc(sizeof(*redir));
3322         /* redir->next = NULL; */
3323         /* redir->rd_filename = NULL; */
3324         redir->rd_type = style;
3325         redir->fd = (fd == -1) ? redir_table[style].default_fd : fd;
3326
3327         debug_printf("Redirect type %d%s\n", redir->fd, redir_table[style].descrip);
3328
3329         redir->dup = dup_num;
3330         if (dup_num != -1) {
3331                 /* Erik had a check here that the file descriptor in question
3332                  * is legit; I postpone that to "run time"
3333                  * A "-" representation of "close me" shows up as a -3 here */
3334                 debug_printf("Duplicating redirect '%d>&%d'\n", redir->fd, redir->dup);
3335         } else {
3336                 /* We do _not_ try to open the file that src points to,
3337                  * since we need to return and let src be expanded first.
3338                  * Set ctx->pending_redirect, so we know what to do at the
3339                  * end of the next parsed word. */
3340                 ctx->pending_redirect = redir;
3341         }
3342         return 0;
3343 }
3344
3345
3346 static struct pipe *new_pipe(void)
3347 {
3348         struct pipe *pi;
3349         pi = xzalloc(sizeof(struct pipe));
3350         /*pi->followup = 0; - deliberately invalid value */
3351         /*pi->res_word = RES_NONE; - RES_NONE is 0 anyway */
3352         return pi;
3353 }
3354
3355 /* Command (member of a pipe) is complete. The only possible error here
3356  * is out of memory, in which case xmalloc exits. */
3357 static int done_command(struct parse_context *ctx)
3358 {
3359         /* The command is really already in the pipe structure, so
3360          * advance the pipe counter and make a new, null command. */
3361         struct pipe *pi = ctx->pipe;
3362         struct command *command = ctx->command;
3363
3364         if (command) {
3365                 if (command->group == NULL
3366                  && command->argv == NULL
3367                  && command->redirects == NULL
3368                 ) {
3369                         debug_printf_parse("done_command: skipping null cmd, num_cmds=%d\n", pi->num_cmds);
3370                         return pi->num_cmds;
3371                 }
3372                 pi->num_cmds++;
3373                 debug_printf_parse("done_command: ++num_cmds=%d\n", pi->num_cmds);
3374         } else {
3375                 debug_printf_parse("done_command: initializing, num_cmds=%d\n", pi->num_cmds);
3376         }
3377
3378         /* Only real trickiness here is that the uncommitted
3379          * command structure is not counted in pi->num_cmds. */
3380         pi->cmds = xrealloc(pi->cmds, sizeof(*pi->cmds) * (pi->num_cmds+1));
3381         command = &pi->cmds[pi->num_cmds];
3382         memset(command, 0, sizeof(*command));
3383
3384         ctx->command = command;
3385         /* but ctx->pipe and ctx->list_head remain unchanged */
3386
3387         return pi->num_cmds; /* used only for 0/nonzero check */
3388 }
3389
3390 static void done_pipe(struct parse_context *ctx, pipe_style type)
3391 {
3392         int not_null;
3393
3394         debug_printf_parse("done_pipe entered, followup %d\n", type);
3395         /* Close previous command */
3396         not_null = done_command(ctx);
3397         ctx->pipe->followup = type;
3398         IF_HAS_KEYWORDS(ctx->pipe->pi_inverted = ctx->ctx_inverted;)
3399         IF_HAS_KEYWORDS(ctx->ctx_inverted = 0;)
3400         IF_HAS_KEYWORDS(ctx->pipe->res_word = ctx->ctx_res_w;)
3401
3402         /* Without this check, even just <enter> on command line generates
3403          * tree of three NOPs (!). Which is harmless but annoying.
3404          * IOW: it is safe to do it unconditionally.
3405          * RES_NONE case is for "for a in; do ..." (empty IN set)
3406          * to work, possibly other cases too. */
3407         if (not_null IF_HAS_KEYWORDS(|| ctx->ctx_res_w != RES_NONE)) {
3408                 struct pipe *new_p;
3409                 debug_printf_parse("done_pipe: adding new pipe: "
3410                                 "not_null:%d ctx->ctx_res_w:%d\n",
3411                                 not_null, ctx->ctx_res_w);
3412                 new_p = new_pipe();
3413                 ctx->pipe->next = new_p;
3414                 ctx->pipe = new_p;
3415                 ctx->command = NULL; /* needed! */
3416                 /* RES_THEN, RES_DO etc are "sticky" -
3417                  * they remain set for commands inside if/while.
3418                  * This is used to control execution.
3419                  * RES_FOR and RES_IN are NOT sticky (needed to support
3420                  * cases where variable or value happens to match a keyword):
3421                  */
3422 #if ENABLE_HUSH_LOOPS
3423                 if (ctx->ctx_res_w == RES_FOR
3424                  || ctx->ctx_res_w == RES_IN)
3425                         ctx->ctx_res_w = RES_NONE;
3426 #endif
3427 #if ENABLE_HUSH_CASE
3428                 if (ctx->ctx_res_w == RES_MATCH)
3429                         ctx->ctx_res_w = RES_CASEI;
3430 #endif
3431                 /* Create the memory for command, roughly:
3432                  * ctx->pipe->cmds = new struct command;
3433                  * ctx->command = &ctx->pipe->cmds[0];
3434                  */
3435                 done_command(ctx);
3436         }
3437         debug_printf_parse("done_pipe return\n");
3438 }
3439
3440 static void initialize_context(struct parse_context *ctx)
3441 {
3442         memset(ctx, 0, sizeof(*ctx));
3443         ctx->pipe = ctx->list_head = new_pipe();
3444         /* Create the memory for command, roughly:
3445          * ctx->pipe->cmds = new struct command;
3446          * ctx->command = &ctx->pipe->cmds[0];
3447          */
3448         done_command(ctx);
3449 }
3450
3451
3452 /* If a reserved word is found and processed, parse context is modified
3453  * and 1 is returned.
3454  */
3455 #if HAS_KEYWORDS
3456 struct reserved_combo {
3457         char literal[6];
3458         unsigned char res;
3459         unsigned char assignment_flag;
3460         int flag;
3461 };
3462 enum {
3463         FLAG_END   = (1 << RES_NONE ),
3464 #if ENABLE_HUSH_IF
3465         FLAG_IF    = (1 << RES_IF   ),
3466         FLAG_THEN  = (1 << RES_THEN ),
3467         FLAG_ELIF  = (1 << RES_ELIF ),
3468         FLAG_ELSE  = (1 << RES_ELSE ),
3469         FLAG_FI    = (1 << RES_FI   ),
3470 #endif
3471 #if ENABLE_HUSH_LOOPS
3472         FLAG_FOR   = (1 << RES_FOR  ),
3473         FLAG_WHILE = (1 << RES_WHILE),
3474         FLAG_UNTIL = (1 << RES_UNTIL),
3475         FLAG_DO    = (1 << RES_DO   ),
3476         FLAG_DONE  = (1 << RES_DONE ),
3477         FLAG_IN    = (1 << RES_IN   ),
3478 #endif
3479 #if ENABLE_HUSH_CASE
3480         FLAG_MATCH = (1 << RES_MATCH),
3481         FLAG_ESAC  = (1 << RES_ESAC ),
3482 #endif
3483         FLAG_START = (1 << RES_XXXX ),
3484 };
3485
3486 static const struct reserved_combo* match_reserved_word(o_string *word)
3487 {
3488         /* Mostly a list of accepted follow-up reserved words.
3489          * FLAG_END means we are done with the sequence, and are ready
3490          * to turn the compound list into a command.
3491          * FLAG_START means the word must start a new compound list.
3492          */
3493         static const struct reserved_combo reserved_list[] = {
3494 #if ENABLE_HUSH_IF
3495                 { "!",     RES_NONE,  NOT_ASSIGNMENT , 0 },
3496                 { "if",    RES_IF,    WORD_IS_KEYWORD, FLAG_THEN | FLAG_START },
3497                 { "then",  RES_THEN,  WORD_IS_KEYWORD, FLAG_ELIF | FLAG_ELSE | FLAG_FI },
3498                 { "elif",  RES_ELIF,  WORD_IS_KEYWORD, FLAG_THEN },
3499                 { "else",  RES_ELSE,  WORD_IS_KEYWORD, FLAG_FI   },
3500                 { "fi",    RES_FI,    NOT_ASSIGNMENT , FLAG_END  },
3501 #endif
3502 #if ENABLE_HUSH_LOOPS
3503                 { "for",   RES_FOR,   NOT_ASSIGNMENT , FLAG_IN | FLAG_DO | FLAG_START },
3504                 { "while", RES_WHILE, WORD_IS_KEYWORD, FLAG_DO | FLAG_START },
3505                 { "until", RES_UNTIL, WORD_IS_KEYWORD, FLAG_DO | FLAG_START },
3506                 { "in",    RES_IN,    NOT_ASSIGNMENT , FLAG_DO   },
3507                 { "do",    RES_DO,    WORD_IS_KEYWORD, FLAG_DONE },
3508                 { "done",  RES_DONE,  NOT_ASSIGNMENT , FLAG_END  },
3509 #endif
3510 #if ENABLE_HUSH_CASE
3511                 { "case",  RES_CASE,  NOT_ASSIGNMENT , FLAG_MATCH | FLAG_START },
3512                 { "esac",  RES_ESAC,  NOT_ASSIGNMENT , FLAG_END  },
3513 #endif
3514         };
3515         const struct reserved_combo *r;
3516
3517         for (r = reserved_list; r < reserved_list + ARRAY_SIZE(reserved_list); r++) {
3518                 if (strcmp(word->data, r->literal) == 0)
3519                         return r;
3520         }
3521         return NULL;
3522 }
3523 static int reserved_word(o_string *word, struct parse_context *ctx)
3524 {
3525 #if ENABLE_HUSH_CASE
3526         static const struct reserved_combo reserved_match = {
3527                 "",        RES_MATCH, NOT_ASSIGNMENT , FLAG_MATCH | FLAG_ESAC
3528         };
3529 #endif
3530         const struct reserved_combo *r;
3531
3532         r = match_reserved_word(word);
3533         if (!r)
3534                 return 0;
3535
3536         debug_printf("found reserved word %s, res %d\n", r->literal, r->res);
3537 #if ENABLE_HUSH_CASE
3538         if (r->res == RES_IN && ctx->ctx_res_w == RES_CASE)
3539                 /* "case word IN ..." - IN part starts first match part */
3540                 r = &reserved_match;
3541         else
3542 #endif
3543         if (r->flag == 0) { /* '!' */
3544                 if (ctx->ctx_inverted) { /* bash doesn't accept '! ! true' */
3545                         syntax(NULL);
3546                         IF_HAS_KEYWORDS(ctx->ctx_res_w = RES_SNTX;)
3547                 }
3548                 ctx->ctx_inverted = 1;
3549                 return 1;
3550         }
3551         if (r->flag & FLAG_START) {
3552                 struct parse_context *new;
3553                 debug_printf("push stack\n");
3554                 new = xmalloc(sizeof(*new));
3555                 *new = *ctx;   /* physical copy */
3556                 initialize_context(ctx);
3557                 ctx->stack = new;
3558         } else if (/*ctx->ctx_res_w == RES_NONE ||*/ !(ctx->old_flag & (1 << r->res))) {
3559                 syntax(NULL);
3560                 ctx->ctx_res_w = RES_SNTX;
3561                 return 1;
3562         }
3563         ctx->ctx_res_w = r->res;
3564         ctx->old_flag = r->flag;
3565         if (ctx->old_flag & FLAG_END) {
3566                 struct parse_context *old;
3567                 debug_printf("pop stack\n");
3568                 done_pipe(ctx, PIPE_SEQ);
3569                 old = ctx->stack;
3570                 old->command->group = ctx->list_head;
3571                 old->command->grp_type = GRP_NORMAL;
3572                 *ctx = *old;   /* physical copy */
3573                 free(old);
3574         }
3575         word->o_assignment = r->assignment_flag;
3576         return 1;
3577 }
3578 #endif
3579
3580 //TODO: many, many callers don't check error from done_word()
3581
3582 /* Word is complete, look at it and update parsing context.
3583  * Normal return is 0. Syntax errors return 1. */
3584 static int done_word(o_string *word, struct parse_context *ctx)
3585 {
3586         struct command *command = ctx->command;
3587
3588         debug_printf_parse("done_word entered: '%s' %p\n", word->data, command);
3589         if (word->length == 0 && word->nonnull == 0) {
3590                 debug_printf_parse("done_word return 0: true null, ignored\n");
3591                 return 0;
3592         }
3593         /* If this word wasn't an assignment, next ones definitely
3594          * can't be assignments. Even if they look like ones. */
3595         if (word->o_assignment != DEFINITELY_ASSIGNMENT
3596          && word->o_assignment != WORD_IS_KEYWORD
3597         ) {
3598                 word->o_assignment = NOT_ASSIGNMENT;
3599         } else {
3600                 if (word->o_assignment == DEFINITELY_ASSIGNMENT)
3601                         command->assignment_cnt++;
3602                 word->o_assignment = MAYBE_ASSIGNMENT;
3603         }
3604
3605         if (ctx->pending_redirect) {
3606                 /* We do not glob in e.g. >*.tmp case. bash seems to glob here
3607                  * only if run as "bash", not "sh" */
3608                 ctx->pending_redirect->rd_filename = xstrdup(word->data);
3609                 word->o_assignment = NOT_ASSIGNMENT;
3610                 debug_printf("word stored in rd_filename: '%s'\n", word->data);
3611         } else {
3612                 /* "{ echo foo; } echo bar" - bad */
3613                 /* NB: bash allows e.g. "if true; then { echo foo; } fi". TODO? */
3614                 if (command->group) {
3615                         syntax(NULL);
3616                         debug_printf_parse("done_word return 1: syntax error, groups and arglists don't mix\n");
3617                         return 1;
3618                 }
3619 #if HAS_KEYWORDS
3620 #if ENABLE_HUSH_CASE
3621                 if (ctx->ctx_dsemicolon
3622                  && strcmp(word->data, "esac") != 0 /* not "... pattern) cmd;; esac" */
3623                 ) {
3624                         /* already done when ctx_dsemicolon was set to 1: */
3625                         /* ctx->ctx_res_w = RES_MATCH; */
3626                         ctx->ctx_dsemicolon = 0;
3627                 } else
3628 #endif
3629                 if (!command->argv /* if it's the first word... */
3630 #if ENABLE_HUSH_LOOPS
3631                  && ctx->ctx_res_w != RES_FOR /* ...not after FOR or IN */
3632                  && ctx->ctx_res_w != RES_IN
3633 #endif
3634                 ) {
3635                         debug_printf_parse(": checking '%s' for reserved-ness\n", word->data);
3636                         if (reserved_word(word, ctx)) {
3637                                 o_reset(word);
3638                                 debug_printf_parse("done_word return %d\n", (ctx->ctx_res_w == RES_SNTX));
3639                                 return (ctx->ctx_res_w == RES_SNTX);
3640                         }
3641                 }
3642 #endif
3643                 if (word->nonnull /* word had "xx" or 'xx' at least as part of it. */
3644                  /* optimization: and if it's ("" or '') or ($v... or `cmd`...): */
3645                  && (word->data[0] == '\0' || word->data[0] == SPECIAL_VAR_SYMBOL)
3646                  /* (otherwise it's known to be not empty and is already safe) */
3647                 ) {
3648                         /* exclude "$@" - it can expand to no word despite "" */
3649                         char *p = word->data;
3650                         while (p[0] == SPECIAL_VAR_SYMBOL
3651                             && (p[1] & 0x7f) == '@'
3652                             && p[2] == SPECIAL_VAR_SYMBOL
3653                         ) {
3654                                 p += 3;
3655                         }
3656                         if (p == word->data || p[0] != '\0') {
3657                                 /* saw no "$@", or not only "$@" but some
3658                                  * real text is there too */
3659                                 /* insert "empty variable" reference, this makes
3660                                  * e.g. "", $empty"" etc to not disappear */
3661                                 o_addchr(word, SPECIAL_VAR_SYMBOL);
3662                                 o_addchr(word, SPECIAL_VAR_SYMBOL);
3663                         }
3664                 }
3665                 command->argv = add_string_to_strings(command->argv, xstrdup(word->data));
3666                 debug_print_strings("word appended to argv", command->argv);
3667         }
3668
3669         o_reset(word);
3670         ctx->pending_redirect = NULL;
3671
3672 #if ENABLE_HUSH_LOOPS
3673         /* Force FOR to have just one word (variable name) */
3674         /* NB: basically, this makes hush see "for v in ..." syntax as if
3675          * as it is "for v; in ...". FOR and IN become two pipe structs
3676          * in parse tree. */
3677         if (ctx->ctx_res_w == RES_FOR) {
3678 //TODO: check that command->argv[0] is a valid variable name!
3679                 done_pipe(ctx, PIPE_SEQ);
3680         }
3681 #endif
3682 #if ENABLE_HUSH_CASE
3683         /* Force CASE to have just one word */
3684         if (ctx->ctx_res_w == RES_CASE) {
3685                 done_pipe(ctx, PIPE_SEQ);
3686         }
3687 #endif
3688         debug_printf_parse("done_word return 0\n");
3689         return 0;
3690 }
3691
3692 /* If a redirect is immediately preceded by a number, that number is
3693  * supposed to tell which file descriptor to redirect.  This routine
3694  * looks for such preceding numbers.  In an ideal world this routine
3695  * needs to handle all the following classes of redirects...
3696  *     echo 2>foo     # redirects fd  2 to file "foo", nothing passed to echo
3697  *     echo 49>foo    # redirects fd 49 to file "foo", nothing passed to echo
3698  *     echo -2>foo    # redirects fd  1 to file "foo",    "-2" passed to echo
3699  *     echo 49x>foo   # redirects fd  1 to file "foo",   "49x" passed to echo
3700  * A -1 output from this program means no valid number was found, so the
3701  * caller should use the appropriate default for this redirection.
3702  */
3703 static int redirect_opt_num(o_string *o)
3704 {
3705         int num;
3706
3707         if (o->length == 0)
3708                 return -1;
3709         for (num = 0; num < o->length; num++) {
3710                 if (!isdigit(o->data[num])) {
3711                         return -1;
3712                 }
3713         }
3714         num = atoi(o->data);
3715         o_reset(o);
3716         return num;
3717 }
3718
3719 static int parse_stream(o_string *dest, struct parse_context *ctx,
3720                 struct in_str *input0, int end_trigger);
3721
3722 #if ENABLE_HUSH_TICK
3723 static FILE *generate_stream_from_list(struct pipe *head)
3724 {
3725         FILE *pf;
3726         int pid, channel[2];
3727
3728         xpipe(channel);
3729 /* *** NOMMU WARNING *** */
3730 /* By using vfork here, we suspend parent till child exits or execs.
3731  * If child will not do it before it fills the pipe, it can block forever
3732  * in write(STDOUT_FILENO), and parent (shell) will be also stuck.
3733  * Try this script:
3734  * yes "0123456789012345678901234567890" | dd bs=32 count=64k >TESTFILE
3735  * huge=`cat TESTFILE` # will block here forever
3736  * echo OK
3737  */
3738         pid = BB_MMU ? fork() : vfork();
3739         if (pid < 0)
3740                 bb_perror_msg_and_die(BB_MMU ? "fork" : "vfork");
3741         if (pid == 0) { /* child */
3742                 if (ENABLE_HUSH_JOB)
3743                         die_sleep = 0; /* let nofork's xfuncs die */
3744                 close(channel[0]); /* NB: close _first_, then move fd! */
3745                 xmove_fd(channel[1], 1);
3746                 /* Prevent it from trying to handle ctrl-z etc */
3747 #if ENABLE_HUSH_JOB
3748                 G.run_list_level = 1;
3749 #endif
3750                 /* Process substitution is not considered to be usual
3751                  * 'command execution'.
3752                  * SUSv3 says ctrl-Z should be ignored, ctrl-C should not.
3753                  */
3754                 set_jobctrl_signals_to_IGN();
3755
3756                 /* Note: freeing 'head' here would break NOMMU. */
3757                 _exit(run_list(head));
3758         }
3759         close(channel[1]);
3760         pf = fdopen(channel[0], "r");
3761         return pf;
3762         /* 'head' is freed by the caller */
3763 }
3764
3765 /* Return code is exit status of the process that is run. */
3766 static int process_command_subs(o_string *dest,
3767                 struct in_str *input)
3768 {
3769         int retcode, ch, eol_cnt;
3770         o_string result = NULL_O_STRING;
3771         struct parse_context inner;
3772         FILE *p;
3773         struct in_str pipe_str;
3774
3775         /* Recursion to generate command */
3776         retcode = parse_stream(&result, &inner, input, '\0');
3777         if (retcode != 0)
3778                 return retcode;  /* syntax error or EOF */
3779         o_free(&result);
3780
3781         p = generate_stream_from_list(inner.list_head);
3782         if (p == NULL)
3783                 return 1;
3784         close_on_exec_on(fileno(p));
3785         setup_file_in_str(&pipe_str, p);
3786
3787         /* Now send results of command back into original context */
3788         eol_cnt = 0;
3789         while ((ch = i_getch(&pipe_str)) != EOF) {
3790                 if (ch == '\n') {
3791                         eol_cnt++;
3792                         continue;
3793                 }
3794                 while (eol_cnt) {
3795                         o_addchr(dest, '\n');
3796                         eol_cnt--;
3797                 }
3798                 o_addQchr(dest, ch);
3799         }
3800
3801         debug_printf("done reading from pipe, pclose()ing\n");
3802         /* Note: we got EOF, and we just close the read end of the pipe.
3803          * We do not wait for the `cmd` child to terminate. bash and ash do.
3804          * Try this:
3805          * echo `echo Hi; exec 1>&-; sleep 2`
3806          */
3807         retcode = fclose(p);
3808         free_pipe_list(inner.list_head, /* indent: */ 0);
3809         debug_printf("closed FILE from child, retcode=%d\n", retcode);
3810         return retcode;
3811 }
3812 #endif
3813
3814 static int parse_group(o_string *dest, struct parse_context *ctx,
3815         struct in_str *input, int ch)
3816 {
3817         /* dest contains characters seen prior to ( or {.
3818          * Typically it's empty, but for function defs,
3819          * it contains function name (without '()'). */
3820         int rcode;
3821         int endch;
3822         struct parse_context sub;
3823         struct command *command = ctx->command;
3824
3825         debug_printf_parse("parse_group entered\n");
3826 #if ENABLE_HUSH_FUNCTIONS
3827         if (ch == 'F') { /* function definition? */
3828                 bb_error_msg("aha '%s' is a function, parsing it...", dest->data);
3829                 //command->fname = dest->data;
3830                 command->grp_type = GRP_FUNCTION;
3831 //TODO: review every o_reset() location... do they handle all o_string fields correctly?
3832                 memset(dest, 0, sizeof(*dest));
3833         }
3834 #endif
3835         if (command->argv /* word [word](... */
3836          || dest->length /* word(... */
3837          || dest->nonnull /* ""(... */
3838         ) {
3839                 syntax(NULL);
3840                 debug_printf_parse("parse_group return 1: syntax error, groups and arglists don't mix\n");
3841                 return 1;
3842         }
3843         endch = '}';
3844         if (ch == '(') {
3845                 endch = ')';
3846                 command->grp_type = GRP_SUBSHELL;
3847         }
3848         rcode = parse_stream(dest, &sub, input, endch);
3849         if (rcode == 0) {
3850                 command->group = sub.list_head;
3851         }
3852         debug_printf_parse("parse_group return %d\n", rcode);
3853         return rcode;
3854         /* command remains "open", available for possible redirects */
3855 }
3856
3857 #if ENABLE_HUSH_TICK || ENABLE_SH_MATH_SUPPORT
3858 /* Subroutines for copying $(...) and `...` things */
3859 static void add_till_backquote(o_string *dest, struct in_str *input);
3860 /* '...' */
3861 static void add_till_single_quote(o_string *dest, struct in_str *input)
3862 {
3863         while (1) {
3864                 int ch = i_getch(input);
3865                 if (ch == EOF)
3866                         break;
3867                 if (ch == '\'')
3868                         break;
3869                 o_addchr(dest, ch);
3870         }
3871 }
3872 /* "...\"...`..`...." - do we need to handle "...$(..)..." too? */
3873 static void add_till_double_quote(o_string *dest, struct in_str *input)
3874 {
3875         while (1) {
3876                 int ch = i_getch(input);
3877                 if (ch == '"')
3878                         break;
3879                 if (ch == '\\') {  /* \x. Copy both chars. */
3880                         o_addchr(dest, ch);
3881                         ch = i_getch(input);
3882                 }
3883                 if (ch == EOF)
3884                         break;
3885                 o_addchr(dest, ch);
3886                 if (ch == '`') {
3887                         add_till_backquote(dest, input);
3888                         o_addchr(dest, ch);
3889                         continue;
3890                 }
3891                 //if (ch == '$') ...
3892         }
3893 }
3894 /* Process `cmd` - copy contents until "`" is seen. Complicated by
3895  * \` quoting.
3896  * "Within the backquoted style of command substitution, backslash
3897  * shall retain its literal meaning, except when followed by: '$', '`', or '\'.
3898  * The search for the matching backquote shall be satisfied by the first
3899  * backquote found without a preceding backslash; during this search,
3900  * if a non-escaped backquote is encountered within a shell comment,
3901  * a here-document, an embedded command substitution of the $(command)
3902  * form, or a quoted string, undefined results occur. A single-quoted
3903  * or double-quoted string that begins, but does not end, within the
3904  * "`...`" sequence produces undefined results."
3905  * Example                               Output
3906  * echo `echo '\'TEST\`echo ZZ\`BEST`    \TESTZZBEST
3907  */
3908 static void add_till_backquote(o_string *dest, struct in_str *input)
3909 {
3910         while (1) {
3911                 int ch = i_getch(input);
3912                 if (ch == '`')
3913                         break;
3914                 if (ch == '\\') {  /* \x. Copy both chars unless it is \` */
3915                         int ch2 = i_getch(input);
3916                         if (ch2 != '`' && ch2 != '$' && ch2 != '\\')
3917                                 o_addchr(dest, ch);
3918                         ch = ch2;
3919                 }
3920                 if (ch == EOF)
3921                         break;
3922                 o_addchr(dest, ch);
3923         }
3924 }
3925 /* Process $(cmd) - copy contents until ")" is seen. Complicated by
3926  * quoting and nested ()s.
3927  * "With the $(command) style of command substitution, all characters
3928  * following the open parenthesis to the matching closing parenthesis
3929  * constitute the command. Any valid shell script can be used for command,
3930  * except a script consisting solely of redirections which produces
3931  * unspecified results."
3932  * Example                              Output
3933  * echo $(echo '(TEST)' BEST)           (TEST) BEST
3934  * echo $(echo 'TEST)' BEST)            TEST) BEST
3935  * echo $(echo \(\(TEST\) BEST)         ((TEST) BEST
3936  */
3937 static void add_till_closing_paren(o_string *dest, struct in_str *input, bool dbl)
3938 {
3939         int count = 0;
3940         while (1) {
3941                 int ch = i_getch(input);
3942                 if (ch == EOF)
3943                         break;
3944                 if (ch == '(')
3945                         count++;
3946                 if (ch == ')')
3947                         if (--count < 0) {
3948                                 if (!dbl)
3949                                         break;
3950                                 if (i_peek(input) == ')') {
3951                                         i_getch(input);
3952                                         break;
3953                                 }
3954                         }
3955                 o_addchr(dest, ch);
3956                 if (ch == '\'') {
3957                         add_till_single_quote(dest, input);
3958                         o_addchr(dest, ch);
3959                         continue;
3960                 }
3961                 if (ch == '"') {
3962                         add_till_double_quote(dest, input);
3963                         o_addchr(dest, ch);
3964                         continue;
3965                 }
3966                 if (ch == '\\') { /* \x. Copy verbatim. Important for  \(, \) */
3967                         ch = i_getch(input);
3968                         if (ch == EOF)
3969                                 break;
3970                         o_addchr(dest, ch);
3971                         continue;
3972                 }
3973         }
3974 }
3975 #endif /* ENABLE_HUSH_TICK || ENABLE_SH_MATH_SUPPORT */
3976
3977 /* Return code: 0 for OK, 1 for syntax error */
3978 static int handle_dollar(o_string *dest, struct in_str *input)
3979 {
3980         int expansion;
3981         int ch = i_peek(input);  /* first character after the $ */
3982         unsigned char quote_mask = dest->o_escape ? 0x80 : 0;
3983
3984         debug_printf_parse("handle_dollar entered: ch='%c'\n", ch);
3985         if (isalpha(ch)) {
3986                 i_getch(input);
3987  make_var:
3988                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
3989                 while (1) {
3990                         debug_printf_parse(": '%c'\n", ch);
3991                         o_addchr(dest, ch | quote_mask);
3992                         quote_mask = 0;
3993                         ch = i_peek(input);
3994                         if (!isalnum(ch) && ch != '_')
3995                                 break;
3996                         i_getch(input);
3997                 }
3998                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
3999         } else if (isdigit(ch)) {
4000  make_one_char_var:
4001                 i_getch(input);
4002                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
4003                 debug_printf_parse(": '%c'\n", ch);
4004                 o_addchr(dest, ch | quote_mask);
4005                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
4006         } else switch (ch) {
4007                 case '$': /* pid */
4008                 case '!': /* last bg pid */
4009                 case '?': /* last exit code */
4010                 case '#': /* number of args */
4011                 case '*': /* args */
4012                 case '@': /* args */
4013                         goto make_one_char_var;
4014                 case '{': {
4015                         bool first_char, all_digits;
4016
4017                         o_addchr(dest, SPECIAL_VAR_SYMBOL);
4018                         i_getch(input);
4019                         /* XXX maybe someone will try to escape the '}' */
4020                         expansion = 0;
4021                         first_char = true;
4022                         all_digits = false;
4023                         while (1) {
4024                                 ch = i_getch(input);
4025                                 if (ch == '}')
4026                                         break;
4027
4028                                 if (first_char) {
4029                                         if (ch == '#')
4030                                                 /* ${#var}: length of var contents */
4031                                                 goto char_ok;
4032                                         else if (isdigit(ch)) {
4033                                                 all_digits = true;
4034                                                 goto char_ok;
4035                                         }
4036                                 }
4037
4038                                 if (expansion < 2 &&
4039                                     ((all_digits && !isdigit(ch)) ||
4040                                      (!all_digits && !isalnum(ch) && ch != '_')))
4041                                 {
4042                                         /* handle parameter expansions
4043                                          * http://www.opengroup.org/onlinepubs/009695399/utilities/xcu_chap02.html#tag_02_06_02
4044                                          */
4045                                         if (first_char)
4046                                                 goto case_default;
4047                                         switch (ch) {
4048                                                 case ':': /* null modifier */
4049                                                         if (expansion == 0) {
4050                                                                 debug_printf_parse(": null modifier\n");
4051                                                                 ++expansion;
4052                                                                 break;
4053                                                         }
4054                                                         goto case_default;
4055
4056 #if 0 /* not implemented yet :( */
4057                                                 case '#': /* remove prefix */
4058                                                 case '%': /* remove suffix */
4059                                                         if (expansion == 0) {
4060                                                                 debug_printf_parse(": remove suffix/prefix\n");
4061                                                                 expansion = 2;
4062                                                                 break;
4063                                                         }
4064                                                         goto case_default;
4065 #endif
4066
4067                                                 case '-': /* default value */
4068                                                 case '=': /* assign default */
4069                                                 case '+': /* alternative */
4070                                                 case '?': /* error indicate */
4071                                                         debug_printf_parse(": parameter expansion\n");
4072                                                         expansion = 2;
4073                                                         break;
4074
4075                                                 default:
4076                                                 case_default:
4077                                                         syntax("unterminated ${name}");
4078                                                         debug_printf_parse("handle_dollar return 1: unterminated ${name}\n");
4079                                                         return 1;
4080                                                 }
4081                                 }
4082
4083  char_ok:
4084                                 debug_printf_parse(": '%c'\n", ch);
4085                                 o_addchr(dest, ch | quote_mask);
4086                                 quote_mask = 0;
4087                                 first_char = false;
4088                         }
4089                         o_addchr(dest, SPECIAL_VAR_SYMBOL);
4090                         break;
4091                 }
4092                 case '(': {
4093                         i_getch(input);
4094
4095 #if ENABLE_SH_MATH_SUPPORT
4096                         if (i_peek(input) == '(') {
4097                                 i_getch(input);
4098                                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
4099                                 o_addchr(dest, /*quote_mask |*/ '+');
4100                                 add_till_closing_paren(dest, input, true);
4101                                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
4102                                 break;
4103                         }
4104 #endif
4105
4106 #if ENABLE_HUSH_TICK
4107                         //int pos = dest->length;
4108                         o_addchr(dest, SPECIAL_VAR_SYMBOL);
4109                         o_addchr(dest, quote_mask | '`');
4110                         add_till_closing_paren(dest, input, false);
4111                         //debug_printf_subst("SUBST RES2 '%s'\n", dest->data + pos);
4112                         o_addchr(dest, SPECIAL_VAR_SYMBOL);
4113 #endif
4114                         break;
4115                 }
4116                 case '_':
4117                         i_getch(input);
4118                         ch = i_peek(input);
4119                         if (isalnum(ch)) { /* it's $_name or $_123 */
4120                                 ch = '_';
4121                                 goto make_var;
4122                         }
4123                         /* else: it's $_ */
4124                 case '-':
4125                         /* still unhandled, but should be eventually */
4126                         bb_error_msg("unhandled syntax: $%c", ch);
4127                         return 1;
4128                         break;
4129                 default:
4130                         o_addQchr(dest, '$');
4131         }
4132         debug_printf_parse("handle_dollar return 0\n");
4133         return 0;
4134 }
4135
4136 static int parse_stream_dquoted(o_string *dest, struct in_str *input, int dquote_end)
4137 {
4138         int ch, m;
4139         int next;
4140
4141  again:
4142         ch = i_getch(input);
4143         if (ch == dquote_end) { /* may be only '"' or EOF */
4144                 dest->nonnull = 1;
4145                 if (dest->o_assignment == NOT_ASSIGNMENT)
4146                         dest->o_escape ^= 1;
4147                 debug_printf_parse("parse_stream_dquoted return 0\n");
4148                 return 0;
4149         }
4150         if (ch == EOF) {
4151                 syntax("unterminated \"");
4152                 debug_printf_parse("parse_stream_dquoted return 1: unterminated \"\n");
4153                 return 1;
4154         }
4155         next = '\0';
4156         m = G.charmap[ch];
4157         if (ch != '\n') {
4158                 next = i_peek(input);
4159         }
4160         debug_printf_parse(": ch=%c (%d) m=%d escape=%d\n",
4161                                         ch, ch, m, dest->o_escape);
4162         /* Basically, checking every CHAR_SPECIAL char except '"' */
4163         if (ch == '\\') {
4164                 if (next == EOF) {
4165                         syntax("\\<eof>");
4166                         debug_printf_parse("parse_stream_dquoted return 1: \\<eof>\n");
4167                         return 1;
4168                 }
4169                 /* bash:
4170                  * "The backslash retains its special meaning [in "..."]
4171                  * only when followed by one of the following characters:
4172                  * $, `, ", \, or <newline>.  A double quote may be quoted
4173                  * within double quotes by preceding it with a backslash.
4174                  * If enabled, history expansion will be performed unless
4175                  * an ! appearing in double quotes is escaped using
4176                  * a backslash. The backslash preceding the ! is not removed."
4177                  */
4178                 if (strchr("$`\"\\", next) != NULL) {
4179                         o_addqchr(dest, i_getch(input));
4180                 } else {
4181                         o_addqchr(dest, '\\');
4182                 }
4183                 goto again;
4184         }
4185         if (ch == '$') {
4186                 if (handle_dollar(dest, input) != 0) {
4187                         debug_printf_parse("parse_stream_dquoted return 1: handle_dollar returned non-0\n");
4188                         return 1;
4189                 }
4190                 goto again;
4191         }
4192 #if ENABLE_HUSH_TICK
4193         if (ch == '`') {
4194                 //int pos = dest->length;
4195                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
4196                 o_addchr(dest, 0x80 | '`');
4197                 add_till_backquote(dest, input);
4198                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
4199                 //debug_printf_subst("SUBST RES3 '%s'\n", dest->data + pos);
4200                 goto again;
4201         }
4202 #endif
4203         o_addQchr(dest, ch);
4204         if (ch == '='
4205          && (dest->o_assignment == MAYBE_ASSIGNMENT
4206             || dest->o_assignment == WORD_IS_KEYWORD)
4207          && is_assignment(dest->data)
4208         ) {
4209                 dest->o_assignment = DEFINITELY_ASSIGNMENT;
4210         }
4211         goto again;
4212 }
4213
4214 /* Initalize ctx (i.e. caller does not need to do that).
4215  * Scan input, call done_word() whenever full IFS delimited word was seen.
4216  * Call done_pipe if '\n' was seen (and end_trigger != NULL).
4217  * Return code is 0 if end_trigger char is met,
4218  * -1 on EOF (but if end_trigger == NULL then return 0),
4219  * 1 for syntax error
4220  * Net result is a list of pipes in ctx->list_head.
4221  */
4222 static int parse_stream(o_string *dest, struct parse_context *ctx,
4223                 struct in_str *input, int end_trigger)
4224 {
4225         int ch, m;
4226         int redir_fd;
4227         redir_type redir_style;
4228         int is_in_dquote;
4229         int next;
4230
4231         /* Double-quote state is handled in the state variable is_in_dquote.
4232          * A single-quote triggers a bypass of the main loop until its mate is
4233          * found.  When recursing, quote state is passed in via dest->o_escape. */
4234
4235         debug_printf_parse("parse_stream entered, end_trigger='%c' "
4236                 "dest->o_assignment:%d\n", end_trigger ? : 'X'
4237                 , dest->o_assignment);
4238
4239         dest->o_assignment = MAYBE_ASSIGNMENT;
4240         initialize_context(ctx);
4241         is_in_dquote = dest->o_escape;
4242         while (1) {
4243                 if (is_in_dquote) {
4244                         if (parse_stream_dquoted(dest, input, '"'))
4245                                 return 1; /* propagate parse error */
4246                         /* If we're here, we reached closing '"' */
4247                         is_in_dquote = 0;
4248                 }
4249                 m = CHAR_IFS;
4250                 next = '\0';
4251                 ch = i_getch(input);
4252                 if (ch != EOF) {
4253                         m = G.charmap[ch];
4254                         if (ch != '\n') {
4255                                 next = i_peek(input);
4256                         }
4257                 }
4258                 debug_printf_parse(": ch=%c (%d) m=%d escape=%d\n",
4259                                                 ch, ch, m, dest->o_escape);
4260                 if (m == CHAR_ORDINARY) {
4261                         o_addQchr(dest, ch);
4262                         if ((dest->o_assignment == MAYBE_ASSIGNMENT
4263                             || dest->o_assignment == WORD_IS_KEYWORD)
4264                          && ch == '='
4265                          && is_assignment(dest->data)
4266                         ) {
4267                                 dest->o_assignment = DEFINITELY_ASSIGNMENT;
4268                         }
4269                         continue;
4270                 }
4271
4272                 /* m is SPECIAL ($,`), IFS, or ORDINARY_IF_QUOTED (*,#) */
4273
4274                 if (m == CHAR_IFS) {
4275                         if (ch == EOF)
4276                                 goto ret_EOF;
4277                         if (done_word(dest, ctx)) {
4278                                 debug_printf_parse("parse_stream return 1: done_word!=0\n");
4279                                 return 1;
4280                         }
4281                         if (ch == '\n') {
4282 #if ENABLE_HUSH_CASE
4283                                 /* "case ... in <newline> word) ..." -
4284                                  * newlines are ignored (but ';' wouldn't be) */
4285                                 if (ctx->command->argv == NULL
4286                                  && ctx->ctx_res_w == RES_MATCH
4287                                 ) {
4288                                         continue;
4289                                 }
4290 #endif
4291                                 /* Treat newline as a command separator. */
4292                                 done_pipe(ctx, PIPE_SEQ);
4293                                 dest->o_assignment = MAYBE_ASSIGNMENT;
4294                                 ch = ';';
4295                                 /* note: if (m == CHAR_IFS) continue;
4296                                  * will still trigger for us */
4297                         }
4298                 }
4299                 if (end_trigger && end_trigger == ch) {
4300 //TODO: disallow "{ cmd }" without semicolon
4301                         done_word(dest, ctx);
4302                         done_pipe(ctx, PIPE_SEQ);
4303                         dest->o_assignment = MAYBE_ASSIGNMENT;
4304                         /* Do we sit outside of any if's, loops or case's? */
4305                         if (!HAS_KEYWORDS
4306                          IF_HAS_KEYWORDS(|| (ctx->ctx_res_w == RES_NONE && ctx->old_flag == 0))
4307                         ) {
4308                                 debug_printf_parse("parse_stream return 0: end_trigger char found\n");
4309                                 return 0;
4310                         }
4311                 }
4312                 if (m == CHAR_IFS)
4313                         continue;
4314
4315                 /* m is SPECIAL (e.g. $,`) or ORDINARY_IF_QUOTED (*,#) */
4316
4317                 if (dest->o_assignment == MAYBE_ASSIGNMENT) {
4318                         /* ch is a special char and thus this word
4319                          * cannot be an assignment */
4320                         dest->o_assignment = NOT_ASSIGNMENT;
4321                 }
4322
4323                 switch (ch) {
4324                 case '#':
4325                         if (dest->length == 0) {
4326                                 while (1) {
4327                                         ch = i_peek(input);
4328                                         if (ch == EOF || ch == '\n')
4329                                                 break;
4330                                         i_getch(input);
4331                                 }
4332                         } else {
4333                                 o_addQchr(dest, ch);
4334                         }
4335                         break;
4336                 case '\\':
4337                         if (next == EOF) {
4338                                 syntax("\\<eof>");
4339                                 debug_printf_parse("parse_stream return 1: \\<eof>\n");
4340                                 return 1;
4341                         }
4342                         o_addchr(dest, '\\');
4343                         o_addchr(dest, i_getch(input));
4344                         break;
4345                 case '$':
4346                         if (handle_dollar(dest, input) != 0) {
4347                                 debug_printf_parse("parse_stream return 1: handle_dollar returned non-0\n");
4348                                 return 1;
4349                         }
4350                         break;
4351                 case '\'':
4352                         dest->nonnull = 1;
4353                         while (1) {
4354                                 ch = i_getch(input);
4355                                 if (ch == EOF) {
4356                                         syntax("unterminated '");
4357                                         debug_printf_parse("parse_stream return 1: unterminated '\n");
4358                                         return 1;
4359                                 }
4360                                 if (ch == '\'')
4361                                         break;
4362                                 if (dest->o_assignment == NOT_ASSIGNMENT)
4363                                         o_addqchr(dest, ch);
4364                                 else
4365                                         o_addchr(dest, ch);
4366                         }
4367                         break;
4368                 case '"':
4369                         dest->nonnull = 1;
4370                         is_in_dquote ^= 1; /* invert */
4371                         if (dest->o_assignment == NOT_ASSIGNMENT)
4372                                 dest->o_escape ^= 1;
4373                         break;
4374 #if ENABLE_HUSH_TICK
4375                 case '`': {
4376                         //int pos = dest->length;
4377                         o_addchr(dest, SPECIAL_VAR_SYMBOL);
4378                         o_addchr(dest, '`');
4379                         add_till_backquote(dest, input);
4380                         o_addchr(dest, SPECIAL_VAR_SYMBOL);
4381                         //debug_printf_subst("SUBST RES3 '%s'\n", dest->data + pos);
4382                         break;
4383                 }
4384 #endif
4385                 case '>':
4386                         redir_fd = redirect_opt_num(dest);
4387                         done_word(dest, ctx);
4388                         redir_style = REDIRECT_OVERWRITE;
4389                         if (next == '>') {
4390                                 redir_style = REDIRECT_APPEND;
4391                                 i_getch(input);
4392                         }
4393 #if 0
4394                         else if (next == '(') {
4395                                 syntax(">(process) not supported");
4396                                 debug_printf_parse("parse_stream return 1: >(process) not supported\n");
4397                                 return 1;
4398                         }
4399 #endif
4400                         setup_redirect(ctx, redir_fd, redir_style, input);
4401                         break;
4402                 case '<':
4403                         redir_fd = redirect_opt_num(dest);
4404                         done_word(dest, ctx);
4405                         redir_style = REDIRECT_INPUT;
4406                         if (next == '<') {
4407                                 redir_style = REDIRECT_HEREIS;
4408                                 i_getch(input);
4409                         } else if (next == '>') {
4410                                 redir_style = REDIRECT_IO;
4411                                 i_getch(input);
4412                         }
4413 #if 0
4414                         else if (next == '(') {
4415                                 syntax("<(process) not supported");
4416                                 debug_printf_parse("parse_stream return 1: <(process) not supported\n");
4417                                 return 1;
4418                         }
4419 #endif
4420                         setup_redirect(ctx, redir_fd, redir_style, input);
4421                         break;
4422                 case ';':
4423 #if ENABLE_HUSH_CASE
4424  case_semi:
4425 #endif
4426                         done_word(dest, ctx);
4427                         done_pipe(ctx, PIPE_SEQ);
4428 #if ENABLE_HUSH_CASE
4429                         /* Eat multiple semicolons, detect
4430                          * whether it means something special */
4431                         while (1) {
4432                                 ch = i_peek(input);
4433                                 if (ch != ';')
4434                                         break;
4435                                 i_getch(input);
4436                                 if (ctx->ctx_res_w == RES_CASEI) {
4437                                         ctx->ctx_dsemicolon = 1;
4438                                         ctx->ctx_res_w = RES_MATCH;
4439                                         break;
4440                                 }
4441                         }
4442 #endif
4443  new_cmd:
4444                         /* We just finished a cmd. New one may start
4445                          * with an assignment */
4446                         dest->o_assignment = MAYBE_ASSIGNMENT;
4447                         break;
4448                 case '&':
4449                         done_word(dest, ctx);
4450                         if (next == '&') {
4451                                 i_getch(input);
4452                                 done_pipe(ctx, PIPE_AND);
4453                         } else {
4454                                 done_pipe(ctx, PIPE_BG);
4455                         }
4456                         goto new_cmd;
4457                 case '|':
4458                         done_word(dest, ctx);
4459 #if ENABLE_HUSH_CASE
4460                         if (ctx->ctx_res_w == RES_MATCH)
4461                                 break; /* we are in case's "word | word)" */
4462 #endif
4463                         if (next == '|') { /* || */
4464                                 i_getch(input);
4465                                 done_pipe(ctx, PIPE_OR);
4466                         } else {
4467                                 /* we could pick up a file descriptor choice here
4468                                  * with redirect_opt_num(), but bash doesn't do it.
4469                                  * "echo foo 2| cat" yields "foo 2". */
4470                                 done_command(ctx);
4471                         }
4472                         goto new_cmd;
4473                 case '(':
4474 #if ENABLE_HUSH_CASE
4475                         /* "case... in [(]word)..." - skip '(' */
4476                         if (ctx->ctx_res_w == RES_MATCH
4477                          && ctx->command->argv == NULL /* not (word|(... */
4478                          && dest->length == 0 /* not word(... */
4479                          && dest->nonnull == 0 /* not ""(... */
4480                         ) {
4481                                 continue;
4482                         }
4483 #endif
4484 #if ENABLE_HUSH_FUNCTIONS
4485                         if (dest->length != 0 /* not just () but word() */
4486                          && dest->nonnull == 0 /* not a"b"c() */
4487                          && ctx->command->argv == NULL /* it's the first word */
4488 //TODO: "func ( ) {...}" - note spaces - is valid format too in bash
4489                          && i_peek(input) == ')'
4490                          && !match_reserved_word(dest)
4491                         ) {
4492                                 bb_error_msg("seems like a function definition");
4493                                 i_getch(input);
4494                                 do {
4495 //TODO: do it properly.
4496                                         ch = i_getch(input);
4497                                 } while (ch == ' ' || ch == '\n');
4498                                 if (ch != '{') {
4499                                         syntax("was expecting {");
4500                                         debug_printf_parse("parse_stream return 1\n");
4501                                         return 1;
4502                                 }
4503                                 ch = 'F'; /* magic value */
4504                         }
4505 #endif
4506                 case '{':
4507                         if (parse_group(dest, ctx, input, ch) != 0) {
4508                                 debug_printf_parse("parse_stream return 1: parse_group returned non-0\n");
4509                                 return 1;
4510                         }
4511                         goto new_cmd;
4512                 case ')':
4513 #if ENABLE_HUSH_CASE
4514                         if (ctx->ctx_res_w == RES_MATCH)
4515                                 goto case_semi;
4516 #endif
4517                 case '}':
4518                         /* proper use of this character is caught by end_trigger:
4519                          * if we see {, we call parse_group(..., end_trigger='}')
4520                          * and it will match } earlier (not here). */
4521                         syntax("unexpected } or )");
4522                         debug_printf_parse("parse_stream return 1: unexpected '}'\n");
4523                         return 1;
4524                 default:
4525                         if (HUSH_DEBUG)
4526                                 bb_error_msg_and_die("BUG: unexpected %c\n", ch);
4527                 }
4528         } /* while (1) */
4529
4530         /* Non-error returns */
4531  ret_EOF:
4532         debug_printf_parse("parse_stream return %d\n", -(end_trigger != NULL));
4533         done_word(dest, ctx);
4534         done_pipe(ctx, PIPE_SEQ);
4535         if (end_trigger) {
4536                 return -1; /* EOF found while expecting end_trigger */
4537         }
4538         return 0;
4539 }
4540
4541 static void set_in_charmap(const char *set, int code)
4542 {
4543         while (*set)
4544                 G.charmap[(unsigned char)*set++] = code;
4545 }
4546
4547 static void update_charmap(void)
4548 {
4549         G.ifs = getenv("IFS");
4550         if (G.ifs == NULL)
4551                 G.ifs = " \t\n";
4552         /* Precompute a list of 'flow through' behavior so it can be treated
4553          * quickly up front.  Computation is necessary because of IFS.
4554          * Special case handling of IFS == " \t\n" is not implemented.
4555          * The charmap[] array only really needs two bits each,
4556          * and on most machines that would be faster (reduced L1 cache use).
4557          */
4558         memset(G.charmap, CHAR_ORDINARY, sizeof(G.charmap));
4559 #if ENABLE_HUSH_TICK
4560         set_in_charmap("\\$\"`", CHAR_SPECIAL);
4561 #else
4562         set_in_charmap("\\$\"", CHAR_SPECIAL);
4563 #endif
4564         set_in_charmap("<>;&|(){}#'", CHAR_ORDINARY_IF_QUOTED);
4565         set_in_charmap(G.ifs, CHAR_IFS);  /* are ordinary if quoted */
4566 }
4567
4568 /* Most recursion does not come through here, the exception is
4569  * from builtin_source() and builtin_eval() */
4570 static int parse_and_run_stream(struct in_str *inp, int parse_flag)
4571 {
4572         struct parse_context ctx;
4573         o_string temp = NULL_O_STRING;
4574         int rcode;
4575
4576         do {
4577                 update_charmap();
4578 #if ENABLE_HUSH_INTERACTIVE
4579                 inp->promptmode = 0; /* PS1 */
4580 #endif
4581                 /* We will stop & execute after each ';' or '\n'.
4582                  * Example: "sleep 9999; echo TEST" + ctrl-C:
4583                  * TEST should be printed */
4584                 temp.o_assignment = MAYBE_ASSIGNMENT;
4585                 rcode = parse_stream(&temp, &ctx, inp, ';');
4586                 debug_printf_parse("rcode %d ctx.old_flag %x\n", rcode, ctx.old_flag);
4587 #if HAS_KEYWORDS
4588                 if (rcode != 1 && ctx.old_flag != 0) {
4589                         syntax(NULL);
4590                 }
4591 #endif
4592                 if (rcode != 1 IF_HAS_KEYWORDS(&& ctx.old_flag == 0)) {
4593                         debug_print_tree(ctx.list_head, 0);
4594                         debug_printf_exec("parse_and_run_stream: run_and_free_list\n");
4595                         run_and_free_list(ctx.list_head);
4596                 } else {
4597                         /* We arrive here also if rcode == 1 (error in parse_stream) */
4598 #if HAS_KEYWORDS
4599                         if (ctx.old_flag != 0) {
4600                                 free(ctx.stack);
4601                                 o_reset(&temp);
4602                         }
4603 #endif
4604                         /*temp.nonnull = 0; - o_free does it below */
4605                         /*temp.o_escape = 0; - o_free does it below */
4606                         free_pipe_list(ctx.list_head, /* indent: */ 0);
4607                         /* Discard all unprocessed line input, force prompt on */
4608                         inp->p = NULL;
4609 #if ENABLE_HUSH_INTERACTIVE
4610                         inp->promptme = 1;
4611 #endif
4612                 }
4613                 o_free(&temp);
4614                 /* loop on syntax errors, return on EOF: */
4615         } while (rcode != -1 && !(parse_flag & PARSEFLAG_EXIT_FROM_LOOP));
4616         return 0;
4617 }
4618
4619 static int parse_and_run_string(const char *s, int parse_flag)
4620 {
4621         struct in_str input;
4622         setup_string_in_str(&input, s);
4623         return parse_and_run_stream(&input, parse_flag);
4624 }
4625
4626 static int parse_and_run_file(FILE *f)
4627 {
4628         int rcode;
4629         struct in_str input;
4630         setup_file_in_str(&input, f);
4631         rcode = parse_and_run_stream(&input, 0 /* parse_flag */);
4632         return rcode;
4633 }
4634
4635 #if ENABLE_HUSH_JOB
4636 /* Make sure we have a controlling tty.  If we get started under a job
4637  * aware app (like bash for example), make sure we are now in charge so
4638  * we don't fight over who gets the foreground */
4639 static void setup_job_control(void)
4640 {
4641         pid_t shell_pgrp;
4642
4643         shell_pgrp = getpgrp();
4644
4645         /* If we were ran as 'hush &',
4646          * sleep until we are in the foreground.  */
4647         while (tcgetpgrp(G.interactive_fd) != shell_pgrp) {
4648                 /* Send TTIN to ourself (should stop us) */
4649                 kill(- shell_pgrp, SIGTTIN);
4650                 shell_pgrp = getpgrp();
4651         }
4652
4653         /* We _must_ restore tty pgrp on fatal signals */
4654         set_fatal_signals_to_sigexit();
4655
4656         /* Put ourselves in our own process group.  */
4657         bb_setpgrp(); /* is the same as setpgid(our_pid, our_pid); */
4658         /* Grab control of the terminal.  */
4659         tcsetpgrp(G.interactive_fd, getpid());
4660 }
4661 #endif
4662
4663 static int set_mode(const char cstate, const char mode)
4664 {
4665         int state = (cstate == '-' ? 1 : 0);
4666         switch (mode) {
4667                 case 'n': G.fake_mode = state; break;
4668                 case 'x': /*G.debug_mode = state;*/ break;
4669                 default:  return EXIT_FAILURE;
4670         }
4671         return EXIT_SUCCESS;
4672 }
4673
4674 int hush_main(int argc, char **argv) MAIN_EXTERNALLY_VISIBLE;
4675 int hush_main(int argc, char **argv)
4676 {
4677         static const struct variable const_shell_ver = {
4678                 .next = NULL,
4679                 .varstr = (char*)hush_version_str,
4680                 .max_len = 1, /* 0 can provoke free(name) */
4681                 .flg_export = 1,
4682                 .flg_read_only = 1,
4683         };
4684
4685         int opt;
4686         FILE *input;
4687         char **e;
4688         struct variable *cur_var;
4689
4690         INIT_G();
4691
4692         G.root_pid = getpid();
4693
4694         /* Deal with HUSH_VERSION */
4695         G.shell_ver = const_shell_ver; /* copying struct here */
4696         G.top_var = &G.shell_ver;
4697         debug_printf_env("unsetenv '%s'\n", "HUSH_VERSION");
4698         unsetenv("HUSH_VERSION"); /* in case it exists in initial env */
4699         /* Initialize our shell local variables with the values
4700          * currently living in the environment */
4701         cur_var = G.top_var;
4702         e = environ;
4703         if (e) while (*e) {
4704                 char *value = strchr(*e, '=');
4705                 if (value) { /* paranoia */
4706                         cur_var->next = xzalloc(sizeof(*cur_var));
4707                         cur_var = cur_var->next;
4708                         cur_var->varstr = *e;
4709                         cur_var->max_len = strlen(*e);
4710                         cur_var->flg_export = 1;
4711                 }
4712                 e++;
4713         }
4714         debug_printf_env("putenv '%s'\n", hush_version_str);
4715         putenv((char *)hush_version_str); /* reinstate HUSH_VERSION */
4716
4717 #if ENABLE_FEATURE_EDITING
4718         G.line_input_state = new_line_input_t(FOR_SHELL);
4719 #endif
4720         /* XXX what should these be while sourcing /etc/profile? */
4721         G.global_argc = argc;
4722         G.global_argv = argv;
4723         /* Initialize some more globals to non-zero values */
4724         set_cwd();
4725 #if ENABLE_HUSH_INTERACTIVE
4726         if (ENABLE_FEATURE_EDITING)
4727                 cmdedit_set_initial_prompt();
4728         G.PS2 = "> ";
4729 #endif
4730
4731         if (EXIT_SUCCESS) /* otherwise is already done */
4732                 G.last_return_code = EXIT_SUCCESS;
4733
4734         if (argv[0] && argv[0][0] == '-') {
4735                 debug_printf("sourcing /etc/profile\n");
4736                 input = fopen_for_read("/etc/profile");
4737                 if (input != NULL) {
4738                         close_on_exec_on(fileno(input));
4739                         parse_and_run_file(input);
4740                         fclose(input);
4741                 }
4742         }
4743         input = stdin;
4744
4745         /* http://www.opengroup.org/onlinepubs/9699919799/utilities/sh.html */
4746         while ((opt = getopt(argc, argv, "c:xins")) > 0) {
4747                 switch (opt) {
4748                 case 'c':
4749                         G.global_argv = argv + optind;
4750                         if (!argv[optind]) {
4751                                 /* -c 'script' (no params): prevent empty $0 */
4752                                 *--G.global_argv = argv[0];
4753                                 optind--;
4754                         } /* else -c 'script' PAR0 PAR1: $0 is PAR0 */
4755                         G.global_argc = argc - optind;
4756                         opt = parse_and_run_string(optarg, 0 /* parse_flag */);
4757                         goto final_return;
4758                 case 'i':
4759                         /* Well, we cannot just declare interactiveness,
4760                          * we have to have some stuff (ctty, etc) */
4761                         /* G.interactive_fd++; */
4762                         break;
4763                 case 's':
4764                         /* "-s" means "read from stdin", but this is how we always
4765                          * operate, so simply do nothing here. */
4766                         break;
4767                 case 'n':
4768                 case 'x':
4769                         if (!set_mode('-', opt))
4770                                 break;
4771                 default:
4772 #ifndef BB_VER
4773                         fprintf(stderr, "Usage: sh [FILE]...\n"
4774                                         "   or: sh -c command [args]...\n\n");
4775                         exit(EXIT_FAILURE);
4776 #else
4777                         bb_show_usage();
4778 #endif
4779                 }
4780         }
4781 #if ENABLE_HUSH_JOB
4782         /* A shell is interactive if the '-i' flag was given, or if all of
4783          * the following conditions are met:
4784          *    no -c command
4785          *    no arguments remaining or the -s flag given
4786          *    standard input is a terminal
4787          *    standard output is a terminal
4788          *    Refer to Posix.2, the description of the 'sh' utility. */
4789         if (argv[optind] == NULL && input == stdin
4790          && isatty(STDIN_FILENO) && isatty(STDOUT_FILENO)
4791         ) {
4792                 G.saved_tty_pgrp = tcgetpgrp(STDIN_FILENO);
4793                 debug_printf("saved_tty_pgrp=%d\n", G.saved_tty_pgrp);
4794                 if (G.saved_tty_pgrp >= 0) {
4795                         /* try to dup to high fd#, >= 255 */
4796                         G.interactive_fd = fcntl(STDIN_FILENO, F_DUPFD, 255);
4797                         if (G.interactive_fd < 0) {
4798                                 /* try to dup to any fd */
4799                                 G.interactive_fd = dup(STDIN_FILENO);
4800                                 if (G.interactive_fd < 0)
4801                                         /* give up */
4802                                         G.interactive_fd = 0;
4803                         }
4804                         // TODO: track & disallow any attempts of user
4805                         // to (inadvertently) close/redirect it
4806                 }
4807         }
4808         init_signal_mask(); /* note: ensures SIGCHLD is not masked */
4809         debug_printf("G.interactive_fd=%d\n", G.interactive_fd);
4810         if (G.interactive_fd) {
4811                 fcntl(G.interactive_fd, F_SETFD, FD_CLOEXEC);
4812                 /* Looks like they want an interactive shell */
4813                 setup_job_control();
4814                 /* -1 is special - makes xfuncs longjmp, not exit
4815                  * (we reset die_sleep = 0 whereever we [v]fork) */
4816                 die_sleep = -1;
4817                 if (setjmp(die_jmp)) {
4818                         /* xfunc has failed! die die die */
4819                         hush_exit(xfunc_error_retval);
4820                 }
4821         }
4822 #elif ENABLE_HUSH_INTERACTIVE
4823 /* no job control compiled, only prompt/line editing */
4824         if (argv[optind] == NULL && input == stdin
4825          && isatty(STDIN_FILENO) && isatty(STDOUT_FILENO)
4826         ) {
4827                 G.interactive_fd = fcntl(STDIN_FILENO, F_DUPFD, 255);
4828                 if (G.interactive_fd < 0) {
4829                         /* try to dup to any fd */
4830                         G.interactive_fd = dup(STDIN_FILENO);
4831                         if (G.interactive_fd < 0)
4832                                 /* give up */
4833                                 G.interactive_fd = 0;
4834                 }
4835                 if (G.interactive_fd) {
4836                         fcntl(G.interactive_fd, F_SETFD, FD_CLOEXEC);
4837                 }
4838         }
4839         init_signal_mask(); /* note: ensures SIGCHLD is not masked */
4840 #endif
4841         /* POSIX allows shell to re-enable SIGCHLD
4842          * even if it was SIG_IGN on entry */
4843 //      G.count_SIGCHLD++; /* ensure it is != G.handled_SIGCHLD */
4844         signal(SIGCHLD, SIG_DFL); // SIGCHLD_handler);
4845
4846 #if ENABLE_HUSH_INTERACTIVE && !ENABLE_FEATURE_SH_EXTRA_QUIET
4847         if (G.interactive_fd) {
4848                 printf("\n\n%s hush - the humble shell v"HUSH_VER_STR"\n", bb_banner);
4849                 printf("Enter 'help' for a list of built-in commands.\n\n");
4850         }
4851 #endif
4852
4853         if (argv[optind] == NULL) {
4854                 opt = parse_and_run_file(stdin);
4855         } else {
4856                 debug_printf("\nrunning script '%s'\n", argv[optind]);
4857                 G.global_argv = argv + optind;
4858                 G.global_argc = argc - optind;
4859                 input = xfopen_for_read(argv[optind]);
4860                 fcntl(fileno(input), F_SETFD, FD_CLOEXEC);
4861                 opt = parse_and_run_file(input);
4862         }
4863
4864  final_return:
4865
4866 #if ENABLE_FEATURE_CLEAN_UP
4867         fclose(input);
4868         if (G.cwd != bb_msg_unknown)
4869                 free((char*)G.cwd);
4870         cur_var = G.top_var->next;
4871         while (cur_var) {
4872                 struct variable *tmp = cur_var;
4873                 if (!cur_var->max_len)
4874                         free(cur_var->varstr);
4875                 cur_var = cur_var->next;
4876                 free(tmp);
4877         }
4878 #endif
4879         hush_exit(opt ? opt : G.last_return_code);
4880 }
4881
4882
4883 #if ENABLE_LASH
4884 int lash_main(int argc, char **argv) MAIN_EXTERNALLY_VISIBLE;
4885 int lash_main(int argc, char **argv)
4886 {
4887         //bb_error_msg("lash is deprecated, please use hush instead");
4888         return hush_main(argc, argv);
4889 }
4890 #endif
4891
4892
4893 /*
4894  * Built-ins
4895  */
4896 static int builtin_trap(char **argv)
4897 {
4898         int i;
4899         int sig;
4900         char *new_cmd;
4901
4902         if (!G.traps)
4903                 G.traps = xzalloc(sizeof(G.traps[0]) * NSIG);
4904
4905         if (!argv[1]) {
4906                 /* No args: print all trapped.  This isn't 100% correct as we should
4907                  * be escaping the cmd so that it can be pasted back in ...
4908                  */
4909                 for (i = 0; i < NSIG; ++i)
4910                         if (G.traps[i])
4911                                 printf("trap -- '%s' %s\n", G.traps[i], get_signame(i));
4912                 return EXIT_SUCCESS;
4913         }
4914
4915         new_cmd = NULL;
4916         i = 0;
4917         /* if first arg is decimal: reset all specified */
4918         sig = bb_strtou(*++argv, NULL, 10);
4919         if (errno == 0) {
4920                 int ret;
4921  set_all:
4922                 ret = EXIT_SUCCESS;
4923                 while (*argv) {
4924                         sig = get_signum(*argv++);
4925                         if (sig < 0 || sig >= NSIG) {
4926                                 ret = EXIT_FAILURE;
4927                                 /* mimic bash message exactly */
4928                                 bb_perror_msg("trap: %s: invalid signal specification", argv[i]);
4929                                 continue;
4930                         }
4931
4932                         free(G.traps[sig]);
4933                         G.traps[sig] = xstrdup(new_cmd);
4934
4935                         debug_printf("trap: setting SIG%s (%i) to '%s'",
4936                                 get_signame(sig), sig, G.traps[sig]);
4937
4938                         /* There is no signal for 0 (EXIT) */
4939                         if (sig == 0)
4940                                 continue;
4941
4942                         if (new_cmd) {
4943                                 sigaddset(&G.blocked_set, sig);
4944                         } else {
4945                                 /* there was a trap handler, we are removing it
4946                                  * (if sig has non-DFL handling,
4947                                  * we don't need to do anything) */
4948                                 if (sig < 32 && (G.non_DFL_mask & (1 << sig)))
4949                                         continue;
4950                                 sigdelset(&G.blocked_set, sig);
4951                         }
4952                         sigprocmask(SIG_SETMASK, &G.blocked_set, NULL);
4953                 }
4954                 return ret;
4955         }
4956
4957         /* first arg is "-": reset all specified to default */
4958         /* first arg is "": ignore all specified */
4959         /* everything else: execute first arg upon signal */
4960         if (!argv[1]) {
4961                 bb_error_msg("trap: invalid arguments");
4962                 return EXIT_FAILURE;
4963         }
4964         if (LONE_DASH(*argv))
4965                 /* nothing! */;
4966         else
4967                 new_cmd = *argv;
4968         argv++;
4969         goto set_all;
4970 }
4971
4972 static int builtin_true(char **argv UNUSED_PARAM)
4973 {
4974         return 0;
4975 }
4976
4977 static int builtin_test(char **argv)
4978 {
4979         int argc = 0;
4980         while (*argv) {
4981                 argc++;
4982                 argv++;
4983         }
4984         return test_main(argc, argv - argc);
4985 }
4986
4987 static int builtin_echo(char **argv)
4988 {
4989         int argc = 0;
4990         while (*argv) {
4991                 argc++;
4992                 argv++;
4993         }
4994         return echo_main(argc, argv - argc);
4995 }
4996
4997 static int builtin_eval(char **argv)
4998 {
4999         int rcode = EXIT_SUCCESS;
5000
5001         if (argv[1]) {
5002                 char *str = expand_strvec_to_string(argv + 1);
5003                 parse_and_run_string(str, PARSEFLAG_EXIT_FROM_LOOP);
5004                 free(str);
5005                 rcode = G.last_return_code;
5006         }
5007         return rcode;
5008 }
5009
5010 static int builtin_cd(char **argv)
5011 {
5012         const char *newdir;
5013         if (argv[1] == NULL) {
5014                 // bash does nothing (exitcode 0) if HOME is ""; if it's unset,
5015                 // bash says "bash: cd: HOME not set" and does nothing (exitcode 1)
5016                 newdir = getenv("HOME") ? : "/";
5017         } else
5018                 newdir = argv[1];
5019         if (chdir(newdir)) {
5020                 printf("cd: %s: %s\n", newdir, strerror(errno));
5021                 return EXIT_FAILURE;
5022         }
5023         set_cwd();
5024         return EXIT_SUCCESS;
5025 }
5026
5027 static int builtin_exec(char **argv)
5028 {
5029         if (argv[1] == NULL)
5030                 return EXIT_SUCCESS; /* bash does this */
5031         {
5032 #if !BB_MMU
5033                 nommu_save_t dummy;
5034 #endif
5035 // FIXME: if exec fails, bash does NOT exit! We do...
5036                 pseudo_exec_argv(&dummy, argv + 1, 0, NULL);
5037                 /* never returns */
5038         }
5039 }
5040
5041 static int builtin_exit(char **argv)
5042 {
5043 // TODO: bash does it ONLY on top-level sh exit (+interacive only?)
5044         //puts("exit"); /* bash does it */
5045 // TODO: warn if we have background jobs: "There are stopped jobs"
5046 // On second consecutive 'exit', exit anyway.
5047         if (argv[1] == NULL)
5048                 hush_exit(G.last_return_code);
5049         /* mimic bash: exit 123abc == exit 255 + error msg */
5050         xfunc_error_retval = 255;
5051         /* bash: exit -2 == exit 254, no error msg */
5052         hush_exit(xatoi(argv[1]) & 0xff);
5053 }
5054
5055 static int builtin_export(char **argv)
5056 {
5057         const char *value;
5058         char *name = argv[1];
5059
5060         if (name == NULL) {
5061                 // TODO:
5062                 // ash emits: export VAR='VAL'
5063                 // bash: declare -x VAR="VAL"
5064                 // (both also escape as needed (quotes, $, etc))
5065                 char **e = environ;
5066                 if (e)
5067                         while (*e)
5068                                 puts(*e++);
5069                 return EXIT_SUCCESS;
5070         }
5071
5072         value = strchr(name, '=');
5073         if (!value) {
5074                 /* They are exporting something without a =VALUE */
5075                 struct variable *var;
5076
5077                 var = get_local_var(name);
5078                 if (var) {
5079                         var->flg_export = 1;
5080                         debug_printf_env("%s: putenv '%s'\n", __func__, var->varstr);
5081                         putenv(var->varstr);
5082                 }
5083                 /* bash does not return an error when trying to export
5084                  * an undefined variable.  Do likewise. */
5085                 return EXIT_SUCCESS;
5086         }
5087
5088         set_local_var(xstrdup(name), 1);
5089         return EXIT_SUCCESS;
5090 }
5091
5092 #if ENABLE_HUSH_JOB
5093 /* built-in 'fg' and 'bg' handler */
5094 static int builtin_fg_bg(char **argv)
5095 {
5096         int i, jobnum;
5097         struct pipe *pi;
5098
5099         if (!G.interactive_fd)
5100                 return EXIT_FAILURE;
5101         /* If they gave us no args, assume they want the last backgrounded task */
5102         if (!argv[1]) {
5103                 for (pi = G.job_list; pi; pi = pi->next) {
5104                         if (pi->jobid == G.last_jobid) {
5105                                 goto found;
5106                         }
5107                 }
5108                 bb_error_msg("%s: no current job", argv[0]);
5109                 return EXIT_FAILURE;
5110         }
5111         if (sscanf(argv[1], "%%%d", &jobnum) != 1) {
5112                 bb_error_msg("%s: bad argument '%s'", argv[0], argv[1]);
5113                 return EXIT_FAILURE;
5114         }
5115         for (pi = G.job_list; pi; pi = pi->next) {
5116                 if (pi->jobid == jobnum) {
5117                         goto found;
5118                 }
5119         }
5120         bb_error_msg("%s: %d: no such job", argv[0], jobnum);
5121         return EXIT_FAILURE;
5122  found:
5123         // TODO: bash prints a string representation
5124         // of job being foregrounded (like "sleep 1 | cat")
5125         if (*argv[0] == 'f') {
5126                 /* Put the job into the foreground.  */
5127                 tcsetpgrp(G.interactive_fd, pi->pgrp);
5128         }
5129
5130         /* Restart the processes in the job */
5131         debug_printf_jobs("reviving %d procs, pgrp %d\n", pi->num_cmds, pi->pgrp);
5132         for (i = 0; i < pi->num_cmds; i++) {
5133                 debug_printf_jobs("reviving pid %d\n", pi->cmds[i].pid);
5134                 pi->cmds[i].is_stopped = 0;
5135         }
5136         pi->stopped_cmds = 0;
5137
5138         i = kill(- pi->pgrp, SIGCONT);
5139         if (i < 0) {
5140                 if (errno == ESRCH) {
5141                         delete_finished_bg_job(pi);
5142                         return EXIT_SUCCESS;
5143                 } else {
5144                         bb_perror_msg("kill (SIGCONT)");
5145                 }
5146         }
5147
5148         if (*argv[0] == 'f') {
5149                 remove_bg_job(pi);
5150                 return checkjobs_and_fg_shell(pi);
5151         }
5152         return EXIT_SUCCESS;
5153 }
5154 #endif
5155
5156 #if ENABLE_HUSH_HELP
5157 static int builtin_help(char **argv UNUSED_PARAM)
5158 {
5159         const struct built_in_command *x;
5160
5161         printf("\nBuilt-in commands:\n");
5162         printf("-------------------\n");
5163         for (x = bltins; x != &bltins[ARRAY_SIZE(bltins)]; x++) {
5164                 printf("%s\t%s\n", x->cmd, x->descr);
5165         }
5166         printf("\n\n");
5167         return EXIT_SUCCESS;
5168 }
5169 #endif
5170
5171 #if ENABLE_HUSH_JOB
5172 static int builtin_jobs(char **argv UNUSED_PARAM)
5173 {
5174         struct pipe *job;
5175         const char *status_string;
5176
5177         for (job = G.job_list; job; job = job->next) {
5178                 if (job->alive_cmds == job->stopped_cmds)
5179                         status_string = "Stopped";
5180                 else
5181                         status_string = "Running";
5182
5183                 printf(JOB_STATUS_FORMAT, job->jobid, status_string, job->cmdtext);
5184         }
5185         return EXIT_SUCCESS;
5186 }
5187 #endif
5188
5189 static int builtin_pwd(char **argv UNUSED_PARAM)
5190 {
5191         puts(set_cwd());
5192         return EXIT_SUCCESS;
5193 }
5194
5195 static int builtin_read(char **argv)
5196 {
5197         char *string;
5198         const char *name = argv[1] ? argv[1] : "REPLY";
5199
5200         string = xmalloc_reads(STDIN_FILENO, xasprintf("%s=", name), NULL);
5201         return set_local_var(string, 0);
5202 }
5203
5204 /* http://www.opengroup.org/onlinepubs/9699919799/utilities/V3_chap02.html#set
5205  * built-in 'set' handler
5206  * SUSv3 says:
5207  * set [-abCefhmnuvx] [-o option] [argument...]
5208  * set [+abCefhmnuvx] [+o option] [argument...]
5209  * set -- [argument...]
5210  * set -o
5211  * set +o
5212  * Implementations shall support the options in both their hyphen and
5213  * plus-sign forms. These options can also be specified as options to sh.
5214  * Examples:
5215  * Write out all variables and their values: set
5216  * Set $1, $2, and $3 and set "$#" to 3: set c a b
5217  * Turn on the -x and -v options: set -xv
5218  * Unset all positional parameters: set --
5219  * Set $1 to the value of x, even if it begins with '-' or '+': set -- "$x"
5220  * Set the positional parameters to the expansion of x, even if x expands
5221  * with a leading '-' or '+': set -- $x
5222  *
5223  * So far, we only support "set -- [argument...]" and some of the short names.
5224  */
5225 static int builtin_set(char **argv)
5226 {
5227         int n;
5228         char **pp, **g_argv;
5229         char *arg = *++argv;
5230
5231         if (arg == NULL) {
5232                 struct variable *e;
5233                 for (e = G.top_var; e; e = e->next)
5234                         puts(e->varstr);
5235                 return EXIT_SUCCESS;
5236         }
5237
5238         do {
5239                 if (!strcmp(arg, "--")) {
5240                         ++argv;
5241                         goto set_argv;
5242                 }
5243
5244                 if (arg[0] == '+' || arg[0] == '-') {
5245                         for (n = 1; arg[n]; ++n)
5246                                 if (set_mode(arg[0], arg[n]))
5247                                         goto error;
5248                         continue;
5249                 }
5250
5251                 break;
5252         } while ((arg = *++argv) != NULL);
5253         /* Now argv[0] is 1st argument */
5254
5255         /* Only reset global_argv if we didn't process anything */
5256         if (arg == NULL)
5257                 return EXIT_SUCCESS;
5258  set_argv:
5259
5260         /* NB: G.global_argv[0] ($0) is never freed/changed */
5261         g_argv = G.global_argv;
5262         if (G.global_args_malloced) {
5263                 pp = g_argv;
5264                 while (*++pp)
5265                         free(*pp);
5266                 g_argv[1] = NULL;
5267         } else {
5268                 G.global_args_malloced = 1;
5269                 pp = xzalloc(sizeof(pp[0]) * 2);
5270                 pp[0] = g_argv[0]; /* retain $0 */
5271                 g_argv = pp;
5272         }
5273         /* This realloc's G.global_argv */
5274         G.global_argv = pp = add_strings_to_strings(g_argv, argv, /*dup:*/ 1);
5275
5276         n = 1;
5277         while (*++pp)
5278                 n++;
5279         G.global_argc = n;
5280
5281         return EXIT_SUCCESS;
5282
5283         /* Nothing known, so abort */
5284  error:
5285         bb_error_msg("set: %s: invalid option", arg);
5286         return EXIT_FAILURE;
5287 }
5288
5289 static int builtin_shift(char **argv)
5290 {
5291         int n = 1;
5292         if (argv[1]) {
5293                 n = atoi(argv[1]);
5294         }
5295         if (n >= 0 && n < G.global_argc) {
5296                 if (G.global_args_malloced) {
5297                         int m = 1;
5298                         while (m <= n)
5299                                 free(G.global_argv[m++]);
5300                 }
5301                 G.global_argc -= n;
5302                 memmove(&G.global_argv[1], &G.global_argv[n+1],
5303                                 G.global_argc * sizeof(G.global_argv[0]));
5304                 return EXIT_SUCCESS;
5305         }
5306         return EXIT_FAILURE;
5307 }
5308
5309 static int builtin_source(char **argv)
5310 {
5311         FILE *input;
5312         int status;
5313
5314         if (argv[1] == NULL)
5315                 return EXIT_FAILURE;
5316
5317         /* XXX search through $PATH is missing */
5318         input = fopen_for_read(argv[1]);
5319         if (!input) {
5320                 bb_error_msg("can't open '%s'", argv[1]);
5321                 return EXIT_FAILURE;
5322         }
5323         close_on_exec_on(fileno(input));
5324
5325         /* Now run the file */
5326         /* XXX argv and argc are broken; need to save old G.global_argv
5327          * (pointer only is OK!) on this stack frame,
5328          * set G.global_argv=argv+1, recurse, and restore. */
5329         status = parse_and_run_file(input);
5330         fclose(input);
5331         return status;
5332 }
5333
5334 static int builtin_umask(char **argv)
5335 {
5336         mode_t new_umask;
5337         const char *arg = argv[1];
5338         if (arg) {
5339                 new_umask = bb_strtou(arg, NULL, 8);
5340                 if (errno)
5341                         return EXIT_FAILURE;
5342         } else {
5343                 new_umask = umask(0);
5344                 printf("%.3o\n", (unsigned) new_umask);
5345         }
5346         umask(new_umask);
5347         return EXIT_SUCCESS;
5348 }
5349
5350 /* http://www.opengroup.org/onlinepubs/9699919799/utilities/V3_chap02.html#unset */
5351 static int builtin_unset(char **argv)
5352 {
5353         size_t i;
5354         int ret;
5355         bool var = true;
5356
5357         if (!argv[1])
5358                 return EXIT_SUCCESS;
5359
5360         i = 0;
5361         if (argv[1][0] == '-') {
5362                 switch (argv[1][1]) {
5363                 case 'v': break;
5364                 case 'f': if (ENABLE_HUSH_FUNCTIONS) { var = false; break; }
5365                 default:
5366                         bb_error_msg("unset: %s: invalid option", argv[1]);
5367                         return EXIT_FAILURE;
5368                 }
5369                 ++i;
5370         }
5371
5372         ret = EXIT_SUCCESS;
5373         while (argv[++i]) {
5374                 if (var) {
5375                         if (unset_local_var(argv[i]))
5376                                 ret = EXIT_FAILURE;
5377                 }
5378 #if ENABLE_HUSH_FUNCTIONS
5379                 else
5380                         unset_local_func(argv[i]);
5381 #endif
5382         }
5383         return ret;
5384 }
5385
5386 /* http://www.opengroup.org/onlinepubs/9699919799/utilities/wait.html */
5387 static int builtin_wait(char **argv)
5388 {
5389         int ret = EXIT_SUCCESS;
5390         int status, sig;
5391
5392         if (*++argv == NULL) {
5393                 /* Don't care about wait results */
5394                 /* Note 1: must wait until there are no more children */
5395                 /* Note 2: must be interruptible */
5396                 /* Examples:
5397                  * $ sleep 3 & sleep 6 & wait
5398                  * [1] 30934 sleep 3
5399                  * [2] 30935 sleep 6
5400                  * [1] Done                   sleep 3
5401                  * [2] Done                   sleep 6
5402                  * $ sleep 3 & sleep 6 & wait
5403                  * [1] 30936 sleep 3
5404                  * [2] 30937 sleep 6
5405                  * [1] Done                   sleep 3
5406                  * ^C <-- after ~4 sec from keyboard
5407                  * $
5408                  */
5409                 sigaddset(&G.blocked_set, SIGCHLD);
5410                 sigprocmask(SIG_SETMASK, &G.blocked_set, NULL);
5411                 while (1) {
5412                         checkjobs(NULL);
5413                         if (errno == ECHILD)
5414                                 break;
5415                         /* Wait for SIGCHLD or any other signal of interest */
5416                         /* sigtimedwait with infinite timeout: */
5417                         sig = sigwaitinfo(&G.blocked_set, NULL);
5418                         if (sig > 0) {
5419                                 sig = check_and_run_traps(sig);
5420                                 if (sig && sig != SIGCHLD) { /* see note 2 */
5421                                         ret = 128 + sig;
5422                                         break;
5423                                 }
5424                         }
5425                 }
5426                 sigdelset(&G.blocked_set, SIGCHLD);
5427                 sigprocmask(SIG_SETMASK, &G.blocked_set, NULL);
5428                 return ret;
5429         }
5430
5431         /* This is probably buggy wrt interruptible-ness */
5432         while (*argv) {
5433                 pid_t pid = bb_strtou(*argv, NULL, 10);
5434                 if (errno) {
5435                         /* mimic bash message */
5436                         bb_error_msg("wait: '%s': not a pid or valid job spec", *argv);
5437                         return EXIT_FAILURE;
5438                 }
5439                 if (waitpid(pid, &status, 0) == pid) {
5440                         if (WIFSIGNALED(status))
5441                                 ret = 128 + WTERMSIG(status);
5442                         else if (WIFEXITED(status))
5443                                 ret = WEXITSTATUS(status);
5444                         else /* wtf? */
5445                                 ret = EXIT_FAILURE;
5446                 } else {
5447                         bb_perror_msg("wait %s", *argv);
5448                         ret = 127;
5449                 }
5450                 argv++;
5451         }
5452
5453         return ret;
5454 }
5455
5456 #if ENABLE_HUSH_LOOPS
5457 static int builtin_break(char **argv)
5458 {
5459         if (G.depth_of_loop == 0) {
5460                 bb_error_msg("%s: only meaningful in a loop", argv[0]);
5461                 return EXIT_SUCCESS; /* bash compat */
5462         }
5463         G.flag_break_continue++; /* BC_BREAK = 1 */
5464         G.depth_break_continue = 1;
5465         if (argv[1]) {
5466                 G.depth_break_continue = bb_strtou(argv[1], NULL, 10);
5467                 if (errno || !G.depth_break_continue || argv[2]) {
5468                         bb_error_msg("%s: bad arguments", argv[0]);
5469                         G.flag_break_continue = BC_BREAK;
5470                         G.depth_break_continue = UINT_MAX;
5471                 }
5472         }
5473         if (G.depth_of_loop < G.depth_break_continue)
5474                 G.depth_break_continue = G.depth_of_loop;
5475         return EXIT_SUCCESS;
5476 }
5477
5478 static int builtin_continue(char **argv)
5479 {
5480         G.flag_break_continue = 1; /* BC_CONTINUE = 2 = 1+1 */
5481         return builtin_break(argv);
5482 }
5483 #endif