hush: fix "if { echo foo; } then { echo bar; } fi" parsing
[oweals/busybox.git] / shell / hush.c
1 /* vi: set sw=4 ts=4: */
2 /*
3  * A prototype Bourne shell grammar parser.
4  * Intended to follow the original Thompson and Ritchie
5  * "small and simple is beautiful" philosophy, which
6  * incidentally is a good match to today's BusyBox.
7  *
8  * Copyright (C) 2000,2001  Larry Doolittle <larry@doolittle.boa.org>
9  * Copyright (C) 2008,2009  Denys Vlasenko <vda.linux@googlemail.com>
10  *
11  * Credits:
12  *      The parser routines proper are all original material, first
13  *      written Dec 2000 and Jan 2001 by Larry Doolittle.  The
14  *      execution engine, the builtins, and much of the underlying
15  *      support has been adapted from busybox-0.49pre's lash, which is
16  *      Copyright (C) 1999-2004 by Erik Andersen <andersen@codepoet.org>
17  *      written by Erik Andersen <andersen@codepoet.org>.  That, in turn,
18  *      is based in part on ladsh.c, by Michael K. Johnson and Erik W.
19  *      Troan, which they placed in the public domain.  I don't know
20  *      how much of the Johnson/Troan code has survived the repeated
21  *      rewrites.
22  *
23  * Other credits:
24  *      o_addchr derived from similar w_addchar function in glibc-2.2.
25  *      parse_redirect, redirect_opt_num, and big chunks of main
26  *      and many builtins derived from contributions by Erik Andersen.
27  *      Miscellaneous bugfixes from Matt Kraai.
28  *
29  * There are two big (and related) architecture differences between
30  * this parser and the lash parser.  One is that this version is
31  * actually designed from the ground up to understand nearly all
32  * of the Bourne grammar.  The second, consequential change is that
33  * the parser and input reader have been turned inside out.  Now,
34  * the parser is in control, and asks for input as needed.  The old
35  * way had the input reader in control, and it asked for parsing to
36  * take place as needed.  The new way makes it much easier to properly
37  * handle the recursion implicit in the various substitutions, especially
38  * across continuation lines.
39  *
40  * POSIX syntax not implemented:
41  *      aliases
42  *      <(list) and >(list) Process Substitution
43  *      Tilde Expansion
44  *
45  * Bash stuff (maybe optionally enable?):
46  *      &> and >& redirection of stdout+stderr
47  *      Brace expansion
48  *      reserved words: [[ ]] function select
49  *      substrings ${var:1:5}
50  *
51  * TODOs:
52  *      grep for "TODO" and fix (some of them are easy)
53  *      change { and } from special chars to reserved words
54  *      builtins: return, ulimit
55  *      follow IFS rules more precisely, including update semantics
56  *      figure out what to do with backslash-newline
57  *      continuation lines, both explicit and implicit - done?
58  *      SIGHUP handling
59  *      separate job control from interactiveness
60  *      (testcase: booting with init=/bin/hush does not show prompt (2009-04))
61  *
62  * Licensed under the GPL v2 or later, see the file LICENSE in this tarball.
63  */
64 #include "busybox.h" /* for APPLET_IS_NOFORK/NOEXEC */
65 #include <glob.h>
66 /* #include <dmalloc.h> */
67 #if ENABLE_HUSH_CASE
68 # include <fnmatch.h>
69 #endif
70 #include "math.h"
71 #include "match.h"
72 #ifndef PIPE_BUF
73 # define PIPE_BUF 4096           /* amount of buffering in a pipe */
74 #endif
75
76
77 /* Debug build knobs */
78 #define LEAK_HUNTING 0
79 #define BUILD_AS_NOMMU 0
80 /* Enable/disable sanity checks. Ok to enable in production,
81  * only adds a bit of bloat. Set to >1 to get non-production level verbosity.
82  * Keeping 1 for now even in released versions.
83  */
84 #define HUSH_DEBUG 1
85
86
87 #if BUILD_AS_NOMMU
88 # undef BB_MMU
89 # undef USE_FOR_NOMMU
90 # undef USE_FOR_MMU
91 # define BB_MMU 0
92 # define USE_FOR_NOMMU(...) __VA_ARGS__
93 # define USE_FOR_MMU(...)
94 #endif
95
96 #if defined SINGLE_APPLET_MAIN
97 /* STANDALONE does not make sense, and won't compile */
98 # undef CONFIG_FEATURE_SH_STANDALONE
99 # undef ENABLE_FEATURE_SH_STANDALONE
100 # undef USE_FEATURE_SH_STANDALONE
101 # define SKIP_FEATURE_SH_STANDALONE(...) __VA_ARGS__
102 # define ENABLE_FEATURE_SH_STANDALONE 0
103 # define USE_FEATURE_SH_STANDALONE(...)
104 # define SKIP_FEATURE_SH_STANDALONE(...) __VA_ARGS__
105 #endif
106
107 #if !ENABLE_HUSH_INTERACTIVE
108 # undef ENABLE_FEATURE_EDITING
109 # define ENABLE_FEATURE_EDITING 0
110 # undef ENABLE_FEATURE_EDITING_FANCY_PROMPT
111 # define ENABLE_FEATURE_EDITING_FANCY_PROMPT 0
112 #endif
113
114 /* Do we support ANY keywords? */
115 #if ENABLE_HUSH_IF || ENABLE_HUSH_LOOPS || ENABLE_HUSH_CASE
116 # define HAS_KEYWORDS 1
117 # define IF_HAS_KEYWORDS(...) __VA_ARGS__
118 # define IF_HAS_NO_KEYWORDS(...)
119 #else
120 # define HAS_KEYWORDS 0
121 # define IF_HAS_KEYWORDS(...)
122 # define IF_HAS_NO_KEYWORDS(...) __VA_ARGS__
123 #endif
124
125 /* If you comment out one of these below, it will be #defined later
126  * to perform debug printfs to stderr: */
127 #define debug_printf(...)        do {} while (0)
128 /* Finer-grained debug switches */
129 #define debug_printf_parse(...)  do {} while (0)
130 #define debug_print_tree(a, b)   do {} while (0)
131 #define debug_printf_exec(...)   do {} while (0)
132 #define debug_printf_env(...)    do {} while (0)
133 #define debug_printf_jobs(...)   do {} while (0)
134 #define debug_printf_expand(...) do {} while (0)
135 #define debug_printf_glob(...)   do {} while (0)
136 #define debug_printf_list(...)   do {} while (0)
137 #define debug_printf_subst(...)  do {} while (0)
138 #define debug_printf_clean(...)  do {} while (0)
139
140 #define ERR_PTR ((void*)(long)1)
141
142 #define JOB_STATUS_FORMAT "[%d] %-22s %.40s\n"
143
144 #define SPECIAL_VAR_SYMBOL 3
145
146 static const char hush_version_str[] ALIGN1 = "HUSH_VERSION="BB_VER;
147
148 /* This supports saving pointers malloced in vfork child,
149  * to be freed in the parent.
150  */
151 #if !BB_MMU
152 typedef struct nommu_save_t {
153         char **new_env;
154         char **old_env;
155         char **argv;
156         char **argv_from_re_execing;
157 } nommu_save_t;
158 #endif
159
160 /* The descrip member of this structure is only used to make
161  * debugging output pretty */
162 static const struct {
163         int mode;
164         signed char default_fd;
165         char descrip[3];
166 } redir_table[] = {
167         { 0,                         0, "??" },
168         { O_RDONLY,                  0, "<"  },
169         { O_CREAT|O_TRUNC|O_WRONLY,  1, ">"  },
170         { O_CREAT|O_APPEND|O_WRONLY, 1, ">>" },
171         { O_RDONLY,                  0, "<<" },
172         { O_CREAT|O_RDWR,            1, "<>" },
173 /* Should not be needed. Bogus default_fd helps in debugging */
174 /*      { O_RDONLY,                 77, "<<" }, */
175 };
176
177 typedef enum reserved_style {
178         RES_NONE  = 0,
179 #if ENABLE_HUSH_IF
180         RES_IF    ,
181         RES_THEN  ,
182         RES_ELIF  ,
183         RES_ELSE  ,
184         RES_FI    ,
185 #endif
186 #if ENABLE_HUSH_LOOPS
187         RES_FOR   ,
188         RES_WHILE ,
189         RES_UNTIL ,
190         RES_DO    ,
191         RES_DONE  ,
192 #endif
193 #if ENABLE_HUSH_LOOPS || ENABLE_HUSH_CASE
194         RES_IN    ,
195 #endif
196 #if ENABLE_HUSH_CASE
197         RES_CASE  ,
198         /* two pseudo-keywords support contrived "case" syntax: */
199         RES_MATCH , /* "word)" */
200         RES_CASEI , /* "this command is inside CASE" */
201         RES_ESAC  ,
202 #endif
203         RES_XXXX  ,
204         RES_SNTX
205 } reserved_style;
206
207 typedef struct o_string {
208         char *data;
209         int length; /* position where data is appended */
210         int maxlen;
211         /* Protect newly added chars against globbing
212          * (by prepending \ to *, ?, [, \) */
213         smallint o_escape;
214         smallint o_glob;
215         /* At least some part of the string was inside '' or "",
216          * possibly empty one: word"", wo''rd etc. */
217         smallint o_quoted;
218         smallint has_empty_slot;
219         smallint o_assignment; /* 0:maybe, 1:yes, 2:no */
220 } o_string;
221 enum {
222         MAYBE_ASSIGNMENT = 0,
223         DEFINITELY_ASSIGNMENT = 1,
224         NOT_ASSIGNMENT = 2,
225         WORD_IS_KEYWORD = 3, /* not assigment, but next word may be: "if v=xyz cmd;" */
226 };
227 /* Used for initialization: o_string foo = NULL_O_STRING; */
228 #define NULL_O_STRING { NULL }
229
230 /* I can almost use ordinary FILE*.  Is open_memstream() universally
231  * available?  Where is it documented? */
232 typedef struct in_str {
233         const char *p;
234         /* eof_flag=1: last char in ->p is really an EOF */
235         char eof_flag; /* meaningless if ->p == NULL */
236         char peek_buf[2];
237 #if ENABLE_HUSH_INTERACTIVE
238         smallint promptme;
239         smallint promptmode; /* 0: PS1, 1: PS2 */
240 #endif
241         FILE *file;
242         int (*get) (struct in_str *);
243         int (*peek) (struct in_str *);
244 } in_str;
245 #define i_getch(input) ((input)->get(input))
246 #define i_peek(input) ((input)->peek(input))
247
248 struct redir_struct {
249         struct redir_struct *next;
250         char *rd_filename;          /* filename */
251         int rd_fd;                  /* fd to redirect */
252         /* fd to redirect to, or -3 if rd_fd is to be closed (n>&-) */
253         int rd_dup;
254         smallint rd_type;           /* (enum redir_type) */
255         /* note: for heredocs, rd_filename contains heredoc delimiter,
256          * and subsequently heredoc itself; and rd_dup is a bitmask:
257          * 1: do we need to trim leading tabs?
258          * 2: is heredoc quoted (<<'delim' syntax) ?
259          */
260 };
261 typedef enum redir_type {
262         REDIRECT_INVALID   = 0,
263         REDIRECT_INPUT     = 1,
264         REDIRECT_OVERWRITE = 2,
265         REDIRECT_APPEND    = 3,
266         REDIRECT_HEREDOC   = 4,
267         REDIRECT_IO        = 5,
268         REDIRECT_HEREDOC2  = 6, /* REDIRECT_HEREDOC after heredoc is loaded */
269
270         REDIRFD_CLOSE      = -3,
271         REDIRFD_SYNTAX_ERR = -2,
272         REDIRFD_TO_FILE    = -1,
273         /* otherwise, rd_fd is redirected to rd_dup */
274
275         HEREDOC_SKIPTABS = 1,
276         HEREDOC_QUOTED   = 2,
277 } redir_type;
278
279
280 struct command {
281         pid_t pid;                  /* 0 if exited */
282         int assignment_cnt;         /* how many argv[i] are assignments? */
283         smallint is_stopped;        /* is the command currently running? */
284         smallint grp_type;          /* GRP_xxx */
285 #define GRP_NORMAL   0
286 #define GRP_SUBSHELL 1
287 #if ENABLE_HUSH_FUNCTIONS
288 # define GRP_FUNCTION 2
289 #endif
290         struct pipe *group;         /* if non-NULL, this "command" is { list },
291                                      * ( list ), or a compound statement */
292 #if !BB_MMU
293         char *group_as_string;
294 #endif
295 #if ENABLE_HUSH_FUNCTIONS
296         struct function *child_func;
297 /* This field is used to prevent a bug here:
298  * while...do f1() {a;}; f1; f1 {b;}; f1; done
299  * When we execute "f1() {a;}" cmd, we create new function and clear
300  * cmd->group, cmd->group_as_string, cmd->argv[0].
301  * when we execute "f1 {b;}", we notice that f1 exists,
302  * and that it's "parent cmd" struct is still "alive",
303  * we put those fields back into cmd->xxx
304  * (struct function has ->parent_cmd ptr to facilitate that).
305  * When we loop back, we can execute "f1() {a;}" again and set f1 correctly.
306  * Without this trick, loop would execute a;b;b;b;...
307  * instead of correct sequence a;b;a;b;...
308  * When command is freed, it severs the link
309  * (sets ->child_func->parent_cmd to NULL).
310  */
311 #endif
312         char **argv;                /* command name and arguments */
313 /* argv vector may contain variable references (^Cvar^C, ^C0^C etc)
314  * and on execution these are substituted with their values.
315  * Substitution can make _several_ words out of one argv[n]!
316  * Example: argv[0]=='.^C*^C.' here: echo .$*.
317  * References of the form ^C`cmd arg^C are `cmd arg` substitutions.
318  */
319         struct redir_struct *redirects; /* I/O redirections */
320 };
321
322 struct pipe {
323         struct pipe *next;
324         int num_cmds;               /* total number of commands in pipe */
325         int alive_cmds;             /* number of commands running (not exited) */
326         int stopped_cmds;           /* number of commands alive, but stopped */
327 #if ENABLE_HUSH_JOB
328         int jobid;                  /* job number */
329         pid_t pgrp;                 /* process group ID for the job */
330         char *cmdtext;              /* name of job */
331 #endif
332         struct command *cmds;       /* array of commands in pipe */
333         smallint followup;          /* PIPE_BG, PIPE_SEQ, PIPE_OR, PIPE_AND */
334         IF_HAS_KEYWORDS(smallint pi_inverted;) /* "! cmd | cmd" */
335         IF_HAS_KEYWORDS(smallint res_word;) /* needed for if, for, while, until... */
336 };
337 typedef enum pipe_style {
338         PIPE_SEQ = 1,
339         PIPE_AND = 2,
340         PIPE_OR  = 3,
341         PIPE_BG  = 4,
342 } pipe_style;
343
344 /* This holds pointers to the various results of parsing */
345 struct parse_context {
346         /* linked list of pipes */
347         struct pipe *list_head;
348         /* last pipe (being constructed right now) */
349         struct pipe *pipe;
350         /* last command in pipe (being constructed right now) */
351         struct command *command;
352         /* last redirect in command->redirects list */
353         struct redir_struct *pending_redirect;
354 #if !BB_MMU
355         o_string as_string;
356 #endif
357 #if HAS_KEYWORDS
358         smallint ctx_res_w;
359         smallint ctx_inverted; /* "! cmd | cmd" */
360 #if ENABLE_HUSH_CASE
361         smallint ctx_dsemicolon; /* ";;" seen */
362 #endif
363         /* bitmask of FLAG_xxx, for figuring out valid reserved words */
364         int old_flag;
365         /* group we are enclosed in:
366          * example: "if pipe1; pipe2; then pipe3; fi"
367          * when we see "if" or "then", we malloc and copy current context,
368          * and make ->stack point to it. then we parse pipeN.
369          * when closing "then" / fi" / whatever is found,
370          * we move list_head into ->stack->command->group,
371          * copy ->stack into current context, and delete ->stack.
372          * (parsing of { list } and ( list ) doesn't use this method)
373          */
374         struct parse_context *stack;
375 #endif
376 };
377
378 /* On program start, environ points to initial environment.
379  * putenv adds new pointers into it, unsetenv removes them.
380  * Neither of these (de)allocates the strings.
381  * setenv allocates new strings in malloc space and does putenv,
382  * and thus setenv is unusable (leaky) for shell's purposes */
383 #define setenv(...) setenv_is_leaky_dont_use()
384 struct variable {
385         struct variable *next;
386         char *varstr;        /* points to "name=" portion */
387         int max_len;         /* if > 0, name is part of initial env; else name is malloced */
388         smallint flg_export; /* putenv should be done on this var */
389         smallint flg_read_only;
390 };
391
392 enum {
393         BC_BREAK = 1,
394         BC_CONTINUE = 2,
395 };
396
397 #if ENABLE_HUSH_FUNCTIONS
398 struct function {
399         struct function *next;
400         char *name;
401         struct command *parent_cmd;
402         struct pipe *body;
403 #if !BB_MMU
404         char *body_as_string;
405 #endif
406 };
407 #endif
408
409
410 /* "Globals" within this file */
411 /* Sorted roughly by size (smaller offsets == smaller code) */
412 struct globals {
413 #if ENABLE_HUSH_INTERACTIVE
414         /* 'interactive_fd' is a fd# open to ctty, if we have one
415          * _AND_ if we decided to act interactively */
416         int interactive_fd;
417         const char *PS1;
418         const char *PS2;
419 #define G_interactive_fd (G.interactive_fd)
420 #else
421 #define G_interactive_fd 0
422 #endif
423 #if ENABLE_FEATURE_EDITING
424         line_input_t *line_input_state;
425 #endif
426         pid_t root_pid;
427         pid_t last_bg_pid;
428 #if ENABLE_HUSH_JOB
429         int run_list_level;
430         pid_t saved_tty_pgrp;
431         int last_jobid;
432         struct pipe *job_list;
433         struct pipe *toplevel_list;
434 #endif
435         smallint flag_SIGINT;
436 #if ENABLE_HUSH_LOOPS
437         smallint flag_break_continue;
438 #endif
439         smallint fake_mode;
440         smallint exiting; /* used to prevent EXIT trap recursion */
441         /* These four support $?, $#, and $1 */
442         smalluint last_exitcode;
443         /* are global_argv and global_argv[1..n] malloced? (note: not [0]) */
444         smalluint global_args_malloced;
445         /* how many non-NULL argv's we have. NB: $# + 1 */
446         int global_argc;
447         char **global_argv;
448 #if !BB_MMU
449         char *argv0_for_re_execing;
450 #endif
451 #if ENABLE_HUSH_LOOPS
452         unsigned depth_break_continue;
453         unsigned depth_of_loop;
454 #endif
455         const char *ifs;
456         const char *cwd;
457         struct variable *top_var; /* = &G.shell_ver (set in main()) */
458         struct variable shell_ver;
459 #if ENABLE_HUSH_FUNCTIONS
460         struct function *top_func;
461 #endif
462         /* Signal and trap handling */
463 //      unsigned count_SIGCHLD;
464 //      unsigned handled_SIGCHLD;
465         /* which signals have non-DFL handler (even with no traps set)? */
466         unsigned non_DFL_mask;
467         char **traps; /* char *traps[NSIG] */
468         sigset_t blocked_set;
469         sigset_t inherited_set;
470 #if HUSH_DEBUG
471         unsigned long memleak_value;
472         int debug_indent;
473 #endif
474         char user_input_buf[ENABLE_FEATURE_EDITING ? BUFSIZ : 2];
475 };
476 #define G (*ptr_to_globals)
477 /* Not #defining name to G.name - this quickly gets unwieldy
478  * (too many defines). Also, I actually prefer to see when a variable
479  * is global, thus "G." prefix is a useful hint */
480 #define INIT_G() do { \
481         SET_PTR_TO_GLOBALS(xzalloc(sizeof(G))); \
482 } while (0)
483
484
485 /* Function prototypes for builtins */
486 static int builtin_cd(char **argv);
487 static int builtin_echo(char **argv);
488 static int builtin_eval(char **argv);
489 static int builtin_exec(char **argv);
490 static int builtin_exit(char **argv);
491 static int builtin_export(char **argv);
492 #if ENABLE_HUSH_JOB
493 static int builtin_fg_bg(char **argv);
494 static int builtin_jobs(char **argv);
495 #endif
496 #if ENABLE_HUSH_HELP
497 static int builtin_help(char **argv);
498 #endif
499 #if HUSH_DEBUG
500 static int builtin_memleak(char **argv);
501 #endif
502 static int builtin_pwd(char **argv);
503 static int builtin_read(char **argv);
504 static int builtin_set(char **argv);
505 static int builtin_shift(char **argv);
506 static int builtin_source(char **argv);
507 static int builtin_test(char **argv);
508 static int builtin_trap(char **argv);
509 static int builtin_true(char **argv);
510 static int builtin_umask(char **argv);
511 static int builtin_unset(char **argv);
512 static int builtin_wait(char **argv);
513 #if ENABLE_HUSH_LOOPS
514 static int builtin_break(char **argv);
515 static int builtin_continue(char **argv);
516 #endif
517
518 /* Table of built-in functions.  They can be forked or not, depending on
519  * context: within pipes, they fork.  As simple commands, they do not.
520  * When used in non-forking context, they can change global variables
521  * in the parent shell process.  If forked, of course they cannot.
522  * For example, 'unset foo | whatever' will parse and run, but foo will
523  * still be set at the end. */
524 struct built_in_command {
525         const char *cmd;
526         int (*function)(char **argv);
527 #if ENABLE_HUSH_HELP
528         const char *descr;
529 #define BLTIN(cmd, func, help) { cmd, func, help }
530 #else
531 #define BLTIN(cmd, func, help) { cmd, func }
532 #endif
533 };
534
535 /* For now, echo and test are unconditionally enabled.
536  * Maybe make it configurable? */
537 static const struct built_in_command bltins[] = {
538         BLTIN("."       , builtin_source  , "Run commands in a file"),
539         BLTIN(":"       , builtin_true    , "No-op"),
540         BLTIN("["       , builtin_test    , "Test condition"),
541 #if ENABLE_HUSH_JOB
542         BLTIN("bg"      , builtin_fg_bg   , "Resume a job in the background"),
543 #endif
544 #if ENABLE_HUSH_LOOPS
545         BLTIN("break"   , builtin_break   , "Exit from a loop"),
546 #endif
547         BLTIN("cd"      , builtin_cd      , "Change directory"),
548 #if ENABLE_HUSH_LOOPS
549         BLTIN("continue", builtin_continue, "Start new loop iteration"),
550 #endif
551         BLTIN("echo"    , builtin_echo    , "Write to stdout"),
552         BLTIN("eval"    , builtin_eval    , "Construct and run shell command"),
553         BLTIN("exec"    , builtin_exec    , "Execute command, don't return to shell"),
554         BLTIN("exit"    , builtin_exit    , "Exit"),
555         BLTIN("export"  , builtin_export  , "Set environment variable"),
556 #if ENABLE_HUSH_JOB
557         BLTIN("fg"      , builtin_fg_bg   , "Bring job into the foreground"),
558 #endif
559 #if ENABLE_HUSH_HELP
560         BLTIN("help"    , builtin_help    , "List shell built-in commands"),
561 #endif
562 #if ENABLE_HUSH_JOB
563         BLTIN("jobs"    , builtin_jobs    , "List active jobs"),
564 #endif
565 #if HUSH_DEBUG
566         BLTIN("memleak" , builtin_memleak , "Debug tool"),
567 #endif
568         BLTIN("pwd"     , builtin_pwd     , "Print current directory"),
569         BLTIN("read"    , builtin_read    , "Input environment variable"),
570 //      BLTIN("return"  , builtin_return  , "Return from a function"),
571         BLTIN("set"     , builtin_set     , "Set/unset shell local variables"),
572         BLTIN("shift"   , builtin_shift   , "Shift positional parameters"),
573         BLTIN("test"    , builtin_test    , "Test condition"),
574         BLTIN("trap"    , builtin_trap    , "Trap signals"),
575 //      BLTIN("ulimit"  , builtin_return  , "Control resource limits"),
576         BLTIN("umask"   , builtin_umask   , "Set file creation mask"),
577         BLTIN("unset"   , builtin_unset   , "Unset environment variable"),
578         BLTIN("wait"    , builtin_wait    , "Wait for process"),
579 };
580
581
582 /* Debug printouts.
583  */
584 #if HUSH_DEBUG
585 /* prevent disasters with G.debug_indent < 0 */
586 # define indent() fprintf(stderr, "%*s", (G.debug_indent * 2) & 0xff, "")
587 # define debug_enter() (G.debug_indent++)
588 # define debug_leave() (G.debug_indent--)
589 #else
590 # define indent()    ((void)0)
591 # define debug_enter() ((void)0)
592 # define debug_leave() ((void)0)
593 #endif
594
595 #ifndef debug_printf
596 # define debug_printf(...) (indent(), fprintf(stderr, __VA_ARGS__))
597 #endif
598
599 #ifndef debug_printf_parse
600 # define debug_printf_parse(...) (indent(), fprintf(stderr, __VA_ARGS__))
601 #endif
602
603 #ifndef debug_printf_exec
604 #define debug_printf_exec(...) (indent(), fprintf(stderr, __VA_ARGS__))
605 #endif
606
607 #ifndef debug_printf_env
608 # define debug_printf_env(...) (indent(), fprintf(stderr, __VA_ARGS__))
609 #endif
610
611 #ifndef debug_printf_jobs
612 # define debug_printf_jobs(...) (indent(), fprintf(stderr, __VA_ARGS__))
613 # define DEBUG_JOBS 1
614 #else
615 # define DEBUG_JOBS 0
616 #endif
617
618 #ifndef debug_printf_expand
619 # define debug_printf_expand(...) (indent(), fprintf(stderr, __VA_ARGS__))
620 # define DEBUG_EXPAND 1
621 #else
622 # define DEBUG_EXPAND 0
623 #endif
624
625 #ifndef debug_printf_glob
626 # define debug_printf_glob(...) (indent(), fprintf(stderr, __VA_ARGS__))
627 # define DEBUG_GLOB 1
628 #else
629 # define DEBUG_GLOB 0
630 #endif
631
632 #ifndef debug_printf_list
633 # define debug_printf_list(...) (indent(), fprintf(stderr, __VA_ARGS__))
634 #endif
635
636 #ifndef debug_printf_subst
637 # define debug_printf_subst(...) (indent(), fprintf(stderr, __VA_ARGS__))
638 #endif
639
640 #ifndef debug_printf_clean
641 # define debug_printf_clean(...) (indent(), fprintf(stderr, __VA_ARGS__))
642 # define DEBUG_CLEAN 1
643 #else
644 # define DEBUG_CLEAN 0
645 #endif
646
647 #if DEBUG_EXPAND
648 static void debug_print_strings(const char *prefix, char **vv)
649 {
650         indent();
651         fprintf(stderr, "%s:\n", prefix);
652         while (*vv)
653                 fprintf(stderr, " '%s'\n", *vv++);
654 }
655 #else
656 #define debug_print_strings(prefix, vv) ((void)0)
657 #endif
658
659
660 /* Leak hunting. Use hush_leaktool.sh for post-processing.
661  */
662 #if LEAK_HUNTING
663 static void *xxmalloc(int lineno, size_t size)
664 {
665         void *ptr = xmalloc((size + 0xff) & ~0xff);
666         fdprintf(2, "line %d: malloc %p\n", lineno, ptr);
667         return ptr;
668 }
669 static void *xxrealloc(int lineno, void *ptr, size_t size)
670 {
671         ptr = xrealloc(ptr, (size + 0xff) & ~0xff);
672         fdprintf(2, "line %d: realloc %p\n", lineno, ptr);
673         return ptr;
674 }
675 static char *xxstrdup(int lineno, const char *str)
676 {
677         char *ptr = xstrdup(str);
678         fdprintf(2, "line %d: strdup %p\n", lineno, ptr);
679         return ptr;
680 }
681 static void xxfree(void *ptr)
682 {
683         fdprintf(2, "free %p\n", ptr);
684         free(ptr);
685 }
686 #define xmalloc(s)     xxmalloc(__LINE__, s)
687 #define xrealloc(p, s) xxrealloc(__LINE__, p, s)
688 #define xstrdup(s)     xxstrdup(__LINE__, s)
689 #define free(p)        xxfree(p)
690 #endif
691
692
693 /* Syntax and runtime errors. They always abort scripts.
694  * In interactive use they usually discard unparsed and/or unexecuted commands
695  * and return to the prompt.
696  * HUSH_DEBUG >= 2 prints line number in this file where it was detected.
697  */
698 #if HUSH_DEBUG < 2
699 # define die_if_script(lineno, fmt...)          die_if_script(fmt)
700 # define syntax_error(lineno, msg)              syntax_error(msg)
701 # define syntax_error_at(lineno, msg)           syntax_error_at(msg)
702 # define syntax_error_unterm_ch(lineno, ch)     syntax_error_unterm_ch(ch)
703 # define syntax_error_unterm_str(lineno, s)     syntax_error_unterm_str(s)
704 # define syntax_error_unexpected_ch(lineno, ch) syntax_error_unexpected_ch(ch)
705 #endif
706
707 static void die_if_script(unsigned lineno, const char *fmt, ...)
708 {
709         va_list p;
710
711 #if HUSH_DEBUG >= 2
712         bb_error_msg("hush.c:%u", lineno);
713 #endif
714         va_start(p, fmt);
715         bb_verror_msg(fmt, p, NULL);
716         va_end(p);
717         if (!G_interactive_fd)
718                 xfunc_die();
719 }
720
721 static void syntax_error(unsigned lineno, const char *msg)
722 {
723         if (msg)
724                 die_if_script(lineno, "syntax error: %s", msg);
725         else
726                 die_if_script(lineno, "syntax error", NULL);
727 }
728
729 static void syntax_error_at(unsigned lineno, const char *msg)
730 {
731         die_if_script(lineno, "syntax error at '%s'", msg);
732 }
733
734 /* It so happens that all such cases are totally fatal
735  * even if shell is interactive: EOF while looking for closing
736  * delimiter. There is nowhere to read stuff from after that,
737  * it's EOF! The only choice is to terminate.
738  */
739 static void syntax_error_unterm_ch(unsigned lineno, char ch) NORETURN;
740 static void syntax_error_unterm_ch(unsigned lineno, char ch)
741 {
742         char msg[2];
743         msg[0] = ch;
744         msg[1] = '\0';
745         die_if_script(lineno, "syntax error: unterminated %s", msg);
746         xfunc_die();
747 }
748
749 static void syntax_error_unterm_str(unsigned lineno, const char *s)
750 {
751         die_if_script(lineno, "syntax error: unterminated %s", s);
752 }
753
754 static void syntax_error_unexpected_ch(unsigned lineno, char ch)
755 {
756         char msg[2];
757         msg[0] = ch;
758         msg[1] = '\0';
759         die_if_script(lineno, "syntax error: unexpected %s", msg);
760 }
761
762 #if HUSH_DEBUG < 2
763 # undef die_if_script
764 # undef syntax_error
765 # undef syntax_error_at
766 # undef syntax_error_unterm_ch
767 # undef syntax_error_unterm_str
768 # undef syntax_error_unexpected_ch
769 #else
770 # define die_if_script(fmt...)          die_if_script(__LINE__, fmt)
771 # define syntax_error(msg)              syntax_error(__LINE__, msg)
772 # define syntax_error_at(msg)           syntax_error_at(__LINE__, msg)
773 # define syntax_error_unterm_ch(ch)     syntax_error_unterm_ch(__LINE__, ch)
774 # define syntax_error_unterm_str(s)     syntax_error_unterm_str(__LINE__, s)
775 # define syntax_error_unexpected_ch(ch) syntax_error_unexpected_ch(__LINE__, ch)
776 #endif
777
778
779 /* Utility functions
780  */
781 static int glob_needed(const char *s)
782 {
783         while (*s) {
784                 if (*s == '\\')
785                         s++;
786                 if (*s == '*' || *s == '[' || *s == '?')
787                         return 1;
788                 s++;
789         }
790         return 0;
791 }
792
793 static int is_well_formed_var_name(const char *s, char terminator)
794 {
795         if (!s || !(isalpha(*s) || *s == '_'))
796                 return 0;
797         s++;
798         while (isalnum(*s) || *s == '_')
799                 s++;
800         return *s == terminator;
801 }
802
803 /* Replace each \x with x in place, return ptr past NUL. */
804 static char *unbackslash(char *src)
805 {
806         char *dst = src;
807         while (1) {
808                 if (*src == '\\')
809                         src++;
810                 if ((*dst++ = *src++) == '\0')
811                         break;
812         }
813         return dst;
814 }
815
816 static char **add_strings_to_strings(char **strings, char **add, int need_to_dup)
817 {
818         int i;
819         unsigned count1;
820         unsigned count2;
821         char **v;
822
823         v = strings;
824         count1 = 0;
825         if (v) {
826                 while (*v) {
827                         count1++;
828                         v++;
829                 }
830         }
831         count2 = 0;
832         v = add;
833         while (*v) {
834                 count2++;
835                 v++;
836         }
837         v = xrealloc(strings, (count1 + count2 + 1) * sizeof(char*));
838         v[count1 + count2] = NULL;
839         i = count2;
840         while (--i >= 0)
841                 v[count1 + i] = (need_to_dup ? xstrdup(add[i]) : add[i]);
842         return v;
843 }
844 #if LEAK_HUNTING
845 static char **xx_add_strings_to_strings(int lineno, char **strings, char **add, int need_to_dup)
846 {
847         char **ptr = add_strings_to_strings(strings, add, need_to_dup);
848         fdprintf(2, "line %d: add_strings_to_strings %p\n", lineno, ptr);
849         return ptr;
850 }
851 #define add_strings_to_strings(strings, add, need_to_dup) \
852         xx_add_strings_to_strings(__LINE__, strings, add, need_to_dup)
853 #endif
854
855 static char **add_string_to_strings(char **strings, char *add)
856 {
857         char *v[2];
858         v[0] = add;
859         v[1] = NULL;
860         return add_strings_to_strings(strings, v, /*dup:*/ 0);
861 }
862 #if LEAK_HUNTING
863 static char **xx_add_string_to_strings(int lineno, char **strings, char *add)
864 {
865         char **ptr = add_string_to_strings(strings, add);
866         fdprintf(2, "line %d: add_string_to_strings %p\n", lineno, ptr);
867         return ptr;
868 }
869 #define add_string_to_strings(strings, add) \
870         xx_add_string_to_strings(__LINE__, strings, add)
871 #endif
872
873 static void putenv_all(char **strings)
874 {
875         if (!strings)
876                 return;
877         while (*strings) {
878                 debug_printf_env("putenv '%s'\n", *strings);
879                 putenv(*strings++);
880         }
881 }
882
883 static char **putenv_all_and_save_old(char **strings)
884 {
885         char **old = NULL;
886         char **s = strings;
887
888         if (!strings)
889                 return old;
890         while (*strings) {
891                 char *v, *eq;
892
893                 eq = strchr(*strings, '=');
894                 if (eq) {
895                         *eq = '\0';
896                         v = getenv(*strings);
897                         *eq = '=';
898                         if (v) {
899                                 /* v points to VAL in VAR=VAL, go back to VAR */
900                                 v -= (eq - *strings) + 1;
901                                 old = add_string_to_strings(old, v);
902                         }
903                 }
904                 strings++;
905         }
906         putenv_all(s);
907         return old;
908 }
909
910 static void free_strings_and_unsetenv(char **strings, int unset)
911 {
912         char **v;
913
914         if (!strings)
915                 return;
916
917         v = strings;
918         while (*v) {
919                 if (unset) {
920                         debug_printf_env("unsetenv '%s'\n", *v);
921                         bb_unsetenv(*v);
922                 }
923                 free(*v++);
924         }
925         free(strings);
926 }
927
928 static void free_strings(char **strings)
929 {
930         free_strings_and_unsetenv(strings, 0);
931 }
932
933
934 /* Basic theory of signal handling in shell
935  * ========================================
936  * This does not describe what hush does, rather, it is current understanding
937  * what it _should_ do. If it doesn't, it's a bug.
938  * http://www.opengroup.org/onlinepubs/9699919799/utilities/V3_chap02.html#trap
939  *
940  * Signals are handled only after each pipe ("cmd | cmd | cmd" thing)
941  * is finished or backgrounded. It is the same in interactive and
942  * non-interactive shells, and is the same regardless of whether
943  * a user trap handler is installed or a shell special one is in effect.
944  * ^C or ^Z from keyboard seem to execute "at once" because it usually
945  * backgrounds (i.e. stops) or kills all members of currently running
946  * pipe.
947  *
948  * Wait builtin in interruptible by signals for which user trap is set
949  * or by SIGINT in interactive shell.
950  *
951  * Trap handlers will execute even within trap handlers. (right?)
952  *
953  * User trap handlers are forgotten when subshell ("(cmd)") is entered.
954  *
955  * If job control is off, backgrounded commands ("cmd &")
956  * have SIGINT, SIGQUIT set to SIG_IGN.
957  *
958  * Commands run in command substitution ("`cmd`")
959  * have SIGTTIN, SIGTTOU, SIGTSTP set to SIG_IGN.
960  *
961  * Ordinary commands have signals set to SIG_IGN/DFL set as inherited
962  * by the shell from its parent.
963  *
964  * Siganls which differ from SIG_DFL action
965  * (note: child (i.e., [v]forked) shell is not an interactive shell):
966  *
967  * SIGQUIT: ignore
968  * SIGTERM (interactive): ignore
969  * SIGHUP (interactive):
970  *    send SIGCONT to stopped jobs, send SIGHUP to all jobs and exit
971  * SIGTTIN, SIGTTOU, SIGTSTP (if job control is on): ignore
972  *    Note that ^Z is handled not by trapping SIGTSTP, but by seeing
973  *    that all pipe members are stopped. Try this in bash:
974  *    while :; do :; done - ^Z does not background it
975  *    (while :; do :; done) - ^Z backgrounds it
976  * SIGINT (interactive): wait for last pipe, ignore the rest
977  *    of the command line, show prompt. NB: ^C does not send SIGINT
978  *    to interactive shell while shell is waiting for a pipe,
979  *    since shell is bg'ed (is not in foreground process group).
980  *    Example 1: this waits 5 sec, but does not execute ls:
981  *    "echo $$; sleep 5; ls -l" + "kill -INT <pid>"
982  *    Example 2: this does not wait and does not execute ls:
983  *    "echo $$; sleep 5 & wait; ls -l" + "kill -INT <pid>"
984  *    Example 3: this does not wait 5 sec, but executes ls:
985  *    "sleep 5; ls -l" + press ^C
986  *
987  * (What happens to signals which are IGN on shell start?)
988  * (What happens with signal mask on shell start?)
989  *
990  * Implementation in hush
991  * ======================
992  * We use in-kernel pending signal mask to determine which signals were sent.
993  * We block all signals which we don't want to take action immediately,
994  * i.e. we block all signals which need to have special handling as described
995  * above, and all signals which have traps set.
996  * After each pipe execution, we extract any pending signals via sigtimedwait()
997  * and act on them.
998  *
999  * unsigned non_DFL_mask: a mask of such "special" signals
1000  * sigset_t blocked_set:  current blocked signal set
1001  *
1002  * "trap - SIGxxx":
1003  *    clear bit in blocked_set unless it is also in non_DFL_mask
1004  * "trap 'cmd' SIGxxx":
1005  *    set bit in blocked_set (even if 'cmd' is '')
1006  * after [v]fork, if we plan to be a shell:
1007  *    nothing for {} child shell (say, "true | { true; true; } | true")
1008  *    unset all traps if () shell.
1009  * after [v]fork, if we plan to exec:
1010  *    POSIX says pending signal mask is cleared in child - no need to clear it.
1011  *    Restore blocked signal set to one inherited by shell just prior to exec.
1012  *
1013  * Note: as a result, we do not use signal handlers much. The only uses
1014  * are to count SIGCHLDs [disabled - bug somewhere, + bloat]
1015  * and to restore tty pgrp on signal-induced exit.
1016  */
1017
1018 //static void SIGCHLD_handler(int sig UNUSED_PARAM)
1019 //{
1020 //      G.count_SIGCHLD++;
1021 //}
1022
1023 static int check_and_run_traps(int sig)
1024 {
1025         static const struct timespec zero_timespec = { 0, 0 };
1026         smalluint save_rcode;
1027         int last_sig = 0;
1028
1029         if (sig)
1030                 goto jump_in;
1031         while (1) {
1032                 sig = sigtimedwait(&G.blocked_set, NULL, &zero_timespec);
1033                 if (sig <= 0)
1034                         break;
1035  jump_in:
1036                 last_sig = sig;
1037                 if (G.traps && G.traps[sig]) {
1038                         if (G.traps[sig][0]) {
1039                                 /* We have user-defined handler */
1040                                 char *argv[] = { NULL, xstrdup(G.traps[sig]), NULL };
1041                                 save_rcode = G.last_exitcode;
1042                                 builtin_eval(argv);
1043                                 free(argv[1]);
1044                                 G.last_exitcode = save_rcode;
1045                         } /* else: "" trap, ignoring signal */
1046                         continue;
1047                 }
1048                 /* not a trap: special action */
1049                 switch (sig) {
1050 //              case SIGCHLD:
1051 //                      G.count_SIGCHLD++;
1052 //                      break;
1053                 case SIGINT:
1054                         bb_putchar('\n');
1055                         G.flag_SIGINT = 1;
1056                         break;
1057 //TODO
1058 //              case SIGHUP: ...
1059 //                      break;
1060                 default: /* ignored: */
1061                         /* SIGTERM, SIGQUIT, SIGTTIN, SIGTTOU, SIGTSTP */
1062                         break;
1063                 }
1064         }
1065         return last_sig;
1066 }
1067
1068 #if ENABLE_HUSH_JOB
1069
1070 /* After [v]fork, in child: do not restore tty pgrp on xfunc death */
1071 #define disable_restore_tty_pgrp_on_exit() (die_sleep = 0)
1072 /* After [v]fork, in parent: restore tty pgrp on xfunc death */
1073 #define enable_restore_tty_pgrp_on_exit()  (die_sleep = -1)
1074
1075 /* Restores tty foreground process group, and exits.
1076  * May be called as signal handler for fatal signal
1077  * (will faithfully resend signal to itself, producing correct exit state)
1078  * or called directly with -EXITCODE.
1079  * We also call it if xfunc is exiting. */
1080 static void sigexit(int sig) NORETURN;
1081 static void sigexit(int sig)
1082 {
1083         /* Disable all signals: job control, SIGPIPE, etc. */
1084         sigprocmask_allsigs(SIG_BLOCK);
1085
1086         /* Careful: we can end up here after [v]fork. Do not restore
1087          * tty pgrp then, only top-level shell process does that */
1088         if (G_interactive_fd && getpid() == G.root_pid)
1089                 tcsetpgrp(G_interactive_fd, G.saved_tty_pgrp);
1090
1091         /* Not a signal, just exit */
1092         if (sig <= 0)
1093                 _exit(- sig);
1094
1095         kill_myself_with_sig(sig); /* does not return */
1096 }
1097 #else
1098
1099 #define disable_restore_tty_pgrp_on_exit() ((void)0)
1100 #define enable_restore_tty_pgrp_on_exit()  ((void)0)
1101
1102 #endif
1103
1104 /* Restores tty foreground process group, and exits. */
1105 static void hush_exit(int exitcode) NORETURN;
1106 static void hush_exit(int exitcode)
1107 {
1108         if (G.exiting <= 0 && G.traps && G.traps[0] && G.traps[0][0]) {
1109                 /* Prevent recursion:
1110                  * trap "echo Hi; exit" EXIT; exit
1111                  */
1112                 char *argv[] = { NULL, G.traps[0], NULL };
1113                 G.traps[0] = NULL;
1114                 G.exiting = 1;
1115                 builtin_eval(argv);
1116                 free(argv[1]);
1117         }
1118
1119 #if ENABLE_HUSH_JOB
1120         fflush(NULL); /* flush all streams */
1121         sigexit(- (exitcode & 0xff));
1122 #else
1123         exit(exitcode);
1124 #endif
1125 }
1126
1127
1128 static const char *set_cwd(void)
1129 {
1130         /* xrealloc_getcwd_or_warn(arg) calls free(arg),
1131          * we must not try to free(bb_msg_unknown) */
1132         if (G.cwd == bb_msg_unknown)
1133                 G.cwd = NULL;
1134         G.cwd = xrealloc_getcwd_or_warn((char *)G.cwd);
1135         if (!G.cwd)
1136                 G.cwd = bb_msg_unknown;
1137         return G.cwd;
1138 }
1139
1140
1141 /* Get/check local shell variables */
1142 static struct variable *get_local_var(const char *name)
1143 {
1144         struct variable *cur;
1145         int len;
1146
1147         if (!name)
1148                 return NULL;
1149         len = strlen(name);
1150         for (cur = G.top_var; cur; cur = cur->next) {
1151                 if (strncmp(cur->varstr, name, len) == 0 && cur->varstr[len] == '=')
1152                         return cur;
1153         }
1154         return NULL;
1155 }
1156
1157 static const char *get_local_var_value(const char *src)
1158 {
1159         struct variable *var = get_local_var(src);
1160         if (var)
1161                 return strchr(var->varstr, '=') + 1;
1162         return NULL;
1163 }
1164
1165 /* str holds "NAME=VAL" and is expected to be malloced.
1166  * We take ownership of it.
1167  * flg_export:
1168  *  0: do not export
1169  *  1: export
1170  * -1: if NAME is set, leave export status alone
1171  *     if NAME is not set, do not export
1172  * flg_read_only is set only when we handle -R var=val
1173  */
1174 #if BB_MMU
1175 #define set_local_var(str, flg_export, flg_read_only) \
1176         set_local_var(str, flg_export)
1177 #endif
1178 static int set_local_var(char *str, int flg_export, int flg_read_only)
1179 {
1180         struct variable *cur;
1181         char *value;
1182         int name_len;
1183
1184         value = strchr(str, '=');
1185         if (!value) { /* not expected to ever happen? */
1186                 free(str);
1187                 return -1;
1188         }
1189
1190         name_len = value - str + 1; /* including '=' */
1191         cur = G.top_var; /* cannot be NULL (we have HUSH_VERSION and it's RO) */
1192         while (1) {
1193                 if (strncmp(cur->varstr, str, name_len) != 0) {
1194                         if (!cur->next) {
1195                                 /* Bail out. Note that now cur points
1196                                  * to last var in linked list */
1197                                 break;
1198                         }
1199                         cur = cur->next;
1200                         continue;
1201                 }
1202                 /* We found an existing var with this name */
1203                 *value = '\0';
1204                 if (cur->flg_read_only) {
1205 #if !BB_MMU
1206                         if (!flg_read_only)
1207 #endif
1208                                 bb_error_msg("%s: readonly variable", str);
1209                         free(str);
1210                         return -1;
1211                 }
1212                 debug_printf_env("%s: unsetenv '%s'\n", __func__, str);
1213                 unsetenv(str); /* just in case */
1214                 *value = '=';
1215                 if (strcmp(cur->varstr, str) == 0) {
1216  free_and_exp:
1217                         free(str);
1218                         goto exp;
1219                 }
1220                 if (cur->max_len >= strlen(str)) {
1221                         /* This one is from startup env, reuse space */
1222                         strcpy(cur->varstr, str);
1223                         goto free_and_exp;
1224                 }
1225                 /* max_len == 0 signifies "malloced" var, which we can
1226                  * (and has to) free */
1227                 if (!cur->max_len)
1228                         free(cur->varstr);
1229                 cur->max_len = 0;
1230                 goto set_str_and_exp;
1231         }
1232
1233         /* Not found - create next variable struct */
1234         cur->next = xzalloc(sizeof(*cur));
1235         cur = cur->next;
1236
1237  set_str_and_exp:
1238         cur->varstr = str;
1239 #if !BB_MMU
1240         cur->flg_read_only = flg_read_only;
1241 #endif
1242  exp:
1243         if (flg_export == 1)
1244                 cur->flg_export = 1;
1245         if (cur->flg_export) {
1246                 debug_printf_env("%s: putenv '%s'\n", __func__, cur->varstr);
1247                 return putenv(cur->varstr);
1248         }
1249         return 0;
1250 }
1251
1252 static int unset_local_var(const char *name)
1253 {
1254         struct variable *cur;
1255         struct variable *prev = prev; /* for gcc */
1256         int name_len;
1257
1258         if (!name)
1259                 return EXIT_SUCCESS;
1260         name_len = strlen(name);
1261         cur = G.top_var;
1262         while (cur) {
1263                 if (strncmp(cur->varstr, name, name_len) == 0 && cur->varstr[name_len] == '=') {
1264                         if (cur->flg_read_only) {
1265                                 bb_error_msg("%s: readonly variable", name);
1266                                 return EXIT_FAILURE;
1267                         }
1268                         /* prev is ok to use here because 1st variable, HUSH_VERSION,
1269                          * is ro, and we cannot reach this code on the 1st pass */
1270                         prev->next = cur->next;
1271                         debug_printf_env("%s: unsetenv '%s'\n", __func__, cur->varstr);
1272                         bb_unsetenv(cur->varstr);
1273                         if (!cur->max_len)
1274                                 free(cur->varstr);
1275                         free(cur);
1276                         return EXIT_SUCCESS;
1277                 }
1278                 prev = cur;
1279                 cur = cur->next;
1280         }
1281         return EXIT_SUCCESS;
1282 }
1283
1284 #if ENABLE_SH_MATH_SUPPORT
1285 #define is_name(c)      ((c) == '_' || isalpha((unsigned char)(c)))
1286 #define is_in_name(c)   ((c) == '_' || isalnum((unsigned char)(c)))
1287 static char *endofname(const char *name)
1288 {
1289         char *p;
1290
1291         p = (char *) name;
1292         if (!is_name(*p))
1293                 return p;
1294         while (*++p) {
1295                 if (!is_in_name(*p))
1296                         break;
1297         }
1298         return p;
1299 }
1300
1301 static void arith_set_local_var(const char *name, const char *val, int flags)
1302 {
1303         /* arith code doesnt malloc space, so do it for it */
1304         char *var = xasprintf("%s=%s", name, val);
1305         set_local_var(var, flags, 0);
1306 }
1307 #endif
1308
1309
1310 /*
1311  * in_str support
1312  */
1313 static int static_get(struct in_str *i)
1314 {
1315         int ch = *i->p++;
1316         if (ch != '\0')
1317                 return ch;
1318         i->p--;
1319         return EOF;
1320 }
1321
1322 static int static_peek(struct in_str *i)
1323 {
1324         return *i->p;
1325 }
1326
1327 #if ENABLE_HUSH_INTERACTIVE
1328
1329 static void cmdedit_set_initial_prompt(void)
1330 {
1331         if (ENABLE_FEATURE_EDITING_FANCY_PROMPT) {
1332                 G.PS1 = getenv("PS1");
1333                 if (G.PS1 == NULL)
1334                         G.PS1 = "\\w \\$ ";
1335         } else
1336                 G.PS1 = NULL;
1337 }
1338
1339 static const char* setup_prompt_string(int promptmode)
1340 {
1341         const char *prompt_str;
1342         debug_printf("setup_prompt_string %d ", promptmode);
1343         if (!ENABLE_FEATURE_EDITING_FANCY_PROMPT) {
1344                 /* Set up the prompt */
1345                 if (promptmode == 0) { /* PS1 */
1346                         free((char*)G.PS1);
1347                         G.PS1 = xasprintf("%s %c ", G.cwd, (geteuid() != 0) ? '$' : '#');
1348                         prompt_str = G.PS1;
1349                 } else
1350                         prompt_str = G.PS2;
1351         } else
1352                 prompt_str = (promptmode == 0) ? G.PS1 : G.PS2;
1353         debug_printf("result '%s'\n", prompt_str);
1354         return prompt_str;
1355 }
1356
1357 static void get_user_input(struct in_str *i)
1358 {
1359         int r;
1360         const char *prompt_str;
1361
1362         prompt_str = setup_prompt_string(i->promptmode);
1363 #if ENABLE_FEATURE_EDITING
1364         /* Enable command line editing only while a command line
1365          * is actually being read */
1366         do {
1367                 G.flag_SIGINT = 0;
1368                 /* buglet: SIGINT will not make new prompt to appear _at once_,
1369                  * only after <Enter>. (^C will work) */
1370                 r = read_line_input(prompt_str, G.user_input_buf, BUFSIZ-1, G.line_input_state);
1371                 /* catch *SIGINT* etc (^C is handled by read_line_input) */
1372                 check_and_run_traps(0);
1373         } while (r == 0 || G.flag_SIGINT); /* repeat if ^C or SIGINT */
1374         i->eof_flag = (r < 0);
1375         if (i->eof_flag) { /* EOF/error detected */
1376                 G.user_input_buf[0] = EOF; /* yes, it will be truncated, it's ok */
1377                 G.user_input_buf[1] = '\0';
1378         }
1379 #else
1380         do {
1381                 G.flag_SIGINT = 0;
1382                 fputs(prompt_str, stdout);
1383                 fflush(stdout);
1384                 G.user_input_buf[0] = r = fgetc(i->file);
1385                 /*G.user_input_buf[1] = '\0'; - already is and never changed */
1386 //do we need check_and_run_traps(0)? (maybe only if stdin)
1387         } while (G.flag_SIGINT);
1388         i->eof_flag = (r == EOF);
1389 #endif
1390         i->p = G.user_input_buf;
1391 }
1392
1393 #endif  /* INTERACTIVE */
1394
1395 /* This is the magic location that prints prompts
1396  * and gets data back from the user */
1397 static int file_get(struct in_str *i)
1398 {
1399         int ch;
1400
1401         /* If there is data waiting, eat it up */
1402         if (i->p && *i->p) {
1403 #if ENABLE_HUSH_INTERACTIVE
1404  take_cached:
1405 #endif
1406                 ch = *i->p++;
1407                 if (i->eof_flag && !*i->p)
1408                         ch = EOF;
1409                 /* note: ch is never NUL */
1410         } else {
1411                 /* need to double check i->file because we might be doing something
1412                  * more complicated by now, like sourcing or substituting. */
1413 #if ENABLE_HUSH_INTERACTIVE
1414                 if (G_interactive_fd && i->promptme && i->file == stdin) {
1415                         do {
1416                                 get_user_input(i);
1417                         } while (!*i->p); /* need non-empty line */
1418                         i->promptmode = 1; /* PS2 */
1419                         i->promptme = 0;
1420                         goto take_cached;
1421                 }
1422 #endif
1423                 do ch = fgetc(i->file); while (ch == '\0');
1424         }
1425         debug_printf("file_get: got '%c' %d\n", ch, ch);
1426 #if ENABLE_HUSH_INTERACTIVE
1427         if (ch == '\n')
1428                 i->promptme = 1;
1429 #endif
1430         return ch;
1431 }
1432
1433 /* All callers guarantee this routine will never
1434  * be used right after a newline, so prompting is not needed.
1435  */
1436 static int file_peek(struct in_str *i)
1437 {
1438         int ch;
1439         if (i->p && *i->p) {
1440                 if (i->eof_flag && !i->p[1])
1441                         return EOF;
1442                 return *i->p;
1443                 /* note: ch is never NUL */
1444         }
1445         do ch = fgetc(i->file); while (ch == '\0');
1446         i->eof_flag = (ch == EOF);
1447         i->peek_buf[0] = ch;
1448         i->peek_buf[1] = '\0';
1449         i->p = i->peek_buf;
1450         debug_printf("file_peek: got '%c' %d\n", ch, ch);
1451         return ch;
1452 }
1453
1454 static void setup_file_in_str(struct in_str *i, FILE *f)
1455 {
1456         i->peek = file_peek;
1457         i->get = file_get;
1458 #if ENABLE_HUSH_INTERACTIVE
1459         i->promptme = 1;
1460         i->promptmode = 0; /* PS1 */
1461 #endif
1462         i->file = f;
1463         i->p = NULL;
1464 }
1465
1466 static void setup_string_in_str(struct in_str *i, const char *s)
1467 {
1468         i->peek = static_peek;
1469         i->get = static_get;
1470 #if ENABLE_HUSH_INTERACTIVE
1471         i->promptme = 1;
1472         i->promptmode = 0; /* PS1 */
1473 #endif
1474         i->p = s;
1475         i->eof_flag = 0;
1476 }
1477
1478
1479 /*
1480  * o_string support
1481  */
1482 #define B_CHUNK  (32 * sizeof(char*))
1483
1484 static void o_reset_to_empty_unquoted(o_string *o)
1485 {
1486         o->length = 0;
1487         o->o_quoted = 0;
1488         if (o->data)
1489                 o->data[0] = '\0';
1490 }
1491
1492 static void o_free(o_string *o)
1493 {
1494         free(o->data);
1495         memset(o, 0, sizeof(*o));
1496 }
1497
1498 static ALWAYS_INLINE void o_free_unsafe(o_string *o)
1499 {
1500         free(o->data);
1501 }
1502
1503 static void o_grow_by(o_string *o, int len)
1504 {
1505         if (o->length + len > o->maxlen) {
1506                 o->maxlen += (2*len > B_CHUNK ? 2*len : B_CHUNK);
1507                 o->data = xrealloc(o->data, 1 + o->maxlen);
1508         }
1509 }
1510
1511 static void o_addchr(o_string *o, int ch)
1512 {
1513         debug_printf("o_addchr: '%c' o->length=%d o=%p\n", ch, o->length, o);
1514         o_grow_by(o, 1);
1515         o->data[o->length] = ch;
1516         o->length++;
1517         o->data[o->length] = '\0';
1518 }
1519
1520 static void o_addblock(o_string *o, const char *str, int len)
1521 {
1522         o_grow_by(o, len);
1523         memcpy(&o->data[o->length], str, len);
1524         o->length += len;
1525         o->data[o->length] = '\0';
1526 }
1527
1528 #if !BB_MMU
1529 static void o_addstr(o_string *o, const char *str)
1530 {
1531         o_addblock(o, str, strlen(str));
1532 }
1533 static void nommu_addchr(o_string *o, int ch)
1534 {
1535         if (o)
1536                 o_addchr(o, ch);
1537 }
1538 #else
1539 #define nommu_addchr(o, str) ((void)0)
1540 #endif
1541
1542 static void o_addstr_with_NUL(o_string *o, const char *str)
1543 {
1544         o_addblock(o, str, strlen(str) + 1);
1545 }
1546
1547 static void o_addblock_duplicate_backslash(o_string *o, const char *str, int len)
1548 {
1549         while (len) {
1550                 o_addchr(o, *str);
1551                 if (*str++ == '\\'
1552                  && (*str != '*' && *str != '?' && *str != '[')
1553                 ) {
1554                         o_addchr(o, '\\');
1555                 }
1556                 len--;
1557         }
1558 }
1559
1560 /* My analysis of quoting semantics tells me that state information
1561  * is associated with a destination, not a source.
1562  */
1563 static void o_addqchr(o_string *o, int ch)
1564 {
1565         int sz = 1;
1566         char *found = strchr("*?[\\", ch);
1567         if (found)
1568                 sz++;
1569         o_grow_by(o, sz);
1570         if (found) {
1571                 o->data[o->length] = '\\';
1572                 o->length++;
1573         }
1574         o->data[o->length] = ch;
1575         o->length++;
1576         o->data[o->length] = '\0';
1577 }
1578
1579 static void o_addQchr(o_string *o, int ch)
1580 {
1581         int sz = 1;
1582         if (o->o_escape && strchr("*?[\\", ch)) {
1583                 sz++;
1584                 o->data[o->length] = '\\';
1585                 o->length++;
1586         }
1587         o_grow_by(o, sz);
1588         o->data[o->length] = ch;
1589         o->length++;
1590         o->data[o->length] = '\0';
1591 }
1592
1593 static void o_addQstr(o_string *o, const char *str, int len)
1594 {
1595         if (!o->o_escape) {
1596                 o_addblock(o, str, len);
1597                 return;
1598         }
1599         while (len) {
1600                 char ch;
1601                 int sz;
1602                 int ordinary_cnt = strcspn(str, "*?[\\");
1603                 if (ordinary_cnt > len) /* paranoia */
1604                         ordinary_cnt = len;
1605                 o_addblock(o, str, ordinary_cnt);
1606                 if (ordinary_cnt == len)
1607                         return;
1608                 str += ordinary_cnt;
1609                 len -= ordinary_cnt + 1; /* we are processing + 1 char below */
1610
1611                 ch = *str++;
1612                 sz = 1;
1613                 if (ch) { /* it is necessarily one of "*?[\\" */
1614                         sz++;
1615                         o->data[o->length] = '\\';
1616                         o->length++;
1617                 }
1618                 o_grow_by(o, sz);
1619                 o->data[o->length] = ch;
1620                 o->length++;
1621                 o->data[o->length] = '\0';
1622         }
1623 }
1624
1625 /* A special kind of o_string for $VAR and `cmd` expansion.
1626  * It contains char* list[] at the beginning, which is grown in 16 element
1627  * increments. Actual string data starts at the next multiple of 16 * (char*).
1628  * list[i] contains an INDEX (int!) into this string data.
1629  * It means that if list[] needs to grow, data needs to be moved higher up
1630  * but list[i]'s need not be modified.
1631  * NB: remembering how many list[i]'s you have there is crucial.
1632  * o_finalize_list() operation post-processes this structure - calculates
1633  * and stores actual char* ptrs in list[]. Oh, it NULL terminates it as well.
1634  */
1635 #if DEBUG_EXPAND || DEBUG_GLOB
1636 static void debug_print_list(const char *prefix, o_string *o, int n)
1637 {
1638         char **list = (char**)o->data;
1639         int string_start = ((n + 0xf) & ~0xf) * sizeof(list[0]);
1640         int i = 0;
1641
1642         indent();
1643         fprintf(stderr, "%s: list:%p n:%d string_start:%d length:%d maxlen:%d\n",
1644                         prefix, list, n, string_start, o->length, o->maxlen);
1645         while (i < n) {
1646                 indent();
1647                 fprintf(stderr, " list[%d]=%d '%s' %p\n", i, (int)list[i],
1648                                 o->data + (int)list[i] + string_start,
1649                                 o->data + (int)list[i] + string_start);
1650                 i++;
1651         }
1652         if (n) {
1653                 const char *p = o->data + (int)list[n - 1] + string_start;
1654                 indent();
1655                 fprintf(stderr, " total_sz:%ld\n", (long)((p + strlen(p) + 1) - o->data));
1656         }
1657 }
1658 #else
1659 #define debug_print_list(prefix, o, n) ((void)0)
1660 #endif
1661
1662 /* n = o_save_ptr_helper(str, n) "starts new string" by storing an index value
1663  * in list[n] so that it points past last stored byte so far.
1664  * It returns n+1. */
1665 static int o_save_ptr_helper(o_string *o, int n)
1666 {
1667         char **list = (char**)o->data;
1668         int string_start;
1669         int string_len;
1670
1671         if (!o->has_empty_slot) {
1672                 string_start = ((n + 0xf) & ~0xf) * sizeof(list[0]);
1673                 string_len = o->length - string_start;
1674                 if (!(n & 0xf)) { /* 0, 0x10, 0x20...? */
1675                         debug_printf_list("list[%d]=%d string_start=%d (growing)\n", n, string_len, string_start);
1676                         /* list[n] points to string_start, make space for 16 more pointers */
1677                         o->maxlen += 0x10 * sizeof(list[0]);
1678                         o->data = xrealloc(o->data, o->maxlen + 1);
1679                         list = (char**)o->data;
1680                         memmove(list + n + 0x10, list + n, string_len);
1681                         o->length += 0x10 * sizeof(list[0]);
1682                 } else {
1683                         debug_printf_list("list[%d]=%d string_start=%d\n",
1684                                         n, string_len, string_start);
1685                 }
1686         } else {
1687                 /* We have empty slot at list[n], reuse without growth */
1688                 string_start = ((n+1 + 0xf) & ~0xf) * sizeof(list[0]); /* NB: n+1! */
1689                 string_len = o->length - string_start;
1690                 debug_printf_list("list[%d]=%d string_start=%d (empty slot)\n",
1691                                 n, string_len, string_start);
1692                 o->has_empty_slot = 0;
1693         }
1694         list[n] = (char*)(ptrdiff_t)string_len;
1695         return n + 1;
1696 }
1697
1698 /* "What was our last o_save_ptr'ed position (byte offset relative o->data)?" */
1699 static int o_get_last_ptr(o_string *o, int n)
1700 {
1701         char **list = (char**)o->data;
1702         int string_start = ((n + 0xf) & ~0xf) * sizeof(list[0]);
1703
1704         return ((int)(ptrdiff_t)list[n-1]) + string_start;
1705 }
1706
1707 /* o_glob performs globbing on last list[], saving each result
1708  * as a new list[]. */
1709 static int o_glob(o_string *o, int n)
1710 {
1711         glob_t globdata;
1712         int gr;
1713         char *pattern;
1714
1715         debug_printf_glob("start o_glob: n:%d o->data:%p\n", n, o->data);
1716         if (!o->data)
1717                 return o_save_ptr_helper(o, n);
1718         pattern = o->data + o_get_last_ptr(o, n);
1719         debug_printf_glob("glob pattern '%s'\n", pattern);
1720         if (!glob_needed(pattern)) {
1721  literal:
1722                 o->length = unbackslash(pattern) - o->data;
1723                 debug_printf_glob("glob pattern '%s' is literal\n", pattern);
1724                 return o_save_ptr_helper(o, n);
1725         }
1726
1727         memset(&globdata, 0, sizeof(globdata));
1728         gr = glob(pattern, 0, NULL, &globdata);
1729         debug_printf_glob("glob('%s'):%d\n", pattern, gr);
1730         if (gr == GLOB_NOSPACE)
1731                 bb_error_msg_and_die("out of memory during glob");
1732         if (gr == GLOB_NOMATCH) {
1733                 globfree(&globdata);
1734                 goto literal;
1735         }
1736         if (gr != 0) { /* GLOB_ABORTED ? */
1737 //TODO: testcase for bad glob pattern behavior
1738                 bb_error_msg("glob(3) error %d on '%s'", gr, pattern);
1739         }
1740         if (globdata.gl_pathv && globdata.gl_pathv[0]) {
1741                 char **argv = globdata.gl_pathv;
1742                 o->length = pattern - o->data; /* "forget" pattern */
1743                 while (1) {
1744                         o_addstr_with_NUL(o, *argv);
1745                         n = o_save_ptr_helper(o, n);
1746                         argv++;
1747                         if (!*argv)
1748                                 break;
1749                 }
1750         }
1751         globfree(&globdata);
1752         if (DEBUG_GLOB)
1753                 debug_print_list("o_glob returning", o, n);
1754         return n;
1755 }
1756
1757 /* If o->o_glob == 1, glob the string so far remembered.
1758  * Otherwise, just finish current list[] and start new */
1759 static int o_save_ptr(o_string *o, int n)
1760 {
1761         if (o->o_glob) { /* if globbing is requested */
1762                 /* If o->has_empty_slot, list[n] was already globbed
1763                  * (if it was requested back then when it was filled)
1764                  * so don't do that again! */
1765                 if (!o->has_empty_slot)
1766                         return o_glob(o, n); /* o_save_ptr_helper is inside */
1767         }
1768         return o_save_ptr_helper(o, n);
1769 }
1770
1771 /* "Please convert list[n] to real char* ptrs, and NULL terminate it." */
1772 static char **o_finalize_list(o_string *o, int n)
1773 {
1774         char **list;
1775         int string_start;
1776
1777         n = o_save_ptr(o, n); /* force growth for list[n] if necessary */
1778         if (DEBUG_EXPAND)
1779                 debug_print_list("finalized", o, n);
1780         debug_printf_expand("finalized n:%d\n", n);
1781         list = (char**)o->data;
1782         string_start = ((n + 0xf) & ~0xf) * sizeof(list[0]);
1783         list[--n] = NULL;
1784         while (n) {
1785                 n--;
1786                 list[n] = o->data + (int)(ptrdiff_t)list[n] + string_start;
1787         }
1788         return list;
1789 }
1790
1791
1792 /* Expansion can recurse */
1793 #if ENABLE_HUSH_TICK
1794 static int process_command_subs(o_string *dest, const char *s);
1795 #endif
1796 static char *expand_string_to_string(const char *str);
1797 #if BB_MMU
1798 #define parse_stream_dquoted(as_string, dest, input, dquote_end) \
1799         parse_stream_dquoted(dest, input, dquote_end)
1800 #endif
1801 static int parse_stream_dquoted(o_string *as_string,
1802                 o_string *dest,
1803                 struct in_str *input,
1804                 int dquote_end);
1805
1806 /* expand_strvec_to_strvec() takes a list of strings, expands
1807  * all variable references within and returns a pointer to
1808  * a list of expanded strings, possibly with larger number
1809  * of strings. (Think VAR="a b"; echo $VAR).
1810  * This new list is allocated as a single malloc block.
1811  * NULL-terminated list of char* pointers is at the beginning of it,
1812  * followed by strings themself.
1813  * Caller can deallocate entire list by single free(list). */
1814
1815 /* Store given string, finalizing the word and starting new one whenever
1816  * we encounter IFS char(s). This is used for expanding variable values.
1817  * End-of-string does NOT finalize word: think about 'echo -$VAR-' */
1818 static int expand_on_ifs(o_string *output, int n, const char *str)
1819 {
1820         while (1) {
1821                 int word_len = strcspn(str, G.ifs);
1822                 if (word_len) {
1823                         if (output->o_escape || !output->o_glob)
1824                                 o_addQstr(output, str, word_len);
1825                         else /* protect backslashes against globbing up :) */
1826                                 o_addblock_duplicate_backslash(output, str, word_len);
1827                         str += word_len;
1828                 }
1829                 if (!*str)  /* EOL - do not finalize word */
1830                         break;
1831                 o_addchr(output, '\0');
1832                 debug_print_list("expand_on_ifs", output, n);
1833                 n = o_save_ptr(output, n);
1834                 str += strspn(str, G.ifs); /* skip ifs chars */
1835         }
1836         debug_print_list("expand_on_ifs[1]", output, n);
1837         return n;
1838 }
1839
1840 /* Helper to expand $((...)) and heredoc body. These act as if
1841  * they are in double quotes, with the exception that they are not :).
1842  * Just the rules are similar: "expand only $var and `cmd`"
1843  *
1844  * Returns malloced string.
1845  * As an optimization, we return NULL if expansion is not needed.
1846  */
1847 static char *expand_pseudo_dquoted(const char *str)
1848 {
1849         char *exp_str;
1850         struct in_str input;
1851         o_string dest = NULL_O_STRING;
1852
1853         if (strchr(str, '$') == NULL
1854 #if ENABLE_HUSH_TICK
1855          && strchr(str, '`') == NULL
1856 #endif
1857         ) {
1858                 return NULL;
1859         }
1860
1861         /* We need to expand. Example:
1862          * echo $(($a + `echo 1`)) $((1 + $((2)) ))
1863          */
1864         setup_string_in_str(&input, str);
1865         parse_stream_dquoted(NULL, &dest, &input, EOF);
1866         //bb_error_msg("'%s' -> '%s'", str, dest.data);
1867         exp_str = expand_string_to_string(dest.data);
1868         //bb_error_msg("'%s' -> '%s'", dest.data, exp_str);
1869         o_free_unsafe(&dest);
1870         return exp_str;
1871 }
1872
1873 /* Expand all variable references in given string, adding words to list[]
1874  * at n, n+1,... positions. Return updated n (so that list[n] is next one
1875  * to be filled). This routine is extremely tricky: has to deal with
1876  * variables/parameters with whitespace, $* and $@, and constructs like
1877  * 'echo -$*-'. If you play here, you must run testsuite afterwards! */
1878 static int expand_vars_to_list(o_string *output, int n, char *arg, char or_mask)
1879 {
1880         /* or_mask is either 0 (normal case) or 0x80
1881          * (expansion of right-hand side of assignment == 1-element expand.
1882          * It will also do no globbing, and thus we must not backslash-quote!) */
1883
1884         char first_ch, ored_ch;
1885         int i;
1886         const char *val;
1887         char *dyn_val, *p;
1888
1889         dyn_val = NULL;
1890         ored_ch = 0;
1891
1892         debug_printf_expand("expand_vars_to_list: arg '%s'\n", arg);
1893         debug_print_list("expand_vars_to_list", output, n);
1894         n = o_save_ptr(output, n);
1895         debug_print_list("expand_vars_to_list[0]", output, n);
1896
1897         while ((p = strchr(arg, SPECIAL_VAR_SYMBOL)) != NULL) {
1898 #if ENABLE_HUSH_TICK
1899                 o_string subst_result = NULL_O_STRING;
1900 #endif
1901 #if ENABLE_SH_MATH_SUPPORT
1902                 char arith_buf[sizeof(arith_t)*3 + 2];
1903 #endif
1904                 o_addblock(output, arg, p - arg);
1905                 debug_print_list("expand_vars_to_list[1]", output, n);
1906                 arg = ++p;
1907                 p = strchr(p, SPECIAL_VAR_SYMBOL);
1908
1909                 first_ch = arg[0] | or_mask; /* forced to "quoted" if or_mask = 0x80 */
1910                 /* "$@" is special. Even if quoted, it can still
1911                  * expand to nothing (not even an empty string) */
1912                 if ((first_ch & 0x7f) != '@')
1913                         ored_ch |= first_ch;
1914
1915                 val = NULL;
1916                 switch (first_ch & 0x7f) {
1917                 /* Highest bit in first_ch indicates that var is double-quoted */
1918                 case '$': /* pid */
1919                         val = utoa(G.root_pid);
1920                         break;
1921                 case '!': /* bg pid */
1922                         val = G.last_bg_pid ? utoa(G.last_bg_pid) : (char*)"";
1923                         break;
1924                 case '?': /* exitcode */
1925                         val = utoa(G.last_exitcode);
1926                         break;
1927                 case '#': /* argc */
1928                         if (arg[1] != SPECIAL_VAR_SYMBOL)
1929                                 /* actually, it's a ${#var} */
1930                                 goto case_default;
1931                         val = utoa(G.global_argc ? G.global_argc-1 : 0);
1932                         break;
1933                 case '*':
1934                 case '@':
1935                         i = 1;
1936                         if (!G.global_argv[i])
1937                                 break;
1938                         ored_ch |= first_ch; /* do it for "$@" _now_, when we know it's not empty */
1939                         if (!(first_ch & 0x80)) { /* unquoted $* or $@ */
1940                                 smallint sv = output->o_escape;
1941                                 /* unquoted var's contents should be globbed, so don't escape */
1942                                 output->o_escape = 0;
1943                                 while (G.global_argv[i]) {
1944                                         n = expand_on_ifs(output, n, G.global_argv[i]);
1945                                         debug_printf_expand("expand_vars_to_list: argv %d (last %d)\n", i, G.global_argc - 1);
1946                                         if (G.global_argv[i++][0] && G.global_argv[i]) {
1947                                                 /* this argv[] is not empty and not last:
1948                                                  * put terminating NUL, start new word */
1949                                                 o_addchr(output, '\0');
1950                                                 debug_print_list("expand_vars_to_list[2]", output, n);
1951                                                 n = o_save_ptr(output, n);
1952                                                 debug_print_list("expand_vars_to_list[3]", output, n);
1953                                         }
1954                                 }
1955                                 output->o_escape = sv;
1956                         } else
1957                         /* If or_mask is nonzero, we handle assignment 'a=....$@.....'
1958                          * and in this case should treat it like '$*' - see 'else...' below */
1959                         if (first_ch == ('@'|0x80) && !or_mask) { /* quoted $@ */
1960                                 while (1) {
1961                                         o_addQstr(output, G.global_argv[i], strlen(G.global_argv[i]));
1962                                         if (++i >= G.global_argc)
1963                                                 break;
1964                                         o_addchr(output, '\0');
1965                                         debug_print_list("expand_vars_to_list[4]", output, n);
1966                                         n = o_save_ptr(output, n);
1967                                 }
1968                         } else { /* quoted $*: add as one word */
1969                                 while (1) {
1970                                         o_addQstr(output, G.global_argv[i], strlen(G.global_argv[i]));
1971                                         if (!G.global_argv[++i])
1972                                                 break;
1973                                         if (G.ifs[0])
1974                                                 o_addchr(output, G.ifs[0]);
1975                                 }
1976                         }
1977                         break;
1978                 case SPECIAL_VAR_SYMBOL: /* <SPECIAL_VAR_SYMBOL><SPECIAL_VAR_SYMBOL> */
1979                         /* "Empty variable", used to make "" etc to not disappear */
1980                         arg++;
1981                         ored_ch = 0x80;
1982                         break;
1983 #if ENABLE_HUSH_TICK
1984                 case '`': /* <SPECIAL_VAR_SYMBOL>`cmd<SPECIAL_VAR_SYMBOL> */
1985                         *p = '\0';
1986                         arg++;
1987 //TODO: can we just stuff it into "output" directly?
1988                         debug_printf_subst("SUBST '%s' first_ch %x\n", arg, first_ch);
1989                         process_command_subs(&subst_result, arg);
1990                         debug_printf_subst("SUBST RES '%s'\n", subst_result.data);
1991                         val = subst_result.data;
1992                         goto store_val;
1993 #endif
1994 #if ENABLE_SH_MATH_SUPPORT
1995                 case '+': { /* <SPECIAL_VAR_SYMBOL>+cmd<SPECIAL_VAR_SYMBOL> */
1996                         arith_eval_hooks_t hooks;
1997                         arith_t res;
1998                         int errcode;
1999                         char *exp_str;
2000
2001                         arg++; /* skip '+' */
2002                         *p = '\0'; /* replace trailing <SPECIAL_VAR_SYMBOL> */
2003                         debug_printf_subst("ARITH '%s' first_ch %x\n", arg, first_ch);
2004
2005                         exp_str = expand_pseudo_dquoted(arg);
2006                         hooks.lookupvar = get_local_var_value;
2007                         hooks.setvar = arith_set_local_var;
2008                         hooks.endofname = endofname;
2009                         res = arith(exp_str ? exp_str : arg, &errcode, &hooks);
2010                         free(exp_str);
2011
2012                         if (errcode < 0) {
2013                                 const char *msg = "error in arithmetic";
2014                                 switch (errcode) {
2015                                 case -3:
2016                                         msg = "exponent less than 0";
2017                                         break;
2018                                 case -2:
2019                                         msg = "divide by 0";
2020                                         break;
2021                                 case -5:
2022                                         msg = "expression recursion loop detected";
2023                                         break;
2024                                 }
2025                                 die_if_script(msg);
2026                         }
2027                         debug_printf_subst("ARITH RES '"arith_t_fmt"'\n", res);
2028                         sprintf(arith_buf, arith_t_fmt, res);
2029                         val = arith_buf;
2030                         break;
2031                 }
2032 #endif
2033                 default: /* <SPECIAL_VAR_SYMBOL>varname<SPECIAL_VAR_SYMBOL> */
2034                 case_default: {
2035                         bool exp_len = false;
2036                         bool exp_null = false;
2037                         char *var = arg;
2038                         char exp_save = exp_save; /* for compiler */
2039                         char exp_op = exp_op; /* for compiler */
2040                         char *exp_word = exp_word; /* for compiler */
2041                         size_t exp_off = 0;
2042
2043                         *p = '\0';
2044                         arg[0] = first_ch & 0x7f;
2045
2046                         /* prepare for expansions */
2047                         if (var[0] == '#') {
2048                                 /* handle length expansion ${#var} */
2049                                 exp_len = true;
2050                                 ++var;
2051                         } else {
2052                                 /* maybe handle parameter expansion */
2053                                 exp_off = strcspn(var, ":-=+?%#");
2054                                 if (!var[exp_off])
2055                                         exp_off = 0;
2056                                 if (exp_off) {
2057                                         exp_save = var[exp_off];
2058                                         exp_null = exp_save == ':';
2059                                         exp_word = var + exp_off;
2060                                         if (exp_null)
2061                                                 ++exp_word;
2062                                         exp_op = *exp_word++;
2063                                         var[exp_off] = '\0';
2064                                 }
2065                         }
2066
2067                         /* lookup the variable in question */
2068                         if (isdigit(var[0])) {
2069                                 /* handle_dollar() should have vetted var for us */
2070                                 i = xatoi_u(var);
2071                                 if (i < G.global_argc)
2072                                         val = G.global_argv[i];
2073                                 /* else val remains NULL: $N with too big N */
2074                         } else
2075                                 val = get_local_var_value(var);
2076
2077                         /* handle any expansions */
2078                         if (exp_len) {
2079                                 debug_printf_expand("expand: length of '%s' = ", val);
2080                                 val = utoa(val ? strlen(val) : 0);
2081                                 debug_printf_expand("%s\n", val);
2082                         } else if (exp_off) {
2083                                 if (exp_op == '%' || exp_op == '#') {
2084                                         if (val) {
2085                                                 /* we need to do a pattern match */
2086                                                 bool zero;
2087                                                 char *loc;
2088                                                 scan_t scan = pick_scan(exp_op, *exp_word, &zero);
2089                                                 if (exp_op == *exp_word)        /* ## or %% */
2090                                                         ++exp_word;
2091                                                 val = dyn_val = xstrdup(val);
2092                                                 loc = scan(dyn_val, exp_word, zero);
2093                                                 if (zero)
2094                                                         val = loc;
2095                                                 else
2096                                                         *loc = '\0';
2097                                         }
2098                                 } else {
2099                                         /* we need to do an expansion */
2100                                         int exp_test = (!val || (exp_null && !val[0]));
2101                                         if (exp_op == '+')
2102                                                 exp_test = !exp_test;
2103                                         debug_printf_expand("expand: op:%c (null:%s) test:%i\n", exp_op,
2104                                                 exp_null ? "true" : "false", exp_test);
2105                                         if (exp_test) {
2106                                                 if (exp_op == '?') {
2107 //TODO: how interactive bash aborts expansion mid-command?
2108                                                         /* ${var?[error_msg_if_unset]} */
2109                                                         /* ${var:?[error_msg_if_unset_or_null]} */
2110                                                         /* mimic bash message */
2111                                                         die_if_script("%s: %s",
2112                                                                 var,
2113                                                                 exp_word[0] ? exp_word : "parameter null or not set"
2114                                                         );
2115                                                 } else {
2116                                                         val = exp_word;
2117                                                 }
2118
2119                                                 if (exp_op == '=') {
2120                                                         /* ${var=[word]} or ${var:=[word]} */
2121                                                         if (isdigit(var[0]) || var[0] == '#') {
2122                                                                 /* mimic bash message */
2123                                                                 die_if_script("$%s: cannot assign in this way", var);
2124                                                                 val = NULL;
2125                                                         } else {
2126                                                                 char *new_var = xasprintf("%s=%s", var, val);
2127                                                                 set_local_var(new_var, -1, 0);
2128                                                         }
2129                                                 }
2130                                         }
2131                                 }
2132
2133                                 var[exp_off] = exp_save;
2134                         }
2135
2136                         arg[0] = first_ch;
2137 #if ENABLE_HUSH_TICK
2138  store_val:
2139 #endif
2140                         if (!(first_ch & 0x80)) { /* unquoted $VAR */
2141                                 debug_printf_expand("unquoted '%s', output->o_escape:%d\n", val, output->o_escape);
2142                                 if (val) {
2143                                         /* unquoted var's contents should be globbed, so don't escape */
2144                                         smallint sv = output->o_escape;
2145                                         output->o_escape = 0;
2146                                         n = expand_on_ifs(output, n, val);
2147                                         val = NULL;
2148                                         output->o_escape = sv;
2149                                 }
2150                         } else { /* quoted $VAR, val will be appended below */
2151                                 debug_printf_expand("quoted '%s', output->o_escape:%d\n", val, output->o_escape);
2152                         }
2153                 } /* default: */
2154                 } /* switch (char after <SPECIAL_VAR_SYMBOL>) */
2155                 if (val) {
2156                         o_addQstr(output, val, strlen(val));
2157                 }
2158                 free(dyn_val);
2159                 dyn_val = NULL;
2160                 /* Do the check to avoid writing to a const string */
2161                 if (*p != SPECIAL_VAR_SYMBOL)
2162                         *p = SPECIAL_VAR_SYMBOL;
2163
2164 #if ENABLE_HUSH_TICK
2165                 o_free(&subst_result);
2166 #endif
2167                 arg = ++p;
2168         } /* end of "while (SPECIAL_VAR_SYMBOL is found) ..." */
2169
2170         if (arg[0]) {
2171                 debug_print_list("expand_vars_to_list[a]", output, n);
2172                 /* this part is literal, and it was already pre-quoted
2173                  * if needed (much earlier), do not use o_addQstr here! */
2174                 o_addstr_with_NUL(output, arg);
2175                 debug_print_list("expand_vars_to_list[b]", output, n);
2176         } else if (output->length == o_get_last_ptr(output, n) /* expansion is empty */
2177          && !(ored_ch & 0x80) /* and all vars were not quoted. */
2178         ) {
2179                 n--;
2180                 /* allow to reuse list[n] later without re-growth */
2181                 output->has_empty_slot = 1;
2182         } else {
2183                 o_addchr(output, '\0');
2184         }
2185         return n;
2186 }
2187
2188 static char **expand_variables(char **argv, int or_mask)
2189 {
2190         int n;
2191         char **list;
2192         char **v;
2193         o_string output = NULL_O_STRING;
2194
2195         if (or_mask & 0x100) {
2196                 output.o_escape = 1; /* protect against globbing for "$var" */
2197                 /* (unquoted $var will temporarily switch it off) */
2198                 output.o_glob = 1;
2199         }
2200
2201         n = 0;
2202         v = argv;
2203         while (*v) {
2204                 n = expand_vars_to_list(&output, n, *v, (char)or_mask);
2205                 v++;
2206         }
2207         debug_print_list("expand_variables", &output, n);
2208
2209         /* output.data (malloced in one block) gets returned in "list" */
2210         list = o_finalize_list(&output, n);
2211         debug_print_strings("expand_variables[1]", list);
2212         return list;
2213 }
2214
2215 static char **expand_strvec_to_strvec(char **argv)
2216 {
2217         return expand_variables(argv, 0x100);
2218 }
2219
2220 /* Used for expansion of right hand of assignments */
2221 /* NB: should NOT do globbing! "export v=/bin/c*; env | grep ^v=" outputs
2222  * "v=/bin/c*" */
2223 static char *expand_string_to_string(const char *str)
2224 {
2225         char *argv[2], **list;
2226
2227         argv[0] = (char*)str;
2228         argv[1] = NULL;
2229         list = expand_variables(argv, 0x80); /* 0x80: make one-element expansion */
2230         if (HUSH_DEBUG)
2231                 if (!list[0] || list[1])
2232                         bb_error_msg_and_die("BUG in varexp2");
2233         /* actually, just move string 2*sizeof(char*) bytes back */
2234         overlapping_strcpy((char*)list, list[0]);
2235         debug_printf_expand("string_to_string='%s'\n", (char*)list);
2236         return (char*)list;
2237 }
2238
2239 /* Used for "eval" builtin */
2240 static char* expand_strvec_to_string(char **argv)
2241 {
2242         char **list;
2243
2244         list = expand_variables(argv, 0x80);
2245         /* Convert all NULs to spaces */
2246         if (list[0]) {
2247                 int n = 1;
2248                 while (list[n]) {
2249                         if (HUSH_DEBUG)
2250                                 if (list[n-1] + strlen(list[n-1]) + 1 != list[n])
2251                                         bb_error_msg_and_die("BUG in varexp3");
2252                         list[n][-1] = ' '; /* TODO: or to G.ifs[0]? */
2253                         n++;
2254                 }
2255         }
2256         overlapping_strcpy((char*)list, list[0]);
2257         debug_printf_expand("strvec_to_string='%s'\n", (char*)list);
2258         return (char*)list;
2259 }
2260
2261 static char **expand_assignments(char **argv, int count)
2262 {
2263         int i;
2264         char **p = NULL;
2265         /* Expand assignments into one string each */
2266         for (i = 0; i < count; i++) {
2267                 p = add_string_to_strings(p, expand_string_to_string(argv[i]));
2268         }
2269         return p;
2270 }
2271
2272
2273 #if BB_MMU
2274 /* never called */
2275 void re_execute_shell(char ***to_free, const char *s, char *argv0, char **argv);
2276
2277 static void reset_traps_to_defaults(void)
2278 {
2279         enum {
2280                 JOBSIGS = (1 << SIGTTIN) | (1 << SIGTTOU) | (1 << SIGTSTP)
2281         };
2282         unsigned sig;
2283
2284         if (!G.traps && !(G.non_DFL_mask & JOBSIGS))
2285                 return;
2286
2287         /* This function is always called in a child shell.
2288          * Child shells are not interactive.
2289          * SIGTTIN/SIGTTOU/SIGTSTP should not have special handling.
2290          * Testcase: (while :; do :; done) + ^Z should background.
2291          */
2292         G.non_DFL_mask &= ~JOBSIGS;
2293         sigdelset(&G.blocked_set, SIGTTIN);
2294         sigdelset(&G.blocked_set, SIGTTOU);
2295         sigdelset(&G.blocked_set, SIGTSTP);
2296
2297         if (G.traps) for (sig = 0; sig < NSIG; sig++) {
2298                 if (!G.traps[sig]) {
2299                         continue;
2300                 }
2301                 free(G.traps[sig]);
2302                 G.traps[sig] = NULL;
2303                 /* There is no signal for 0 (EXIT) */
2304                 if (sig == 0)
2305                         continue;
2306                 /* there was a trap handler, we are removing it
2307                  * (if sig has non-DFL handling,
2308                  * we don't need to do anything) */
2309                 if (sig < 32 && (G.non_DFL_mask & (1 << sig)))
2310                         continue;
2311                 sigdelset(&G.blocked_set, sig);
2312         }
2313         sigprocmask(SIG_SETMASK, &G.blocked_set, NULL);
2314 }
2315
2316 #else /* !BB_MMU */
2317
2318 static void re_execute_shell(char ***to_free, const char *s, char *g_argv0, char **g_argv) NORETURN;
2319 static void re_execute_shell(char ***to_free, const char *s, char *g_argv0, char **g_argv)
2320 {
2321         char param_buf[sizeof("-$%x:%x:%x:%x") + sizeof(unsigned) * 4];
2322         char *heredoc_argv[4];
2323         struct variable *cur;
2324 #if ENABLE_HUSH_FUNCTIONS
2325         struct function *funcp;
2326 #endif
2327         char **argv, **pp;
2328         unsigned cnt;
2329
2330         if (!g_argv0) { /* heredoc */
2331                 argv = heredoc_argv;
2332                 argv[0] = (char *) G.argv0_for_re_execing;
2333                 argv[1] = (char *) "-<";
2334                 argv[2] = (char *) s;
2335                 argv[3] = NULL;
2336                 pp = &argv[3]; /* used as pointer to empty environment */
2337                 goto do_exec;
2338         }
2339
2340         sprintf(param_buf, "-$%x:%x:%x" USE_HUSH_LOOPS(":%x")
2341                         , (unsigned) G.root_pid
2342                         , (unsigned) G.last_bg_pid
2343                         , (unsigned) G.last_exitcode
2344                         USE_HUSH_LOOPS(, G.depth_of_loop)
2345                         );
2346         /* 1:hush 2:-$<pid>:<pid>:<exitcode>:<depth> <vars...> <funcs...>
2347          * 3:-c 4:<cmd> 5:<arg0> <argN...> 6:NULL
2348          */
2349         cnt = 6;
2350         for (cur = G.top_var; cur; cur = cur->next) {
2351                 if (!cur->flg_export || cur->flg_read_only)
2352                         cnt += 2;
2353         }
2354 #if ENABLE_HUSH_FUNCTIONS
2355         for (funcp = G.top_func; funcp; funcp = funcp->next)
2356                 cnt += 3;
2357 #endif
2358         pp = g_argv;
2359         while (*pp++)
2360                 cnt++;
2361         *to_free = argv = pp = xzalloc(sizeof(argv[0]) * cnt);
2362         *pp++ = (char *) G.argv0_for_re_execing;
2363         *pp++ = param_buf;
2364         for (cur = G.top_var; cur; cur = cur->next) {
2365                 if (cur->varstr == hush_version_str)
2366                         continue;
2367                 if (cur->flg_read_only) {
2368                         *pp++ = (char *) "-R";
2369                         *pp++ = cur->varstr;
2370                 } else if (!cur->flg_export) {
2371                         *pp++ = (char *) "-V";
2372                         *pp++ = cur->varstr;
2373                 }
2374         }
2375 #if ENABLE_HUSH_FUNCTIONS
2376         for (funcp = G.top_func; funcp; funcp = funcp->next) {
2377                 *pp++ = (char *) "-F";
2378                 *pp++ = funcp->name;
2379                 *pp++ = funcp->body_as_string;
2380         }
2381 #endif
2382         /* We can pass activated traps here. Say, -Tnn:trap_string
2383          *
2384          * However, POSIX says that subshells reset signals with traps
2385          * to SIG_DFL.
2386          * I tested bash-3.2 and it not only does that with true subshells
2387          * of the form ( list ), but with any forked children shells.
2388          * I set trap "echo W" WINCH; and then tried:
2389          *
2390          * { echo 1; sleep 20; echo 2; } &
2391          * while true; do echo 1; sleep 20; echo 2; break; done &
2392          * true | { echo 1; sleep 20; echo 2; } | cat
2393          *
2394          * In all these cases sending SIGWINCH to the child shell
2395          * did not run the trap. If I add trap "echo V" WINCH;
2396          * _inside_ group (just before echo 1), it works.
2397          *
2398          * I conclude it means we don't need to pass active traps here.
2399          * exec syscall below resets them to SIG_DFL for us.
2400          */
2401         *pp++ = (char *) "-c";
2402         *pp++ = (char *) s;
2403         *pp++ = g_argv0;
2404         while (*g_argv)
2405                 *pp++ = *g_argv++;
2406         /* *pp = NULL; - is already there */
2407         pp = environ;
2408
2409  do_exec:
2410         debug_printf_exec("re_execute_shell pid:%d cmd:'%s'\n", getpid(), s);
2411         sigprocmask(SIG_SETMASK, &G.inherited_set, NULL);
2412         execve(bb_busybox_exec_path, argv, pp);
2413         /* Fallback. Useful for init=/bin/hush usage etc */
2414         if (argv[0][0] == '/')
2415                 execve(argv[0], argv, pp);
2416         xfunc_error_retval = 127;
2417         bb_error_msg_and_die("can't re-execute the shell");
2418 }
2419 #endif  /* !BB_MMU */
2420
2421
2422 static void setup_heredoc(struct redir_struct *redir)
2423 {
2424         struct fd_pair pair;
2425         pid_t pid;
2426         int len, written;
2427         /* the _body_ of heredoc (misleading field name) */
2428         const char *heredoc = redir->rd_filename;
2429         char *expanded;
2430 #if !BB_MMU
2431         char **to_free;
2432 #endif
2433
2434         expanded = NULL;
2435         if (!(redir->rd_dup & HEREDOC_QUOTED)) {
2436                 expanded = expand_pseudo_dquoted(heredoc);
2437                 if (expanded)
2438                         heredoc = expanded;
2439         }
2440         len = strlen(heredoc);
2441
2442         close(redir->rd_fd); /* often saves dup2+close in xmove_fd */
2443         xpiped_pair(pair);
2444         xmove_fd(pair.rd, redir->rd_fd);
2445
2446         /* Try writing without forking. Newer kernels have
2447          * dynamically growing pipes. Must use non-blocking write! */
2448         ndelay_on(pair.wr);
2449         while (1) {
2450                 written = write(pair.wr, heredoc, len);
2451                 if (written <= 0)
2452                         break;
2453                 len -= written;
2454                 if (len == 0) {
2455                         close(pair.wr);
2456                         free(expanded);
2457                         return;
2458                 }
2459                 heredoc += written;
2460         }
2461         ndelay_off(pair.wr);
2462
2463         /* Okay, pipe buffer was not big enough */
2464         /* Note: we must not create a stray child (bastard? :)
2465          * for the unsuspecting parent process. Child creates a grandchild
2466          * and exits before parent execs the process which consumes heredoc
2467          * (that exec happens after we return from this function) */
2468 #if !BB_MMU
2469         to_free = NULL;
2470 #endif
2471         pid = vfork();
2472         if (pid < 0)
2473                 bb_perror_msg_and_die("vfork");
2474         if (pid == 0) {
2475                 /* child */
2476                 disable_restore_tty_pgrp_on_exit();
2477                 pid = BB_MMU ? fork() : vfork();
2478                 if (pid < 0)
2479                         bb_perror_msg_and_die(BB_MMU ? "fork" : "vfork");
2480                 if (pid != 0)
2481                         _exit(0);
2482                 /* grandchild */
2483                 close(redir->rd_fd); /* read side of the pipe */
2484 #if BB_MMU
2485                 full_write(pair.wr, heredoc, len); /* may loop or block */
2486                 _exit(0);
2487 #else
2488                 /* Delegate blocking writes to another process */
2489                 xmove_fd(pair.wr, STDOUT_FILENO);
2490                 re_execute_shell(&to_free, heredoc, NULL, NULL);
2491 #endif
2492         }
2493         /* parent */
2494         enable_restore_tty_pgrp_on_exit();
2495 #if !BB_MMU
2496         free(to_free);
2497 #endif
2498         close(pair.wr);
2499         free(expanded);
2500         wait(NULL); /* wait till child has died */
2501 }
2502
2503 /* squirrel != NULL means we squirrel away copies of stdin, stdout,
2504  * and stderr if they are redirected. */
2505 static int setup_redirects(struct command *prog, int squirrel[])
2506 {
2507         int openfd, mode;
2508         struct redir_struct *redir;
2509
2510         for (redir = prog->redirects; redir; redir = redir->next) {
2511                 if (redir->rd_type == REDIRECT_HEREDOC2) {
2512                         /* rd_fd<<HERE case */
2513                         if (squirrel && redir->rd_fd < 3) {
2514                                 squirrel[redir->rd_fd] = dup(redir->rd_fd);
2515                         }
2516                         /* for REDIRECT_HEREDOC2, rd_filename holds _contents_
2517                          * of the heredoc */
2518                         debug_printf_parse("set heredoc '%s'\n",
2519                                         redir->rd_filename);
2520                         setup_heredoc(redir);
2521                         continue;
2522                 }
2523
2524                 if (redir->rd_dup == REDIRFD_TO_FILE) {
2525                         /* rd_fd<*>file case (<*> is <,>,>>,<>) */
2526                         char *p;
2527                         if (redir->rd_filename == NULL) {
2528                                 /* Something went wrong in the parse.
2529                                  * Pretend it didn't happen */
2530                                 bb_error_msg("bug in redirect parse");
2531                                 continue;
2532                         }
2533                         mode = redir_table[redir->rd_type].mode;
2534                         p = expand_string_to_string(redir->rd_filename);
2535                         openfd = open_or_warn(p, mode);
2536                         free(p);
2537                         if (openfd < 0) {
2538                         /* this could get lost if stderr has been redirected, but
2539                          * bash and ash both lose it as well (though zsh doesn't!) */
2540 //what the above comment tries to say?
2541                                 return 1;
2542                         }
2543                 } else {
2544                         /* rd_fd<*>rd_dup or rd_fd<*>- cases */
2545                         openfd = redir->rd_dup;
2546                 }
2547
2548                 if (openfd != redir->rd_fd) {
2549                         if (squirrel && redir->rd_fd < 3) {
2550                                 squirrel[redir->rd_fd] = dup(redir->rd_fd);
2551                         }
2552                         if (openfd == REDIRFD_CLOSE) {
2553                                 /* "n>-" means "close me" */
2554                                 close(redir->rd_fd);
2555                         } else {
2556                                 xdup2(openfd, redir->rd_fd);
2557                                 if (redir->rd_dup == REDIRFD_TO_FILE)
2558                                         close(openfd);
2559                         }
2560                 }
2561         }
2562         return 0;
2563 }
2564
2565 static void restore_redirects(int squirrel[])
2566 {
2567         int i, fd;
2568         for (i = 0; i < 3; i++) {
2569                 fd = squirrel[i];
2570                 if (fd != -1) {
2571                         /* We simply die on error */
2572                         xmove_fd(fd, i);
2573                 }
2574         }
2575 }
2576
2577
2578 static void free_pipe_list(struct pipe *head);
2579
2580 /* Return code is the exit status of the pipe */
2581 static void free_pipe(struct pipe *pi)
2582 {
2583         char **p;
2584         struct command *command;
2585         struct redir_struct *r, *rnext;
2586         int a, i;
2587
2588         if (pi->stopped_cmds > 0) /* why? */
2589                 return;
2590         debug_printf_clean("run pipe: (pid %d)\n", getpid());
2591         for (i = 0; i < pi->num_cmds; i++) {
2592                 command = &pi->cmds[i];
2593                 debug_printf_clean("  command %d:\n", i);
2594                 if (command->argv) {
2595                         for (a = 0, p = command->argv; *p; a++, p++) {
2596                                 debug_printf_clean("   argv[%d] = %s\n", a, *p);
2597                         }
2598                         free_strings(command->argv);
2599                         command->argv = NULL;
2600                 }
2601                 /* not "else if": on syntax error, we may have both! */
2602                 if (command->group) {
2603                         debug_printf_clean("   begin group (grp_type:%d)\n",
2604                                         command->grp_type);
2605                         free_pipe_list(command->group);
2606                         debug_printf_clean("   end group\n");
2607                         command->group = NULL;
2608                 }
2609                 /* else is crucial here.
2610                  * If group != NULL, child_func is meaningless */
2611 #if ENABLE_HUSH_FUNCTIONS
2612                 else if (command->child_func) {
2613                         debug_printf_exec("cmd %p releases child func at %p\n", command, command->child_func);
2614                         command->child_func->parent_cmd = NULL;
2615                 }
2616 #endif
2617 #if !BB_MMU
2618                 free(command->group_as_string);
2619                 command->group_as_string = NULL;
2620 #endif
2621                 for (r = command->redirects; r; r = rnext) {
2622                         debug_printf_clean("   redirect %d%s",
2623                                         r->rd_fd, redir_table[r->rd_type].descrip);
2624                         /* guard against the case >$FOO, where foo is unset or blank */
2625                         if (r->rd_filename) {
2626                                 debug_printf_clean(" fname:'%s'\n", r->rd_filename);
2627                                 free(r->rd_filename);
2628                                 r->rd_filename = NULL;
2629                         }
2630                         debug_printf_clean(" rd_dup:%d\n", r->rd_dup);
2631                         rnext = r->next;
2632                         free(r);
2633                 }
2634                 command->redirects = NULL;
2635         }
2636         free(pi->cmds);   /* children are an array, they get freed all at once */
2637         pi->cmds = NULL;
2638 #if ENABLE_HUSH_JOB
2639         free(pi->cmdtext);
2640         pi->cmdtext = NULL;
2641 #endif
2642 }
2643
2644 static void free_pipe_list(struct pipe *head)
2645 {
2646         struct pipe *pi, *next;
2647
2648         for (pi = head; pi; pi = next) {
2649 #if HAS_KEYWORDS
2650                 debug_printf_clean(" pipe reserved word %d\n", pi->res_word);
2651 #endif
2652                 free_pipe(pi);
2653                 debug_printf_clean("pipe followup code %d\n", pi->followup);
2654                 next = pi->next;
2655                 /*pi->next = NULL;*/
2656                 free(pi);
2657         }
2658 }
2659
2660
2661 static int run_list(struct pipe *pi);
2662 #if BB_MMU
2663 #define parse_stream(pstring, input, end_trigger) \
2664         parse_stream(input, end_trigger)
2665 #endif
2666 static struct pipe *parse_stream(char **pstring,
2667                 struct in_str *input,
2668                 int end_trigger);
2669 static void parse_and_run_string(const char *s);
2670
2671
2672 static const struct built_in_command* find_builtin(const char *name)
2673 {
2674         const struct built_in_command *x;
2675         for (x = bltins; x != &bltins[ARRAY_SIZE(bltins)]; x++) {
2676                 if (strcmp(name, x->cmd) != 0)
2677                         continue;
2678                 debug_printf_exec("found builtin '%s'\n", name);
2679                 return x;
2680         }
2681         return NULL;
2682 }
2683
2684 #if ENABLE_HUSH_FUNCTIONS
2685 static const struct function *find_function(const char *name)
2686 {
2687         const struct function *funcp = G.top_func;
2688         while (funcp) {
2689                 if (strcmp(name, funcp->name) == 0) {
2690                         break;
2691                 }
2692                 funcp = funcp->next;
2693         }
2694         debug_printf_exec("found function '%s'\n", name);
2695         return funcp;
2696 }
2697
2698 /* Note: takes ownership on name ptr */
2699 static struct function *new_function(char *name)
2700 {
2701         struct function *funcp;
2702         struct function **funcpp = &G.top_func;
2703
2704         while ((funcp = *funcpp) != NULL) {
2705                 struct command *cmd;
2706
2707                 if (strcmp(funcp->name, name) != 0) {
2708                         funcpp = &funcp->next;
2709                         continue;
2710                 }
2711
2712                 cmd = funcp->parent_cmd;
2713                 debug_printf_exec("func %p parent_cmd %p\n", funcp, cmd);
2714                 if (!cmd) {
2715                         debug_printf_exec("freeing & replacing function '%s'\n", funcp->name);
2716                         free(funcp->name);
2717                         /* Note: if !funcp->body, do not free body_as_string!
2718                          * This is a special case of "-F name body" function:
2719                          * body_as_string was not malloced! */
2720                         if (funcp->body) {
2721                                 free_pipe_list(funcp->body);
2722 #if !BB_MMU
2723                                 free(funcp->body_as_string);
2724 #endif
2725                         }
2726                 } else {
2727                         debug_printf_exec("reinserting in tree & replacing function '%s'\n", funcp->name);
2728                         cmd->argv[0] = funcp->name;
2729                         cmd->group = funcp->body;
2730 #if !BB_MMU
2731                         cmd->group_as_string = funcp->body_as_string;
2732 #endif
2733                 }
2734                 goto skip;
2735         }
2736         debug_printf_exec("remembering new function '%s'\n", command->argv[0]);
2737         funcp = *funcpp = xzalloc(sizeof(*funcp));
2738         /*funcp->next = NULL;*/
2739  skip:
2740         funcp->name = name;
2741         return funcp;
2742 }
2743
2744 #if BB_MMU
2745 #define exec_function(nommu_save, funcp, argv) \
2746         exec_function(funcp, argv)
2747 #endif
2748 static void exec_function(nommu_save_t *nommu_save,
2749                 const struct function *funcp,
2750                 char **argv) NORETURN;
2751 static void exec_function(nommu_save_t *nommu_save,
2752                 const struct function *funcp,
2753                 char **argv)
2754 {
2755 # if BB_MMU
2756         int n = 1;
2757
2758         argv[0] = G.global_argv[0];
2759         G.global_argv = argv;
2760         while (*++argv)
2761                 n++;
2762         G.global_argc = n;
2763         /* On MMU, funcp->body is always non-NULL */
2764         n = run_list(funcp->body);
2765         fflush(NULL);
2766         _exit(n);
2767 # else
2768         re_execute_shell(&nommu_save->argv_from_re_execing,
2769                         funcp->body_as_string,
2770                         G.global_argv[0],
2771                         argv + 1);
2772 # endif
2773 }
2774
2775 static int run_function(const struct function *funcp, char **argv)
2776 {
2777         int n;
2778         char **pp;
2779         char *sv_argv0;
2780         smallint sv_g_malloced;
2781         int sv_g_argc;
2782         char **sv_g_argv;
2783
2784         sv_argv0 = argv[0];
2785         sv_g_malloced = G.global_args_malloced;
2786         sv_g_argc = G.global_argc;
2787         sv_g_argv = G.global_argv;
2788
2789         pp = argv;
2790         n = 1;
2791         while (*++pp)
2792                 n++;
2793
2794         argv[0] = G.global_argv[0]; /* retain $0 */
2795         G.global_args_malloced = 0;
2796         G.global_argc = n;
2797         G.global_argv = argv;
2798
2799         /* On MMU, funcp->body is always non-NULL */
2800 #if !BB_MMU
2801         if (!funcp->body) {
2802                 /* Function defined by -F */
2803                 parse_and_run_string(funcp->body_as_string);
2804                 n = G.last_exitcode;
2805         } else
2806 #endif
2807         {
2808                 n = run_list(funcp->body);
2809         }
2810
2811         if (G.global_args_malloced) {
2812                 /* function ran "set -- arg1 arg2 ..." */
2813                 pp = G.global_argv;
2814                 while (*++pp)
2815                         free(*pp);
2816                 free(G.global_argv);
2817         }
2818
2819         argv[0] = sv_argv0;
2820         G.global_args_malloced = sv_g_malloced;
2821         G.global_argc = sv_g_argc;
2822         G.global_argv = sv_g_argv;
2823
2824         return n;
2825 }
2826 #endif
2827
2828
2829 #if BB_MMU
2830 #define pseudo_exec_argv(nommu_save, argv, assignment_cnt, argv_expanded) \
2831         pseudo_exec_argv(argv, assignment_cnt, argv_expanded)
2832 #define pseudo_exec(nommu_save, command, argv_expanded) \
2833         pseudo_exec(command, argv_expanded)
2834 #endif
2835
2836 /* Called after [v]fork() in run_pipe, or from builtin_exec.
2837  * Never returns.
2838  * XXX no exit() here.  If you don't exec, use _exit instead.
2839  * The at_exit handlers apparently confuse the calling process,
2840  * in particular stdin handling.  Not sure why? -- because of vfork! (vda) */
2841 static void pseudo_exec_argv(nommu_save_t *nommu_save,
2842                 char **argv, int assignment_cnt,
2843                 char **argv_expanded) NORETURN;
2844 static void pseudo_exec_argv(nommu_save_t *nommu_save,
2845                 char **argv, int assignment_cnt,
2846                 char **argv_expanded)
2847 {
2848         char **new_env;
2849
2850         /* Case when we are here: ... | var=val | ... */
2851         if (!argv[assignment_cnt])
2852                 _exit(EXIT_SUCCESS);
2853
2854         new_env = expand_assignments(argv, assignment_cnt);
2855 #if BB_MMU
2856         putenv_all(new_env);
2857         free(new_env); /* optional */
2858 #else
2859         nommu_save->new_env = new_env;
2860         nommu_save->old_env = putenv_all_and_save_old(new_env);
2861 #endif
2862         if (argv_expanded) {
2863                 argv = argv_expanded;
2864         } else {
2865                 argv = expand_strvec_to_strvec(argv + assignment_cnt);
2866 #if !BB_MMU
2867                 nommu_save->argv = argv;
2868 #endif
2869         }
2870
2871 #if ENABLE_FEATURE_SH_STANDALONE || BB_MMU
2872         if (strchr(argv[0], '/') != NULL)
2873                 goto skip;
2874 #endif
2875
2876         /* On NOMMU, we must never block!
2877          * Example: { sleep 99999 | read line } & echo Ok
2878          * read builtin will block on read syscall, leaving parent blocked
2879          * in vfork. Therefore we can't do this:
2880          */
2881 #if BB_MMU
2882         /* Check if the command matches any of the builtins.
2883          * Depending on context, this might be redundant.  But it's
2884          * easier to waste a few CPU cycles than it is to figure out
2885          * if this is one of those cases.
2886          */
2887         {
2888                 int rcode;
2889                 const struct built_in_command *x = find_builtin(argv[0]);
2890                 if (x) {
2891                         rcode = x->function(argv);
2892                         fflush(NULL);
2893                         _exit(rcode);
2894                 }
2895         }
2896 #endif
2897 #if ENABLE_HUSH_FUNCTIONS
2898         /* Check if the command matches any functions */
2899         {
2900                 const struct function *funcp = find_function(argv[0]);
2901                 if (funcp) {
2902                         exec_function(nommu_save, funcp, argv);
2903                 }
2904         }
2905 #endif
2906
2907 #if ENABLE_FEATURE_SH_STANDALONE
2908         /* Check if the command matches any busybox applets */
2909         {
2910                 int a = find_applet_by_name(argv[0]);
2911                 if (a >= 0) {
2912 # if BB_MMU /* see above why on NOMMU it is not allowed */
2913                         if (APPLET_IS_NOEXEC(a)) {
2914                                 debug_printf_exec("running applet '%s'\n", argv[0]);
2915                                 run_applet_no_and_exit(a, argv);
2916                         }
2917 # endif
2918                         /* Re-exec ourselves */
2919                         debug_printf_exec("re-execing applet '%s'\n", argv[0]);
2920                         sigprocmask(SIG_SETMASK, &G.inherited_set, NULL);
2921                         execv(bb_busybox_exec_path, argv);
2922                         /* If they called chroot or otherwise made the binary no longer
2923                          * executable, fall through */
2924                 }
2925         }
2926 #endif
2927
2928 #if ENABLE_FEATURE_SH_STANDALONE || BB_MMU
2929  skip:
2930 #endif
2931         debug_printf_exec("execing '%s'\n", argv[0]);
2932         sigprocmask(SIG_SETMASK, &G.inherited_set, NULL);
2933         execvp(argv[0], argv);
2934         bb_perror_msg("can't exec '%s'", argv[0]);
2935         _exit(EXIT_FAILURE);
2936 }
2937
2938 /* Called after [v]fork() in run_pipe
2939  */
2940 static void pseudo_exec(nommu_save_t *nommu_save,
2941                 struct command *command,
2942                 char **argv_expanded) NORETURN;
2943 static void pseudo_exec(nommu_save_t *nommu_save,
2944                 struct command *command,
2945                 char **argv_expanded)
2946 {
2947         if (command->argv) {
2948                 pseudo_exec_argv(nommu_save, command->argv,
2949                                 command->assignment_cnt, argv_expanded);
2950         }
2951
2952         if (command->group) {
2953                 /* Cases when we are here:
2954                  * ( list )
2955                  * { list } &
2956                  * ... | ( list ) | ...
2957                  * ... | { list } | ...
2958                  */
2959 #if BB_MMU
2960                 int rcode;
2961                 debug_printf_exec("pseudo_exec: run_list\n");
2962                 reset_traps_to_defaults();
2963                 rcode = run_list(command->group);
2964                 /* OK to leak memory by not calling free_pipe_list,
2965                  * since this process is about to exit */
2966                 _exit(rcode);
2967 #else
2968                 re_execute_shell(&nommu_save->argv_from_re_execing,
2969                                 command->group_as_string,
2970                                 G.global_argv[0],
2971                                 G.global_argv + 1);
2972 #endif
2973         }
2974
2975         /* Case when we are here: ... | >file */
2976         debug_printf_exec("pseudo_exec'ed null command\n");
2977         _exit(EXIT_SUCCESS);
2978 }
2979
2980 #if ENABLE_HUSH_JOB
2981 static const char *get_cmdtext(struct pipe *pi)
2982 {
2983         char **argv;
2984         char *p;
2985         int len;
2986
2987         /* This is subtle. ->cmdtext is created only on first backgrounding.
2988          * (Think "cat, <ctrl-z>, fg, <ctrl-z>, fg, <ctrl-z>...." here...)
2989          * On subsequent bg argv is trashed, but we won't use it */
2990         if (pi->cmdtext)
2991                 return pi->cmdtext;
2992         argv = pi->cmds[0].argv;
2993         if (!argv || !argv[0]) {
2994                 pi->cmdtext = xzalloc(1);
2995                 return pi->cmdtext;
2996         }
2997
2998         len = 0;
2999         do len += strlen(*argv) + 1; while (*++argv);
3000         pi->cmdtext = p = xmalloc(len);
3001         argv = pi->cmds[0].argv;
3002         do {
3003                 len = strlen(*argv);
3004                 memcpy(p, *argv, len);
3005                 p += len;
3006                 *p++ = ' ';
3007         } while (*++argv);
3008         p[-1] = '\0';
3009         return pi->cmdtext;
3010 }
3011
3012 static void insert_bg_job(struct pipe *pi)
3013 {
3014         struct pipe *thejob;
3015         int i;
3016
3017         /* Linear search for the ID of the job to use */
3018         pi->jobid = 1;
3019         for (thejob = G.job_list; thejob; thejob = thejob->next)
3020                 if (thejob->jobid >= pi->jobid)
3021                         pi->jobid = thejob->jobid + 1;
3022
3023         /* Add thejob to the list of running jobs */
3024         if (!G.job_list) {
3025                 thejob = G.job_list = xmalloc(sizeof(*thejob));
3026         } else {
3027                 for (thejob = G.job_list; thejob->next; thejob = thejob->next)
3028                         continue;
3029                 thejob->next = xmalloc(sizeof(*thejob));
3030                 thejob = thejob->next;
3031         }
3032
3033         /* Physically copy the struct job */
3034         memcpy(thejob, pi, sizeof(struct pipe));
3035         thejob->cmds = xzalloc(sizeof(pi->cmds[0]) * pi->num_cmds);
3036         /* We cannot copy entire pi->cmds[] vector! Double free()s will happen */
3037         for (i = 0; i < pi->num_cmds; i++) {
3038 // TODO: do we really need to have so many fields which are just dead weight
3039 // at execution stage?
3040                 thejob->cmds[i].pid = pi->cmds[i].pid;
3041                 /* all other fields are not used and stay zero */
3042         }
3043         thejob->next = NULL;
3044         thejob->cmdtext = xstrdup(get_cmdtext(pi));
3045
3046         /* We don't wait for background thejobs to return -- append it
3047            to the list of backgrounded thejobs and leave it alone */
3048         if (G_interactive_fd)
3049                 printf("[%d] %d %s\n", thejob->jobid, thejob->cmds[0].pid, thejob->cmdtext);
3050         G.last_bg_pid = thejob->cmds[0].pid;
3051         G.last_jobid = thejob->jobid;
3052 }
3053
3054 static void remove_bg_job(struct pipe *pi)
3055 {
3056         struct pipe *prev_pipe;
3057
3058         if (pi == G.job_list) {
3059                 G.job_list = pi->next;
3060         } else {
3061                 prev_pipe = G.job_list;
3062                 while (prev_pipe->next != pi)
3063                         prev_pipe = prev_pipe->next;
3064                 prev_pipe->next = pi->next;
3065         }
3066         if (G.job_list)
3067                 G.last_jobid = G.job_list->jobid;
3068         else
3069                 G.last_jobid = 0;
3070 }
3071
3072 /* Remove a backgrounded job */
3073 static void delete_finished_bg_job(struct pipe *pi)
3074 {
3075         remove_bg_job(pi);
3076         pi->stopped_cmds = 0;
3077         free_pipe(pi);
3078         free(pi);
3079 }
3080 #endif /* JOB */
3081
3082 /* Check to see if any processes have exited -- if they
3083  * have, figure out why and see if a job has completed */
3084 static int checkjobs(struct pipe* fg_pipe)
3085 {
3086         int attributes;
3087         int status;
3088 #if ENABLE_HUSH_JOB
3089         struct pipe *pi;
3090 #endif
3091         pid_t childpid;
3092         int rcode = 0;
3093
3094         debug_printf_jobs("checkjobs %p\n", fg_pipe);
3095
3096         errno = 0;
3097 //      if (G.handled_SIGCHLD == G.count_SIGCHLD)
3098 //              /* avoid doing syscall, nothing there anyway */
3099 //              return rcode;
3100
3101         attributes = WUNTRACED;
3102         if (fg_pipe == NULL)
3103                 attributes |= WNOHANG;
3104
3105 /* Do we do this right?
3106  * bash-3.00# sleep 20 | false
3107  * <ctrl-Z pressed>
3108  * [3]+  Stopped          sleep 20 | false
3109  * bash-3.00# echo $?
3110  * 1   <========== bg pipe is not fully done, but exitcode is already known!
3111  */
3112
3113 //FIXME: non-interactive bash does not continue even if all processes in fg pipe
3114 //are stopped. Testcase: "cat | cat" in a script (not on command line)
3115 // + killall -STOP cat
3116
3117  wait_more:
3118         while (1) {
3119                 int i;
3120                 int dead;
3121
3122 //              i = G.count_SIGCHLD;
3123                 childpid = waitpid(-1, &status, attributes);
3124                 if (childpid <= 0) {
3125                         if (childpid && errno != ECHILD)
3126                                 bb_perror_msg("waitpid");
3127 //                      else /* Until next SIGCHLD, waitpid's are useless */
3128 //                              G.handled_SIGCHLD = i;
3129                         break;
3130                 }
3131                 dead = WIFEXITED(status) || WIFSIGNALED(status);
3132
3133 #if DEBUG_JOBS
3134                 if (WIFSTOPPED(status))
3135                         debug_printf_jobs("pid %d stopped by sig %d (exitcode %d)\n",
3136                                         childpid, WSTOPSIG(status), WEXITSTATUS(status));
3137                 if (WIFSIGNALED(status))
3138                         debug_printf_jobs("pid %d killed by sig %d (exitcode %d)\n",
3139                                         childpid, WTERMSIG(status), WEXITSTATUS(status));
3140                 if (WIFEXITED(status))
3141                         debug_printf_jobs("pid %d exited, exitcode %d\n",
3142                                         childpid, WEXITSTATUS(status));
3143 #endif
3144                 /* Were we asked to wait for fg pipe? */
3145                 if (fg_pipe) {
3146                         for (i = 0; i < fg_pipe->num_cmds; i++) {
3147                                 debug_printf_jobs("check pid %d\n", fg_pipe->cmds[i].pid);
3148                                 if (fg_pipe->cmds[i].pid != childpid)
3149                                         continue;
3150                                 /* printf("process %d exit %d\n", i, WEXITSTATUS(status)); */
3151                                 if (dead) {
3152                                         fg_pipe->cmds[i].pid = 0;
3153                                         fg_pipe->alive_cmds--;
3154                                         if (i == fg_pipe->num_cmds - 1) {
3155                                                 /* last process gives overall exitstatus */
3156                                                 rcode = WEXITSTATUS(status);
3157                                                 IF_HAS_KEYWORDS(if (fg_pipe->pi_inverted) rcode = !rcode;)
3158                                         }
3159                                 } else {
3160                                         fg_pipe->cmds[i].is_stopped = 1;
3161                                         fg_pipe->stopped_cmds++;
3162                                 }
3163                                 debug_printf_jobs("fg_pipe: alive_cmds %d stopped_cmds %d\n",
3164                                                 fg_pipe->alive_cmds, fg_pipe->stopped_cmds);
3165                                 if (fg_pipe->alive_cmds - fg_pipe->stopped_cmds <= 0) {
3166                                         /* All processes in fg pipe have exited/stopped */
3167 #if ENABLE_HUSH_JOB
3168                                         if (fg_pipe->alive_cmds)
3169                                                 insert_bg_job(fg_pipe);
3170 #endif
3171                                         return rcode;
3172                                 }
3173                                 /* There are still running processes in the fg pipe */
3174                                 goto wait_more; /* do waitpid again */
3175                         }
3176                         /* it wasnt fg_pipe, look for process in bg pipes */
3177                 }
3178
3179 #if ENABLE_HUSH_JOB
3180                 /* We asked to wait for bg or orphaned children */
3181                 /* No need to remember exitcode in this case */
3182                 for (pi = G.job_list; pi; pi = pi->next) {
3183                         for (i = 0; i < pi->num_cmds; i++) {
3184                                 if (pi->cmds[i].pid == childpid)
3185                                         goto found_pi_and_prognum;
3186                         }
3187                 }
3188                 /* Happens when shell is used as init process (init=/bin/sh) */
3189                 debug_printf("checkjobs: pid %d was not in our list!\n", childpid);
3190                 continue; /* do waitpid again */
3191
3192  found_pi_and_prognum:
3193                 if (dead) {
3194                         /* child exited */
3195                         pi->cmds[i].pid = 0;
3196                         pi->alive_cmds--;
3197                         if (!pi->alive_cmds) {
3198                                 if (G_interactive_fd)
3199                                         printf(JOB_STATUS_FORMAT, pi->jobid,
3200                                                         "Done", pi->cmdtext);
3201                                 delete_finished_bg_job(pi);
3202                         }
3203                 } else {
3204                         /* child stopped */
3205                         pi->cmds[i].is_stopped = 1;
3206                         pi->stopped_cmds++;
3207                 }
3208 #endif
3209         } /* while (waitpid succeeds)... */
3210
3211         return rcode;
3212 }
3213
3214 #if ENABLE_HUSH_JOB
3215 static int checkjobs_and_fg_shell(struct pipe* fg_pipe)
3216 {
3217         pid_t p;
3218         int rcode = checkjobs(fg_pipe);
3219         /* Job finished, move the shell to the foreground */
3220         p = getpgid(0); /* pgid of our process */
3221         debug_printf_jobs("fg'ing ourself: getpgid(0)=%d\n", (int)p);
3222         tcsetpgrp(G_interactive_fd, p);
3223         return rcode;
3224 }
3225 #endif
3226
3227 /* Start all the jobs, but don't wait for anything to finish.
3228  * See checkjobs().
3229  *
3230  * Return code is normally -1, when the caller has to wait for children
3231  * to finish to determine the exit status of the pipe.  If the pipe
3232  * is a simple builtin command, however, the action is done by the
3233  * time run_pipe returns, and the exit code is provided as the
3234  * return value.
3235  *
3236  * Returns -1 only if started some children. IOW: we have to
3237  * mask out retvals of builtins etc with 0xff!
3238  *
3239  * The only case when we do not need to [v]fork is when the pipe
3240  * is single, non-backgrounded, non-subshell command. Examples:
3241  * cmd ; ...   { list } ; ...
3242  * cmd && ...  { list } && ...
3243  * cmd || ...  { list } || ...
3244  * If it is, then we can run cmd as a builtin, NOFORK [do we do this?],
3245  * or (if SH_STANDALONE) an applet, and we can run the { list }
3246  * with run_list(). If it isn't one of these, we fork and exec cmd.
3247  *
3248  * Cases when we must fork:
3249  * non-single:   cmd | cmd
3250  * backgrounded: cmd &     { list } &
3251  * subshell:     ( list ) [&]
3252  */
3253 static int run_pipe(struct pipe *pi)
3254 {
3255         static const char *const null_ptr = NULL;
3256         int i;
3257         int nextin;
3258         int pipefds[2];         /* pipefds[0] is for reading */
3259         struct command *command;
3260         char **argv_expanded;
3261         char **argv;
3262         char *p;
3263         /* it is not always needed, but we aim to smaller code */
3264         int squirrel[] = { -1, -1, -1 };
3265         int rcode;
3266
3267         debug_printf_exec("run_pipe start: members:%d\n", pi->num_cmds);
3268         debug_enter();
3269
3270         USE_HUSH_JOB(pi->pgrp = -1;)
3271         pi->stopped_cmds = 0;
3272         command = &(pi->cmds[0]);
3273         argv_expanded = NULL;
3274
3275         if (pi->num_cmds != 1
3276          || pi->followup == PIPE_BG
3277          || command->grp_type == GRP_SUBSHELL
3278         ) {
3279                 goto must_fork;
3280         }
3281
3282         pi->alive_cmds = 1;
3283
3284         debug_printf_exec(": group:%p argv:'%s'\n",
3285                 command->group, command->argv ? command->argv[0] : "NONE");
3286
3287         if (command->group) {
3288 #if ENABLE_HUSH_FUNCTIONS
3289                 if (command->grp_type == GRP_FUNCTION) {
3290                         /* "executing" func () { list } */
3291                         struct function *funcp;
3292
3293                         funcp = new_function(command->argv[0]);
3294                         /* funcp->name is already set to argv[0] */
3295                         funcp->body = command->group;
3296 #if !BB_MMU
3297                         funcp->body_as_string = command->group_as_string;
3298                         command->group_as_string = NULL;
3299 #endif
3300                         command->group = NULL;
3301                         command->argv[0] = NULL;
3302                         debug_printf_exec("cmd %p has child func at %p\n", command, funcp);
3303                         funcp->parent_cmd = command;
3304                         command->child_func = funcp;
3305
3306                         debug_printf_exec("run_pipe: return EXIT_SUCCESS\n");
3307                         debug_leave();
3308                         return EXIT_SUCCESS;
3309                 }
3310 #endif
3311                 /* { list } */
3312                 debug_printf("non-subshell group\n");
3313                 rcode = 1; /* exitcode if redir failed */
3314                 if (setup_redirects(command, squirrel) == 0) {
3315                         debug_printf_exec(": run_list\n");
3316                         rcode = run_list(command->group) & 0xff;
3317                 }
3318                 restore_redirects(squirrel);
3319                 IF_HAS_KEYWORDS(if (pi->pi_inverted) rcode = !rcode;)
3320                 debug_leave();
3321                 debug_printf_exec("run_pipe: return %d\n", rcode);
3322                 return rcode;
3323         }
3324
3325         argv = command->argv ? command->argv : (char **) &null_ptr;
3326         {
3327                 const struct built_in_command *x;
3328 #if ENABLE_HUSH_FUNCTIONS
3329                 const struct function *funcp;
3330 #else
3331                 enum { funcp = 0 };
3332 #endif
3333                 char **new_env = NULL;
3334                 char **old_env = NULL;
3335
3336                 if (argv[command->assignment_cnt] == NULL) {
3337                         /* Assignments, but no command */
3338                         /* Ensure redirects take effect. Try "a=t >file" */
3339                         rcode = setup_redirects(command, squirrel);
3340                         restore_redirects(squirrel);
3341                         /* Set shell variables */
3342                         while (*argv) {
3343                                 p = expand_string_to_string(*argv);
3344                                 debug_printf_exec("set shell var:'%s'->'%s'\n",
3345                                                 *argv, p);
3346                                 set_local_var(p, 0, 0);
3347                                 argv++;
3348                         }
3349                         /* Do we need to flag set_local_var() errors?
3350                          * "assignment to readonly var" and "putenv error"
3351                          */
3352                         IF_HAS_KEYWORDS(if (pi->pi_inverted) rcode = !rcode;)
3353                         debug_leave();
3354                         debug_printf_exec("run_pipe: return %d\n", rcode);
3355                         return rcode;
3356                 }
3357
3358                 /* Expand the rest into (possibly) many strings each */
3359                 argv_expanded = expand_strvec_to_strvec(argv + command->assignment_cnt);
3360
3361                 x = find_builtin(argv_expanded[0]);
3362 #if ENABLE_HUSH_FUNCTIONS
3363                 funcp = NULL;
3364                 if (!x)
3365                         funcp = find_function(argv_expanded[0]);
3366 #endif
3367                 if (x || funcp) {
3368                         if (!funcp) {
3369                                 if (x->function == builtin_exec && argv_expanded[1] == NULL) {
3370                                         debug_printf("exec with redirects only\n");
3371                                         rcode = setup_redirects(command, NULL);
3372                                         goto clean_up_and_ret1;
3373                                 }
3374                         }
3375                         /* XXX setup_redirects acts on file descriptors, not FILEs.
3376                          * This is perfect for work that comes after exec().
3377                          * Is it really safe for inline use?  Experimentally,
3378                          * things seem to work with glibc. */
3379                         rcode = setup_redirects(command, squirrel);
3380                         if (rcode == 0) {
3381                                 new_env = expand_assignments(argv, command->assignment_cnt);
3382                                 old_env = putenv_all_and_save_old(new_env);
3383                                 if (!funcp) {
3384                                         debug_printf_exec(": builtin '%s' '%s'...\n",
3385                                                 x->cmd, argv_expanded[1]);
3386                                         rcode = x->function(argv_expanded) & 0xff;
3387                                 }
3388 #if ENABLE_HUSH_FUNCTIONS
3389                                 else {
3390                                         debug_printf_exec(": function '%s' '%s'...\n",
3391                                                 funcp->name, argv_expanded[1]);
3392                                         rcode = run_function(funcp, argv_expanded) & 0xff;
3393                                 }
3394 #endif
3395                         }
3396 #if ENABLE_FEATURE_SH_STANDALONE
3397  clean_up_and_ret:
3398 #endif
3399                         restore_redirects(squirrel);
3400                         free_strings_and_unsetenv(new_env, 1);
3401                         putenv_all(old_env);
3402                         /* Free the pointers, but the strings themselves
3403                          * are in environ now, don't use free_strings! */
3404                         free(old_env);
3405  clean_up_and_ret1:
3406                         free(argv_expanded);
3407                         IF_HAS_KEYWORDS(if (pi->pi_inverted) rcode = !rcode;)
3408                         debug_leave();
3409                         debug_printf_exec("run_pipe return %d\n", rcode);
3410                         return rcode;
3411                 }
3412
3413 #if ENABLE_FEATURE_SH_STANDALONE
3414                 i = find_applet_by_name(argv_expanded[0]);
3415                 if (i >= 0 && APPLET_IS_NOFORK(i)) {
3416                         rcode = setup_redirects(command, squirrel);
3417                         if (rcode == 0) {
3418                                 new_env = expand_assignments(argv, command->assignment_cnt);
3419                                 old_env = putenv_all_and_save_old(new_env);
3420                                 debug_printf_exec(": run_nofork_applet '%s' '%s'...\n",
3421                                         argv_expanded[0], argv_expanded[1]);
3422                                 rcode = run_nofork_applet(i, argv_expanded);
3423                         }
3424                         goto clean_up_and_ret;
3425                 }
3426 #endif
3427                 /* It is neither builtin nor applet. We must fork. */
3428         }
3429
3430  must_fork:
3431         /* NB: argv_expanded may already be created, and that
3432          * might include `cmd` runs! Do not rerun it! We *must*
3433          * use argv_expanded if it's non-NULL */
3434
3435         /* Going to fork a child per each pipe member */
3436         pi->alive_cmds = 0;
3437         nextin = 0;
3438
3439         for (i = 0; i < pi->num_cmds; i++) {
3440 #if !BB_MMU
3441                 volatile nommu_save_t nommu_save;
3442                 nommu_save.new_env = NULL;
3443                 nommu_save.old_env = NULL;
3444                 nommu_save.argv = NULL;
3445                 nommu_save.argv_from_re_execing = NULL;
3446 #endif
3447                 command = &(pi->cmds[i]);
3448                 if (command->argv) {
3449                         debug_printf_exec(": pipe member '%s' '%s'...\n",
3450                                         command->argv[0], command->argv[1]);
3451                 } else {
3452                         debug_printf_exec(": pipe member with no argv\n");
3453                 }
3454
3455                 /* pipes are inserted between pairs of commands */
3456                 pipefds[0] = 0;
3457                 pipefds[1] = 1;
3458                 if ((i + 1) < pi->num_cmds)
3459                         xpipe(pipefds);
3460
3461                 command->pid = BB_MMU ? fork() : vfork();
3462                 if (!command->pid) { /* child */
3463 #if ENABLE_HUSH_JOB
3464                         disable_restore_tty_pgrp_on_exit();
3465
3466                         /* Every child adds itself to new process group
3467                          * with pgid == pid_of_first_child_in_pipe */
3468                         if (G.run_list_level == 1 && G_interactive_fd) {
3469                                 pid_t pgrp;
3470                                 pgrp = pi->pgrp;
3471                                 if (pgrp < 0) /* true for 1st process only */
3472                                         pgrp = getpid();
3473                                 if (setpgid(0, pgrp) == 0 && pi->followup != PIPE_BG) {
3474                                         /* We do it in *every* child, not just first,
3475                                          * to avoid races */
3476                                         tcsetpgrp(G_interactive_fd, pgrp);
3477                                 }
3478                         }
3479 #endif
3480                         xmove_fd(nextin, 0);
3481                         xmove_fd(pipefds[1], 1); /* write end */
3482                         if (pipefds[0] > 1)
3483                                 close(pipefds[0]); /* read end */
3484                         /* Like bash, explicit redirects override pipes,
3485                          * and the pipe fd is available for dup'ing. */
3486                         if (setup_redirects(command, NULL))
3487                                 _exit(1);
3488
3489                         /* Restore default handlers just prior to exec */
3490                         /*signal(SIGCHLD, SIG_DFL); - so far we don't have any handlers */
3491
3492                         /* Stores to nommu_save list of env vars putenv'ed
3493                          * (NOMMU, on MMU we don't need that) */
3494                         /* cast away volatility... */
3495                         pseudo_exec((nommu_save_t*) &nommu_save, command, argv_expanded);
3496                         /* pseudo_exec() does not return */
3497                 }
3498
3499                 /* parent or error */
3500                 enable_restore_tty_pgrp_on_exit();
3501 #if !BB_MMU
3502                 /* Clean up after vforked child */
3503                 free(nommu_save.argv);
3504                 free(nommu_save.argv_from_re_execing);
3505                 free_strings_and_unsetenv(nommu_save.new_env, 1);
3506                 putenv_all(nommu_save.old_env);
3507                 /* Free the pointers, but the strings themselves
3508                  * are in environ now, don't use free_strings! */
3509                 free(nommu_save.old_env);
3510 #endif
3511                 free(argv_expanded);
3512                 argv_expanded = NULL;
3513                 if (command->pid < 0) { /* [v]fork failed */
3514                         /* Clearly indicate, was it fork or vfork */
3515                         bb_perror_msg(BB_MMU ? "fork" : "vfork");
3516                 } else {
3517                         pi->alive_cmds++;
3518 #if ENABLE_HUSH_JOB
3519                         /* Second and next children need to know pid of first one */
3520                         if (pi->pgrp < 0)
3521                                 pi->pgrp = command->pid;
3522 #endif
3523                 }
3524
3525                 if (i)
3526                         close(nextin);
3527                 if ((i + 1) < pi->num_cmds)
3528                         close(pipefds[1]); /* write end */
3529                 /* Pass read (output) pipe end to next iteration */
3530                 nextin = pipefds[0];
3531         }
3532
3533         if (!pi->alive_cmds) {
3534                 debug_leave();
3535                 debug_printf_exec("run_pipe return 1 (all forks failed, no children)\n");
3536                 return 1;
3537         }
3538
3539         debug_leave();
3540         debug_printf_exec("run_pipe return -1 (%u children started)\n", pi->alive_cmds);
3541         return -1;
3542 }
3543
3544 #ifndef debug_print_tree
3545 static void debug_print_tree(struct pipe *pi, int lvl)
3546 {
3547         static const char *const PIPE[] = {
3548                 [PIPE_SEQ] = "SEQ",
3549                 [PIPE_AND] = "AND",
3550                 [PIPE_OR ] = "OR" ,
3551                 [PIPE_BG ] = "BG" ,
3552         };
3553         static const char *RES[] = {
3554                 [RES_NONE ] = "NONE" ,
3555 #if ENABLE_HUSH_IF
3556                 [RES_IF   ] = "IF"   ,
3557                 [RES_THEN ] = "THEN" ,
3558                 [RES_ELIF ] = "ELIF" ,
3559                 [RES_ELSE ] = "ELSE" ,
3560                 [RES_FI   ] = "FI"   ,
3561 #endif
3562 #if ENABLE_HUSH_LOOPS
3563                 [RES_FOR  ] = "FOR"  ,
3564                 [RES_WHILE] = "WHILE",
3565                 [RES_UNTIL] = "UNTIL",
3566                 [RES_DO   ] = "DO"   ,
3567                 [RES_DONE ] = "DONE" ,
3568 #endif
3569 #if ENABLE_HUSH_LOOPS || ENABLE_HUSH_CASE
3570                 [RES_IN   ] = "IN"   ,
3571 #endif
3572 #if ENABLE_HUSH_CASE
3573                 [RES_CASE ] = "CASE" ,
3574                 [RES_MATCH] = "MATCH",
3575                 [RES_CASEI] = "CASEI",
3576                 [RES_ESAC ] = "ESAC" ,
3577 #endif
3578                 [RES_XXXX ] = "XXXX" ,
3579                 [RES_SNTX ] = "SNTX" ,
3580         };
3581         static const char *const GRPTYPE[] = {
3582                 "{}",
3583                 "()",
3584 #if ENABLE_HUSH_FUNCTIONS
3585                 "func()",
3586 #endif
3587         };
3588
3589         int pin, prn;
3590
3591         pin = 0;
3592         while (pi) {
3593                 fprintf(stderr, "%*spipe %d res_word=%s followup=%d %s\n", lvl*2, "",
3594                                 pin, RES[pi->res_word], pi->followup, PIPE[pi->followup]);
3595                 prn = 0;
3596                 while (prn < pi->num_cmds) {
3597                         struct command *command = &pi->cmds[prn];
3598                         char **argv = command->argv;
3599
3600                         fprintf(stderr, "%*s cmd %d assignment_cnt:%d",
3601                                         lvl*2, "", prn,
3602                                         command->assignment_cnt);
3603                         if (command->group) {
3604                                 fprintf(stderr, " group %s: (argv=%p)\n",
3605                                                 GRPTYPE[command->grp_type],
3606                                                 argv);
3607                                 debug_print_tree(command->group, lvl+1);
3608                                 prn++;
3609                                 continue;
3610                         }
3611                         if (argv) while (*argv) {
3612                                 fprintf(stderr, " '%s'", *argv);
3613                                 argv++;
3614                         }
3615                         fprintf(stderr, "\n");
3616                         prn++;
3617                 }
3618                 pi = pi->next;
3619                 pin++;
3620         }
3621 }
3622 #endif
3623
3624 /* NB: called by pseudo_exec, and therefore must not modify any
3625  * global data until exec/_exit (we can be a child after vfork!) */
3626 static int run_list(struct pipe *pi)
3627 {
3628 #if ENABLE_HUSH_CASE
3629         char *case_word = NULL;
3630 #endif
3631 #if ENABLE_HUSH_LOOPS
3632         struct pipe *loop_top = NULL;
3633         char *for_varname = NULL;
3634         char **for_lcur = NULL;
3635         char **for_list = NULL;
3636 #endif
3637         smallint last_followup;
3638         smalluint rcode;
3639 #if ENABLE_HUSH_IF || ENABLE_HUSH_CASE
3640         smalluint cond_code = 0;
3641 #else
3642         enum { cond_code = 0 };
3643 #endif
3644 #if HAS_KEYWORDS
3645         smallint rword; /* enum reserved_style */
3646         smallint last_rword; /* ditto */
3647 #endif
3648
3649         debug_printf_exec("run_list start lvl %d\n", G.run_list_level);
3650         debug_enter();
3651
3652 #if ENABLE_HUSH_LOOPS
3653         /* Check syntax for "for" */
3654         for (struct pipe *cpipe = pi; cpipe; cpipe = cpipe->next) {
3655                 if (cpipe->res_word != RES_FOR && cpipe->res_word != RES_IN)
3656                         continue;
3657                 /* current word is FOR or IN (BOLD in comments below) */
3658                 if (cpipe->next == NULL) {
3659                         syntax_error("malformed for");
3660                         debug_leave();
3661                         debug_printf_exec("run_list lvl %d return 1\n", G.run_list_level);
3662                         return 1;
3663                 }
3664                 /* "FOR v; do ..." and "for v IN a b; do..." are ok */
3665                 if (cpipe->next->res_word == RES_DO)
3666                         continue;
3667                 /* next word is not "do". It must be "in" then ("FOR v in ...") */
3668                 if (cpipe->res_word == RES_IN /* "for v IN a b; not_do..."? */
3669                  || cpipe->next->res_word != RES_IN /* FOR v not_do_and_not_in..."? */
3670                 ) {
3671                         syntax_error("malformed for");
3672                         debug_leave();
3673                         debug_printf_exec("run_list lvl %d return 1\n", G.run_list_level);
3674                         return 1;
3675                 }
3676         }
3677 #endif
3678
3679         /* Past this point, all code paths should jump to ret: label
3680          * in order to return, no direct "return" statements please.
3681          * This helps to ensure that no memory is leaked. */
3682
3683 #if ENABLE_HUSH_JOB
3684         G.run_list_level++;
3685 #endif
3686
3687 #if HAS_KEYWORDS
3688         rword = RES_NONE;
3689         last_rword = RES_XXXX;
3690 #endif
3691         last_followup = PIPE_SEQ;
3692         rcode = G.last_exitcode;
3693
3694         /* Go through list of pipes, (maybe) executing them. */
3695         for (; pi; pi = USE_HUSH_LOOPS(rword == RES_DONE ? loop_top : ) pi->next) {
3696                 if (G.flag_SIGINT)
3697                         break;
3698
3699                 IF_HAS_KEYWORDS(rword = pi->res_word;)
3700                 debug_printf_exec(": rword=%d cond_code=%d last_rword=%d\n",
3701                                 rword, cond_code, last_rword);
3702 #if ENABLE_HUSH_LOOPS
3703                 if ((rword == RES_WHILE || rword == RES_UNTIL || rword == RES_FOR)
3704                  && loop_top == NULL /* avoid bumping G.depth_of_loop twice */
3705                 ) {
3706                         /* start of a loop: remember where loop starts */
3707                         loop_top = pi;
3708                         G.depth_of_loop++;
3709                 }
3710 #endif
3711                 /* Still in the same "if...", "then..." or "do..." branch? */
3712                 if (IF_HAS_KEYWORDS(rword == last_rword &&) 1) {
3713                         if ((rcode == 0 && last_followup == PIPE_OR)
3714                          || (rcode != 0 && last_followup == PIPE_AND)
3715                         ) {
3716                                 /* It is "<true> || CMD" or "<false> && CMD"
3717                                  * and we should not execute CMD */
3718                                 debug_printf_exec("skipped cmd because of || or &&\n");
3719                                 last_followup = pi->followup;
3720                                 continue;
3721                         }
3722                 }
3723                 last_followup = pi->followup;
3724                 IF_HAS_KEYWORDS(last_rword = rword;)
3725 #if ENABLE_HUSH_IF
3726                 if (cond_code) {
3727                         if (rword == RES_THEN) {
3728                                 /* if false; then ... fi has exitcode 0! */
3729                                 G.last_exitcode = rcode = EXIT_SUCCESS;
3730                                 /* "if <false> THEN cmd": skip cmd */
3731                                 continue;
3732                         }
3733                 } else {
3734                         if (rword == RES_ELSE || rword == RES_ELIF) {
3735                                 /* "if <true> then ... ELSE/ELIF cmd":
3736                                  * skip cmd and all following ones */
3737                                 break;
3738                         }
3739                 }
3740 #endif
3741 #if ENABLE_HUSH_LOOPS
3742                 if (rword == RES_FOR) { /* && pi->num_cmds - always == 1 */
3743                         if (!for_lcur) {
3744                                 /* first loop through for */
3745
3746                                 static const char encoded_dollar_at[] ALIGN1 = {
3747                                         SPECIAL_VAR_SYMBOL, '@' | 0x80, SPECIAL_VAR_SYMBOL, '\0'
3748                                 }; /* encoded representation of "$@" */
3749                                 static const char *const encoded_dollar_at_argv[] = {
3750                                         encoded_dollar_at, NULL
3751                                 }; /* argv list with one element: "$@" */
3752                                 char **vals;
3753
3754                                 vals = (char**)encoded_dollar_at_argv;
3755                                 if (pi->next->res_word == RES_IN) {
3756                                         /* if no variable values after "in" we skip "for" */
3757                                         if (!pi->next->cmds[0].argv) {
3758                                                 G.last_exitcode = rcode = EXIT_SUCCESS;
3759                                                 debug_printf_exec(": null FOR: exitcode EXIT_SUCCESS\n");
3760                                                 break;
3761                                         }
3762                                         vals = pi->next->cmds[0].argv;
3763                                 } /* else: "for var; do..." -> assume "$@" list */
3764                                 /* create list of variable values */
3765                                 debug_print_strings("for_list made from", vals);
3766                                 for_list = expand_strvec_to_strvec(vals);
3767                                 for_lcur = for_list;
3768                                 debug_print_strings("for_list", for_list);
3769                                 for_varname = pi->cmds[0].argv[0];
3770                                 pi->cmds[0].argv[0] = NULL;
3771                         }
3772                         free(pi->cmds[0].argv[0]);
3773                         if (!*for_lcur) {
3774                                 /* "for" loop is over, clean up */
3775                                 free(for_list);
3776                                 for_list = NULL;
3777                                 for_lcur = NULL;
3778                                 pi->cmds[0].argv[0] = for_varname;
3779                                 break;
3780                         }
3781                         /* Insert next value from for_lcur */
3782                         /* note: *for_lcur already has quotes removed, $var expanded, etc */
3783                         pi->cmds[0].argv[0] = xasprintf("%s=%s", for_varname, *for_lcur++);
3784                         pi->cmds[0].assignment_cnt = 1;
3785                 }
3786                 if (rword == RES_IN) {
3787                         continue; /* "for v IN list;..." - "in" has no cmds anyway */
3788                 }
3789                 if (rword == RES_DONE) {
3790                         continue; /* "done" has no cmds too */
3791                 }
3792 #endif
3793 #if ENABLE_HUSH_CASE
3794                 if (rword == RES_CASE) {
3795                         case_word = expand_strvec_to_string(pi->cmds->argv);
3796                         continue;
3797                 }
3798                 if (rword == RES_MATCH) {
3799                         char **argv;
3800
3801                         if (!case_word) /* "case ... matched_word) ... WORD)": we executed selected branch, stop */
3802                                 break;
3803                         /* all prev words didn't match, does this one match? */
3804                         argv = pi->cmds->argv;
3805                         while (*argv) {
3806                                 char *pattern = expand_string_to_string(*argv);
3807                                 /* TODO: which FNM_xxx flags to use? */
3808                                 cond_code = (fnmatch(pattern, case_word, /*flags:*/ 0) != 0);
3809                                 free(pattern);
3810                                 if (cond_code == 0) { /* match! we will execute this branch */
3811                                         free(case_word); /* make future "word)" stop */
3812                                         case_word = NULL;
3813                                         break;
3814                                 }
3815                                 argv++;
3816                         }
3817                         continue;
3818                 }
3819                 if (rword == RES_CASEI) { /* inside of a case branch */
3820                         if (cond_code != 0)
3821                                 continue; /* not matched yet, skip this pipe */
3822                 }
3823 #endif
3824                 /* Just pressing <enter> in shell should check for jobs.
3825                  * OTOH, in non-interactive shell this is useless
3826                  * and only leads to extra job checks */
3827                 if (pi->num_cmds == 0) {
3828                         if (G_interactive_fd)
3829                                 goto check_jobs_and_continue;
3830                         continue;
3831                 }
3832
3833                 /* After analyzing all keywords and conditions, we decided
3834                  * to execute this pipe. NB: have to do checkjobs(NULL)
3835                  * after run_pipe to collect any background children,
3836                  * even if list execution is to be stopped. */
3837                 debug_printf_exec(": run_pipe with %d members\n", pi->num_cmds);
3838                 {
3839                         int r;
3840 #if ENABLE_HUSH_LOOPS
3841                         G.flag_break_continue = 0;
3842 #endif
3843                         rcode = r = run_pipe(pi); /* NB: rcode is a smallint */
3844                         if (r != -1) {
3845                                 /* We only ran a builtin: rcode is already known
3846                                  * and we don't need to wait for anything. */
3847                                 G.last_exitcode = rcode;
3848                                 debug_printf_exec(": builtin/func exitcode %d\n", rcode);
3849                                 check_and_run_traps(0);
3850 #if ENABLE_HUSH_LOOPS
3851                                 /* Was it "break" or "continue"? */
3852                                 if (G.flag_break_continue) {
3853                                         smallint fbc = G.flag_break_continue;
3854                                         /* We might fall into outer *loop*,
3855                                          * don't want to break it too */
3856                                         if (loop_top) {
3857                                                 G.depth_break_continue--;
3858                                                 if (G.depth_break_continue == 0)
3859                                                         G.flag_break_continue = 0;
3860                                                 /* else: e.g. "continue 2" should *break* once, *then* continue */
3861                                         } /* else: "while... do... { we are here (innermost list is not a loop!) };...done" */
3862                                         if (G.depth_break_continue != 0 || fbc == BC_BREAK)
3863                                                 goto check_jobs_and_break;
3864                                         /* "continue": simulate end of loop */
3865                                         rword = RES_DONE;
3866                                         continue;
3867                                 }
3868 #endif
3869                         } else if (pi->followup == PIPE_BG) {
3870                                 /* What does bash do with attempts to background builtins? */
3871                                 /* even bash 3.2 doesn't do that well with nested bg:
3872                                  * try "{ { sleep 10; echo DEEP; } & echo HERE; } &".
3873                                  * I'm NOT treating inner &'s as jobs */
3874                                 check_and_run_traps(0);
3875 #if ENABLE_HUSH_JOB
3876                                 if (G.run_list_level == 1)
3877                                         insert_bg_job(pi);
3878 #endif
3879                                 G.last_exitcode = rcode = EXIT_SUCCESS;
3880                                 debug_printf_exec(": cmd&: exitcode EXIT_SUCCESS\n");
3881                         } else {
3882 #if ENABLE_HUSH_JOB
3883                                 if (G.run_list_level == 1 && G_interactive_fd) {
3884                                         /* Waits for completion, then fg's main shell */
3885                                         rcode = checkjobs_and_fg_shell(pi);
3886                                         debug_printf_exec(": checkjobs_and_fg_shell exitcode %d\n", rcode);
3887                                         check_and_run_traps(0);
3888                                 } else
3889 #endif
3890                                 { /* This one just waits for completion */
3891                                         rcode = checkjobs(pi);
3892                                         debug_printf_exec(": checkjobs exitcode %d\n", rcode);
3893                                         check_and_run_traps(0);
3894                                 }
3895                                 G.last_exitcode = rcode;
3896                         }
3897                 }
3898
3899                 /* Analyze how result affects subsequent commands */
3900 #if ENABLE_HUSH_IF
3901                 if (rword == RES_IF || rword == RES_ELIF)
3902                         cond_code = rcode;
3903 #endif
3904 #if ENABLE_HUSH_LOOPS
3905                 /* Beware of "while false; true; do ..."! */
3906                 if (pi->next && pi->next->res_word == RES_DO) {
3907                         if (rword == RES_WHILE) {
3908                                 if (rcode) {
3909                                         /* "while false; do...done" - exitcode 0 */
3910                                         G.last_exitcode = rcode = EXIT_SUCCESS;
3911                                         debug_printf_exec(": while expr is false: breaking (exitcode:EXIT_SUCCESS)\n");
3912                                         goto check_jobs_and_break;
3913                                 }
3914                         }
3915                         if (rword == RES_UNTIL) {
3916                                 if (!rcode) {
3917                                         debug_printf_exec(": until expr is true: breaking\n");
3918  check_jobs_and_break:
3919                                         checkjobs(NULL);
3920                                         break;
3921                                 }
3922                         }
3923                 }
3924 #endif
3925
3926  check_jobs_and_continue:
3927                 checkjobs(NULL);
3928         } /* for (pi) */
3929
3930 #if ENABLE_HUSH_JOB
3931         G.run_list_level--;
3932 #endif
3933 #if ENABLE_HUSH_LOOPS
3934         if (loop_top)
3935                 G.depth_of_loop--;
3936         free(for_list);
3937 #endif
3938 #if ENABLE_HUSH_CASE
3939         free(case_word);
3940 #endif
3941         debug_leave();
3942         debug_printf_exec("run_list lvl %d return %d\n", G.run_list_level + 1, rcode);
3943         return rcode;
3944 }
3945
3946 /* Select which version we will use */
3947 static int run_and_free_list(struct pipe *pi)
3948 {
3949         int rcode = 0;
3950         debug_printf_exec("run_and_free_list entered\n");
3951         if (!G.fake_mode) {
3952                 debug_printf_exec(": run_list: 1st pipe with %d cmds\n", pi->num_cmds);
3953                 rcode = run_list(pi);
3954         }
3955         /* free_pipe_list has the side effect of clearing memory.
3956          * In the long run that function can be merged with run_list,
3957          * but doing that now would hobble the debugging effort. */
3958         free_pipe_list(pi);
3959         debug_printf_exec("run_and_free_list return %d\n", rcode);
3960         return rcode;
3961 }
3962
3963
3964 static struct pipe *new_pipe(void)
3965 {
3966         struct pipe *pi;
3967         pi = xzalloc(sizeof(struct pipe));
3968         /*pi->followup = 0; - deliberately invalid value */
3969         /*pi->res_word = RES_NONE; - RES_NONE is 0 anyway */
3970         return pi;
3971 }
3972
3973 /* Command (member of a pipe) is complete. The only possible error here
3974  * is out of memory, in which case xmalloc exits. */
3975 static int done_command(struct parse_context *ctx)
3976 {
3977         /* The command is really already in the pipe structure, so
3978          * advance the pipe counter and make a new, null command. */
3979         struct pipe *pi = ctx->pipe;
3980         struct command *command = ctx->command;
3981
3982         if (command) {
3983                 if (command->group == NULL
3984                  && command->argv == NULL
3985                  && command->redirects == NULL
3986                 ) {
3987                         debug_printf_parse("done_command: skipping null cmd, num_cmds=%d\n", pi->num_cmds);
3988                         memset(command, 0, sizeof(*command)); /* paranoia */
3989                         return pi->num_cmds;
3990                 }
3991                 pi->num_cmds++;
3992                 debug_printf_parse("done_command: ++num_cmds=%d\n", pi->num_cmds);
3993                 //debug_print_tree(ctx->list_head, 20);
3994         } else {
3995                 debug_printf_parse("done_command: initializing, num_cmds=%d\n", pi->num_cmds);
3996         }
3997
3998         /* Only real trickiness here is that the uncommitted
3999          * command structure is not counted in pi->num_cmds. */
4000         pi->cmds = xrealloc(pi->cmds, sizeof(*pi->cmds) * (pi->num_cmds+1));
4001         command = &pi->cmds[pi->num_cmds];
4002         memset(command, 0, sizeof(*command));
4003
4004         ctx->command = command;
4005         /* but ctx->pipe and ctx->list_head remain unchanged */
4006
4007         return pi->num_cmds; /* used only for 0/nonzero check */
4008 }
4009
4010 static void done_pipe(struct parse_context *ctx, pipe_style type)
4011 {
4012         int not_null;
4013
4014         debug_printf_parse("done_pipe entered, followup %d\n", type);
4015         /* Close previous command */
4016         not_null = done_command(ctx);
4017         ctx->pipe->followup = type;
4018 #if HAS_KEYWORDS
4019         ctx->pipe->pi_inverted = ctx->ctx_inverted;
4020         ctx->ctx_inverted = 0;
4021         ctx->pipe->res_word = ctx->ctx_res_w;
4022 #endif
4023
4024         /* Without this check, even just <enter> on command line generates
4025          * tree of three NOPs (!). Which is harmless but annoying.
4026          * IOW: it is safe to do it unconditionally.
4027          * RES_NONE case is for "for a in; do ..." (empty IN set)
4028          * and other cases to work. */
4029         if (not_null
4030 #if ENABLE_HUSH_IF
4031          || ctx->ctx_res_w == RES_FI
4032 #endif
4033 #if ENABLE_HUSH_LOOPS
4034          || ctx->ctx_res_w == RES_DONE
4035          || ctx->ctx_res_w == RES_FOR
4036          || ctx->ctx_res_w == RES_IN
4037 #endif
4038 #if ENABLE_HUSH_CASE
4039          || ctx->ctx_res_w == RES_ESAC
4040 #endif
4041         ) {
4042                 struct pipe *new_p;
4043                 debug_printf_parse("done_pipe: adding new pipe: "
4044                                 "not_null:%d ctx->ctx_res_w:%d\n",
4045                                 not_null, ctx->ctx_res_w);
4046                 new_p = new_pipe();
4047                 ctx->pipe->next = new_p;
4048                 ctx->pipe = new_p;
4049                 /* RES_THEN, RES_DO etc are "sticky" -
4050                  * they remain set for commands inside if/while.
4051                  * This is used to control execution.
4052                  * RES_FOR and RES_IN are NOT sticky (needed to support
4053                  * cases where variable or value happens to match a keyword):
4054                  */
4055 #if ENABLE_HUSH_LOOPS
4056                 if (ctx->ctx_res_w == RES_FOR
4057                  || ctx->ctx_res_w == RES_IN)
4058                         ctx->ctx_res_w = RES_NONE;
4059 #endif
4060 #if ENABLE_HUSH_CASE
4061                 if (ctx->ctx_res_w == RES_MATCH)
4062                         ctx->ctx_res_w = RES_CASEI;
4063 #endif
4064                 ctx->command = NULL; /* trick done_command below */
4065                 /* Create the memory for command, roughly:
4066                  * ctx->pipe->cmds = new struct command;
4067                  * ctx->command = &ctx->pipe->cmds[0];
4068                  */
4069                 done_command(ctx);
4070                 //debug_print_tree(ctx->list_head, 10);
4071         }
4072         debug_printf_parse("done_pipe return\n");
4073 }
4074
4075 static void initialize_context(struct parse_context *ctx)
4076 {
4077         memset(ctx, 0, sizeof(*ctx));
4078         ctx->pipe = ctx->list_head = new_pipe();
4079         /* Create the memory for command, roughly:
4080          * ctx->pipe->cmds = new struct command;
4081          * ctx->command = &ctx->pipe->cmds[0];
4082          */
4083         done_command(ctx);
4084 }
4085
4086 /* If a reserved word is found and processed, parse context is modified
4087  * and 1 is returned.
4088  */
4089 #if HAS_KEYWORDS
4090 struct reserved_combo {
4091         char literal[6];
4092         unsigned char res;
4093         unsigned char assignment_flag;
4094         int flag;
4095 };
4096 enum {
4097         FLAG_END   = (1 << RES_NONE ),
4098 #if ENABLE_HUSH_IF
4099         FLAG_IF    = (1 << RES_IF   ),
4100         FLAG_THEN  = (1 << RES_THEN ),
4101         FLAG_ELIF  = (1 << RES_ELIF ),
4102         FLAG_ELSE  = (1 << RES_ELSE ),
4103         FLAG_FI    = (1 << RES_FI   ),
4104 #endif
4105 #if ENABLE_HUSH_LOOPS
4106         FLAG_FOR   = (1 << RES_FOR  ),
4107         FLAG_WHILE = (1 << RES_WHILE),
4108         FLAG_UNTIL = (1 << RES_UNTIL),
4109         FLAG_DO    = (1 << RES_DO   ),
4110         FLAG_DONE  = (1 << RES_DONE ),
4111         FLAG_IN    = (1 << RES_IN   ),
4112 #endif
4113 #if ENABLE_HUSH_CASE
4114         FLAG_MATCH = (1 << RES_MATCH),
4115         FLAG_ESAC  = (1 << RES_ESAC ),
4116 #endif
4117         FLAG_START = (1 << RES_XXXX ),
4118 };
4119
4120 static const struct reserved_combo* match_reserved_word(o_string *word)
4121 {
4122         /* Mostly a list of accepted follow-up reserved words.
4123          * FLAG_END means we are done with the sequence, and are ready
4124          * to turn the compound list into a command.
4125          * FLAG_START means the word must start a new compound list.
4126          */
4127         static const struct reserved_combo reserved_list[] = {
4128 #if ENABLE_HUSH_IF
4129                 { "!",     RES_NONE,  NOT_ASSIGNMENT , 0 },
4130                 { "if",    RES_IF,    WORD_IS_KEYWORD, FLAG_THEN | FLAG_START },
4131                 { "then",  RES_THEN,  WORD_IS_KEYWORD, FLAG_ELIF | FLAG_ELSE | FLAG_FI },
4132                 { "elif",  RES_ELIF,  WORD_IS_KEYWORD, FLAG_THEN },
4133                 { "else",  RES_ELSE,  WORD_IS_KEYWORD, FLAG_FI   },
4134                 { "fi",    RES_FI,    NOT_ASSIGNMENT , FLAG_END  },
4135 #endif
4136 #if ENABLE_HUSH_LOOPS
4137                 { "for",   RES_FOR,   NOT_ASSIGNMENT , FLAG_IN | FLAG_DO | FLAG_START },
4138                 { "while", RES_WHILE, WORD_IS_KEYWORD, FLAG_DO | FLAG_START },
4139                 { "until", RES_UNTIL, WORD_IS_KEYWORD, FLAG_DO | FLAG_START },
4140                 { "in",    RES_IN,    NOT_ASSIGNMENT , FLAG_DO   },
4141                 { "do",    RES_DO,    WORD_IS_KEYWORD, FLAG_DONE },
4142                 { "done",  RES_DONE,  NOT_ASSIGNMENT , FLAG_END  },
4143 #endif
4144 #if ENABLE_HUSH_CASE
4145                 { "case",  RES_CASE,  NOT_ASSIGNMENT , FLAG_MATCH | FLAG_START },
4146                 { "esac",  RES_ESAC,  NOT_ASSIGNMENT , FLAG_END  },
4147 #endif
4148         };
4149         const struct reserved_combo *r;
4150
4151         for (r = reserved_list; r < reserved_list + ARRAY_SIZE(reserved_list); r++) {
4152                 if (strcmp(word->data, r->literal) == 0)
4153                         return r;
4154         }
4155         return NULL;
4156 }
4157 /* Return 0: not a keyword, 1: keyword
4158  */
4159 static int reserved_word(o_string *word, struct parse_context *ctx)
4160 {
4161 #if ENABLE_HUSH_CASE
4162         static const struct reserved_combo reserved_match = {
4163                 "",        RES_MATCH, NOT_ASSIGNMENT , FLAG_MATCH | FLAG_ESAC
4164         };
4165 #endif
4166         const struct reserved_combo *r;
4167
4168         if (word->o_quoted)
4169                 return 0;
4170         r = match_reserved_word(word);
4171         if (!r)
4172                 return 0;
4173
4174         debug_printf("found reserved word %s, res %d\n", r->literal, r->res);
4175 #if ENABLE_HUSH_CASE
4176         if (r->res == RES_IN && ctx->ctx_res_w == RES_CASE)
4177                 /* "case word IN ..." - IN part starts first match part */
4178                 r = &reserved_match;
4179         else
4180 #endif
4181         if (r->flag == 0) { /* '!' */
4182                 if (ctx->ctx_inverted) { /* bash doesn't accept '! ! true' */
4183                         syntax_error("! ! command");
4184                         ctx->ctx_res_w = RES_SNTX;
4185                 }
4186                 ctx->ctx_inverted = 1;
4187                 return 1;
4188         }
4189         if (r->flag & FLAG_START) {
4190                 struct parse_context *old;
4191
4192                 old = xmalloc(sizeof(*old));
4193                 debug_printf_parse("push stack %p\n", old);
4194                 *old = *ctx;   /* physical copy */
4195                 initialize_context(ctx);
4196                 ctx->stack = old;
4197         } else if (/*ctx->ctx_res_w == RES_NONE ||*/ !(ctx->old_flag & (1 << r->res))) {
4198                 syntax_error_at(word->data);
4199                 ctx->ctx_res_w = RES_SNTX;
4200                 return 1;
4201         } else {
4202                 /* "{...} fi" is ok. "{...} if" is not
4203                  * Example:
4204                  * if { echo foo; } then { echo bar; } fi */
4205                 if (ctx->command->group)
4206                         done_pipe(ctx, PIPE_SEQ);
4207         }
4208
4209         ctx->ctx_res_w = r->res;
4210         ctx->old_flag = r->flag;
4211         word->o_assignment = r->assignment_flag;
4212
4213         if (ctx->old_flag & FLAG_END) {
4214                 struct parse_context *old;
4215
4216                 done_pipe(ctx, PIPE_SEQ);
4217                 debug_printf_parse("pop stack %p\n", ctx->stack);
4218                 old = ctx->stack;
4219                 old->command->group = ctx->list_head;
4220                 old->command->grp_type = GRP_NORMAL;
4221 #if !BB_MMU
4222                 o_addstr(&old->as_string, ctx->as_string.data);
4223                 o_free_unsafe(&ctx->as_string);
4224                 old->command->group_as_string = xstrdup(old->as_string.data);
4225                 debug_printf_parse("pop, remembering as:'%s'\n",
4226                                 old->command->group_as_string);
4227 #endif
4228                 *ctx = *old;   /* physical copy */
4229                 free(old);
4230         }
4231         return 1;
4232 }
4233 #endif
4234
4235 /* Word is complete, look at it and update parsing context.
4236  * Normal return is 0. Syntax errors return 1.
4237  * Note: on return, word is reset, but not o_free'd!
4238  */
4239 static int done_word(o_string *word, struct parse_context *ctx)
4240 {
4241         struct command *command = ctx->command;
4242
4243         debug_printf_parse("done_word entered: '%s' %p\n", word->data, command);
4244         if (word->length == 0 && word->o_quoted == 0) {
4245                 debug_printf_parse("done_word return 0: true null, ignored\n");
4246                 return 0;
4247         }
4248
4249         if (ctx->pending_redirect) {
4250                 /* We do not glob in e.g. >*.tmp case. bash seems to glob here
4251                  * only if run as "bash", not "sh" */
4252                 /* http://www.opengroup.org/onlinepubs/009695399/utilities/xcu_chap02.html
4253                  * "2.7 Redirection
4254                  * ...the word that follows the redirection operator
4255                  * shall be subjected to tilde expansion, parameter expansion,
4256                  * command substitution, arithmetic expansion, and quote
4257                  * removal. Pathname expansion shall not be performed
4258                  * on the word by a non-interactive shell; an interactive
4259                  * shell may perform it, but shall do so only when
4260                  * the expansion would result in one word."
4261                  */
4262                 ctx->pending_redirect->rd_filename = xstrdup(word->data);
4263                 /* Cater for >\file case:
4264                  * >\a creates file a; >\\a, >"\a", >"\\a" create file \a
4265                  * Same with heredocs:
4266                  * for <<\H delim is H; <<\\H, <<"\H", <<"\\H" - \H
4267                  */
4268                 unbackslash(ctx->pending_redirect->rd_filename);
4269                 /* Is it <<"HEREDOC"? */
4270                 if (ctx->pending_redirect->rd_type == REDIRECT_HEREDOC
4271                  && word->o_quoted
4272                 ) {
4273                         ctx->pending_redirect->rd_dup |= HEREDOC_QUOTED;
4274                 }
4275                 debug_printf_parse("word stored in rd_filename: '%s'\n", word->data);
4276                 ctx->pending_redirect = NULL;
4277         } else {
4278                 /* If this word wasn't an assignment, next ones definitely
4279                  * can't be assignments. Even if they look like ones. */
4280                 if (word->o_assignment != DEFINITELY_ASSIGNMENT
4281                  && word->o_assignment != WORD_IS_KEYWORD
4282                 ) {
4283                         word->o_assignment = NOT_ASSIGNMENT;
4284                 } else {
4285                         if (word->o_assignment == DEFINITELY_ASSIGNMENT)
4286                                 command->assignment_cnt++;
4287                         word->o_assignment = MAYBE_ASSIGNMENT;
4288                 }
4289
4290 #if HAS_KEYWORDS
4291 # if ENABLE_HUSH_CASE
4292                 if (ctx->ctx_dsemicolon
4293                  && strcmp(word->data, "esac") != 0 /* not "... pattern) cmd;; esac" */
4294                 ) {
4295                         /* already done when ctx_dsemicolon was set to 1: */
4296                         /* ctx->ctx_res_w = RES_MATCH; */
4297                         ctx->ctx_dsemicolon = 0;
4298                 } else
4299 # endif
4300                 if (!command->argv /* if it's the first word... */
4301 # if ENABLE_HUSH_LOOPS
4302                  && ctx->ctx_res_w != RES_FOR /* ...not after FOR or IN */
4303                  && ctx->ctx_res_w != RES_IN
4304 # endif
4305                 ) {
4306                         debug_printf_parse(": checking '%s' for reserved-ness\n", word->data);
4307                         if (reserved_word(word, ctx)) {
4308                                 o_reset_to_empty_unquoted(word);
4309                                 debug_printf_parse("done_word return %d\n",
4310                                                 (ctx->ctx_res_w == RES_SNTX));
4311                                 return (ctx->ctx_res_w == RES_SNTX);
4312                         }
4313                 }
4314 #endif
4315                 if (command->group) {
4316                         /* "{ echo foo; } echo bar" - bad */
4317                         syntax_error_at(word->data);
4318                         debug_printf_parse("done_word return 1: syntax error, "
4319                                         "groups and arglists don't mix\n");
4320                         return 1;
4321                 }
4322                 if (word->o_quoted /* word had "xx" or 'xx' at least as part of it. */
4323                  /* optimization: and if it's ("" or '') or ($v... or `cmd`...): */
4324                  && (word->data[0] == '\0' || word->data[0] == SPECIAL_VAR_SYMBOL)
4325                  /* (otherwise it's known to be not empty and is already safe) */
4326                 ) {
4327                         /* exclude "$@" - it can expand to no word despite "" */
4328                         char *p = word->data;
4329                         while (p[0] == SPECIAL_VAR_SYMBOL
4330                             && (p[1] & 0x7f) == '@'
4331                             && p[2] == SPECIAL_VAR_SYMBOL
4332                         ) {
4333                                 p += 3;
4334                         }
4335                         if (p == word->data || p[0] != '\0') {
4336                                 /* saw no "$@", or not only "$@" but some
4337                                  * real text is there too */
4338                                 /* insert "empty variable" reference, this makes
4339                                  * e.g. "", $empty"" etc to not disappear */
4340                                 o_addchr(word, SPECIAL_VAR_SYMBOL);
4341                                 o_addchr(word, SPECIAL_VAR_SYMBOL);
4342                         }
4343                 }
4344                 command->argv = add_string_to_strings(command->argv, xstrdup(word->data));
4345 //SEGV, but good idea.
4346 //              command->argv = add_string_to_strings(command->argv, word->data);
4347 //              word->data = NULL;
4348 //              word->length = 0;
4349                 debug_print_strings("word appended to argv", command->argv);
4350         }
4351
4352 #if ENABLE_HUSH_LOOPS
4353         if (ctx->ctx_res_w == RES_FOR) {
4354                 if (word->o_quoted
4355                  || !is_well_formed_var_name(command->argv[0], '\0')
4356                 ) {
4357                         /* bash says just "not a valid identifier" */
4358                         syntax_error("not a valid identifier in for");
4359                         return 1;
4360                 }
4361                 /* Force FOR to have just one word (variable name) */
4362                 /* NB: basically, this makes hush see "for v in ..."
4363                  * syntax as if it is "for v; in ...". FOR and IN become
4364                  * two pipe structs in parse tree. */
4365                 done_pipe(ctx, PIPE_SEQ);
4366         }
4367 #endif
4368 #if ENABLE_HUSH_CASE
4369         /* Force CASE to have just one word */
4370         if (ctx->ctx_res_w == RES_CASE) {
4371                 done_pipe(ctx, PIPE_SEQ);
4372         }
4373 #endif
4374
4375         o_reset_to_empty_unquoted(word);
4376
4377         debug_printf_parse("done_word return 0\n");
4378         return 0;
4379 }
4380
4381
4382 /* Peek ahead in the input to find out if we have a "&n" construct,
4383  * as in "2>&1", that represents duplicating a file descriptor.
4384  * Return:
4385  * REDIRFD_CLOSE if >&- "close fd" construct is seen,
4386  * REDIRFD_SYNTAX_ERR if syntax error,
4387  * REDIRFD_TO_FILE if no & was seen,
4388  * or the number found.
4389  */
4390 #if BB_MMU
4391 #define parse_redir_right_fd(as_string, input) \
4392         parse_redir_right_fd(input)
4393 #endif
4394 static int parse_redir_right_fd(o_string *as_string, struct in_str *input)
4395 {
4396         int ch, d, ok;
4397
4398         ch = i_peek(input);
4399         if (ch != '&')
4400                 return REDIRFD_TO_FILE;
4401
4402         ch = i_getch(input);  /* get the & */
4403         nommu_addchr(as_string, ch);
4404         ch = i_peek(input);
4405         if (ch == '-') {
4406                 ch = i_getch(input);
4407                 nommu_addchr(as_string, ch);
4408                 return REDIRFD_CLOSE;
4409         }
4410         d = 0;
4411         ok = 0;
4412         while (ch != EOF && isdigit(ch)) {
4413                 d = d*10 + (ch-'0');
4414                 ok = 1;
4415                 ch = i_getch(input);
4416                 nommu_addchr(as_string, ch);
4417                 ch = i_peek(input);
4418         }
4419         if (ok) return d;
4420
4421 //TODO: this is the place to catch ">&file" bashism (redirect both fd 1 and 2)
4422
4423         bb_error_msg("ambiguous redirect");
4424         return REDIRFD_SYNTAX_ERR;
4425 }
4426
4427 /* Return code is 0 normal, 1 if a syntax error is detected
4428  */
4429 static int parse_redirect(struct parse_context *ctx,
4430                 int fd,
4431                 redir_type style,
4432                 struct in_str *input)
4433 {
4434         struct command *command = ctx->command;
4435         struct redir_struct *redir;
4436         struct redir_struct **redirp;
4437         int dup_num;
4438
4439         dup_num = REDIRFD_TO_FILE;
4440         if (style != REDIRECT_HEREDOC) {
4441                 /* Check for a '>&1' type redirect */
4442                 dup_num = parse_redir_right_fd(&ctx->as_string, input);
4443                 if (dup_num == REDIRFD_SYNTAX_ERR)
4444                         return 1;
4445         } else {
4446                 int ch = i_peek(input);
4447                 dup_num = (ch == '-'); /* HEREDOC_SKIPTABS bit is 1 */
4448                 if (dup_num) { /* <<-... */
4449                         ch = i_getch(input);
4450                         nommu_addchr(&ctx->as_string, ch);
4451                         ch = i_peek(input);
4452                 }
4453         }
4454
4455         if (style == REDIRECT_OVERWRITE && dup_num == REDIRFD_TO_FILE) {
4456                 int ch = i_peek(input);
4457                 if (ch == '|') {
4458                         /* >|FILE redirect ("clobbering" >).
4459                          * Since we do not support "set -o noclobber" yet,
4460                          * >| and > are the same for now. Just eat |.
4461                          */
4462                         ch = i_getch(input);
4463                         nommu_addchr(&ctx->as_string, ch);
4464                 }
4465         }
4466
4467         /* Create a new redir_struct and append it to the linked list */
4468         redirp = &command->redirects;
4469         while ((redir = *redirp) != NULL) {
4470                 redirp = &(redir->next);
4471         }
4472         *redirp = redir = xzalloc(sizeof(*redir));
4473         /* redir->next = NULL; */
4474         /* redir->rd_filename = NULL; */
4475         redir->rd_type = style;
4476         redir->rd_fd = (fd == -1) ? redir_table[style].default_fd : fd;
4477
4478         debug_printf_parse("redirect type %d %s\n", redir->rd_fd,
4479                                 redir_table[style].descrip);
4480
4481         redir->rd_dup = dup_num;
4482         if (style != REDIRECT_HEREDOC && dup_num != REDIRFD_TO_FILE) {
4483                 /* Erik had a check here that the file descriptor in question
4484                  * is legit; I postpone that to "run time"
4485                  * A "-" representation of "close me" shows up as a -3 here */
4486                 debug_printf_parse("duplicating redirect '%d>&%d'\n",
4487                                 redir->rd_fd, redir->rd_dup);
4488         } else {
4489                 /* Set ctx->pending_redirect, so we know what to do at the
4490                  * end of the next parsed word. */
4491                 ctx->pending_redirect = redir;
4492         }
4493         return 0;
4494 }
4495
4496 /* If a redirect is immediately preceded by a number, that number is
4497  * supposed to tell which file descriptor to redirect.  This routine
4498  * looks for such preceding numbers.  In an ideal world this routine
4499  * needs to handle all the following classes of redirects...
4500  *     echo 2>foo     # redirects fd  2 to file "foo", nothing passed to echo
4501  *     echo 49>foo    # redirects fd 49 to file "foo", nothing passed to echo
4502  *     echo -2>foo    # redirects fd  1 to file "foo",    "-2" passed to echo
4503  *     echo 49x>foo   # redirects fd  1 to file "foo",   "49x" passed to echo
4504  *
4505  * http://www.opengroup.org/onlinepubs/009695399/utilities/xcu_chap02.html
4506  * "2.7 Redirection
4507  * ... If n is quoted, the number shall not be recognized as part of
4508  * the redirection expression. For example:
4509  * echo \2>a
4510  * writes the character 2 into file a"
4511  * We are getting it right by setting ->o_quoted on any \<char>
4512  *
4513  * A -1 return means no valid number was found,
4514  * the caller should use the appropriate default for this redirection.
4515  */
4516 static int redirect_opt_num(o_string *o)
4517 {
4518         int num;
4519
4520         if (o->data == NULL)
4521                 return -1;
4522         num = bb_strtou(o->data, NULL, 10);
4523         if (errno || num < 0)
4524                 return -1;
4525         o_reset_to_empty_unquoted(o);
4526         return num;
4527 }
4528
4529 #if BB_MMU
4530 #define fetch_till_str(as_string, input, word, skip_tabs) \
4531         fetch_till_str(input, word, skip_tabs)
4532 #endif
4533 static char *fetch_till_str(o_string *as_string,
4534                 struct in_str *input,
4535                 const char *word,
4536                 int skip_tabs)
4537 {
4538         o_string heredoc = NULL_O_STRING;
4539         int past_EOL = 0;
4540         int ch;
4541
4542         goto jump_in;
4543         while (1) {
4544                 ch = i_getch(input);
4545                 nommu_addchr(as_string, ch);
4546                 if (ch == '\n') {
4547                         if (strcmp(heredoc.data + past_EOL, word) == 0) {
4548                                 heredoc.data[past_EOL] = '\0';
4549                                 debug_printf_parse("parsed heredoc '%s'\n", heredoc.data);
4550                                 return heredoc.data;
4551                         }
4552                         do {
4553                                 o_addchr(&heredoc, ch);
4554                                 past_EOL = heredoc.length;
4555  jump_in:
4556                                 do {
4557                                         ch = i_getch(input);
4558                                         nommu_addchr(as_string, ch);
4559                                 } while (skip_tabs && ch == '\t');
4560                         } while (ch == '\n');
4561                 }
4562                 if (ch == EOF) {
4563                         o_free_unsafe(&heredoc);
4564                         return NULL;
4565                 }
4566                 o_addchr(&heredoc, ch);
4567                 nommu_addchr(as_string, ch);
4568         }
4569 }
4570
4571 /* Look at entire parse tree for not-yet-loaded REDIRECT_HEREDOCs
4572  * and load them all. There should be exactly heredoc_cnt of them.
4573  */
4574 static int fetch_heredocs(int heredoc_cnt, struct parse_context *ctx, struct in_str *input)
4575 {
4576         struct pipe *pi = ctx->list_head;
4577
4578         while (pi && heredoc_cnt) {
4579                 int i;
4580                 struct command *cmd = pi->cmds;
4581
4582                 debug_printf_parse("fetch_heredocs: num_cmds:%d cmd argv0:'%s'\n",
4583                                 pi->num_cmds,
4584                                 cmd->argv ? cmd->argv[0] : "NONE");
4585                 for (i = 0; i < pi->num_cmds; i++) {
4586                         struct redir_struct *redir = cmd->redirects;
4587
4588                         debug_printf_parse("fetch_heredocs: %d cmd argv0:'%s'\n",
4589                                         i, cmd->argv ? cmd->argv[0] : "NONE");
4590                         while (redir) {
4591                                 if (redir->rd_type == REDIRECT_HEREDOC) {
4592                                         char *p;
4593
4594                                         redir->rd_type = REDIRECT_HEREDOC2;
4595                                         /* redir->dup is (ab)used to indicate <<- */
4596                                         p = fetch_till_str(&ctx->as_string, input,
4597                                                 redir->rd_filename, redir->rd_dup & HEREDOC_SKIPTABS);
4598                                         if (!p) {
4599                                                 syntax_error("unexpected EOF in here document");
4600                                                 return 1;
4601                                         }
4602                                         free(redir->rd_filename);
4603                                         redir->rd_filename = p;
4604                                         heredoc_cnt--;
4605                                 }
4606                                 redir = redir->next;
4607                         }
4608                         cmd++;
4609                 }
4610                 pi = pi->next;
4611         }
4612 #if 0
4613         /* Should be 0. If it isn't, it's a parse error */
4614         if (heredoc_cnt)
4615                 bb_error_msg_and_die("heredoc BUG 2");
4616 #endif
4617         return 0;
4618 }
4619
4620
4621 #if ENABLE_HUSH_TICK
4622 static FILE *generate_stream_from_string(const char *s)
4623 {
4624         FILE *pf;
4625         int pid, channel[2];
4626 #if !BB_MMU
4627         char **to_free;
4628 #endif
4629
4630         xpipe(channel);
4631         pid = BB_MMU ? fork() : vfork();
4632         if (pid < 0)
4633                 bb_perror_msg_and_die(BB_MMU ? "fork" : "vfork");
4634
4635         if (pid == 0) { /* child */
4636                 disable_restore_tty_pgrp_on_exit();
4637                 /* Process substitution is not considered to be usual
4638                  * 'command execution'.
4639                  * SUSv3 says ctrl-Z should be ignored, ctrl-C should not.
4640                  */
4641                 bb_signals(0
4642                         + (1 << SIGTSTP)
4643                         + (1 << SIGTTIN)
4644                         + (1 << SIGTTOU)
4645                         , SIG_IGN);
4646                 close(channel[0]); /* NB: close _first_, then move fd! */
4647                 xmove_fd(channel[1], 1);
4648                 /* Prevent it from trying to handle ctrl-z etc */
4649                 USE_HUSH_JOB(G.run_list_level = 1;)
4650 #if BB_MMU
4651                 reset_traps_to_defaults();
4652                 parse_and_run_string(s);
4653                 _exit(G.last_exitcode);
4654 #else
4655         /* We re-execute after vfork on NOMMU. This makes this script safe:
4656          * yes "0123456789012345678901234567890" | dd bs=32 count=64k >BIG
4657          * huge=`cat BIG` # was blocking here forever
4658          * echo OK
4659          */
4660                 re_execute_shell(&to_free,
4661                                 s,
4662                                 G.global_argv[0],
4663                                 G.global_argv + 1);
4664 #endif
4665         }
4666
4667         /* parent */
4668         enable_restore_tty_pgrp_on_exit();
4669 #if !BB_MMU
4670         free(to_free);
4671 #endif
4672         close(channel[1]);
4673         pf = fdopen(channel[0], "r");
4674         return pf;
4675 }
4676
4677 /* Return code is exit status of the process that is run. */
4678 static int process_command_subs(o_string *dest, const char *s)
4679 {
4680         FILE *pf;
4681         struct in_str pipe_str;
4682         int ch, eol_cnt;
4683
4684         pf = generate_stream_from_string(s);
4685         if (pf == NULL)
4686                 return 1;
4687         close_on_exec_on(fileno(pf));
4688
4689         /* Now send results of command back into original context */
4690         setup_file_in_str(&pipe_str, pf);
4691         eol_cnt = 0;
4692         while ((ch = i_getch(&pipe_str)) != EOF) {
4693                 if (ch == '\n') {
4694                         eol_cnt++;
4695                         continue;
4696                 }
4697                 while (eol_cnt) {
4698                         o_addchr(dest, '\n');
4699                         eol_cnt--;
4700                 }
4701                 o_addQchr(dest, ch);
4702         }
4703
4704         debug_printf("done reading from pipe, pclose()ing\n");
4705         /* Note: we got EOF, and we just close the read end of the pipe.
4706          * We do not wait for the `cmd` child to terminate. bash and ash do.
4707          * Try these:
4708          * echo `echo Hi; exec 1>&-; sleep 2` - bash waits 2 sec
4709          * `false`; echo $? - bash outputs "1"
4710          */
4711         fclose(pf);
4712         debug_printf("closed FILE from child. return 0\n");
4713         return 0;
4714 }
4715 #endif
4716
4717 static int parse_group(o_string *dest, struct parse_context *ctx,
4718         struct in_str *input, int ch)
4719 {
4720         /* dest contains characters seen prior to ( or {.
4721          * Typically it's empty, but for function defs,
4722          * it contains function name (without '()'). */
4723         struct pipe *pipe_list;
4724         int endch;
4725         struct command *command = ctx->command;
4726
4727         debug_printf_parse("parse_group entered\n");
4728 #if ENABLE_HUSH_FUNCTIONS
4729         if (ch == '(' && !dest->o_quoted) {
4730                 if (dest->length)
4731                         if (done_word(dest, ctx))
4732                                 return 1;
4733                 if (!command->argv)
4734                         goto skip; /* (... */
4735                 if (command->argv[1]) { /* word word ... (... */
4736                         syntax_error_unexpected_ch('(');
4737                         return 1;
4738                 }
4739                 /* it is "word(..." or "word (..." */
4740                 do
4741                         ch = i_getch(input);
4742                 while (ch == ' ' || ch == '\t');
4743                 if (ch != ')') {
4744                         syntax_error_unexpected_ch(ch);
4745                         return 1;
4746                 }
4747                 nommu_addchr(&ctx->as_string, ch);
4748                 do
4749                         ch = i_getch(input);
4750                 while (ch == ' ' || ch == '\t' || ch == '\n');
4751                 if (ch != '{') {
4752                         syntax_error_unexpected_ch(ch);
4753                         return 1;
4754                 }
4755                 nommu_addchr(&ctx->as_string, ch);
4756                 command->grp_type = GRP_FUNCTION;
4757                 goto skip;
4758         }
4759 #endif
4760         if (command->argv /* word [word]{... */
4761          || dest->length /* word{... */
4762          || dest->o_quoted /* ""{... */
4763         ) {
4764                 syntax_error(NULL);
4765                 debug_printf_parse("parse_group return 1: "
4766                         "syntax error, groups and arglists don't mix\n");
4767                 return 1;
4768         }
4769
4770 #if ENABLE_HUSH_FUNCTIONS
4771  skip:
4772 #endif
4773         endch = '}';
4774         if (ch == '(') {
4775                 endch = ')';
4776                 command->grp_type = GRP_SUBSHELL;
4777         }
4778
4779         {
4780 #if !BB_MMU
4781                 char *as_string = NULL;
4782 #endif
4783                 pipe_list = parse_stream(&as_string, input, endch);
4784 #if !BB_MMU
4785                 if (as_string)
4786                         o_addstr(&ctx->as_string, as_string);
4787 #endif
4788                 /* empty ()/{} or parse error? */
4789                 if (!pipe_list || pipe_list == ERR_PTR) {
4790                         /* parse_stream already emitted error msg */
4791 #if !BB_MMU
4792                         free(as_string);
4793 #endif
4794                         debug_printf_parse("parse_group return 1: "
4795                                 "parse_stream returned %p\n", pipe_list);
4796                         return 1;
4797                 }
4798                 command->group = pipe_list;
4799 #if !BB_MMU
4800                 as_string[strlen(as_string) - 1] = '\0'; /* plink ')' or '}' */
4801                 command->group_as_string = as_string;
4802                 debug_printf_parse("end of group, remembering as:'%s'\n",
4803                                 command->group_as_string);
4804 #endif
4805         }
4806         debug_printf_parse("parse_group return 0\n");
4807         return 0;
4808         /* command remains "open", available for possible redirects */
4809 }
4810
4811 #if ENABLE_HUSH_TICK || ENABLE_SH_MATH_SUPPORT
4812 /* Subroutines for copying $(...) and `...` things */
4813 static void add_till_backquote(o_string *dest, struct in_str *input);
4814 /* '...' */
4815 static void add_till_single_quote(o_string *dest, struct in_str *input)
4816 {
4817         while (1) {
4818                 int ch = i_getch(input);
4819                 if (ch == EOF) {
4820                         syntax_error_unterm_ch('\'');
4821                         /*xfunc_die(); - redundant */
4822                 }
4823                 if (ch == '\'')
4824                         return;
4825                 o_addchr(dest, ch);
4826         }
4827 }
4828 /* "...\"...`..`...." - do we need to handle "...$(..)..." too? */
4829 static void add_till_double_quote(o_string *dest, struct in_str *input)
4830 {
4831         while (1) {
4832                 int ch = i_getch(input);
4833                 if (ch == EOF) {
4834                         syntax_error_unterm_ch('"');
4835                         /*xfunc_die(); - redundant */
4836                 }
4837                 if (ch == '"')
4838                         return;
4839                 if (ch == '\\') {  /* \x. Copy both chars. */
4840                         o_addchr(dest, ch);
4841                         ch = i_getch(input);
4842                 }
4843                 o_addchr(dest, ch);
4844                 if (ch == '`') {
4845                         add_till_backquote(dest, input);
4846                         o_addchr(dest, ch);
4847                         continue;
4848                 }
4849                 //if (ch == '$') ...
4850         }
4851 }
4852 /* Process `cmd` - copy contents until "`" is seen. Complicated by
4853  * \` quoting.
4854  * "Within the backquoted style of command substitution, backslash
4855  * shall retain its literal meaning, except when followed by: '$', '`', or '\'.
4856  * The search for the matching backquote shall be satisfied by the first
4857  * backquote found without a preceding backslash; during this search,
4858  * if a non-escaped backquote is encountered within a shell comment,
4859  * a here-document, an embedded command substitution of the $(command)
4860  * form, or a quoted string, undefined results occur. A single-quoted
4861  * or double-quoted string that begins, but does not end, within the
4862  * "`...`" sequence produces undefined results."
4863  * Example                               Output
4864  * echo `echo '\'TEST\`echo ZZ\`BEST`    \TESTZZBEST
4865  */
4866 static void add_till_backquote(o_string *dest, struct in_str *input)
4867 {
4868         while (1) {
4869                 int ch = i_getch(input);
4870                 if (ch == EOF) {
4871                         syntax_error_unterm_ch('`');
4872                         /*xfunc_die(); - redundant */
4873                 }
4874                 if (ch == '`')
4875                         return;
4876                 if (ch == '\\') {
4877                         /* \x. Copy both chars unless it is \` */
4878                         int ch2 = i_getch(input);
4879                         if (ch2 == EOF) {
4880                                 syntax_error_unterm_ch('`');
4881                                 /*xfunc_die(); - redundant */
4882                         }
4883                         if (ch2 != '`' && ch2 != '$' && ch2 != '\\')
4884                                 o_addchr(dest, ch);
4885                         ch = ch2;
4886                 }
4887                 o_addchr(dest, ch);
4888         }
4889 }
4890 /* Process $(cmd) - copy contents until ")" is seen. Complicated by
4891  * quoting and nested ()s.
4892  * "With the $(command) style of command substitution, all characters
4893  * following the open parenthesis to the matching closing parenthesis
4894  * constitute the command. Any valid shell script can be used for command,
4895  * except a script consisting solely of redirections which produces
4896  * unspecified results."
4897  * Example                              Output
4898  * echo $(echo '(TEST)' BEST)           (TEST) BEST
4899  * echo $(echo 'TEST)' BEST)            TEST) BEST
4900  * echo $(echo \(\(TEST\) BEST)         ((TEST) BEST
4901  */
4902 static void add_till_closing_paren(o_string *dest, struct in_str *input, bool dbl)
4903 {
4904         int count = 0;
4905         while (1) {
4906                 int ch = i_getch(input);
4907                 if (ch == EOF) {
4908                         syntax_error_unterm_ch(')');
4909                         /*xfunc_die(); - redundant */
4910                 }
4911                 if (ch == '(')
4912                         count++;
4913                 if (ch == ')') {
4914                         if (--count < 0) {
4915                                 if (!dbl)
4916                                         break;
4917                                 if (i_peek(input) == ')') {
4918                                         i_getch(input);
4919                                         break;
4920                                 }
4921                         }
4922                 }
4923                 o_addchr(dest, ch);
4924                 if (ch == '\'') {
4925                         add_till_single_quote(dest, input);
4926                         o_addchr(dest, ch);
4927                         continue;
4928                 }
4929                 if (ch == '"') {
4930                         add_till_double_quote(dest, input);
4931                         o_addchr(dest, ch);
4932                         continue;
4933                 }
4934                 if (ch == '\\') {
4935                         /* \x. Copy verbatim. Important for  \(, \) */
4936                         ch = i_getch(input);
4937                         if (ch == EOF) {
4938                                 syntax_error_unterm_ch(')');
4939                                 /*xfunc_die(); - redundant */
4940                         }
4941                         o_addchr(dest, ch);
4942                         continue;
4943                 }
4944         }
4945 }
4946 #endif /* ENABLE_HUSH_TICK || ENABLE_SH_MATH_SUPPORT */
4947
4948 /* Return code: 0 for OK, 1 for syntax error */
4949 #if BB_MMU
4950 #define handle_dollar(as_string, dest, input) \
4951         handle_dollar(dest, input)
4952 #endif
4953 static int handle_dollar(o_string *as_string,
4954                 o_string *dest,
4955                 struct in_str *input)
4956 {
4957         int expansion;
4958         int ch = i_peek(input);  /* first character after the $ */
4959         unsigned char quote_mask = dest->o_escape ? 0x80 : 0;
4960
4961         debug_printf_parse("handle_dollar entered: ch='%c'\n", ch);
4962         if (isalpha(ch)) {
4963                 ch = i_getch(input);
4964                 nommu_addchr(as_string, ch);
4965  make_var:
4966                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
4967                 while (1) {
4968                         debug_printf_parse(": '%c'\n", ch);
4969                         o_addchr(dest, ch | quote_mask);
4970                         quote_mask = 0;
4971                         ch = i_peek(input);
4972                         if (!isalnum(ch) && ch != '_')
4973                                 break;
4974                         ch = i_getch(input);
4975                         nommu_addchr(as_string, ch);
4976                 }
4977                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
4978         } else if (isdigit(ch)) {
4979  make_one_char_var:
4980                 ch = i_getch(input);
4981                 nommu_addchr(as_string, ch);
4982                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
4983                 debug_printf_parse(": '%c'\n", ch);
4984                 o_addchr(dest, ch | quote_mask);
4985                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
4986         } else switch (ch) {
4987         case '$': /* pid */
4988         case '!': /* last bg pid */
4989         case '?': /* last exit code */
4990         case '#': /* number of args */
4991         case '*': /* args */
4992         case '@': /* args */
4993                 goto make_one_char_var;
4994         case '{': {
4995                 bool first_char, all_digits;
4996
4997                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
4998                 ch = i_getch(input);
4999                 nommu_addchr(as_string, ch);
5000                 /* XXX maybe someone will try to escape the '}' */
5001                 expansion = 0;
5002                 first_char = true;
5003                 all_digits = false;
5004                 while (1) {
5005                         ch = i_getch(input);
5006                         nommu_addchr(as_string, ch);
5007                         if (ch == '}')
5008                                 break;
5009
5010                         if (first_char) {
5011                                 if (ch == '#')
5012                                         /* ${#var}: length of var contents */
5013                                         goto char_ok;
5014                                 else if (isdigit(ch)) {
5015                                         all_digits = true;
5016                                         goto char_ok;
5017                                 }
5018                         }
5019
5020                         if (expansion < 2
5021                          && (  (all_digits && !isdigit(ch))
5022                             || (!all_digits && !isalnum(ch) && ch != '_')
5023                             )
5024                         ) {
5025                                 /* handle parameter expansions
5026                                  * http://www.opengroup.org/onlinepubs/009695399/utilities/xcu_chap02.html#tag_02_06_02
5027                                  */
5028                                 if (first_char)
5029                                         goto case_default;
5030                                 switch (ch) {
5031                                 case ':': /* null modifier */
5032                                         if (expansion == 0) {
5033                                                 debug_printf_parse(": null modifier\n");
5034                                                 ++expansion;
5035                                                 break;
5036                                         }
5037                                         goto case_default;
5038                                 case '#': /* remove prefix */
5039                                 case '%': /* remove suffix */
5040                                         if (expansion == 0) {
5041                                                 debug_printf_parse(": remove suffix/prefix\n");
5042                                                 expansion = 2;
5043                                                 break;
5044                                         }
5045                                         goto case_default;
5046                                 case '-': /* default value */
5047                                 case '=': /* assign default */
5048                                 case '+': /* alternative */
5049                                 case '?': /* error indicate */
5050                                         debug_printf_parse(": parameter expansion\n");
5051                                         expansion = 2;
5052                                         break;
5053                                 default:
5054                                 case_default:
5055                                         syntax_error_unterm_str("${name}");
5056                                         debug_printf_parse("handle_dollar return 1: unterminated ${name}\n");
5057                                         return 1;
5058                                 }
5059                         }
5060  char_ok:
5061                         debug_printf_parse(": '%c'\n", ch);
5062                         o_addchr(dest, ch | quote_mask);
5063                         quote_mask = 0;
5064                         first_char = false;
5065                 }
5066                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
5067                 break;
5068         }
5069 #if (ENABLE_SH_MATH_SUPPORT || ENABLE_HUSH_TICK)
5070         case '(': {
5071 # if !BB_MMU
5072                 int pos;
5073 # endif
5074                 ch = i_getch(input);
5075                 nommu_addchr(as_string, ch);
5076 # if ENABLE_SH_MATH_SUPPORT
5077                 if (i_peek(input) == '(') {
5078                         ch = i_getch(input);
5079                         nommu_addchr(as_string, ch);
5080                         o_addchr(dest, SPECIAL_VAR_SYMBOL);
5081                         o_addchr(dest, /*quote_mask |*/ '+');
5082 #  if !BB_MMU
5083                         pos = dest->length;
5084 #  endif
5085                         add_till_closing_paren(dest, input, true);
5086 #  if !BB_MMU
5087                         if (as_string) {
5088                                 o_addstr(as_string, dest->data + pos);
5089                                 o_addchr(as_string, ')');
5090                                 o_addchr(as_string, ')');
5091                         }
5092 #  endif
5093                         o_addchr(dest, SPECIAL_VAR_SYMBOL);
5094                         break;
5095                 }
5096 # endif
5097 # if ENABLE_HUSH_TICK
5098                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
5099                 o_addchr(dest, quote_mask | '`');
5100 #  if !BB_MMU
5101                 pos = dest->length;
5102 #  endif
5103                 add_till_closing_paren(dest, input, false);
5104 #  if !BB_MMU
5105                 if (as_string) {
5106                         o_addstr(as_string, dest->data + pos);
5107                         o_addchr(as_string, '`');
5108                 }
5109 #  endif
5110                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
5111 # endif
5112                 break;
5113         }
5114 #endif
5115         case '_':
5116                 ch = i_getch(input);
5117                 nommu_addchr(as_string, ch);
5118                 ch = i_peek(input);
5119                 if (isalnum(ch)) { /* it's $_name or $_123 */
5120                         ch = '_';
5121                         goto make_var;
5122                 }
5123                 /* else: it's $_ */
5124         /* TODO: */
5125         /* $_ Shell or shell script name; or last cmd name */
5126         /* $- Option flags set by set builtin or shell options (-i etc) */
5127         default:
5128                 o_addQchr(dest, '$');
5129         }
5130         debug_printf_parse("handle_dollar return 0\n");
5131         return 0;
5132 }
5133
5134 #if BB_MMU
5135 #define parse_stream_dquoted(as_string, dest, input, dquote_end) \
5136         parse_stream_dquoted(dest, input, dquote_end)
5137 #endif
5138 static int parse_stream_dquoted(o_string *as_string,
5139                 o_string *dest,
5140                 struct in_str *input,
5141                 int dquote_end)
5142 {
5143         int ch;
5144         int next;
5145
5146  again:
5147         ch = i_getch(input);
5148         if (ch != EOF)
5149                 nommu_addchr(as_string, ch);
5150         if (ch == dquote_end) { /* may be only '"' or EOF */
5151                 if (dest->o_assignment == NOT_ASSIGNMENT)
5152                         dest->o_escape ^= 1;
5153                 debug_printf_parse("parse_stream_dquoted return 0\n");
5154                 return 0;
5155         }
5156         /* note: can't move it above ch == dquote_end check! */
5157         if (ch == EOF) {
5158                 syntax_error_unterm_ch('"');
5159                 /*xfunc_die(); - redundant */
5160         }
5161         next = '\0';
5162         if (ch != '\n') {
5163                 next = i_peek(input);
5164         }
5165         debug_printf_parse(": ch=%c (%d) escape=%d\n",
5166                                         ch, ch, dest->o_escape);
5167         if (ch == '\\') {
5168                 if (next == EOF) {
5169                         syntax_error("\\<eof>");
5170                         xfunc_die();
5171                 }
5172                 /* bash:
5173                  * "The backslash retains its special meaning [in "..."]
5174                  * only when followed by one of the following characters:
5175                  * $, `, ", \, or <newline>.  A double quote may be quoted
5176                  * within double quotes by preceding it with a backslash.
5177                  */
5178                 if (strchr("$`\"\\", next) != NULL) {
5179                         o_addqchr(dest, i_getch(input));
5180                 } else {
5181                         o_addqchr(dest, '\\');
5182                 }
5183                 goto again;
5184         }
5185         if (ch == '$') {
5186                 if (handle_dollar(as_string, dest, input) != 0) {
5187                         debug_printf_parse("parse_stream_dquoted return 1: "
5188                                         "handle_dollar returned non-0\n");
5189                         return 1;
5190                 }
5191                 goto again;
5192         }
5193 #if ENABLE_HUSH_TICK
5194         if (ch == '`') {
5195                 //int pos = dest->length;
5196                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
5197                 o_addchr(dest, 0x80 | '`');
5198                 add_till_backquote(dest, input);
5199                 o_addchr(dest, SPECIAL_VAR_SYMBOL);
5200                 //debug_printf_subst("SUBST RES3 '%s'\n", dest->data + pos);
5201                 goto again;
5202         }
5203 #endif
5204         o_addQchr(dest, ch);
5205         if (ch == '='
5206          && (dest->o_assignment == MAYBE_ASSIGNMENT
5207             || dest->o_assignment == WORD_IS_KEYWORD)
5208          && is_well_formed_var_name(dest->data, '=')
5209         ) {
5210                 dest->o_assignment = DEFINITELY_ASSIGNMENT;
5211         }
5212         goto again;
5213 }
5214
5215 /*
5216  * Scan input until EOF or end_trigger char.
5217  * Return a list of pipes to execute, or NULL on EOF
5218  * or if end_trigger character is met.
5219  * On syntax error, exit is shell is not interactive,
5220  * reset parsing machinery and start parsing anew,
5221  * or return ERR_PTR.
5222  */
5223 static struct pipe *parse_stream(char **pstring,
5224                 struct in_str *input,
5225                 int end_trigger)
5226 {
5227         struct parse_context ctx;
5228         o_string dest = NULL_O_STRING;
5229         int is_in_dquote;
5230         int heredoc_cnt;
5231
5232         /* Double-quote state is handled in the state variable is_in_dquote.
5233          * A single-quote triggers a bypass of the main loop until its mate is
5234          * found.  When recursing, quote state is passed in via dest->o_escape.
5235          */
5236         debug_printf_parse("parse_stream entered, end_trigger='%c'\n",
5237                         end_trigger ? : 'X');
5238         debug_enter();
5239
5240         G.ifs = get_local_var_value("IFS");
5241         if (G.ifs == NULL)
5242                 G.ifs = " \t\n";
5243
5244  reset:
5245 #if ENABLE_HUSH_INTERACTIVE
5246         input->promptmode = 0; /* PS1 */
5247 #endif
5248         /* dest.o_assignment = MAYBE_ASSIGNMENT; - already is */
5249         initialize_context(&ctx);
5250         is_in_dquote = 0;
5251         heredoc_cnt = 0;
5252         while (1) {
5253                 const char *is_ifs;
5254                 const char *is_special;
5255                 int ch;
5256                 int next;
5257                 int redir_fd;
5258                 redir_type redir_style;
5259
5260                 if (is_in_dquote) {
5261                         /* dest.o_quoted = 1; - already is (see below) */
5262                         if (parse_stream_dquoted(&ctx.as_string, &dest, input, '"')) {
5263                                 goto parse_error;
5264                         }
5265                         /* We reached closing '"' */
5266                         is_in_dquote = 0;
5267                 }
5268                 ch = i_getch(input);
5269                 debug_printf_parse(": ch=%c (%d) escape=%d\n",
5270                                                 ch, ch, dest.o_escape);
5271                 if (ch == EOF) {
5272                         struct pipe *pi;
5273
5274                         if (heredoc_cnt) {
5275                                 syntax_error_unterm_str("here document");
5276                                 xfunc_die();
5277                         }
5278                         if (done_word(&dest, &ctx)) {
5279                                 xfunc_die();
5280                         }
5281                         o_free(&dest);
5282                         done_pipe(&ctx, PIPE_SEQ);
5283                         pi = ctx.list_head;
5284                         /* If we got nothing... */
5285                         /* (this makes bare "&" cmd a no-op.
5286                          * bash says: "syntax error near unexpected token '&'") */
5287                         if (pi->num_cmds == 0
5288                             IF_HAS_KEYWORDS( && pi->res_word == RES_NONE)
5289                         ) {
5290                                 free_pipe_list(pi);
5291                                 pi = NULL;
5292                         }
5293 #if !BB_MMU
5294                         debug_printf_parse("as_string '%s'\n", ctx.as_string.data);
5295                         if (pstring)
5296                                 *pstring = ctx.as_string.data;
5297                         else
5298                                 o_free_unsafe(&ctx.as_string);
5299 #endif
5300                         debug_leave();
5301                         debug_printf_parse("parse_stream return %p\n", pi);
5302                         return pi;
5303                 }
5304                 nommu_addchr(&ctx.as_string, ch);
5305                 is_ifs = strchr(G.ifs, ch);
5306                 is_special = strchr("<>;&|(){}#'" /* special outside of "str" */
5307                                 "\\$\"" USE_HUSH_TICK("`") /* always special */
5308                                 , ch);
5309
5310                 if (!is_special && !is_ifs) { /* ordinary char */
5311                         o_addQchr(&dest, ch);
5312                         if ((dest.o_assignment == MAYBE_ASSIGNMENT
5313                             || dest.o_assignment == WORD_IS_KEYWORD)
5314                          && ch == '='
5315                          && is_well_formed_var_name(dest.data, '=')
5316                         ) {
5317                                 dest.o_assignment = DEFINITELY_ASSIGNMENT;
5318                         }
5319                         continue;
5320                 }
5321
5322                 if (is_ifs) {
5323                         if (done_word(&dest, &ctx)) {
5324                                 goto parse_error;
5325                         }
5326                         if (ch == '\n') {
5327 #if ENABLE_HUSH_CASE
5328                                 /* "case ... in <newline> word) ..." -
5329                                  * newlines are ignored (but ';' wouldn't be) */
5330                                 if (ctx.command->argv == NULL
5331                                  && ctx.ctx_res_w == RES_MATCH
5332                                 ) {
5333                                         continue;
5334                                 }
5335 #endif
5336                                 /* Treat newline as a command separator. */
5337                                 done_pipe(&ctx, PIPE_SEQ);
5338                                 debug_printf_parse("heredoc_cnt:%d\n", heredoc_cnt);
5339                                 if (heredoc_cnt) {
5340                                         if (fetch_heredocs(heredoc_cnt, &ctx, input)) {
5341                                                 goto parse_error;
5342                                         }
5343                                         heredoc_cnt = 0;
5344                                 }
5345                                 dest.o_assignment = MAYBE_ASSIGNMENT;
5346                                 ch = ';';
5347                                 /* note: if (is_ifs) continue;
5348                                  * will still trigger for us */
5349                         }
5350                 }
5351                 if (end_trigger && end_trigger == ch
5352                  && (heredoc_cnt == 0 || end_trigger != ';')
5353                 ) {
5354 //TODO: disallow "{ cmd }" without semicolon
5355                         if (heredoc_cnt) {
5356                                 /* This is technically valid:
5357                                  * { cat <<HERE; }; echo Ok
5358                                  * heredoc
5359                                  * heredoc
5360                                  * heredoc
5361                                  * HERE
5362                                  * but we don't support this.
5363                                  * We require heredoc to be in enclosing {}/(),
5364                                  * if any.
5365                                  */
5366                                 syntax_error_unterm_str("here document");
5367                                 goto parse_error;
5368                         }
5369                         if (done_word(&dest, &ctx)) {
5370                                 goto parse_error;
5371                         }
5372                         done_pipe(&ctx, PIPE_SEQ);
5373                         dest.o_assignment = MAYBE_ASSIGNMENT;
5374                         /* Do we sit outside of any if's, loops or case's? */
5375                         if (!HAS_KEYWORDS
5376                          IF_HAS_KEYWORDS(|| (ctx.ctx_res_w == RES_NONE && ctx.old_flag == 0))
5377                         ) {
5378                                 o_free(&dest);
5379 #if !BB_MMU
5380                                 debug_printf_parse("as_string '%s'\n", ctx.as_string.data);
5381                                 if (pstring)
5382                                         *pstring = ctx.as_string.data;
5383                                 else
5384                                         o_free_unsafe(&ctx.as_string);
5385 #endif
5386                                 debug_leave();
5387                                 debug_printf_parse("parse_stream return %p: "
5388                                                 "end_trigger char found\n",
5389                                                 ctx.list_head);
5390                                 return ctx.list_head;
5391                         }
5392                 }
5393                 if (is_ifs)
5394                         continue;
5395
5396                 next = '\0';
5397                 if (ch != '\n') {
5398                         next = i_peek(input);
5399                 }
5400
5401                 /* Catch <, > before deciding whether this word is
5402                  * an assignment. a=1 2>z b=2: b=2 is still assignment */
5403                 switch (ch) {
5404                 case '>':
5405                         redir_fd = redirect_opt_num(&dest);
5406                         if (done_word(&dest, &ctx)) {
5407                                 goto parse_error;
5408                         }
5409                         redir_style = REDIRECT_OVERWRITE;
5410                         if (next == '>') {
5411                                 redir_style = REDIRECT_APPEND;
5412                                 ch = i_getch(input);
5413                                 nommu_addchr(&ctx.as_string, ch);
5414                         }
5415 #if 0
5416                         else if (next == '(') {
5417                                 syntax_error(">(process) not supported");
5418                                 goto parse_error;
5419                         }
5420 #endif
5421                         if (parse_redirect(&ctx, redir_fd, redir_style, input))
5422                                 goto parse_error;
5423                         continue; /* back to top of while (1) */
5424                 case '<':
5425                         redir_fd = redirect_opt_num(&dest);
5426                         if (done_word(&dest, &ctx)) {
5427                                 goto parse_error;
5428                         }
5429                         redir_style = REDIRECT_INPUT;
5430                         if (next == '<') {
5431                                 redir_style = REDIRECT_HEREDOC;
5432                                 heredoc_cnt++;
5433                                 debug_printf_parse("++heredoc_cnt=%d\n", heredoc_cnt);
5434                                 ch = i_getch(input);
5435                                 nommu_addchr(&ctx.as_string, ch);
5436                         } else if (next == '>') {
5437                                 redir_style = REDIRECT_IO;
5438                                 ch = i_getch(input);
5439                                 nommu_addchr(&ctx.as_string, ch);
5440                         }
5441 #if 0
5442                         else if (next == '(') {
5443                                 syntax_error("<(process) not supported");
5444                                 goto parse_error;
5445                         }
5446 #endif
5447                         if (parse_redirect(&ctx, redir_fd, redir_style, input))
5448                                 goto parse_error;
5449                         continue; /* back to top of while (1) */
5450                 }
5451
5452                 if (dest.o_assignment == MAYBE_ASSIGNMENT
5453                  /* check that we are not in word in "a=1 2>word b=1": */
5454                  && !ctx.pending_redirect
5455                 ) {
5456                         /* ch is a special char and thus this word
5457                          * cannot be an assignment */
5458                         dest.o_assignment = NOT_ASSIGNMENT;
5459                 }
5460
5461                 switch (ch) {
5462                 case '#':
5463                         if (dest.length == 0) {
5464                                 while (1) {
5465                                         ch = i_peek(input);
5466                                         if (ch == EOF || ch == '\n')
5467                                                 break;
5468                                         i_getch(input);
5469                                         /* note: we do not add it to &ctx.as_string */
5470                                 }
5471                                 nommu_addchr(&ctx.as_string, '\n');
5472                         } else {
5473                                 o_addQchr(&dest, ch);
5474                         }
5475                         break;
5476                 case '\\':
5477                         if (next == EOF) {
5478                                 syntax_error("\\<eof>");
5479                                 xfunc_die();
5480                         }
5481                         o_addchr(&dest, '\\');
5482                         ch = i_getch(input);
5483                         nommu_addchr(&ctx.as_string, ch);
5484                         o_addchr(&dest, ch);
5485                         /* Example: echo Hello \2>file
5486                          * we need to know that word 2 is quoted */
5487                         dest.o_quoted = 1;
5488                         break;
5489                 case '$':
5490                         if (handle_dollar(&ctx.as_string, &dest, input) != 0) {
5491                                 debug_printf_parse("parse_stream parse error: "
5492                                         "handle_dollar returned non-0\n");
5493                                 goto parse_error;
5494                         }
5495                         break;
5496                 case '\'':
5497                         dest.o_quoted = 1;
5498                         while (1) {
5499                                 ch = i_getch(input);
5500                                 if (ch == EOF) {
5501                                         syntax_error_unterm_ch('\'');
5502                                         /*xfunc_die(); - redundant */
5503                                 }
5504                                 nommu_addchr(&ctx.as_string, ch);
5505                                 if (ch == '\'')
5506                                         break;
5507                                 if (dest.o_assignment == NOT_ASSIGNMENT)
5508                                         o_addqchr(&dest, ch);
5509                                 else
5510                                         o_addchr(&dest, ch);
5511                         }
5512                         break;
5513                 case '"':
5514                         dest.o_quoted = 1;
5515                         is_in_dquote ^= 1; /* invert */
5516                         if (dest.o_assignment == NOT_ASSIGNMENT)
5517                                 dest.o_escape ^= 1;
5518                         break;
5519 #if ENABLE_HUSH_TICK
5520                 case '`': {
5521 #if !BB_MMU
5522                         int pos;
5523 #endif
5524                         o_addchr(&dest, SPECIAL_VAR_SYMBOL);
5525                         o_addchr(&dest, '`');
5526 #if !BB_MMU
5527                         pos = dest.length;
5528 #endif
5529                         add_till_backquote(&dest, input);
5530 #if !BB_MMU
5531                         o_addstr(&ctx.as_string, dest.data + pos);
5532                         o_addchr(&ctx.as_string, '`');
5533 #endif
5534                         o_addchr(&dest, SPECIAL_VAR_SYMBOL);
5535                         //debug_printf_subst("SUBST RES3 '%s'\n", dest.data + pos);
5536                         break;
5537                 }
5538 #endif
5539                 case ';':
5540 #if ENABLE_HUSH_CASE
5541  case_semi:
5542 #endif
5543                         if (done_word(&dest, &ctx)) {
5544                                 goto parse_error;
5545                         }
5546                         done_pipe(&ctx, PIPE_SEQ);
5547 #if ENABLE_HUSH_CASE
5548                         /* Eat multiple semicolons, detect
5549                          * whether it means something special */
5550                         while (1) {
5551                                 ch = i_peek(input);
5552                                 if (ch != ';')
5553                                         break;
5554                                 ch = i_getch(input);
5555                                 nommu_addchr(&ctx.as_string, ch);
5556                                 if (ctx.ctx_res_w == RES_CASEI) {
5557                                         ctx.ctx_dsemicolon = 1;
5558                                         ctx.ctx_res_w = RES_MATCH;
5559                                         break;
5560                                 }
5561                         }
5562 #endif
5563  new_cmd:
5564                         /* We just finished a cmd. New one may start
5565                          * with an assignment */
5566                         dest.o_assignment = MAYBE_ASSIGNMENT;
5567                         break;
5568                 case '&':
5569                         if (done_word(&dest, &ctx)) {
5570                                 goto parse_error;
5571                         }
5572                         if (next == '&') {
5573                                 ch = i_getch(input);
5574                                 nommu_addchr(&ctx.as_string, ch);
5575                                 done_pipe(&ctx, PIPE_AND);
5576                         } else {
5577                                 done_pipe(&ctx, PIPE_BG);
5578                         }
5579                         goto new_cmd;
5580                 case '|':
5581                         if (done_word(&dest, &ctx)) {
5582                                 goto parse_error;
5583                         }
5584 #if ENABLE_HUSH_CASE
5585                         if (ctx.ctx_res_w == RES_MATCH)
5586                                 break; /* we are in case's "word | word)" */
5587 #endif
5588                         if (next == '|') { /* || */
5589                                 ch = i_getch(input);
5590                                 nommu_addchr(&ctx.as_string, ch);
5591                                 done_pipe(&ctx, PIPE_OR);
5592                         } else {
5593                                 /* we could pick up a file descriptor choice here
5594                                  * with redirect_opt_num(), but bash doesn't do it.
5595                                  * "echo foo 2| cat" yields "foo 2". */
5596                                 done_command(&ctx);
5597                         }
5598                         goto new_cmd;
5599                 case '(':
5600 #if ENABLE_HUSH_CASE
5601                         /* "case... in [(]word)..." - skip '(' */
5602                         if (ctx.ctx_res_w == RES_MATCH
5603                          && ctx.command->argv == NULL /* not (word|(... */
5604                          && dest.length == 0 /* not word(... */
5605                          && dest.o_quoted == 0 /* not ""(... */
5606                         ) {
5607                                 continue;
5608                         }
5609 #endif
5610                 case '{':
5611                         if (parse_group(&dest, &ctx, input, ch) != 0) {
5612                                 goto parse_error;
5613                         }
5614                         goto new_cmd;
5615                 case ')':
5616 #if ENABLE_HUSH_CASE
5617                         if (ctx.ctx_res_w == RES_MATCH)
5618                                 goto case_semi;
5619 #endif
5620                 case '}':
5621                         /* proper use of this character is caught by end_trigger:
5622                          * if we see {, we call parse_group(..., end_trigger='}')
5623                          * and it will match } earlier (not here). */
5624                         syntax_error_unexpected_ch(ch);
5625                         goto parse_error;
5626                 default:
5627                         if (HUSH_DEBUG)
5628                                 bb_error_msg_and_die("BUG: unexpected %c\n", ch);
5629                 }
5630         } /* while (1) */
5631
5632  parse_error:
5633         {
5634                 struct parse_context *pctx;
5635                 IF_HAS_KEYWORDS(struct parse_context *p2;)
5636
5637                 /* Clean up allocated tree.
5638                  * Samples for finding leaks on syntax error recovery path.
5639                  * Run them from interactive shell, watch pmap `pidof hush`.
5640                  * while if false; then false; fi do break; done
5641                  * (bash accepts it)
5642                  * while if false; then false; fi; do break; fi
5643                  * Samples to catch leaks at execution:
5644                  * while if (true | {true;}); then echo ok; fi; do break; done
5645                  * while if (true | {true;}); then echo ok; fi; do (if echo ok; break; then :; fi) | cat; break; done
5646                  */
5647                 pctx = &ctx;
5648                 do {
5649                         /* Update pipe/command counts,
5650                          * otherwise freeing may miss some */
5651                         done_pipe(pctx, PIPE_SEQ);
5652                         debug_printf_clean("freeing list %p from ctx %p\n",
5653                                         pctx->list_head, pctx);
5654                         debug_print_tree(pctx->list_head, 0);
5655                         free_pipe_list(pctx->list_head);
5656                         debug_printf_clean("freed list %p\n", pctx->list_head);
5657 #if !BB_MMU
5658                         o_free_unsafe(&pctx->as_string);
5659 #endif
5660                         IF_HAS_KEYWORDS(p2 = pctx->stack;)
5661                         if (pctx != &ctx) {
5662                                 free(pctx);
5663                         }
5664                         IF_HAS_KEYWORDS(pctx = p2;)
5665                 } while (HAS_KEYWORDS && pctx);
5666                 /* Free text, clear all dest fields */
5667                 o_free(&dest);
5668                 /* If we are not in top-level parse, we return,
5669                  * our caller will propagate error.
5670                  */
5671                 if (end_trigger != ';') {
5672 #if !BB_MMU
5673                         if (pstring)
5674                                 *pstring = NULL;
5675 #endif
5676                         debug_leave();
5677                         return ERR_PTR;
5678                 }
5679                 /* Discard cached input, force prompt */
5680                 input->p = NULL;
5681                 USE_HUSH_INTERACTIVE(input->promptme = 1;)
5682                 goto reset;
5683         }
5684 }
5685
5686 /* Executing from string: eval, sh -c '...'
5687  *          or from file: /etc/profile, . file, sh <script>, sh (intereactive)
5688  * end_trigger controls how often we stop parsing
5689  * NUL: parse all, execute, return
5690  * ';': parse till ';' or newline, execute, repeat till EOF
5691  */
5692 static void parse_and_run_stream(struct in_str *inp, int end_trigger)
5693 {
5694         while (1) {
5695                 struct pipe *pipe_list;
5696
5697                 pipe_list = parse_stream(NULL, inp, end_trigger);
5698                 if (!pipe_list) /* EOF */
5699                         break;
5700                 debug_print_tree(pipe_list, 0);
5701                 debug_printf_exec("parse_and_run_stream: run_and_free_list\n");
5702                 run_and_free_list(pipe_list);
5703         }
5704 }
5705
5706 static void parse_and_run_string(const char *s)
5707 {
5708         struct in_str input;
5709         setup_string_in_str(&input, s);
5710         parse_and_run_stream(&input, '\0');
5711 }
5712
5713 static void parse_and_run_file(FILE *f)
5714 {
5715         struct in_str input;
5716         setup_file_in_str(&input, f);
5717         parse_and_run_stream(&input, ';');
5718 }
5719
5720 /* Called a few times only (or even once if "sh -c") */
5721 static void block_signals(int second_time)
5722 {
5723         unsigned sig;
5724         unsigned mask;
5725
5726         mask = (1 << SIGQUIT);
5727         if (G_interactive_fd) {
5728                 mask = 0
5729                         | (1 << SIGQUIT)
5730                         | (1 << SIGTERM)
5731 //TODO                  | (1 << SIGHUP)
5732 #if ENABLE_HUSH_JOB
5733                         | (1 << SIGTTIN) | (1 << SIGTTOU) | (1 << SIGTSTP)
5734 #endif
5735                         | (1 << SIGINT)
5736                 ;
5737         }
5738         G.non_DFL_mask = mask;
5739
5740         if (!second_time)
5741                 sigprocmask(SIG_SETMASK, NULL, &G.blocked_set);
5742         sig = 0;
5743         while (mask) {
5744                 if (mask & 1)
5745                         sigaddset(&G.blocked_set, sig);
5746                 mask >>= 1;
5747                 sig++;
5748         }
5749         sigdelset(&G.blocked_set, SIGCHLD);
5750
5751         sigprocmask(SIG_SETMASK, &G.blocked_set,
5752                         second_time ? NULL : &G.inherited_set);
5753         /* POSIX allows shell to re-enable SIGCHLD
5754          * even if it was SIG_IGN on entry */
5755 //      G.count_SIGCHLD++; /* ensure it is != G.handled_SIGCHLD */
5756         if (!second_time)
5757                 signal(SIGCHLD, SIG_DFL); // SIGCHLD_handler);
5758 }
5759
5760 #if ENABLE_HUSH_JOB
5761 /* helper */
5762 static void maybe_set_to_sigexit(int sig)
5763 {
5764         void (*handler)(int);
5765         /* non_DFL_mask'ed signals are, well, masked,
5766          * no need to set handler for them.
5767          */
5768         if (!((G.non_DFL_mask >> sig) & 1)) {
5769                 handler = signal(sig, sigexit);
5770                 if (handler == SIG_IGN) /* oops... restore back to IGN! */
5771                         signal(sig, handler);
5772         }
5773 }
5774 /* Set handlers to restore tty pgrp and exit */
5775 static void set_fatal_handlers(void)
5776 {
5777         /* We _must_ restore tty pgrp on fatal signals */
5778         if (HUSH_DEBUG) {
5779                 maybe_set_to_sigexit(SIGILL );
5780                 maybe_set_to_sigexit(SIGFPE );
5781                 maybe_set_to_sigexit(SIGBUS );
5782                 maybe_set_to_sigexit(SIGSEGV);
5783                 maybe_set_to_sigexit(SIGTRAP);
5784         } /* else: hush is perfect. what SEGV? */
5785         maybe_set_to_sigexit(SIGABRT);
5786         /* bash 3.2 seems to handle these just like 'fatal' ones */
5787         maybe_set_to_sigexit(SIGPIPE);
5788         maybe_set_to_sigexit(SIGALRM);
5789 //TODO: disable and move down when proper SIGHUP handling is added
5790         maybe_set_to_sigexit(SIGHUP );
5791         /* if we are interactive, [SIGHUP,] SIGTERM and SIGINT are masked.
5792          * if we aren't interactive... but in this case
5793          * we never want to restore pgrp on exit, and this fn is not called */
5794         /*maybe_set_to_sigexit(SIGTERM);*/
5795         /*maybe_set_to_sigexit(SIGINT );*/
5796 }
5797 #endif
5798
5799 static int set_mode(const char cstate, const char mode)
5800 {
5801         int state = (cstate == '-' ? 1 : 0);
5802         switch (mode) {
5803                 case 'n': G.fake_mode = state; break;
5804                 case 'x': /*G.debug_mode = state;*/ break;
5805                 default:  return EXIT_FAILURE;
5806         }
5807         return EXIT_SUCCESS;
5808 }
5809
5810 int hush_main(int argc, char **argv) MAIN_EXTERNALLY_VISIBLE;
5811 int hush_main(int argc, char **argv)
5812 {
5813         static const struct variable const_shell_ver = {
5814                 .next = NULL,
5815                 .varstr = (char*)hush_version_str,
5816                 .max_len = 1, /* 0 can provoke free(name) */
5817                 .flg_export = 1,
5818                 .flg_read_only = 1,
5819         };
5820         int signal_mask_is_inited = 0;
5821         int opt;
5822         char **e;
5823         struct variable *cur_var;
5824
5825         INIT_G();
5826         if (EXIT_SUCCESS) /* if EXIT_SUCCESS == 0, is already done */
5827                 G.last_exitcode = EXIT_SUCCESS;
5828 #if !BB_MMU
5829         G.argv0_for_re_execing = argv[0];
5830 #endif
5831         /* Deal with HUSH_VERSION */
5832         G.shell_ver = const_shell_ver; /* copying struct here */
5833         G.top_var = &G.shell_ver;
5834         debug_printf_env("unsetenv '%s'\n", "HUSH_VERSION");
5835         unsetenv("HUSH_VERSION"); /* in case it exists in initial env */
5836         /* Initialize our shell local variables with the values
5837          * currently living in the environment */
5838         cur_var = G.top_var;
5839         e = environ;
5840         if (e) while (*e) {
5841                 char *value = strchr(*e, '=');
5842                 if (value) { /* paranoia */
5843                         cur_var->next = xzalloc(sizeof(*cur_var));
5844                         cur_var = cur_var->next;
5845                         cur_var->varstr = *e;
5846                         cur_var->max_len = strlen(*e);
5847                         cur_var->flg_export = 1;
5848                 }
5849                 e++;
5850         }
5851         debug_printf_env("putenv '%s'\n", hush_version_str);
5852         putenv((char *)hush_version_str); /* reinstate HUSH_VERSION */
5853 #if ENABLE_FEATURE_EDITING
5854         G.line_input_state = new_line_input_t(FOR_SHELL);
5855 #endif
5856         G.global_argc = argc;
5857         G.global_argv = argv;
5858         /* Initialize some more globals to non-zero values */
5859         set_cwd();
5860 #if ENABLE_HUSH_INTERACTIVE
5861         if (ENABLE_FEATURE_EDITING)
5862                 cmdedit_set_initial_prompt();
5863         G.PS2 = "> ";
5864 #endif
5865
5866         if (setjmp(die_jmp)) {
5867                 /* xfunc has failed! die die die */
5868                 /* no EXIT traps, this is an escape hatch! */
5869                 G.exiting = 1;
5870                 hush_exit(xfunc_error_retval);
5871         }
5872
5873         /* Shell is non-interactive at first. We need to call
5874          * block_signals(0) if we are going to execute "sh <script>",
5875          * "sh -c <cmds>" or login shell's /etc/profile and friends.
5876          * If we later decide that we are interactive, we run block_signals(0)
5877          * (or re-run block_signals(1) if we ran block_signals(0) before)
5878          * in order to intercept (more) signals.
5879          */
5880
5881         /* Parse options */
5882         /* http://www.opengroup.org/onlinepubs/9699919799/utilities/sh.html */
5883         while (1) {
5884                 opt = getopt(argc, argv, "c:xins"
5885 #if !BB_MMU
5886                                 "<:$:R:V:"
5887 # if ENABLE_HUSH_FUNCTIONS
5888                                 "F:"
5889 # endif
5890 #endif
5891                 );
5892                 if (opt <= 0)
5893                         break;
5894                 switch (opt) {
5895                 case 'c':
5896                         if (!G.root_pid)
5897                                 G.root_pid = getpid();
5898                         G.global_argv = argv + optind;
5899                         if (!argv[optind]) {
5900                                 /* -c 'script' (no params): prevent empty $0 */
5901                                 *--G.global_argv = argv[0];
5902                                 optind--;
5903                         } /* else -c 'script' PAR0 PAR1: $0 is PAR0 */
5904                         G.global_argc = argc - optind;
5905                         block_signals(0); /* 0: called 1st time */
5906                         parse_and_run_string(optarg);
5907                         goto final_return;
5908                 case 'i':
5909                         /* Well, we cannot just declare interactiveness,
5910                          * we have to have some stuff (ctty, etc) */
5911                         /* G_interactive_fd++; */
5912                         break;
5913                 case 's':
5914                         /* "-s" means "read from stdin", but this is how we always
5915                          * operate, so simply do nothing here. */
5916                         break;
5917 #if !BB_MMU
5918                 case '<': /* "big heredoc" support */
5919                         full_write(STDOUT_FILENO, optarg, strlen(optarg));
5920                         _exit(0);
5921                 case '$':
5922                         G.root_pid = bb_strtou(optarg, &optarg, 16);
5923                         optarg++;
5924                         G.last_bg_pid = bb_strtou(optarg, &optarg, 16);
5925                         optarg++;
5926                         G.last_exitcode = bb_strtou(optarg, &optarg, 16);
5927 # if ENABLE_HUSH_LOOPS
5928                         optarg++;
5929                         G.depth_of_loop = bb_strtou(optarg, &optarg, 16);
5930 # endif
5931                         break;
5932                 case 'R':
5933                 case 'V':
5934                         set_local_var(xstrdup(optarg), 0, opt == 'R');
5935                         break;
5936 # if ENABLE_HUSH_FUNCTIONS
5937                 case 'F': {
5938                         struct function *funcp = new_function(optarg);
5939                         /* funcp->name is already set to optarg */
5940                         /* funcp->body is set to NULL. It's a special case. */
5941                         funcp->body_as_string = argv[optind];
5942                         optind++;
5943                         break;
5944                 }
5945 # endif
5946 #endif
5947                 case 'n':
5948                 case 'x':
5949                         if (!set_mode('-', opt))
5950                                 break;
5951                 default:
5952 #ifndef BB_VER
5953                         fprintf(stderr, "Usage: sh [FILE]...\n"
5954                                         "   or: sh -c command [args]...\n\n");
5955                         exit(EXIT_FAILURE);
5956 #else
5957                         bb_show_usage();
5958 #endif
5959                 }
5960         } /* option parsing loop */
5961
5962         if (!G.root_pid)
5963                 G.root_pid = getpid();
5964
5965         /* If we are login shell... */
5966         if (argv[0] && argv[0][0] == '-') {
5967                 FILE *input;
5968                 /* XXX what should argv be while sourcing /etc/profile? */
5969                 debug_printf("sourcing /etc/profile\n");
5970                 input = fopen_for_read("/etc/profile");
5971                 if (input != NULL) {
5972                         close_on_exec_on(fileno(input));
5973                         block_signals(0); /* 0: called 1st time */
5974                         signal_mask_is_inited = 1;
5975                         parse_and_run_file(input);
5976                         fclose(input);
5977                 }
5978                 /* bash: after sourcing /etc/profile,
5979                  * tries to source (in the given order):
5980                  * ~/.bash_profile, ~/.bash_login, ~/.profile,
5981                  * stopping of first found. --noprofile turns this off.
5982                  * bash also sources ~/.bash_logout on exit.
5983                  * If called as sh, skips .bash_XXX files.
5984                  */
5985         }
5986
5987         if (argv[optind]) {
5988                 FILE *input;
5989                 /*
5990                  * "bash <script>" (which is never interactive (unless -i?))
5991                  * sources $BASH_ENV here (without scanning $PATH).
5992                  * If called as sh, does the same but with $ENV.
5993                  */
5994                 debug_printf("running script '%s'\n", argv[optind]);
5995                 G.global_argv = argv + optind;
5996                 G.global_argc = argc - optind;
5997                 input = xfopen_for_read(argv[optind]);
5998                 close_on_exec_on(fileno(input));
5999                 if (!signal_mask_is_inited)
6000                         block_signals(0); /* 0: called 1st time */
6001                 parse_and_run_file(input);
6002 #if ENABLE_FEATURE_CLEAN_UP
6003                 fclose(input);
6004 #endif
6005                 goto final_return;
6006         }
6007
6008         /* Up to here, shell was non-interactive. Now it may become one.
6009          * NB: don't forget to (re)run block_signals(0/1) as needed.
6010          */
6011
6012         /* A shell is interactive if the '-i' flag was given, or if all of
6013          * the following conditions are met:
6014          *    no -c command
6015          *    no arguments remaining or the -s flag given
6016          *    standard input is a terminal
6017          *    standard output is a terminal
6018          * Refer to Posix.2, the description of the 'sh' utility.
6019          */
6020 #if ENABLE_HUSH_JOB
6021         if (isatty(STDIN_FILENO) && isatty(STDOUT_FILENO)) {
6022                 G.saved_tty_pgrp = tcgetpgrp(STDIN_FILENO);
6023                 debug_printf("saved_tty_pgrp:%d\n", G.saved_tty_pgrp);
6024 //TODO: "interactive" and "have job control" are two different things.
6025 //If tcgetpgrp fails here, "have job control" is false, but "interactive"
6026 //should stay on! Currently, we mix these into one.
6027                 if (G.saved_tty_pgrp >= 0) {
6028                         /* try to dup stdin to high fd#, >= 255 */
6029                         G_interactive_fd = fcntl(STDIN_FILENO, F_DUPFD, 255);
6030                         if (G_interactive_fd < 0) {
6031                                 /* try to dup to any fd */
6032                                 G_interactive_fd = dup(STDIN_FILENO);
6033                                 if (G_interactive_fd < 0)
6034                                         /* give up */
6035                                         G_interactive_fd = 0;
6036                         }
6037 // TODO: track & disallow any attempts of user
6038 // to (inadvertently) close/redirect it
6039                 }
6040         }
6041         debug_printf("interactive_fd:%d\n", G_interactive_fd);
6042         if (G_interactive_fd) {
6043                 pid_t shell_pgrp;
6044
6045                 /* We are indeed interactive shell, and we will perform
6046                  * job control. Setting up for that. */
6047
6048                 close_on_exec_on(G_interactive_fd);
6049                 /* If we were run as 'hush &', sleep until we are
6050                  * in the foreground (tty pgrp == our pgrp).
6051                  * If we get started under a job aware app (like bash),
6052                  * make sure we are now in charge so we don't fight over
6053                  * who gets the foreground */
6054                 while (1) {
6055                         shell_pgrp = getpgrp();
6056                         G.saved_tty_pgrp = tcgetpgrp(G_interactive_fd);
6057                         if (G.saved_tty_pgrp == shell_pgrp)
6058                                 break;
6059                         /* send TTIN to ourself (should stop us) */
6060                         kill(- shell_pgrp, SIGTTIN);
6061                 }
6062                 /* Block some signals */
6063                 block_signals(signal_mask_is_inited);
6064                 /* Set other signals to restore saved_tty_pgrp */
6065                 set_fatal_handlers();
6066                 /* Put ourselves in our own process group */
6067                 bb_setpgrp(); /* is the same as setpgid(our_pid, our_pid); */
6068                 /* Grab control of the terminal */
6069                 tcsetpgrp(G_interactive_fd, getpid());
6070                 /* -1 is special - makes xfuncs longjmp, not exit
6071                  * (we reset die_sleep = 0 whereever we [v]fork) */
6072                 enable_restore_tty_pgrp_on_exit(); /* sets die_sleep = -1 */
6073         } else if (!signal_mask_is_inited) {
6074                 block_signals(0); /* 0: called 1st time */
6075         } /* else: block_signals(0) was done before */
6076 #elif ENABLE_HUSH_INTERACTIVE
6077         /* No job control compiled in, only prompt/line editing */
6078         if (isatty(STDIN_FILENO) && isatty(STDOUT_FILENO)) {
6079                 G_interactive_fd = fcntl(STDIN_FILENO, F_DUPFD, 255);
6080                 if (G_interactive_fd < 0) {
6081                         /* try to dup to any fd */
6082                         G_interactive_fd = dup(STDIN_FILENO);
6083                         if (G_interactive_fd < 0)
6084                                 /* give up */
6085                                 G_interactive_fd = 0;
6086                 }
6087         }
6088         if (G_interactive_fd) {
6089                 close_on_exec_on(G_interactive_fd);
6090                 block_signals(signal_mask_is_inited);
6091         } else if (!signal_mask_is_inited) {
6092                 block_signals(0);
6093         }
6094 #else
6095         /* We have interactiveness code disabled */
6096         if (!signal_mask_is_inited) {
6097                 block_signals(0);
6098         }
6099 #endif
6100         /* bash:
6101          * if interactive but not a login shell, sources ~/.bashrc
6102          * (--norc turns this off, --rcfile <file> overrides)
6103          */
6104
6105         if (!ENABLE_FEATURE_SH_EXTRA_QUIET && G_interactive_fd) {
6106                 printf("\n\n%s hush - the humble shell\n", bb_banner);
6107                 printf("Enter 'help' for a list of built-in commands.\n\n");
6108         }
6109
6110         parse_and_run_file(stdin);
6111
6112  final_return:
6113 #if ENABLE_FEATURE_CLEAN_UP
6114         if (G.cwd != bb_msg_unknown)
6115                 free((char*)G.cwd);
6116         cur_var = G.top_var->next;
6117         while (cur_var) {
6118                 struct variable *tmp = cur_var;
6119                 if (!cur_var->max_len)
6120                         free(cur_var->varstr);
6121                 cur_var = cur_var->next;
6122                 free(tmp);
6123         }
6124 #endif
6125         hush_exit(G.last_exitcode);
6126 }
6127
6128
6129 #if ENABLE_LASH
6130 int lash_main(int argc, char **argv) MAIN_EXTERNALLY_VISIBLE;
6131 int lash_main(int argc, char **argv)
6132 {
6133         //bb_error_msg("lash is deprecated, please use hush instead");
6134         return hush_main(argc, argv);
6135 }
6136 #endif
6137
6138
6139 /*
6140  * Built-ins
6141  */
6142 static int builtin_trap(char **argv)
6143 {
6144         int i;
6145         int sig;
6146         char *new_cmd;
6147
6148         if (!G.traps)
6149                 G.traps = xzalloc(sizeof(G.traps[0]) * NSIG);
6150
6151         argv++;
6152         if (!*argv) {
6153                 /* No args: print all trapped. This isn't 100% correct as we
6154                  * should be escaping the cmd so that it can be pasted back in
6155                  */
6156                 for (i = 0; i < NSIG; ++i)
6157                         if (G.traps[i])
6158                                 printf("trap -- '%s' %s\n", G.traps[i], get_signame(i));
6159                 return EXIT_SUCCESS;
6160         }
6161
6162         new_cmd = NULL;
6163         i = 0;
6164         /* If first arg is decimal: reset all specified signals */
6165         sig = bb_strtou(*argv, NULL, 10);
6166         if (errno == 0) {
6167                 int ret;
6168  set_all:
6169                 ret = EXIT_SUCCESS;
6170                 while (*argv) {
6171                         sig = get_signum(*argv++);
6172                         if (sig < 0 || sig >= NSIG) {
6173                                 ret = EXIT_FAILURE;
6174                                 /* Mimic bash message exactly */
6175                                 bb_perror_msg("trap: %s: invalid signal specification", argv[i]);
6176                                 continue;
6177                         }
6178
6179                         free(G.traps[sig]);
6180                         G.traps[sig] = xstrdup(new_cmd);
6181
6182                         debug_printf("trap: setting SIG%s (%i) to '%s'",
6183                                 get_signame(sig), sig, G.traps[sig]);
6184
6185                         /* There is no signal for 0 (EXIT) */
6186                         if (sig == 0)
6187                                 continue;
6188
6189                         if (new_cmd) {
6190                                 sigaddset(&G.blocked_set, sig);
6191                         } else {
6192                                 /* There was a trap handler, we are removing it
6193                                  * (if sig has non-DFL handling,
6194                                  * we don't need to do anything) */
6195                                 if (sig < 32 && (G.non_DFL_mask & (1 << sig)))
6196                                         continue;
6197                                 sigdelset(&G.blocked_set, sig);
6198                         }
6199                         sigprocmask(SIG_SETMASK, &G.blocked_set, NULL);
6200                 }
6201                 return ret;
6202         }
6203
6204         /* First arg is "-": reset all specified to default */
6205         /* First arg is "": ignore all specified */
6206         /* Everything else: execute first arg upon signal */
6207         if (!argv[1]) {
6208                 bb_error_msg("trap: invalid arguments");
6209                 return EXIT_FAILURE;
6210         }
6211         if (NOT_LONE_DASH(*argv))
6212                 new_cmd = *argv;
6213         argv++;
6214         goto set_all;
6215 }
6216
6217 static int builtin_true(char **argv UNUSED_PARAM)
6218 {
6219         return 0;
6220 }
6221
6222 static int builtin_test(char **argv)
6223 {
6224         int argc = 0;
6225         while (*argv) {
6226                 argc++;
6227                 argv++;
6228         }
6229         return test_main(argc, argv - argc);
6230 }
6231
6232 static int builtin_echo(char **argv)
6233 {
6234         int argc = 0;
6235         while (*argv) {
6236                 argc++;
6237                 argv++;
6238         }
6239         return echo_main(argc, argv - argc);
6240 }
6241
6242 static int builtin_eval(char **argv)
6243 {
6244         int rcode = EXIT_SUCCESS;
6245
6246         if (*++argv) {
6247                 char *str = expand_strvec_to_string(argv);
6248                 /* bash:
6249                  * eval "echo Hi; done" ("done" is syntax error):
6250                  * "echo Hi" will not execute too.
6251                  */
6252                 parse_and_run_string(str);
6253                 free(str);
6254                 rcode = G.last_exitcode;
6255         }
6256         return rcode;
6257 }
6258
6259 static int builtin_cd(char **argv)
6260 {
6261         const char *newdir = argv[1];
6262         if (newdir == NULL) {
6263                 /* bash does nothing (exitcode 0) if HOME is ""; if it's unset,
6264                  * bash says "bash: cd: HOME not set" and does nothing
6265                  * (exitcode 1)
6266                  */
6267                 newdir = getenv("HOME") ? : "/";
6268         }
6269         if (chdir(newdir)) {
6270                 /* Mimic bash message exactly */
6271                 bb_perror_msg("cd: %s", newdir);
6272                 return EXIT_FAILURE;
6273         }
6274         set_cwd();
6275         return EXIT_SUCCESS;
6276 }
6277
6278 static int builtin_exec(char **argv)
6279 {
6280         if (*++argv == NULL)
6281                 return EXIT_SUCCESS; /* bash does this */
6282         {
6283 #if !BB_MMU
6284                 nommu_save_t dummy;
6285 #endif
6286 // FIXME: if exec fails, bash does NOT exit! We do...
6287                 pseudo_exec_argv(&dummy, argv, 0, NULL);
6288                 /* never returns */
6289         }
6290 }
6291
6292 static int builtin_exit(char **argv)
6293 {
6294         debug_printf_exec("%s()\n", __func__);
6295 // TODO: bash does it ONLY on top-level sh exit (+interacive only?)
6296         //puts("exit"); /* bash does it */
6297 // TODO: warn if we have background jobs: "There are stopped jobs"
6298 // On second consecutive 'exit', exit anyway.
6299 // perhaps use G.exiting = -1 as indicator "last cmd was exit"
6300
6301         /* note: EXIT trap is run by hush_exit */
6302         if (*++argv == NULL)
6303                 hush_exit(G.last_exitcode);
6304         /* mimic bash: exit 123abc == exit 255 + error msg */
6305         xfunc_error_retval = 255;
6306         /* bash: exit -2 == exit 254, no error msg */
6307         hush_exit(xatoi(*argv) & 0xff);
6308 }
6309
6310 static int builtin_export(char **argv)
6311 {
6312         if (*++argv == NULL) {
6313                 char **e = environ;
6314                 if (e) {
6315                         while (*e) {
6316 #if 0
6317                                 puts(*e++);
6318 #else
6319                                 /* ash emits: export VAR='VAL'
6320                                  * bash: declare -x VAR="VAL"
6321                                  * we follow ash example */
6322                                 const char *s = *e++;
6323                                 const char *p = strchr(s, '=');
6324
6325                                 if (!p) /* wtf? take next variable */
6326                                         continue;
6327                                 /* export var= */
6328                                 printf("export %.*s", (int)(p - s) + 1, s);
6329                                 s = p + 1;
6330                                 while (*s) {
6331                                         if (*s != '\'') {
6332                                                 p = strchrnul(s, '\'');
6333                                                 /* print 'xxxx' */
6334                                                 printf("'%.*s'", (int)(p - s), s);
6335                                                 if (*p == '\0')
6336                                                         break;
6337                                                 s = p;
6338                                         }
6339                                         /* s points to '; print ''...'''" */
6340                                         putchar('"');
6341                                         do putchar('\''); while (*++s == '\'');
6342                                         putchar('"');
6343                                 }
6344                                 putchar('\n');
6345 #endif
6346                         }
6347                         fflush(stdout);
6348                 }
6349                 return EXIT_SUCCESS;
6350         }
6351
6352         do {
6353                 const char *value;
6354                 char *name = *argv;
6355
6356                 value = strchr(name, '=');
6357                 if (!value) {
6358                         /* They are exporting something without a =VALUE */
6359                         struct variable *var;
6360
6361                         var = get_local_var(name);
6362                         if (var) {
6363                                 var->flg_export = 1;
6364                                 debug_printf_env("%s: putenv '%s'\n", __func__, var->varstr);
6365                                 putenv(var->varstr);
6366                         }
6367                         /* bash does not return an error when trying to export
6368                          * an undefined variable.  Do likewise. */
6369                         continue;
6370                 }
6371                 set_local_var(xstrdup(name), 1, 0);
6372         } while (*++argv);
6373
6374         return EXIT_SUCCESS;
6375 }
6376
6377 #if ENABLE_HUSH_JOB
6378 /* built-in 'fg' and 'bg' handler */
6379 static int builtin_fg_bg(char **argv)
6380 {
6381         int i, jobnum;
6382         struct pipe *pi;
6383
6384         if (!G_interactive_fd)
6385                 return EXIT_FAILURE;
6386         /* If they gave us no args, assume they want the last backgrounded task */
6387         if (!argv[1]) {
6388                 for (pi = G.job_list; pi; pi = pi->next) {
6389                         if (pi->jobid == G.last_jobid) {
6390                                 goto found;
6391                         }
6392                 }
6393                 bb_error_msg("%s: no current job", argv[0]);
6394                 return EXIT_FAILURE;
6395         }
6396         if (sscanf(argv[1], "%%%d", &jobnum) != 1) {
6397                 bb_error_msg("%s: bad argument '%s'", argv[0], argv[1]);
6398                 return EXIT_FAILURE;
6399         }
6400         for (pi = G.job_list; pi; pi = pi->next) {
6401                 if (pi->jobid == jobnum) {
6402                         goto found;
6403                 }
6404         }
6405         bb_error_msg("%s: %d: no such job", argv[0], jobnum);
6406         return EXIT_FAILURE;
6407  found:
6408         // TODO: bash prints a string representation
6409         // of job being foregrounded (like "sleep 1 | cat")
6410         if (argv[0][0] == 'f') {
6411                 /* Put the job into the foreground.  */
6412                 tcsetpgrp(G_interactive_fd, pi->pgrp);
6413         }
6414
6415         /* Restart the processes in the job */
6416         debug_printf_jobs("reviving %d procs, pgrp %d\n", pi->num_cmds, pi->pgrp);
6417         for (i = 0; i < pi->num_cmds; i++) {
6418                 debug_printf_jobs("reviving pid %d\n", pi->cmds[i].pid);
6419                 pi->cmds[i].is_stopped = 0;
6420         }
6421         pi->stopped_cmds = 0;
6422
6423         i = kill(- pi->pgrp, SIGCONT);
6424         if (i < 0) {
6425                 if (errno == ESRCH) {
6426                         delete_finished_bg_job(pi);
6427                         return EXIT_SUCCESS;
6428                 }
6429                 bb_perror_msg("kill (SIGCONT)");
6430         }
6431
6432         if (argv[0][0] == 'f') {
6433                 remove_bg_job(pi);
6434                 return checkjobs_and_fg_shell(pi);
6435         }
6436         return EXIT_SUCCESS;
6437 }
6438 #endif
6439
6440 #if ENABLE_HUSH_HELP
6441 static int builtin_help(char **argv UNUSED_PARAM)
6442 {
6443         const struct built_in_command *x;
6444
6445         printf("\n"
6446                 "Built-in commands:\n"
6447                 "------------------\n");
6448         for (x = bltins; x != &bltins[ARRAY_SIZE(bltins)]; x++) {
6449                 printf("%s\t%s\n", x->cmd, x->descr);
6450         }
6451         printf("\n\n");
6452         return EXIT_SUCCESS;
6453 }
6454 #endif
6455
6456 #if ENABLE_HUSH_JOB
6457 static int builtin_jobs(char **argv UNUSED_PARAM)
6458 {
6459         struct pipe *job;
6460         const char *status_string;
6461
6462         for (job = G.job_list; job; job = job->next) {
6463                 if (job->alive_cmds == job->stopped_cmds)
6464                         status_string = "Stopped";
6465                 else
6466                         status_string = "Running";
6467
6468                 printf(JOB_STATUS_FORMAT, job->jobid, status_string, job->cmdtext);
6469         }
6470         return EXIT_SUCCESS;
6471 }
6472 #endif
6473
6474 #if HUSH_DEBUG
6475 static int builtin_memleak(char **argv UNUSED_PARAM)
6476 {
6477         void *p;
6478         unsigned long l;
6479
6480         /* Crude attempt to find where "free memory" starts,
6481          * sans fragmentation. */
6482         p = malloc(240);
6483         l = (unsigned long)p;
6484         free(p);
6485         p = malloc(3400);
6486         if (l < (unsigned long)p) l = (unsigned long)p;
6487         free(p);
6488
6489         if (!G.memleak_value)
6490                 G.memleak_value = l;
6491         
6492         l -= G.memleak_value;
6493         if ((long)l < 0)
6494                 l = 0;
6495         l /= 1024;
6496         if (l > 127)
6497                 l = 127;
6498
6499         /* Exitcode is "how many kilobytes we leaked since 1st call" */
6500         return l;
6501 }
6502 #endif
6503
6504 static int builtin_pwd(char **argv UNUSED_PARAM)
6505 {
6506         puts(set_cwd());
6507         return EXIT_SUCCESS;
6508 }
6509
6510 static int builtin_read(char **argv)
6511 {
6512         char *string;
6513         const char *name = "REPLY";
6514
6515         if (argv[1]) {
6516                 name = argv[1];
6517                 /* bash (3.2.33(1)) bug: "read 0abcd" will execute,
6518                  * and _after_ that_ it will complain */
6519                 if (!is_well_formed_var_name(name, '\0')) {
6520                         /* Mimic bash message */
6521                         bb_error_msg("read: '%s': not a valid identifier", name);
6522                         return 1;
6523                 }
6524         }
6525
6526 //TODO: bash unbackslashes input, splits words and puts them in argv[i]
6527
6528         string = xmalloc_reads(STDIN_FILENO, xasprintf("%s=", name), NULL);
6529         return set_local_var(string, 0, 0);
6530 }
6531
6532 /* http://www.opengroup.org/onlinepubs/9699919799/utilities/V3_chap02.html#set
6533  * built-in 'set' handler
6534  * SUSv3 says:
6535  * set [-abCefhmnuvx] [-o option] [argument...]
6536  * set [+abCefhmnuvx] [+o option] [argument...]
6537  * set -- [argument...]
6538  * set -o
6539  * set +o
6540  * Implementations shall support the options in both their hyphen and
6541  * plus-sign forms. These options can also be specified as options to sh.
6542  * Examples:
6543  * Write out all variables and their values: set
6544  * Set $1, $2, and $3 and set "$#" to 3: set c a b
6545  * Turn on the -x and -v options: set -xv
6546  * Unset all positional parameters: set --
6547  * Set $1 to the value of x, even if it begins with '-' or '+': set -- "$x"
6548  * Set the positional parameters to the expansion of x, even if x expands
6549  * with a leading '-' or '+': set -- $x
6550  *
6551  * So far, we only support "set -- [argument...]" and some of the short names.
6552  */
6553 static int builtin_set(char **argv)
6554 {
6555         int n;
6556         char **pp, **g_argv;
6557         char *arg = *++argv;
6558
6559         if (arg == NULL) {
6560                 struct variable *e;
6561                 for (e = G.top_var; e; e = e->next)
6562                         puts(e->varstr);
6563                 return EXIT_SUCCESS;
6564         }
6565
6566         do {
6567                 if (!strcmp(arg, "--")) {
6568                         ++argv;
6569                         goto set_argv;
6570                 }
6571                 if (arg[0] != '+' && arg[0] != '-')
6572                         break;
6573                 for (n = 1; arg[n]; ++n)
6574                         if (set_mode(arg[0], arg[n]))
6575                                 goto error;
6576         } while ((arg = *++argv) != NULL);
6577         /* Now argv[0] is 1st argument */
6578
6579         if (arg == NULL)
6580                 return EXIT_SUCCESS;
6581  set_argv:
6582
6583         /* NB: G.global_argv[0] ($0) is never freed/changed */
6584         g_argv = G.global_argv;
6585         if (G.global_args_malloced) {
6586                 pp = g_argv;
6587                 while (*++pp)
6588                         free(*pp);
6589                 g_argv[1] = NULL;
6590         } else {
6591                 G.global_args_malloced = 1;
6592                 pp = xzalloc(sizeof(pp[0]) * 2);
6593                 pp[0] = g_argv[0]; /* retain $0 */
6594                 g_argv = pp;
6595         }
6596         /* This realloc's G.global_argv */
6597         G.global_argv = pp = add_strings_to_strings(g_argv, argv, /*dup:*/ 1);
6598
6599         n = 1;
6600         while (*++pp)
6601                 n++;
6602         G.global_argc = n;
6603
6604         return EXIT_SUCCESS;
6605
6606         /* Nothing known, so abort */
6607  error:
6608         bb_error_msg("set: %s: invalid option", arg);
6609         return EXIT_FAILURE;
6610 }
6611
6612 static int builtin_shift(char **argv)
6613 {
6614         int n = 1;
6615         if (argv[1]) {
6616                 n = atoi(argv[1]);
6617         }
6618         if (n >= 0 && n < G.global_argc) {
6619                 if (G.global_args_malloced) {
6620                         int m = 1;
6621                         while (m <= n)
6622                                 free(G.global_argv[m++]);
6623                 }
6624                 G.global_argc -= n;
6625                 memmove(&G.global_argv[1], &G.global_argv[n+1],
6626                                 G.global_argc * sizeof(G.global_argv[0]));
6627                 return EXIT_SUCCESS;
6628         }
6629         return EXIT_FAILURE;
6630 }
6631
6632 static int builtin_source(char **argv)
6633 {
6634         FILE *input;
6635
6636         if (*++argv == NULL)
6637                 return EXIT_FAILURE;
6638
6639         /* XXX search through $PATH is missing */
6640         input = fopen_or_warn(*argv, "r");
6641         if (!input) {
6642                 /* bb_perror_msg("%s", *argv); - done by fopen_or_warn */
6643                 return EXIT_FAILURE;
6644         }
6645         close_on_exec_on(fileno(input));
6646
6647         /* Now run the file */
6648 //TODO:
6649         /* XXX argv and argc are broken; need to save old G.global_argv
6650          * (pointer only is OK!) on this stack frame,
6651          * set G.global_argv=argv+1, recurse, and restore. */
6652         parse_and_run_file(input);
6653         fclose(input);
6654         return G.last_exitcode;
6655 }
6656
6657 static int builtin_umask(char **argv)
6658 {
6659         mode_t new_umask;
6660         const char *arg = argv[1];
6661         if (arg) {
6662 //TODO: umask may take chmod-like symbolic masks
6663                 new_umask = bb_strtou(arg, NULL, 8);
6664                 if (errno) {
6665                         //Message? bash examples:
6666                         //bash: umask: 'q': invalid symbolic mode operator
6667                         //bash: umask: 999: octal number out of range
6668                         return EXIT_FAILURE;
6669                 }
6670         } else {
6671                 new_umask = umask(0);
6672                 printf("%.3o\n", (unsigned) new_umask);
6673                 /* fall through and restore new_umask which we set to 0 */
6674         }
6675         umask(new_umask);
6676         return EXIT_SUCCESS;
6677 }
6678
6679 /* http://www.opengroup.org/onlinepubs/9699919799/utilities/V3_chap02.html#unset */
6680 static int builtin_unset(char **argv)
6681 {
6682         int ret;
6683         char var;
6684
6685         if (!*++argv)
6686                 return EXIT_SUCCESS;
6687
6688         var = 'v';
6689         if (argv[0][0] == '-') {
6690                 switch (argv[0][1]) {
6691                 case 'v':
6692                 case 'f':
6693                         var = argv[0][1];
6694                         break;
6695                 default:
6696                         bb_error_msg("unset: %s: invalid option", *argv);
6697                         return EXIT_FAILURE;
6698                 }
6699 //TODO: disallow "unset -vf ..." too
6700                 argv++;
6701         }
6702
6703         ret = EXIT_SUCCESS;
6704         while (*argv) {
6705                 if (var == 'v') {
6706                         if (unset_local_var(*argv)) {
6707                                 /* unset <nonexistent_var> doesn't fail.
6708                                  * Error is when one tries to unset RO var.
6709                                  * Message was printed by unset_local_var. */
6710                                 ret = EXIT_FAILURE;
6711                         }
6712                 }
6713 //#if ENABLE_HUSH_FUNCTIONS
6714 //              else {
6715 //                      unset_local_func(*argv);
6716 //              }
6717 //#endif
6718                 argv++;
6719         }
6720         return ret;
6721 }
6722
6723 /* http://www.opengroup.org/onlinepubs/9699919799/utilities/wait.html */
6724 static int builtin_wait(char **argv)
6725 {
6726         int ret = EXIT_SUCCESS;
6727         int status, sig;
6728
6729         if (*++argv == NULL) {
6730                 /* Don't care about wait results */
6731                 /* Note 1: must wait until there are no more children */
6732                 /* Note 2: must be interruptible */
6733                 /* Examples:
6734                  * $ sleep 3 & sleep 6 & wait
6735                  * [1] 30934 sleep 3
6736                  * [2] 30935 sleep 6
6737                  * [1] Done                   sleep 3
6738                  * [2] Done                   sleep 6
6739                  * $ sleep 3 & sleep 6 & wait
6740                  * [1] 30936 sleep 3
6741                  * [2] 30937 sleep 6
6742                  * [1] Done                   sleep 3
6743                  * ^C <-- after ~4 sec from keyboard
6744                  * $
6745                  */
6746                 sigaddset(&G.blocked_set, SIGCHLD);
6747                 sigprocmask(SIG_SETMASK, &G.blocked_set, NULL);
6748                 while (1) {
6749                         checkjobs(NULL);
6750                         if (errno == ECHILD)
6751                                 break;
6752                         /* Wait for SIGCHLD or any other signal of interest */
6753                         /* sigtimedwait with infinite timeout: */
6754                         sig = sigwaitinfo(&G.blocked_set, NULL);
6755                         if (sig > 0) {
6756                                 sig = check_and_run_traps(sig);
6757                                 if (sig && sig != SIGCHLD) { /* see note 2 */
6758                                         ret = 128 + sig;
6759                                         break;
6760                                 }
6761                         }
6762                 }
6763                 sigdelset(&G.blocked_set, SIGCHLD);
6764                 sigprocmask(SIG_SETMASK, &G.blocked_set, NULL);
6765                 return ret;
6766         }
6767
6768         /* This is probably buggy wrt interruptible-ness */
6769         while (*argv) {
6770                 pid_t pid = bb_strtou(*argv, NULL, 10);
6771                 if (errno) {
6772                         /* mimic bash message */
6773                         bb_error_msg("wait: '%s': not a pid or valid job spec", *argv);
6774                         return EXIT_FAILURE;
6775                 }
6776                 if (waitpid(pid, &status, 0) == pid) {
6777                         if (WIFSIGNALED(status))
6778                                 ret = 128 + WTERMSIG(status);
6779                         else if (WIFEXITED(status))
6780                                 ret = WEXITSTATUS(status);
6781                         else /* wtf? */
6782                                 ret = EXIT_FAILURE;
6783                 } else {
6784                         bb_perror_msg("wait %s", *argv);
6785                         ret = 127;
6786                 }
6787                 argv++;
6788         }
6789
6790         return ret;
6791 }
6792
6793 #if ENABLE_HUSH_LOOPS
6794 static int builtin_break(char **argv)
6795 {
6796         if (G.depth_of_loop == 0) {
6797                 bb_error_msg("%s: only meaningful in a loop", argv[0]);
6798                 return EXIT_SUCCESS; /* bash compat */
6799         }
6800         G.flag_break_continue++; /* BC_BREAK = 1 */
6801         G.depth_break_continue = 1;
6802         if (argv[1]) {
6803                 G.depth_break_continue = bb_strtou(argv[1], NULL, 10);
6804                 if (errno || !G.depth_break_continue || argv[2]) {
6805                         bb_error_msg("%s: bad arguments", argv[0]);
6806                         G.flag_break_continue = BC_BREAK;
6807                         G.depth_break_continue = UINT_MAX;
6808                 }
6809         }
6810         if (G.depth_of_loop < G.depth_break_continue)
6811                 G.depth_break_continue = G.depth_of_loop;
6812         return EXIT_SUCCESS;
6813 }
6814
6815 static int builtin_continue(char **argv)
6816 {
6817         G.flag_break_continue = 1; /* BC_CONTINUE = 2 = 1+1 */
6818         return builtin_break(argv);
6819 }
6820 #endif