selector.c

   1
   2 /*
   3  *  selector is a simple command line utility for selection of strings
   4  *  with a dynamic pattern-matching.
   5  *
   6  *  Copyright (c) 2009, 2010, 2011, 2012 Francois Fleuret
   7  *  Written by Francois Fleuret <francois@fleuret.org>
   8  *
   9  *  This file is part of selector.
  10  *
  11  *  selector is free software: you can redistribute it and/or modify
  12  *  it under the terms of the GNU General Public License version 3 as
  13  *  published by the Free Software Foundation.
  14  *
  15  *  selector is distributed in the hope that it will be useful, but
  16  *  WITHOUT ANY WARRANTY; without even the implied warranty of
  17  *  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  18  *  General Public License for more details.
  19  *
  20  *  You should have received a copy of the GNU General Public License
  21  *  along with selector.  If not, see <http://www.gnu.org/licenses/>.
  22  *
  23  */
  24
  25 /*
  26
  27   To use it as a super-history-search for bash:
  28   selector --bash <(history)
  29
  30 */
  31
  32 #define _GNU_SOURCE
  33
  34 #include <stdio.h>
  35 #include <stdlib.h>
  36 #include <unistd.h>
  37 #include <string.h>
  38 #include <errno.h>
  39 #include <ncurses.h>
  40 #include <fcntl.h>
  41 #include <sys/ioctl.h>
  42 #include <termios.h>
  43 #include <regex.h>
  44 #include <locale.h>
  45 #include <getopt.h>
  46 #include <limits.h>
  47
  48 #define VERSION "1.1.7"
  49
  50 #define BUFFER_SIZE 16384
  51
  52 /* Yeah, global variables! */
  53
  54 int nb_lines_max = 1000;
  55 char pattern_separator = ';';
  56 char label_separator = '\0';
  57 int output_to_vt_buffer = 0;
  58 int add_control_qs = 0;
  59 int with_colors = 1;
  60 int zsh_history = 0;
  61 int bash_history = 0;
  62 int inverse_order = 0;
  63 int remove_duplicates = 0;
  64 int use_regexp = 0;
  65 int case_sensitive = 0;
  66 char *title = 0;
  67 int error_flash = 0;
  68 int upper_caps_makes_case_sensitive = 0;
  69 int show_long_lines = 0;
  70 int show_hits = 0;
  71
  72 int attr_modeline, attr_focus_line, attr_error, attr_hits;
  73
  74 /********************************************************************/
  75
  76 /* malloc with error checking.  */
  77
  78 void *safe_malloc(size_t n) {
  79   void *p = malloc(n);
  80   if(!p && n != 0) {
  81     fprintf(stderr,
  82             "selector: can not allocate memory: %s\n", strerror(errno));
  83     exit(EXIT_FAILURE);
  84   }
  85   return p;
  86 }
  87
  88 /*********************************************************************/
  89
  90 void inject_into_tty_buffer(char *string, int add_control_qs) {
  91   struct termios oldtio, newtio;
  92   const char *k;
  93   const char control_q = '\021';
  94   tcgetattr(STDIN_FILENO, &oldtio);
  95   memset(&newtio, 0, sizeof(newtio));
  96   /* Set input mode (non-canonical, *no echo*,...) */
  97   tcsetattr(STDIN_FILENO, TCSANOW, &newtio);
  98   /* Put the selected string in the tty input buffer */
  99   for(k = string; *k; k++) {
 100     if(add_control_qs && !(*k >= ' ' && *k <= '~')) {
 101       /* Add ^Q to quote control characters */
 102       ioctl(STDIN_FILENO, TIOCSTI, &control_q);
 103     }
 104     ioctl(STDIN_FILENO, TIOCSTI, k);
 105   }
 106   /* Restore the old settings */
 107   tcsetattr(STDIN_FILENO, TCSANOW, &oldtio);
 108 }
 109
 110 /*********************************************************************/
 111
 112 void str_to_positive_integers(char *string, int *values, int nb) {
 113   int current_value, gotone;
 114   char *s;
 115   int n;
 116
 117   n = 0;
 118   current_value = 0;
 119   gotone = 0;
 120   s = string;
 121
 122   while(1) {
 123     if(*s >= '0' && *s <= '9') {
 124       current_value = current_value * 10 + (int) (*s - '0');
 125       gotone = 1;
 126     } else if(*s == ',' || *s == '\0') {
 127       if(gotone) {
 128         if(n < nb) {
 129           values[n++] = current_value;
 130           if(*s == '\0') {
 131             if(n == nb) {
 132               return;
 133             } else {
 134               fprintf(stderr,
 135                       "selector: Missing value in `%s'.\n", string);
 136               exit(EXIT_FAILURE);
 137             }
 138           }
 139           current_value = 0;
 140           gotone = 0;
 141         } else {
 142           fprintf(stderr,
 143                   "selector: Too many values in `%s'.\n", string);
 144           exit(EXIT_FAILURE);
 145         }
 146       } else {
 147         fprintf(stderr,
 148                 "selector: Empty value in `%s'.\n", string);
 149         exit(EXIT_FAILURE);
 150       }
 151     } else {
 152       fprintf(stderr,
 153               "selector: Syntax error in `%s'.\n", string);
 154       exit(EXIT_FAILURE);
 155     }
 156     s++;
 157   }
 158 }
 159
 160 void error_feedback() {
 161   if(error_flash) {
 162     flash();
 163   } else {
 164     beep();
 165   }
 166 }
 167
 168 void usage(FILE *out) {
 169
 170   fprintf(out, "Selector version %s (%s)\n", VERSION, UNAME);
 171   fprintf(out, "Written by Francois Fleuret <francois@fleuret.org>.\n");
 172   fprintf(out, "\n");
 173   fprintf(out, "Usage: selector [options] [<filename1> [<filename2> ...]]\n");
 174   fprintf(out, "\n");
 175   fprintf(out, " -h, --help\n");
 176   fprintf(out, "         show this help\n");
 177   fprintf(out, " -v, --inject-in-tty\n");
 178   fprintf(out, "         inject the selected line in the tty\n");
 179   fprintf(out, " -w, --add-control-qs\n");
 180   fprintf(out, "         quote control characters with ^Qs when using -v\n");
 181   fprintf(out, " -d, --remove-duplicates\n");
 182   fprintf(out, "         remove duplicated lines\n");
 183   fprintf(out, " -b, --remove-bash-prefix\n");
 184   fprintf(out, "         remove the bash history line prefix\n");
 185   fprintf(out, " -z, --remove-zsh-prefix\n");
 186   fprintf(out, "         remove the zsh history line prefix\n");
 187   fprintf(out, " -i, --revert-order\n");
 188   fprintf(out, "         invert the order of lines\n");
 189   fprintf(out, " -e, --regexp\n");
 190   fprintf(out, "         start in regexp mode\n");
 191   fprintf(out, " -a, --case-sensitive\n");
 192   fprintf(out, "         start in case sensitive mode\n");
 193   fprintf(out, " -j, --show-long-lines\n");
 194   fprintf(out, "         print a long-line indicator at the end of truncated lines\n");
 195   fprintf(out, " -y, --show-hits\n");
 196   fprintf(out, "         highlight the matching substrings\n");
 197   fprintf(out, " -u, --upper-case-makes-case-sensitive\n");
 198   fprintf(out, "         using an upper case character in the matching string makes\n");
 199   fprintf(out, "         the matching case-sensitive\n");
 200   fprintf(out, " -m, --monochrome\n");
 201   fprintf(out, "         monochrome mode\n");
 202   fprintf(out, " -q, --no-beep\n");
 203   fprintf(out, "         make a flash instead of a beep on an edition error\n");
 204   fprintf(out, " --bash\n");
 205   fprintf(out, "         setting for bash history search, same as -b -i -d -v -w -l ${HISTSIZE}\n");
 206   fprintf(out, " --      all following arguments are filenames\n");
 207   fprintf(out, " -t <title>, --title <title>\n");
 208   fprintf(out, "         add a title in the modeline\n");
 209   fprintf(out, " -r <pattern>, --pattern <pattern>\n");
 210   fprintf(out, "         set an initial pattern\n");
 211   fprintf(out, " -c <colors>, --colors <colors>\n");
 212   fprintf(out, "         set the display colors with an argument of the form\n");
 213   fprintf(out, "         <fg_modeline>,<bg_modeline>,<fg_highlight>,<bg_highlight>\n");
 214   fprintf(out, " -o <output filename>, --output-file <output filename>\n");
 215   fprintf(out, "         set a file to write the selected line to\n");
 216   fprintf(out, " -s <pattern separator>, --pattern-separator <pattern separator>\n");
 217   fprintf(out, "         set the symbol to separate substrings in the pattern\n");
 218   fprintf(out, " -x <label separator>, --label-separator <label separator>\n");
 219   fprintf(out, "         set the character to separate the label to show from the\n");
 220   fprintf(out, "         string to return\n");
 221   fprintf(out, " -l <max number of lines>, --number-of-lines <max number of lines>\n");
 222   fprintf(out, "         set the maximum number of lines to take into account\n");
 223   fprintf(out, "\n");
 224 }
 225
 226 /*********************************************************************/
 227
 228 /* A quick and dirty hash table */
 229
 230 #define MAGIC_HASH_MULTIPLIER 387433
 231
 232 /* The table itself stores indexes of the strings taken in a char**
 233    table. When a string is added, if it was already in the table, the
 234    new index replaces the previous one.  */
 235
 236 struct hash_table_t {
 237   int size;
 238   int *entries;
 239 };
 240
 241 struct hash_table_t *new_hash_table(int size) {
 242   int k;
 243   struct hash_table_t *hash_table;
 244
 245   hash_table = safe_malloc(sizeof(struct hash_table_t));
 246
 247   hash_table->size = size;
 248   hash_table->entries = safe_malloc(hash_table->size * sizeof(int));
 249
 250   for(k = 0; k < hash_table->size; k++) {
 251     hash_table->entries[k] = -1;
 252   }
 253
 254   return hash_table;
 255 }
 256
 257 void free_hash_table(struct hash_table_t *hash_table) {
 258   free(hash_table->entries);
 259   free(hash_table);
 260 }
 261
 262 /* Adds new_string in the table, associated to new_index. If this
 263    string was not already in the table, returns -1. Otherwise, returns
 264    the previous index it had. */
 265
 266 int add_and_get_previous_index(struct hash_table_t *hash_table,
 267                                const char *new_string, int new_index,
 268                                char **strings) {
 269
 270   unsigned int code = 0, start;
 271   int k;
 272
 273   /* This is my recipe. I checked, it seems to work (as long as
 274      hash_table->size is not a multiple of MAGIC_HASH_MULTIPLIER that
 275      should be okay) */
 276
 277   for(k = 0; new_string[k]; k++) {
 278     code = code * MAGIC_HASH_MULTIPLIER + (unsigned int) (new_string[k]);
 279   }
 280
 281   code = code % hash_table->size;
 282   start = code;
 283
 284   while(hash_table->entries[code] >= 0) {
 285     /* There is a string with that code */
 286     if(strcmp(new_string, strings[hash_table->entries[code]]) == 0) {
 287       /* It is the same string, we keep a copy of the stored index */
 288       int result = hash_table->entries[code];
 289       /* Put the new one */
 290       hash_table->entries[code] = new_index;
 291       /* And return the previous one */
 292       return result;
 293     }
 294     /* This collision was not the same string, let's move to the next
 295        in the table */
 296     code = (code + 1) % hash_table->size;
 297     /* We came back to our original code, which means that the table
 298        is full */
 299     if(code == start) {
 300       fprintf(stderr,
 301               "Full hash table (that should not happen)\n");
 302       exit(EXIT_FAILURE);
 303    }
 304   }
 305
 306   /* This string was not already in there, store the index in the
 307      table and return -1 */
 308
 309   hash_table->entries[code] = new_index;
 310   return -1;
 311 }
 312
 313 /*********************************************************************
 314  A matcher matches either with a collection of substrings, or with a
 315  regexp */
 316
 317 struct matcher {
 318   regex_t preg;
 319   int regexp_error;
 320   int nb_patterns;
 321   int case_sensitive;
 322   char *splitted_patterns, **patterns;
 323 };
 324
 325 /* Routine to add an interval to a sorted list of intervals
 326    extremities. Returns the resulting number of extremities.
 327
 328    This routine is an effing nightmare */
 329
 330 int add_interval(int n, int *switches, int start, int end) {
 331   int f, g, k;
 332
 333   if(start == end) { return n; }
 334
 335   f = 0;
 336   while(f < n && switches[f] <= start) { f++; }
 337   g = f;
 338   while(g < n && switches[g] <= end) { g++; }
 339
 340   if(f == n) {
 341     /* switches[n-1]   start  end  */
 342     /* XXXXXXXXXXXX|               */
 343     switches[f] = start;
 344     switches[f+1] = end;
 345     return n + 2;
 346   }
 347
 348   if(f % 2) {
 349
 350     if(g % 2) {
 351       /* switches[f-1]   start   switches[f]         switches[g-1]   end    switches[g] */
 352       /* |XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX|   ...   |XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX| */
 353       for(k = f; k < n; k++) { switches[k] = switches[k + (g - f)]; }
 354       return n - (g - f);
 355     } else {
 356       /* switches[f-1]   start   switches[f]         switches[g-1]   end    switches[g] */
 357       /* |XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX|   ...   XXXXXXXXXXXX|          |XXXXXXXXXX */
 358       switches[g - 1] = end;
 359       for(k = f; k < n; k++) { switches[k] = switches[k + ((g - 1) - f)]; }
 360       return n - ((g - 1) - f);
 361     }
 362
 363   } else {
 364
 365     if(f == g) {
 366       /* switches[f-1]   start  end   switches[f]  */
 367       /* XXXXXXXXXXXX|                |XXXXXXXXXX  */
 368       for(k = n - 1; k >= f; k--) {
 369         switches[k + 2] = switches[k];
 370       }
 371       switches[f] = start;
 372       switches[f + 1] = end;
 373       return n + 2;
 374     }
 375
 376     if(g % 2) {
 377       /* switches[f-1]   start   switches[f]         switches[g-1]   end    switches[g] */
 378       /* XXXXXXXXXXXX|           |XXXXXXXXXX   ...   |XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX| */
 379       switches[f] = start;
 380       for(k = f + 1; k < n; k++) { switches[k] = switches[k + (g - (f + 1))]; }
 381       return n - (g - (f + 1));
 382     } else {
 383       /* switches[f-1]   start   switches[f]         switches[g-1]   end    switches[g] */
 384       /* XXXXXXXXXXXX|           |XXXXXXXXXX   ...   XXXXXXXXXXXX|          |XXXXXXXXXX */
 385       switches[f] = start;
 386       switches[g - 1] = end;
 387       for(k = f + 1; k < n; k++) { switches[k] = switches[k + ((g - 1) - (f + 1))]; }
 388       return n - ((g - 1) - (f + 1));
 389     }
 390   }
 391 }
 392
 393 int match(struct matcher *matcher, char *string, int *nb_switches, int *switches) {
 394   int n;
 395   char *where;
 396   regmatch_t matches;
 397
 398   if(nb_switches) { *nb_switches = 0; }
 399
 400   if(matcher->nb_patterns >= 0) {
 401     if(matcher->case_sensitive) {
 402       for(n = 0; n < matcher->nb_patterns; n++) {
 403         if((where = strstr(string, matcher->patterns[n])) == 0) return 0;
 404         if(switches) {
 405           *nb_switches = add_interval(*nb_switches, switches,
 406                                       (int) (where - string),
 407                                       (int) (where - string) + strlen(matcher->patterns[n]));
 408         }
 409       }
 410     } else {
 411       for(n = 0; n < matcher->nb_patterns; n++) {
 412         if((where = strcasestr(string, matcher->patterns[n])) == 0) return 0;
 413         if(switches) {
 414           *nb_switches = add_interval(*nb_switches, switches,
 415                                       (int) (where - string),
 416                                       (int) (where - string) + strlen(matcher->patterns[n]));
 417         }
 418       }
 419     }
 420     return 1;
 421   } else {
 422     if(switches) {
 423       if(regexec(&matcher->preg, string, 1, &matches, 0) == 0) {
 424         *nb_switches = 2;
 425         switches[0] = matches.rm_so;
 426         switches[1] = matches.rm_eo;
 427         return 1;
 428       } else {
 429         return 0;
 430       }
 431     } else {
 432       return regexec(&matcher->preg, string, 0, 0, 0) == 0;
 433     }
 434   }
 435 }
 436
 437 void free_matcher(struct matcher *matcher) {
 438   if(matcher->nb_patterns < 0) {
 439     if(!matcher->regexp_error) regfree(&matcher->preg);
 440   } else {
 441     free(matcher->splitted_patterns);
 442     free(matcher->patterns);
 443   }
 444 }
 445
 446 void initialize_matcher(struct matcher *matcher,
 447                         int use_regexp, int case_sensitive,
 448                         const char *pattern) {
 449   const char *s;
 450   char *t, *last_pattern_start;
 451   int n;
 452
 453   if(use_regexp) {
 454     matcher->case_sensitive = case_sensitive;
 455     matcher->nb_patterns = -1;
 456     matcher->regexp_error = regcomp(&matcher->preg, pattern,
 457                                     case_sensitive ? 0 : REG_ICASE);
 458   } else {
 459     matcher->regexp_error = 0;
 460     matcher->nb_patterns = 1;
 461
 462     if(upper_caps_makes_case_sensitive) {
 463       for(s = pattern; *s && !case_sensitive; s++) {
 464         case_sensitive = (*s >= 'A' && *s <= 'Z');
 465       }
 466     }
 467
 468     matcher->case_sensitive = case_sensitive;
 469
 470     for(s = pattern; *s; s++) {
 471       if(*s == pattern_separator) {
 472         matcher->nb_patterns++;
 473       }
 474     }
 475
 476     matcher->splitted_patterns =
 477       safe_malloc((strlen(pattern) + 1) * sizeof(char));
 478
 479     matcher->patterns =
 480       safe_malloc(matcher->nb_patterns * sizeof(char *));
 481
 482     strcpy(matcher->splitted_patterns, pattern);
 483
 484     n = 0;
 485     last_pattern_start = matcher->splitted_patterns;
 486     for(t = matcher->splitted_patterns; n < matcher->nb_patterns; t++) {
 487       if(*t == pattern_separator || *t == '\0') {
 488         *t = '\0';
 489         matcher->patterns[n++] = last_pattern_start;
 490         last_pattern_start = t + 1;
 491       }
 492     }
 493   }
 494 }
 495
 496 /*********************************************************************
 497  Buffer edition */
 498
 499 void delete_char(char *buffer, int *position) {
 500   if(buffer[*position]) {
 501     int c = *position;
 502     while(c < BUFFER_SIZE && buffer[c]) {
 503       buffer[c] = buffer[c+1];
 504       c++;
 505     }
 506   } else error_feedback();
 507 }
 508
 509 void backspace_char(char *buffer, int *position) {
 510   if(*position > 0) {
 511     if(buffer[*position]) {
 512       int c = *position - 1;
 513       while(buffer[c]) {
 514         buffer[c] = buffer[c+1];
 515         c++;
 516       }
 517     } else {
 518       buffer[*position - 1] = '\0';
 519     }
 520
 521     (*position)--;
 522   } else error_feedback();
 523 }
 524
 525 void insert_char(char *buffer, int *position, char character) {
 526   if(strlen(buffer) < BUFFER_SIZE - 1) {
 527     int c = *position;
 528     char t = buffer[c], u;
 529     while(t) {
 530       c++;
 531       u = buffer[c];
 532       buffer[c] = t;
 533       t = u;
 534     }
 535     c++;
 536     buffer[c] = '\0';
 537     buffer[(*position)++] = character;
 538   } else error_feedback();
 539 }
 540
 541 void kill_before_cursor(char *buffer, int *position) {
 542   int s = 0;
 543   while(buffer[*position + s]) {
 544     buffer[s] = buffer[*position + s];
 545     s++;
 546   }
 547   buffer[s] = '\0';
 548   *position = 0;
 549 }
 550
 551 void kill_after_cursor(char *buffer, int *position) {
 552   buffer[*position] = '\0';
 553 }
 554
 555 /*********************************************************************/
 556
 557 int previous_visible(int current_line, char **lines, struct matcher *matcher) {
 558   int line = current_line - 1;
 559   while(line >= 0 && !match(matcher, lines[line], 0, 0)) line--;
 560   return line;
 561 }
 562
 563 int next_visible(int current_line, int nb_lines, char **lines,
 564                  struct matcher *matcher) {
 565   int line = current_line + 1;
 566   while(line < nb_lines && !match(matcher, lines[line], 0, 0)) line++;
 567
 568   if(line < nb_lines)
 569     return line;
 570   else
 571     return -1;
 572 }
 573
 574 /*********************************************************************/
 575
 576 void print_string_with_switches(char *buffer, int line_width,
 577                                 int nb_patterns, int *switches) {
 578   int w, current = 0, next;
 579   if(switches) {
 580     for(w = 0; w < nb_patterns && switches[2 * w] < line_width; w++) {
 581       if(switches[2 * w] < switches[2 * w + 1]) {
 582         next = switches[2 * w];
 583         if(next > line_width) { next = line_width; }
 584         if(next > current) { addnstr(buffer + current,  next - current); }
 585         attron(attr_hits);
 586         current = next;
 587         next = switches[2 * w + 1];
 588         if(next > line_width) { next = line_width; }
 589         if(next > current) { addnstr(buffer + current,  next - current); }
 590         attroff(attr_hits);
 591         current = next;
 592       }
 593     }
 594     if(current < line_width) {
 595       addnstr(buffer + current, line_width - current);
 596     }
 597   } else {
 598     addnstr(buffer, line_width);
 599   }
 600 }
 601
 602 /* The line highlighted is the first one matching the matcher in that
 603    order: (1) current_focus_line after motion, if it does not match,
 604    then (2) the first with a greater index, if none matches, then (3)
 605    the first with a lesser index.
 606
 607    The index of the line actually shown highlighted is written in
 608    displayed_focus_line (it can be -1 if no line at all matches the
 609    matcher)
 610
 611    If there is a motion and a line is actually shown highlighted, its
 612    value is written in current_focus_line. */
 613
 614 void update_screen(int *current_focus_line, int *displayed_focus_line,
 615                    int motion,
 616                    int nb_lines, char **lines,
 617                    int cursor_position,
 618                    char *pattern) {
 619   int *switches;
 620   char buffer[BUFFER_SIZE];
 621   struct matcher matcher;
 622   int k, l, m;
 623   int console_width, console_height;
 624   int nb_printed_lines = 0;
 625   int cursor_x;
 626   int nb_switches;
 627
 628   initialize_matcher(&matcher, use_regexp, case_sensitive, pattern);
 629
 630   if(show_hits) {
 631     if(matcher.nb_patterns >= 0) {
 632       switches = safe_malloc(sizeof(int) * matcher.nb_patterns * 2);
 633     } else {
 634       switches = safe_malloc(sizeof(int) * 2);
 635     }
 636   } else {
 637     switches = 0;
 638   }
 639
 640   console_width = getmaxx(stdscr);
 641   console_height = getmaxy(stdscr);
 642
 643   use_default_colors();
 644
 645   /* Add an empty line where we will print the modeline at the end */
 646
 647   addstr("\n");
 648
 649   /* If the regexp is erroneous, print a message saying so */
 650
 651   if(matcher.regexp_error) {
 652     attron(attr_error);
 653     addnstr("Regexp syntax error", console_width);
 654     attroff(attr_error);
 655   }
 656
 657   /* Else, and we do have lines to select from, find a visible line. */
 658
 659   else if(nb_lines > 0) {
 660     int new_focus_line;
 661     if(match(&matcher, lines[*current_focus_line], 0, 0)) {
 662       new_focus_line = *current_focus_line;
 663     } else {
 664       new_focus_line = next_visible(*current_focus_line, nb_lines, lines,
 665                                     &matcher);
 666       if(new_focus_line < 0) {
 667         new_focus_line = previous_visible(*current_focus_line, lines, &matcher);
 668       }
 669     }
 670
 671     /* If we found a visible line and we should move, let's move */
 672
 673     if(new_focus_line >= 0 && motion != 0) {
 674       int l = new_focus_line;
 675       if(motion > 0) {
 676         /* We want to go down, let's find the first visible line below */
 677         for(m = 0; l >= 0 && m < motion; m++) {
 678           l = next_visible(l, nb_lines, lines, &matcher);
 679           if(l >= 0) {
 680             new_focus_line = l;
 681           }
 682         }
 683       } else {
 684         /* We want to go up, let's find the first visible line above */
 685         for(m = 0; l >= 0 && m < -motion; m++) {
 686           l = previous_visible(l, lines, &matcher);
 687           if(l >= 0) {
 688             new_focus_line = l;
 689           }
 690         }
 691       }
 692     }
 693
 694     /* Here new_focus_line is either a line number matching the
 695        pattern, or -1 */
 696
 697     if(new_focus_line >= 0) {
 698
 699       int first_line = new_focus_line, last_line = new_focus_line;
 700       int nb_match = 1;
 701
 702       /* We find the first and last lines to show, so that the total
 703          of visible lines between them (them included) is
 704          console_height-1 */
 705
 706       while(nb_match < console_height-1 &&
 707             (first_line > 0 || last_line < nb_lines - 1)) {
 708
 709         if(first_line > 0) {
 710           first_line--;
 711           while(first_line > 0 && !match(&matcher, lines[first_line], 0, 0)) {
 712             first_line--;
 713           }
 714           if(match(&matcher, lines[first_line], 0, 0)) {
 715             nb_match++;
 716           }
 717         }
 718
 719         if(nb_match < console_height - 1 && last_line < nb_lines - 1) {
 720           last_line++;
 721           while(last_line < nb_lines - 1 && !match(&matcher, lines[last_line], 0, 0)) {
 722             last_line++;
 723           }
 724
 725           if(match(&matcher, lines[last_line], 0, 0)) {
 726             nb_match++;
 727           }
 728         }
 729       }
 730
 731       /* Now we display them */
 732
 733       for(l = first_line; l <= last_line; l++) {
 734         if(match(&matcher, lines[l], &nb_switches, switches)) {
 735           int k = 0;
 736
 737           while(lines[l][k] && k < BUFFER_SIZE - 2 && k < console_width) {
 738             buffer[k] = lines[l][k];
 739             k++;
 740           }
 741
 742           /* Highlight the highlighted line ... */
 743
 744           if(l == new_focus_line) {
 745             if(show_long_lines && k >= console_width) {
 746               attron(attr_focus_line);
 747               print_string_with_switches(buffer, console_width-1,
 748                                          nb_switches / 2, switches);
 749               /* attron(attr_error); */
 750               addnstr("\\", 1);
 751               /* attroff(attr_error); */
 752               attroff(attr_focus_line);
 753             } else {
 754               while(k < console_width) {
 755                 buffer[k++] = ' ';
 756               }
 757               attron(attr_focus_line);
 758               print_string_with_switches(buffer, k,
 759                                          nb_switches / 2, switches);
 760               attroff(attr_focus_line);
 761             }
 762           } else {
 763             if(show_long_lines && k >= console_width) {
 764               print_string_with_switches(buffer, console_width-1,
 765                                          nb_switches / 2, switches);
 766               attron(attr_focus_line);
 767               addnstr("\\", 1);
 768               attroff(attr_focus_line);
 769             } else {
 770               if(k < console_width) {
 771                 buffer[k++] = '\n';
 772                 buffer[k++] = '\0';
 773               }
 774               print_string_with_switches(buffer, k,
 775                                          nb_switches / 2, switches);
 776             }
 777           }
 778
 779           nb_printed_lines++;
 780         }
 781       }
 782
 783       /* If we are on a focused line and we moved, this become the new
 784          focus line */
 785
 786       if(motion != 0) {
 787         *current_focus_line = new_focus_line;
 788       }
 789     }
 790
 791     *displayed_focus_line = new_focus_line;
 792
 793     if(nb_printed_lines == 0) {
 794       attron(attr_error);
 795       addnstr("No selection", console_width);
 796       attroff(attr_error);
 797     }
 798   }
 799
 800   /* Else, print a message saying that there are no lines to select from */
 801
 802   else {
 803     attron(attr_error);
 804     addnstr("Empty choice", console_width);
 805     attroff(attr_error);
 806   }
 807
 808   clrtobot();
 809
 810   /* Draw the modeline */
 811
 812   move(0, 0);
 813
 814   attron(attr_modeline);
 815
 816   for(k = 0; k < console_width; k++) buffer[k] = ' ';
 817   buffer[console_width] = '\0';
 818   addnstr(buffer, console_width);
 819
 820   move(0, 0);
 821
 822   /* There must be a more elegant way of moving the cursor at a
 823      location met during display */
 824
 825   cursor_x = 0;
 826
 827   if(title) {
 828     addstr(title);
 829     addstr(" ");
 830     cursor_x += strlen(title) + 1;
 831   }
 832
 833   sprintf(buffer, "%d/%d ", nb_printed_lines, nb_lines);
 834   addstr(buffer);
 835   cursor_x += strlen(buffer);
 836
 837   addnstr(pattern, cursor_position);
 838   cursor_x += cursor_position;
 839
 840   if(pattern[cursor_position]) {
 841     addstr(pattern + cursor_position);
 842   } else {
 843     addstr(" ");
 844   }
 845
 846   /* Add a few info about the mode we are in (regexp and/or case
 847      sensitive) */
 848
 849   if(use_regexp || matcher.case_sensitive) {
 850     addstr(" [");
 851     if(use_regexp) {
 852       addstr("regexp");
 853     }
 854
 855     if(matcher.case_sensitive) {
 856       if(use_regexp) {
 857         addstr(",");
 858       }
 859       addstr("case");
 860     }
 861     addstr("]");
 862   }
 863
 864   move(0, cursor_x);
 865
 866   attroff(attr_modeline);
 867
 868   /* We are done */
 869
 870   refresh();
 871   if(switches) { free(switches); }
 872   free_matcher(&matcher);
 873 }
 874
 875 /*********************************************************************/
 876
 877 void store_line(struct hash_table_t *hash_table,
 878                 const char *new_line,
 879                 int *nb_lines, char **lines) {
 880   int dup;
 881
 882   /* Remove the zsh history prefix */
 883
 884   if(zsh_history && *new_line == ':') {
 885     while(*new_line && *new_line != ';') new_line++;
 886     if(*new_line == ';') new_line++;
 887   }
 888
 889   /* Remove the bash history prefix */
 890
 891   if(bash_history) {
 892     while(*new_line == ' ') new_line++;
 893     while(*new_line >= '0' && *new_line <= '9') new_line++;
 894     while(*new_line == ' ') new_line++;
 895   }
 896
 897   /* Check for duplicates with the hash table and insert the line in
 898      the list if necessary */
 899
 900   if(hash_table) {
 901     dup = add_and_get_previous_index(hash_table,
 902                                      new_line, *nb_lines, lines);
 903   } else {
 904     dup = -1;
 905   }
 906
 907   if(dup < 0) {
 908     lines[*nb_lines] = safe_malloc((strlen(new_line) + 1) * sizeof(char));
 909     strcpy(lines[*nb_lines], new_line);
 910   } else {
 911     /* The string was already in there, so we do not allocate a new
 912        string but use the pointer to the first occurence of it */
 913     lines[*nb_lines] = lines[dup];
 914     lines[dup] = 0;
 915   }
 916
 917   (*nb_lines)++;
 918 }
 919
 920 void read_file(struct hash_table_t *hash_table,
 921                const char *input_filename,
 922                int nb_lines_max, int *nb_lines, char **lines) {
 923
 924   char raw_line[BUFFER_SIZE];
 925   char *s;
 926   FILE *file;
 927   int l;
 928
 929   file = fopen(input_filename, "r");
 930
 931   if(!file) {
 932     fprintf(stderr, "selector: Can not open `%s'.\n", input_filename);
 933     exit(EXIT_FAILURE);
 934   }
 935
 936   if(label_separator == '\n') {
 937     while(*nb_lines < nb_lines_max && fgets(raw_line, BUFFER_SIZE, file)) {
 938       l = strlen(raw_line);
 939       fgets(raw_line + l, BUFFER_SIZE - l, file);
 940       for(s = raw_line + strlen(raw_line) - 1; s > raw_line && *s == '\n'; s--) {
 941         *s = '\0';
 942       }
 943       store_line(hash_table, raw_line, nb_lines, lines);
 944     }
 945   } else {
 946     while(*nb_lines < nb_lines_max && fgets(raw_line, BUFFER_SIZE, file)) {
 947       for(s = raw_line + strlen(raw_line) - 1; s > raw_line && *s == '\n'; s--) {
 948         *s = '\0';
 949       }
 950       store_line(hash_table, raw_line, nb_lines, lines);
 951     }
 952   }
 953
 954   fclose(file);
 955 }
 956
 957 /*********************************************************************/
 958
 959 /* For long options that have no equivalent short option, use a
 960    non-character as a pseudo short option, starting with CHAR_MAX + 1.  */
 961 enum
 962 {
 963   OPT_BASH_MODE = CHAR_MAX + 1
 964 };
 965
 966 static struct option long_options[] = {
 967   { "output-file", 1, 0, 'o' },
 968   { "pattern-separator", 1, 0, 's' },
 969   { "label-separator", 1, 0, 'x' },
 970   { "inject-in-tty", no_argument, 0, 'v' },
 971   { "add-control-qs", no_argument, 0, 'w' },
 972   { "monochrome", no_argument, 0, 'm' },
 973   { "no-beep", no_argument, 0, 'q' },
 974   { "revert-order", no_argument, 0, 'i' },
 975   { "remove-bash-prefix", no_argument, 0, 'b' },
 976   { "remove-zsh-prefix", no_argument, 0, 'z' },
 977   { "remove-duplicates", no_argument, 0, 'd' },
 978   { "regexp", no_argument, 0, 'e' },
 979   { "case-sensitive", no_argument, 0, 'a' },
 980   { "show-long-lines", no_argument, 0, 'j'},
 981   { "show-hits", no_argument, 0, 'j'},
 982   { "upper-case-makes-case-sensitive", no_argument, 0, 'u' },
 983   { "title", 1, 0, 't' },
 984   { "pattern", 1, 0, 'r' },
 985   { "number-of-lines", 1, 0, 'l' },
 986   { "colors", 1, 0, 'c' },
 987   { "bash", no_argument, 0, OPT_BASH_MODE },
 988   { "help", no_argument, 0, 'h' },
 989   { 0, 0, 0, 0 }
 990 };
 991
 992 int main(int argc, char **argv) {
 993
 994   char output_filename[BUFFER_SIZE];
 995   char pattern[BUFFER_SIZE];
 996   int c, k, l, n;
 997   int cursor_position;
 998   int error = 0, show_help = 0, done = 0;
 999   int key;
1000   int current_focus_line, displayed_focus_line;
1001
1002   int colors[4];
1003   int color_fg_modeline, color_bg_modeline;
1004   int color_fg_highlight, color_bg_highlight;
1005
1006   char **lines, **labels;
1007   int nb_lines;
1008   struct hash_table_t *hash_table;
1009   char *bash_histsize;
1010
1011   if(!isatty(STDIN_FILENO)) {
1012     fprintf(stderr, "selector: The standard input is not a tty.\n");
1013     exit(EXIT_FAILURE);
1014   }
1015
1016   pattern[0] = '\0';
1017
1018   color_fg_modeline  = COLOR_WHITE;
1019   color_bg_modeline  = COLOR_BLACK;
1020   color_fg_highlight = COLOR_BLACK;
1021   color_bg_highlight = COLOR_YELLOW;
1022
1023   setlocale(LC_ALL, "");
1024
1025   strcpy(output_filename, "");
1026
1027   while ((c = getopt_long(argc, argv, "o:s:x:vwmqf:ibzdeajyunt:r:l:c:-h",
1028                           long_options, NULL)) != -1) {
1029
1030     switch(c) {
1031
1032     case 'o':
1033       strncpy(output_filename, optarg, BUFFER_SIZE);
1034       break;
1035
1036     case 's':
1037       pattern_separator = optarg[0];
1038       break;
1039
1040     case 'x':
1041       if(strcmp(optarg, "\\n") == 0) {
1042         label_separator = '\n';
1043       } else {
1044         label_separator = optarg[0];
1045       }
1046       break;
1047
1048     case 'v':
1049       output_to_vt_buffer = 1;
1050       break;
1051
1052     case 'w':
1053       add_control_qs = 1;
1054       break;
1055
1056     case 'm':
1057       with_colors = 0;
1058       break;
1059
1060     case 'q':
1061       error_flash = 1;
1062       break;
1063
1064     case 'i':
1065       inverse_order = 1;
1066       break;
1067
1068     case 'b':
1069       bash_history = 1;
1070       break;
1071
1072     case 'z':
1073       zsh_history = 1;
1074       break;
1075
1076     case 'd':
1077       remove_duplicates = 1;
1078       break;
1079
1080     case 'e':
1081       use_regexp = 1;
1082       break;
1083
1084     case 'a':
1085       case_sensitive = 1;
1086       break;
1087
1088     case 'j':
1089       show_long_lines = 1;
1090       break;
1091
1092     case 'y':
1093       show_hits = 1;
1094       break;
1095
1096     case 'u':
1097       upper_caps_makes_case_sensitive = 1;
1098       break;
1099
1100     case 't':
1101       free(title);
1102       title = safe_malloc((strlen(optarg) + 1) * sizeof(char));
1103       strcpy(title, optarg);
1104       break;
1105
1106     case 'r':
1107       strcpy(pattern, optarg);
1108       break;
1109
1110     case 'l':
1111       str_to_positive_integers(optarg, &nb_lines_max, 1);
1112       break;
1113
1114     case 'c':
1115       str_to_positive_integers(optarg, colors, 4);
1116       color_fg_modeline = colors[0];
1117       color_bg_modeline = colors[1];
1118       color_fg_highlight = colors[2];
1119       color_bg_highlight = colors[3];
1120       break;
1121
1122     case 'h':
1123       show_help = 1;
1124       break;
1125
1126     case OPT_BASH_MODE:
1127       /* Same as -c 7,4,0,3 -q */
1128       /* color_fg_modeline = 7; */
1129       /* color_bg_modeline = 4; */
1130       /* color_fg_highlight = 0; */
1131       /* color_bg_highlight = 3; */
1132       /* error_flash = 1; */
1133       /* Same as -b -i -d -v -w */
1134       bash_history = 1;
1135       inverse_order = 1;
1136       remove_duplicates = 1;
1137       output_to_vt_buffer = 1;
1138       add_control_qs = 1;
1139       bash_histsize = getenv("HISTSIZE");
1140       if(bash_histsize) {
1141         str_to_positive_integers(bash_histsize, &nb_lines_max, 1);
1142       }
1143       break;
1144
1145     default:
1146       error = 1;
1147       break;
1148     }
1149   }
1150
1151   if(error) {
1152     usage(stderr);
1153     exit(EXIT_FAILURE);
1154   }
1155
1156   if(show_help) {
1157     usage(stdout);
1158     exit(EXIT_SUCCESS);
1159   }
1160
1161   lines = safe_malloc(nb_lines_max * sizeof(char *));
1162
1163   nb_lines = 0;
1164
1165   if(remove_duplicates) {
1166     hash_table = new_hash_table(nb_lines_max * 10);
1167   } else {
1168     hash_table = 0;
1169   }
1170
1171   while(optind < argc) {
1172     read_file(hash_table,
1173               argv[optind],
1174               nb_lines_max, &nb_lines, lines);
1175     optind++;
1176   }
1177
1178   if(hash_table) {
1179     free_hash_table(hash_table);
1180   }
1181
1182   /* Now remove the null strings */
1183
1184   n = 0;
1185   for(k = 0; k < nb_lines; k++) {
1186     if(lines[k]) {
1187       lines[n++] = lines[k];
1188     }
1189   }
1190
1191   nb_lines = n;
1192
1193   if(inverse_order) {
1194     for(l = 0; l < nb_lines / 2; l++) {
1195       char *s = lines[nb_lines - 1 - l];
1196       lines[nb_lines - 1 - l] = lines[l];
1197       lines[l] = s;
1198     }
1199   }
1200
1201   /* Build the labels from the strings, take only the part before the
1202      label_separator and transform control characters to printable
1203      ones */
1204
1205   labels = safe_malloc(nb_lines * sizeof(char *));
1206
1207   for(l = 0; l < nb_lines; l++) {
1208     char *s, *t;
1209     int e = 0;
1210     const char *u;
1211     t = lines[l];
1212
1213     while(*t && *t != label_separator) {
1214       u = unctrl(*t++);
1215       e += strlen(u);
1216     }
1217
1218     labels[l] = safe_malloc((e + 1) * sizeof(char));
1219     t = lines[l];
1220     s = labels[l];
1221     while(*t && *t != label_separator) {
1222       u = unctrl(*t++);
1223       while(*u) { *s++ = *u++; }
1224     }
1225     *s = '\0';
1226   }
1227
1228   cursor_position = 0;
1229
1230   /* Here we start to display with curse */
1231
1232   initscr();
1233   cbreak();
1234   noecho();
1235   intrflush(stdscr, FALSE);
1236
1237   /* So that the arrow keys work */
1238   keypad(stdscr, TRUE);
1239
1240   attr_error = A_STANDOUT;
1241   attr_modeline = A_REVERSE;
1242   attr_focus_line = A_STANDOUT;
1243   attr_hits = A_BOLD;
1244
1245   if(with_colors && has_colors()) {
1246
1247     start_color();
1248
1249     if(color_fg_modeline < 0  || color_fg_modeline >= COLORS ||
1250        color_bg_modeline < 0  || color_bg_modeline >= COLORS ||
1251        color_fg_highlight < 0 || color_bg_highlight >= COLORS ||
1252        color_bg_highlight < 0 || color_bg_highlight >= COLORS) {
1253       echo();
1254       endwin();
1255       fprintf(stderr, "selector: Color numbers have to be between 0 and %d.\n",
1256               COLORS - 1);
1257       exit(EXIT_FAILURE);
1258     }
1259
1260     init_pair(1, color_fg_modeline, color_bg_modeline);
1261     attr_modeline = COLOR_PAIR(1);
1262
1263     init_pair(2, color_fg_highlight, color_bg_highlight);
1264     attr_focus_line = COLOR_PAIR(2);
1265
1266     init_pair(3, COLOR_WHITE, COLOR_RED);
1267     attr_error = COLOR_PAIR(3);
1268
1269   }
1270
1271   current_focus_line = 0;
1272   displayed_focus_line = 0;
1273   cursor_position = strlen(pattern);
1274
1275   update_screen(&current_focus_line, &displayed_focus_line,
1276                 0,
1277                 nb_lines, labels, cursor_position, pattern);
1278
1279   do {
1280     int motion = 0;
1281
1282     key = getch();
1283
1284     if(key >= ' ' && key <= '~') { /* Insert character */
1285       insert_char(pattern, &cursor_position, key);
1286     }
1287
1288     else if(key == KEY_BACKSPACE ||
1289             key == '\010' || /* ^H */
1290             key == '\177') { /* ^? */
1291       backspace_char(pattern, &cursor_position);
1292     }
1293
1294     else if(key == KEY_DC ||
1295             key == '\004') { /* ^D */
1296       delete_char(pattern, &cursor_position);
1297     }
1298
1299     else if(key == KEY_HOME) {
1300       current_focus_line = 0;
1301     }
1302
1303     else if(key == KEY_END) {
1304       current_focus_line = nb_lines - 1;
1305     }
1306
1307     else if(key == KEY_NPAGE) {
1308       motion = 10;
1309     }
1310
1311     else if(key == KEY_PPAGE) {
1312       motion = -10;
1313     }
1314
1315     else if(key == KEY_DOWN ||
1316             key == '\016') { /* ^N */
1317       motion = 1;
1318     }
1319
1320     else if(key == KEY_UP ||
1321             key == '\020') { /* ^P */
1322       motion = -1;
1323     }
1324
1325     else if(key == KEY_LEFT ||
1326             key == '\002') { /* ^B */
1327       if(cursor_position > 0) cursor_position--;
1328       else error_feedback();
1329     }
1330
1331     else if(key == KEY_RIGHT ||
1332             key == '\006') { /* ^F */
1333       if(pattern[cursor_position]) cursor_position++;
1334       else error_feedback();
1335     }
1336
1337     else if(key == '\001') { /* ^A */
1338       cursor_position = 0;
1339     }
1340
1341     else if(key == '\005') { /* ^E */
1342       cursor_position = strlen(pattern);
1343     }
1344
1345     else if(key == '\022') { /* ^R */
1346       use_regexp = !use_regexp;
1347     }
1348
1349     else if(key == '\011') { /* ^I */
1350       case_sensitive = !case_sensitive;
1351     }
1352
1353     else if(key == '\025') { /* ^U */
1354       kill_before_cursor(pattern, &cursor_position);
1355     }
1356
1357     else if(key == '\013') { /* ^K */
1358       kill_after_cursor(pattern, &cursor_position);
1359     }
1360
1361     else if(key == '\014') { /* ^L */
1362       /* I suspect that we may sometime mess up the display, so ^L is
1363          here to force a full refresh */
1364       clear();
1365     }
1366
1367     else if(key == '\007' || /* ^G */
1368             key == '\033' || /* ^[ (escape) */
1369             key == '\n' ||
1370             key == KEY_ENTER) {
1371       done = 1;
1372     }
1373
1374     else if(key == KEY_RESIZE || key == -1) {
1375       /* Do nothing when the tty is resized */
1376     }
1377
1378     else {
1379       /* Unknown key */
1380       error_feedback();
1381     }
1382
1383     update_screen(&current_focus_line, &displayed_focus_line,
1384                   motion,
1385                   nb_lines, labels, cursor_position, pattern);
1386
1387   } while(!done);
1388
1389   echo();
1390   endwin();
1391
1392   /* Here we come back to standard display */
1393
1394   if(key == KEY_ENTER || key == '\n') {
1395
1396     char *t;
1397
1398     if(displayed_focus_line >= 0 && displayed_focus_line < nb_lines) {
1399       t = lines[displayed_focus_line];
1400       if(label_separator) {
1401         while(*t && *t != label_separator) t++;
1402         if(*t) t++;
1403       }
1404     } else {
1405       t = 0;
1406     }
1407
1408     if(output_to_vt_buffer && t) {
1409       inject_into_tty_buffer(t, add_control_qs);
1410     }
1411
1412     if(output_filename[0]) {
1413       FILE *out = fopen(output_filename, "w");
1414       if(out) {
1415         if(t) {
1416           fprintf(out, "%s", t);
1417         }
1418         fprintf(out, "\n");
1419       } else {
1420         fprintf(stderr,
1421                 "selector: Can not open %s for writing.\n",
1422                 output_filename);
1423         exit(EXIT_FAILURE);
1424       }
1425       fclose(out);
1426     }
1427
1428   } else {
1429     printf("Aborted.\n");
1430   }
1431
1432   for(l = 0; l < nb_lines; l++) {
1433     free(lines[l]);
1434     free(labels[l]);
1435   }
1436
1437   free(labels);
1438   free(lines);
1439   free(title);
1440
1441   exit(EXIT_SUCCESS);
1442 }