usr.bin/diff/diffreg.c

   1 /*      $OpenBSD: diffreg.c,v 1.91 2016/03/01 20:57:35 natano Exp $     */
   2
   3 /*
   4  * Copyright (C) Caldera International Inc.  2001-2002.
   5  * All rights reserved.
   6  *
   7  * Redistribution and use in source and binary forms, with or without
   8  * modification, are permitted provided that the following conditions
   9  * are met:
  10  * 1. Redistributions of source code and documentation must retain the above
  11  *    copyright notice, this list of conditions and the following disclaimer.
  12  * 2. Redistributions in binary form must reproduce the above copyright
  13  *    notice, this list of conditions and the following disclaimer in the
  14  *    documentation and/or other materials provided with the distribution.
  15  * 3. All advertising materials mentioning features or use of this software
  16  *    must display the following acknowledgement:
  17  *      This product includes software developed or owned by Caldera
  18  *      International, Inc.
  19  * 4. Neither the name of Caldera International, Inc. nor the names of other
  20  *    contributors may be used to endorse or promote products derived from
  21  *    this software without specific prior written permission.
  22  *
  23  * USE OF THE SOFTWARE PROVIDED FOR UNDER THIS LICENSE BY CALDERA
  24  * INTERNATIONAL, INC. AND CONTRIBUTORS ``AS IS'' AND ANY EXPRESS OR
  25  * IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE IMPLIED WARRANTIES
  26  * OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE ARE DISCLAIMED.
  27  * IN NO EVENT SHALL CALDERA INTERNATIONAL, INC. BE LIABLE FOR ANY DIRECT,
  28  * INDIRECT INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES
  29  * (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR
  30  * SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
  31  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT,
  32  * STRICT LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING
  33  * IN ANY WAY OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE
  34  * POSSIBILITY OF SUCH DAMAGE.
  35  */
  36 /*-
  37  * Copyright (c) 1991, 1993
  38  *      The Regents of the University of California.  All rights reserved.
  39  *
  40  * Redistribution and use in source and binary forms, with or without
  41  * modification, are permitted provided that the following conditions
  42  * are met:
  43  * 1. Redistributions of source code must retain the above copyright
  44  *    notice, this list of conditions and the following disclaimer.
  45  * 2. Redistributions in binary form must reproduce the above copyright
  46  *    notice, this list of conditions and the following disclaimer in the
  47  *    documentation and/or other materials provided with the distribution.
  48  * 3. Neither the name of the University nor the names of its contributors
  49  *    may be used to endorse or promote products derived from this software
  50  *    without specific prior written permission.
  51  *
  52  * THIS SOFTWARE IS PROVIDED BY THE REGENTS AND CONTRIBUTORS ``AS IS'' AND
  53  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
  54  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
  55  * ARE DISCLAIMED.  IN NO EVENT SHALL THE REGENTS OR CONTRIBUTORS BE LIABLE
  56  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
  57  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
  58  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
  59  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
  60  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
  61  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
  62  * SUCH DAMAGE.
  63  *
  64  *      @(#)diffreg.c   8.1 (Berkeley) 6/6/93
  65  */
  66
  67 #include <sys/cdefs.h>
  68 __FBSDID("$FreeBSD$");
  69
  70 #include <sys/capsicum.h>
  71 #include <sys/procdesc.h>
  72 #include <sys/stat.h>
  73 #include <sys/types.h>
  74 #include <sys/event.h>
  75 #include <sys/wait.h>
  76
  77 #include <capsicum_helpers.h>
  78 #include <ctype.h>
  79 #include <err.h>
  80 #include <errno.h>
  81 #include <fcntl.h>
  82 #include <paths.h>
  83 #include <regex.h>
  84 #include <stdbool.h>
  85 #include <stddef.h>
  86 #include <stdint.h>
  87 #include <stdio.h>
  88 #include <stdlib.h>
  89 #include <string.h>
  90 #include <unistd.h>
  91 #include <limits.h>
  92 #include <signal.h>
  93
  94 #include "diff.h"
  95 #include "xmalloc.h"
  96
  97 #define _PATH_PR "/usr/bin/pr"
  98
  99 /*
 100  * diff - compare two files.
 101  */
 102
 103 /*
 104  *      Uses an algorithm due to Harold Stone, which finds
 105  *      a pair of longest identical subsequences in the two
 106  *      files.
 107  *
 108  *      The major goal is to generate the match vector J.
 109  *      J[i] is the index of the line in file1 corresponding
 110  *      to line i file0. J[i] = 0 if there is no
 111  *      such line in file1.
 112  *
 113  *      Lines are hashed so as to work in core. All potential
 114  *      matches are located by sorting the lines of each file
 115  *      on the hash (called ``value''). In particular, this
 116  *      collects the equivalence classes in file1 together.
 117  *      Subroutine equiv replaces the value of each line in
 118  *      file0 by the index of the first element of its
 119  *      matching equivalence in (the reordered) file1.
 120  *      To save space equiv squeezes file1 into a single
 121  *      array member in which the equivalence classes
 122  *      are simply concatenated, except that their first
 123  *      members are flagged by changing sign.
 124  *
 125  *      Next the indices that point into member are unsorted into
 126  *      array class according to the original order of file0.
 127  *
 128  *      The cleverness lies in routine stone. This marches
 129  *      through the lines of file0, developing a vector klist
 130  *      of "k-candidates". At step i a k-candidate is a matched
 131  *      pair of lines x,y (x in file0 y in file1) such that
 132  *      there is a common subsequence of length k
 133  *      between the first i lines of file0 and the first y
 134  *      lines of file1, but there is no such subsequence for
 135  *      any smaller y. x is the earliest possible mate to y
 136  *      that occurs in such a subsequence.
 137  *
 138  *      Whenever any of the members of the equivalence class of
 139  *      lines in file1 matable to a line in file0 has serial number
 140  *      less than the y of some k-candidate, that k-candidate
 141  *      with the smallest such y is replaced. The new
 142  *      k-candidate is chained (via pred) to the current
 143  *      k-1 candidate so that the actual subsequence can
 144  *      be recovered. When a member has serial number greater
 145  *      that the y of all k-candidates, the klist is extended.
 146  *      At the end, the longest subsequence is pulled out
 147  *      and placed in the array J by unravel
 148  *
 149  *      With J in hand, the matches there recorded are
 150  *      check'ed against reality to assure that no spurious
 151  *      matches have crept in due to hashing. If they have,
 152  *      they are broken, and "jackpot" is recorded--a harmless
 153  *      matter except that a true match for a spuriously
 154  *      mated line may now be unnecessarily reported as a change.
 155  *
 156  *      Much of the complexity of the program comes simply
 157  *      from trying to minimize core utilization and
 158  *      maximize the range of doable problems by dynamically
 159  *      allocating what is needed and reusing what is not.
 160  *      The core requirements for problems larger than somewhat
 161  *      are (in words) 2*length(file0) + length(file1) +
 162  *      3*(number of k-candidates installed),  typically about
 163  *      6n words for files of length n.
 164  */
 165
 166 struct cand {
 167         int     x;
 168         int     y;
 169         int     pred;
 170 };
 171
 172 static struct line {
 173         int     serial;
 174         int     value;
 175 } *file[2];
 176
 177 /*
 178  * The following struct is used to record change information when
 179  * doing a "context" or "unified" diff.  (see routine "change" to
 180  * understand the highly mnemonic field names)
 181  */
 182 struct context_vec {
 183         int     a;              /* start line in old file */
 184         int     b;              /* end line in old file */
 185         int     c;              /* start line in new file */
 186         int     d;              /* end line in new file */
 187 };
 188
 189 #define diff_output     printf
 190 static FILE     *opentemp(const char *);
 191 static void      output(char *, FILE *, char *, FILE *, int);
 192 static void      check(FILE *, FILE *, int);
 193 static void      range(int, int, const char *);
 194 static void      uni_range(int, int);
 195 static void      dump_context_vec(FILE *, FILE *, int);
 196 static void      dump_unified_vec(FILE *, FILE *, int);
 197 static void      prepare(int, FILE *, size_t, int);
 198 static void      prune(void);
 199 static void      equiv(struct line *, int, struct line *, int, int *);
 200 static void      unravel(int);
 201 static void      unsort(struct line *, int, int *);
 202 static void      change(char *, FILE *, char *, FILE *, int, int, int, int, int *);
 203 static void      sort(struct line *, int);
 204 static void      print_header(const char *, const char *);
 205 static bool      ignoreline_pattern(char *);
 206 static bool      ignoreline(char *, bool);
 207 static int       asciifile(FILE *);
 208 static int       fetch(long *, int, int, FILE *, int, int, int);
 209 static int       newcand(int, int, int);
 210 static int       search(int *, int, int);
 211 static int       skipline(FILE *);
 212 static int       isqrt(int);
 213 static int       stone(int *, int, int *, int *, int);
 214 static int       readhash(FILE *, int);
 215 static int       files_differ(FILE *, FILE *, int);
 216 static char     *match_function(const long *, int, FILE *);
 217 static char     *preadline(int, size_t, off_t);
 218
 219 static int  *J;                 /* will be overlaid on class */
 220 static int  *class;             /* will be overlaid on file[0] */
 221 static int  *klist;             /* will be overlaid on file[0] after class */
 222 static int  *member;            /* will be overlaid on file[1] */
 223 static int   clen;
 224 static int   inifdef;           /* whether or not we are in a #ifdef block */
 225 static int   len[2];
 226 static int   pref, suff;        /* length of prefix and suffix */
 227 static int   slen[2];
 228 static int   anychange;
 229 static long *ixnew;             /* will be overlaid on file[1] */
 230 static long *ixold;             /* will be overlaid on klist */
 231 static struct cand *clist;      /* merely a free storage pot for candidates */
 232 static int   clistlen;          /* the length of clist */
 233 static struct line *sfile[2];   /* shortened by pruning common prefix/suffix */
 234 static int (*chrtran)(int);     /* translation table for case-folding */
 235 static struct context_vec *context_vec_start;
 236 static struct context_vec *context_vec_end;
 237 static struct context_vec *context_vec_ptr;
 238
 239 #define FUNCTION_CONTEXT_SIZE   55
 240 static char lastbuf[FUNCTION_CONTEXT_SIZE];
 241 static int lastline;
 242 static int lastmatchline;
 243
 244 static int
 245 clow2low(int c)
 246 {
 247
 248         return (c);
 249 }
 250
 251 static int
 252 cup2low(int c)
 253 {
 254
 255         return tolower(c);
 256 }
 257
 258 int
 259 diffreg(char *file1, char *file2, int flags, int capsicum)
 260 {
 261         FILE *f1, *f2;
 262         int i, rval;
 263         int     ostdout = -1;
 264         int pr_pd, kq;
 265         struct kevent *e;
 266         cap_rights_t rights_ro;
 267
 268         e = NULL;
 269         kq = -1;
 270         f1 = f2 = NULL;
 271         rval = D_SAME;
 272         anychange = 0;
 273         lastline = 0;
 274         lastmatchline = 0;
 275         context_vec_ptr = context_vec_start - 1;
 276         if (flags & D_IGNORECASE)
 277                 chrtran = cup2low;
 278         else
 279                 chrtran = clow2low;
 280         if (S_ISDIR(stb1.st_mode) != S_ISDIR(stb2.st_mode))
 281                 return (S_ISDIR(stb1.st_mode) ? D_MISMATCH1 : D_MISMATCH2);
 282         if (strcmp(file1, "-") == 0 && strcmp(file2, "-") == 0)
 283                 goto closem;
 284
 285         if (flags & D_EMPTY1)
 286                 f1 = fopen(_PATH_DEVNULL, "r");
 287         else {
 288                 if (!S_ISREG(stb1.st_mode)) {
 289                         if ((f1 = opentemp(file1)) == NULL ||
 290                             fstat(fileno(f1), &stb1) < 0) {
 291                                 warn("%s", file1);
 292                                 status |= 2;
 293                                 goto closem;
 294                         }
 295                 } else if (strcmp(file1, "-") == 0)
 296                         f1 = stdin;
 297                 else
 298                         f1 = fopen(file1, "r");
 299         }
 300         if (f1 == NULL) {
 301                 warn("%s", file1);
 302                 status |= 2;
 303                 goto closem;
 304         }
 305
 306         if (flags & D_EMPTY2)
 307                 f2 = fopen(_PATH_DEVNULL, "r");
 308         else {
 309                 if (!S_ISREG(stb2.st_mode)) {
 310                         if ((f2 = opentemp(file2)) == NULL ||
 311                             fstat(fileno(f2), &stb2) < 0) {
 312                                 warn("%s", file2);
 313                                 status |= 2;
 314                                 goto closem;
 315                         }
 316                 } else if (strcmp(file2, "-") == 0)
 317                         f2 = stdin;
 318                 else
 319                         f2 = fopen(file2, "r");
 320         }
 321         if (f2 == NULL) {
 322                 warn("%s", file2);
 323                 status |= 2;
 324                 goto closem;
 325         }
 326
 327         if (lflag) {
 328                 /* redirect stdout to pr */
 329                 int      pfd[2];
 330                 pid_t   pid;
 331                 char    *header;
 332
 333                 xasprintf(&header, "%s %s %s", diffargs, file1, file2);
 334                 signal(SIGPIPE, SIG_IGN);
 335                 fflush(stdout);
 336                 rewind(stdout);
 337                 pipe(pfd);
 338                 switch ((pid = pdfork(&pr_pd, PD_CLOEXEC))) {
 339                 case -1:
 340                         status |= 2;
 341                         free(header);
 342                         err(2, "No more processes");
 343                 case 0:
 344                         /* child */
 345                         if (pfd[0] != STDIN_FILENO) {
 346                                 dup2(pfd[0], STDIN_FILENO);
 347                                 close(pfd[0]);
 348                         }
 349                         close(pfd[1]);
 350                         execl(_PATH_PR, _PATH_PR, "-h", header, (char *)0);
 351                         _exit(127);
 352                 default:
 353
 354                         /* parent */
 355                         if (pfd[1] != STDOUT_FILENO) {
 356                                 ostdout = dup(STDOUT_FILENO);
 357                                 dup2(pfd[1], STDOUT_FILENO);
 358                                 close(pfd[1]);
 359                         }
 360                         close(pfd[0]);
 361                         rewind(stdout);
 362                         free(header);
 363                         kq = kqueue();
 364                         if (kq == -1)
 365                                 err(2, "kqueue");
 366                         e = xmalloc(sizeof(struct kevent));
 367                         EV_SET(e, pr_pd, EVFILT_PROCDESC, EV_ADD, NOTE_EXIT, 0,
 368                             NULL);
 369                         if (kevent(kq, e, 1, NULL, 0, NULL) == -1)
 370                                 err(2, "kevent");
 371                 }
 372         }
 373
 374         if (capsicum) {
 375                 cap_rights_init(&rights_ro, CAP_READ, CAP_FSTAT, CAP_SEEK);
 376                 if (cap_rights_limit(fileno(f1), &rights_ro) < 0
 377                     && errno != ENOSYS)
 378                         err(2, "unable to limit rights on: %s", file1);
 379                 if (cap_rights_limit(fileno(f2), &rights_ro) < 0 &&
 380                     errno != ENOSYS)
 381                         err(2, "unable to limit rights on: %s", file2);
 382                 if (fileno(f1) == STDIN_FILENO || fileno(f2) == STDIN_FILENO) {
 383                         /* stding has already been limited */
 384                         if (caph_limit_stderr() == -1)
 385                                 err(2, "unable to limit stderr");
 386                         if (caph_limit_stdout() == -1)
 387                                 err(2, "unable to limit stdout");
 388                 } else if (caph_limit_stdio() == -1)
 389                                 err(2, "unable to limit stdio");
 390
 391                 caph_cache_catpages();
 392                 caph_cache_tzdata();
 393                 if (cap_enter() < 0 && errno != ENOSYS)
 394                         err(2, "unable to enter capability mode");
 395         }
 396
 397         switch (files_differ(f1, f2, flags)) {
 398         case 0:
 399                 goto closem;
 400         case 1:
 401                 break;
 402         default:
 403                 /* error */
 404                 status |= 2;
 405                 goto closem;
 406         }
 407
 408         if ((flags & D_FORCEASCII) == 0 &&
 409             (!asciifile(f1) || !asciifile(f2))) {
 410                 rval = D_BINARY;
 411                 status |= 1;
 412                 goto closem;
 413         }
 414         prepare(0, f1, stb1.st_size, flags);
 415         prepare(1, f2, stb2.st_size, flags);
 416
 417         prune();
 418         sort(sfile[0], slen[0]);
 419         sort(sfile[1], slen[1]);
 420
 421         member = (int *)file[1];
 422         equiv(sfile[0], slen[0], sfile[1], slen[1], member);
 423         member = xreallocarray(member, slen[1] + 2, sizeof(*member));
 424
 425         class = (int *)file[0];
 426         unsort(sfile[0], slen[0], class);
 427         class = xreallocarray(class, slen[0] + 2, sizeof(*class));
 428
 429         klist = xcalloc(slen[0] + 2, sizeof(*klist));
 430         clen = 0;
 431         clistlen = 100;
 432         clist = xcalloc(clistlen, sizeof(*clist));
 433         i = stone(class, slen[0], member, klist, flags);
 434         free(member);
 435         free(class);
 436
 437         J = xreallocarray(J, len[0] + 2, sizeof(*J));
 438         unravel(klist[i]);
 439         free(clist);
 440         free(klist);
 441
 442         ixold = xreallocarray(ixold, len[0] + 2, sizeof(*ixold));
 443         ixnew = xreallocarray(ixnew, len[1] + 2, sizeof(*ixnew));
 444         check(f1, f2, flags);
 445         output(file1, f1, file2, f2, flags);
 446         if (ostdout != -1 && e != NULL) {
 447                 /* close the pipe to pr and restore stdout */
 448                 int wstatus;
 449
 450                 fflush(stdout);
 451                 if (ostdout != STDOUT_FILENO) {
 452                         close(STDOUT_FILENO);
 453                         dup2(ostdout, STDOUT_FILENO);
 454                         close(ostdout);
 455                 }
 456                 if (kevent(kq, NULL, 0, e, 1, NULL) == -1)
 457                         err(2, "kevent");
 458                 wstatus = e[0].data;
 459                 close(kq);
 460                 if (WIFEXITED(wstatus) && WEXITSTATUS(wstatus) != 0)
 461                         errx(2, "pr exited abnormally");
 462                 else if (WIFSIGNALED(wstatus))
 463                         errx(2, "pr killed by signal %d",
 464                             WTERMSIG(wstatus));
 465         }
 466
 467 closem:
 468         if (anychange) {
 469                 status |= 1;
 470                 if (rval == D_SAME)
 471                         rval = D_DIFFER;
 472         }
 473         if (f1 != NULL)
 474                 fclose(f1);
 475         if (f2 != NULL)
 476                 fclose(f2);
 477
 478         return (rval);
 479 }
 480
 481 /*
 482  * Check to see if the given files differ.
 483  * Returns 0 if they are the same, 1 if different, and -1 on error.
 484  * XXX - could use code from cmp(1) [faster]
 485  */
 486 static int
 487 files_differ(FILE *f1, FILE *f2, int flags)
 488 {
 489         char buf1[BUFSIZ], buf2[BUFSIZ];
 490         size_t i, j;
 491
 492         if ((flags & (D_EMPTY1|D_EMPTY2)) || stb1.st_size != stb2.st_size ||
 493             (stb1.st_mode & S_IFMT) != (stb2.st_mode & S_IFMT))
 494                 return (1);
 495         for (;;) {
 496                 i = fread(buf1, 1, sizeof(buf1), f1);
 497                 j = fread(buf2, 1, sizeof(buf2), f2);
 498                 if ((!i && ferror(f1)) || (!j && ferror(f2)))
 499                         return (-1);
 500                 if (i != j)
 501                         return (1);
 502                 if (i == 0)
 503                         return (0);
 504                 if (memcmp(buf1, buf2, i) != 0)
 505                         return (1);
 506         }
 507 }
 508
 509 static FILE *
 510 opentemp(const char *f)
 511 {
 512         char buf[BUFSIZ], tempfile[PATH_MAX];
 513         ssize_t nread;
 514         int ifd, ofd;
 515
 516         if (strcmp(f, "-") == 0)
 517                 ifd = STDIN_FILENO;
 518         else if ((ifd = open(f, O_RDONLY, 0644)) < 0)
 519                 return (NULL);
 520
 521         (void)strlcpy(tempfile, _PATH_TMP "/diff.XXXXXXXX", sizeof(tempfile));
 522
 523         if ((ofd = mkstemp(tempfile)) < 0) {
 524                 close(ifd);
 525                 return (NULL);
 526         }
 527         unlink(tempfile);
 528         while ((nread = read(ifd, buf, BUFSIZ)) > 0) {
 529                 if (write(ofd, buf, nread) != nread) {
 530                         close(ifd);
 531                         close(ofd);
 532                         return (NULL);
 533                 }
 534         }
 535         close(ifd);
 536         lseek(ofd, (off_t)0, SEEK_SET);
 537         return (fdopen(ofd, "r"));
 538 }
 539
 540 char *
 541 splice(char *dir, char *path)
 542 {
 543         char *tail, *buf;
 544         size_t dirlen;
 545
 546         dirlen = strlen(dir);
 547         while (dirlen != 0 && dir[dirlen - 1] == '/')
 548             dirlen--;
 549         if ((tail = strrchr(path, '/')) == NULL)
 550                 tail = path;
 551         else
 552                 tail++;
 553         xasprintf(&buf, "%.*s/%s", (int)dirlen, dir, tail);
 554         return (buf);
 555 }
 556
 557 static void
 558 prepare(int i, FILE *fd, size_t filesize, int flags)
 559 {
 560         struct line *p;
 561         int h;
 562         size_t sz, j;
 563
 564         rewind(fd);
 565
 566         sz = MIN(filesize, SIZE_MAX) / 25;
 567         if (sz < 100)
 568                 sz = 100;
 569
 570         p = xcalloc(sz + 3, sizeof(*p));
 571         for (j = 0; (h = readhash(fd, flags));) {
 572                 if (j == sz) {
 573                         sz = sz * 3 / 2;
 574                         p = xreallocarray(p, sz + 3, sizeof(*p));
 575                 }
 576                 p[++j].value = h;
 577         }
 578         len[i] = j;
 579         file[i] = p;
 580 }
 581
 582 static void
 583 prune(void)
 584 {
 585         int i, j;
 586
 587         for (pref = 0; pref < len[0] && pref < len[1] &&
 588             file[0][pref + 1].value == file[1][pref + 1].value;
 589             pref++)
 590                 ;
 591         for (suff = 0; suff < len[0] - pref && suff < len[1] - pref &&
 592             file[0][len[0] - suff].value == file[1][len[1] - suff].value;
 593             suff++)
 594                 ;
 595         for (j = 0; j < 2; j++) {
 596                 sfile[j] = file[j] + pref;
 597                 slen[j] = len[j] - pref - suff;
 598                 for (i = 0; i <= slen[j]; i++)
 599                         sfile[j][i].serial = i;
 600         }
 601 }
 602
 603 static void
 604 equiv(struct line *a, int n, struct line *b, int m, int *c)
 605 {
 606         int i, j;
 607
 608         i = j = 1;
 609         while (i <= n && j <= m) {
 610                 if (a[i].value < b[j].value)
 611                         a[i++].value = 0;
 612                 else if (a[i].value == b[j].value)
 613                         a[i++].value = j;
 614                 else
 615                         j++;
 616         }
 617         while (i <= n)
 618                 a[i++].value = 0;
 619         b[m + 1].value = 0;
 620         j = 0;
 621         while (++j <= m) {
 622                 c[j] = -b[j].serial;
 623                 while (b[j + 1].value == b[j].value) {
 624                         j++;
 625                         c[j] = b[j].serial;
 626                 }
 627         }
 628         c[j] = -1;
 629 }
 630
 631 /* Code taken from ping.c */
 632 static int
 633 isqrt(int n)
 634 {
 635         int y, x = 1;
 636
 637         if (n == 0)
 638                 return (0);
 639
 640         do { /* newton was a stinker */
 641                 y = x;
 642                 x = n / x;
 643                 x += y;
 644                 x /= 2;
 645         } while ((x - y) > 1 || (x - y) < -1);
 646
 647         return (x);
 648 }
 649
 650 static int
 651 stone(int *a, int n, int *b, int *c, int flags)
 652 {
 653         int i, k, y, j, l;
 654         int oldc, tc, oldl, sq;
 655         u_int numtries, bound;
 656
 657         if (flags & D_MINIMAL)
 658                 bound = UINT_MAX;
 659         else {
 660                 sq = isqrt(n);
 661                 bound = MAX(256, sq);
 662         }
 663
 664         k = 0;
 665         c[0] = newcand(0, 0, 0);
 666         for (i = 1; i <= n; i++) {
 667                 j = a[i];
 668                 if (j == 0)
 669                         continue;
 670                 y = -b[j];
 671                 oldl = 0;
 672                 oldc = c[0];
 673                 numtries = 0;
 674                 do {
 675                         if (y <= clist[oldc].y)
 676                                 continue;
 677                         l = search(c, k, y);
 678                         if (l != oldl + 1)
 679                                 oldc = c[l - 1];
 680                         if (l <= k) {
 681                                 if (clist[c[l]].y <= y)
 682                                         continue;
 683                                 tc = c[l];
 684                                 c[l] = newcand(i, y, oldc);
 685                                 oldc = tc;
 686                                 oldl = l;
 687                                 numtries++;
 688                         } else {
 689                                 c[l] = newcand(i, y, oldc);
 690                                 k++;
 691                                 break;
 692                         }
 693                 } while ((y = b[++j]) > 0 && numtries < bound);
 694         }
 695         return (k);
 696 }
 697
 698 static int
 699 newcand(int x, int y, int pred)
 700 {
 701         struct cand *q;
 702
 703         if (clen == clistlen) {
 704                 clistlen = clistlen * 11 / 10;
 705                 clist = xreallocarray(clist, clistlen, sizeof(*clist));
 706         }
 707         q = clist + clen;
 708         q->x = x;
 709         q->y = y;
 710         q->pred = pred;
 711         return (clen++);
 712 }
 713
 714 static int
 715 search(int *c, int k, int y)
 716 {
 717         int i, j, l, t;
 718
 719         if (clist[c[k]].y < y)  /* quick look for typical case */
 720                 return (k + 1);
 721         i = 0;
 722         j = k + 1;
 723         for (;;) {
 724                 l = (i + j) / 2;
 725                 if (l <= i)
 726                         break;
 727                 t = clist[c[l]].y;
 728                 if (t > y)
 729                         j = l;
 730                 else if (t < y)
 731                         i = l;
 732                 else
 733                         return (l);
 734         }
 735         return (l + 1);
 736 }
 737
 738 static void
 739 unravel(int p)
 740 {
 741         struct cand *q;
 742         int i;
 743
 744         for (i = 0; i <= len[0]; i++)
 745                 J[i] = i <= pref ? i :
 746                     i > len[0] - suff ? i + len[1] - len[0] : 0;
 747         for (q = clist + p; q->y != 0; q = clist + q->pred)
 748                 J[q->x + pref] = q->y + pref;
 749 }
 750
 751 /*
 752  * Check does double duty:
 753  *  1.  ferret out any fortuitous correspondences due
 754  *      to confounding by hashing (which result in "jackpot")
 755  *  2.  collect random access indexes to the two files
 756  */
 757 static void
 758 check(FILE *f1, FILE *f2, int flags)
 759 {
 760         int i, j, jackpot, c, d;
 761         long ctold, ctnew;
 762
 763         rewind(f1);
 764         rewind(f2);
 765         j = 1;
 766         ixold[0] = ixnew[0] = 0;
 767         jackpot = 0;
 768         ctold = ctnew = 0;
 769         for (i = 1; i <= len[0]; i++) {
 770                 if (J[i] == 0) {
 771                         ixold[i] = ctold += skipline(f1);
 772                         continue;
 773                 }
 774                 while (j < J[i]) {
 775                         ixnew[j] = ctnew += skipline(f2);
 776                         j++;
 777                 }
 778                 if (flags & (D_FOLDBLANKS|D_IGNOREBLANKS|D_IGNORECASE|D_STRIPCR)) {
 779                         for (;;) {
 780                                 c = getc(f1);
 781                                 d = getc(f2);
 782                                 /*
 783                                  * GNU diff ignores a missing newline
 784                                  * in one file for -b or -w.
 785                                  */
 786                                 if (flags & (D_FOLDBLANKS|D_IGNOREBLANKS)) {
 787                                         if (c == EOF && d == '\n') {
 788                                                 ctnew++;
 789                                                 break;
 790                                         } else if (c == '\n' && d == EOF) {
 791                                                 ctold++;
 792                                                 break;
 793                                         }
 794                                 }
 795                                 ctold++;
 796                                 ctnew++;
 797                                 if (flags & D_STRIPCR && (c == '\r' || d == '\r')) {
 798                                         if (c == '\r') {
 799                                                 if ((c = getc(f1)) == '\n') {
 800                                                         ctold++;
 801                                                 } else {
 802                                                         ungetc(c, f1);
 803                                                 }
 804                                         }
 805                                         if (d == '\r') {
 806                                                 if ((d = getc(f2)) == '\n') {
 807                                                         ctnew++;
 808                                                 } else {
 809                                                         ungetc(d, f2);
 810                                                 }
 811                                         }
 812                                         break;
 813                                 }
 814                                 if ((flags & D_FOLDBLANKS) && isspace(c) &&
 815                                     isspace(d)) {
 816                                         do {
 817                                                 if (c == '\n')
 818                                                         break;
 819                                                 ctold++;
 820                                         } while (isspace(c = getc(f1)));
 821                                         do {
 822                                                 if (d == '\n')
 823                                                         break;
 824                                                 ctnew++;
 825                                         } while (isspace(d = getc(f2)));
 826                                 } else if ((flags & D_IGNOREBLANKS)) {
 827                                         while (isspace(c) && c != '\n') {
 828                                                 c = getc(f1);
 829                                                 ctold++;
 830                                         }
 831                                         while (isspace(d) && d != '\n') {
 832                                                 d = getc(f2);
 833                                                 ctnew++;
 834                                         }
 835                                 }
 836                                 if (chrtran(c) != chrtran(d)) {
 837                                         jackpot++;
 838                                         J[i] = 0;
 839                                         if (c != '\n' && c != EOF)
 840                                                 ctold += skipline(f1);
 841                                         if (d != '\n' && c != EOF)
 842                                                 ctnew += skipline(f2);
 843                                         break;
 844                                 }
 845                                 if (c == '\n' || c == EOF)
 846                                         break;
 847                         }
 848                 } else {
 849                         for (;;) {
 850                                 ctold++;
 851                                 ctnew++;
 852                                 if ((c = getc(f1)) != (d = getc(f2))) {
 853                                         /* jackpot++; */
 854                                         J[i] = 0;
 855                                         if (c != '\n' && c != EOF)
 856                                                 ctold += skipline(f1);
 857                                         if (d != '\n' && c != EOF)
 858                                                 ctnew += skipline(f2);
 859                                         break;
 860                                 }
 861                                 if (c == '\n' || c == EOF)
 862                                         break;
 863                         }
 864                 }
 865                 ixold[i] = ctold;
 866                 ixnew[j] = ctnew;
 867                 j++;
 868         }
 869         for (; j <= len[1]; j++) {
 870                 ixnew[j] = ctnew += skipline(f2);
 871         }
 872         /*
 873          * if (jackpot)
 874          *      fprintf(stderr, "jackpot\n");
 875          */
 876 }
 877
 878 /* shellsort CACM #201 */
 879 static void
 880 sort(struct line *a, int n)
 881 {
 882         struct line *ai, *aim, w;
 883         int j, m = 0, k;
 884
 885         if (n == 0)
 886                 return;
 887         for (j = 1; j <= n; j *= 2)
 888                 m = 2 * j - 1;
 889         for (m /= 2; m != 0; m /= 2) {
 890                 k = n - m;
 891                 for (j = 1; j <= k; j++) {
 892                         for (ai = &a[j]; ai > a; ai -= m) {
 893                                 aim = &ai[m];
 894                                 if (aim < ai)
 895                                         break;  /* wraparound */
 896                                 if (aim->value > ai[0].value ||
 897                                     (aim->value == ai[0].value &&
 898                                         aim->serial > ai[0].serial))
 899                                         break;
 900                                 w.value = ai[0].value;
 901                                 ai[0].value = aim->value;
 902                                 aim->value = w.value;
 903                                 w.serial = ai[0].serial;
 904                                 ai[0].serial = aim->serial;
 905                                 aim->serial = w.serial;
 906                         }
 907                 }
 908         }
 909 }
 910
 911 static void
 912 unsort(struct line *f, int l, int *b)
 913 {
 914         int *a, i;
 915
 916         a = xcalloc(l + 1, sizeof(*a));
 917         for (i = 1; i <= l; i++)
 918                 a[f[i].serial] = f[i].value;
 919         for (i = 1; i <= l; i++)
 920                 b[i] = a[i];
 921         free(a);
 922 }
 923
 924 static int
 925 skipline(FILE *f)
 926 {
 927         int i, c;
 928
 929         for (i = 1; (c = getc(f)) != '\n' && c != EOF; i++)
 930                 continue;
 931         return (i);
 932 }
 933
 934 static void
 935 output(char *file1, FILE *f1, char *file2, FILE *f2, int flags)
 936 {
 937         int m, i0, i1, j0, j1;
 938
 939         rewind(f1);
 940         rewind(f2);
 941         m = len[0];
 942         J[0] = 0;
 943         J[m + 1] = len[1] + 1;
 944         if (diff_format != D_EDIT) {
 945                 for (i0 = 1; i0 <= m; i0 = i1 + 1) {
 946                         while (i0 <= m && J[i0] == J[i0 - 1] + 1)
 947                                 i0++;
 948                         j0 = J[i0 - 1] + 1;
 949                         i1 = i0 - 1;
 950                         while (i1 < m && J[i1 + 1] == 0)
 951                                 i1++;
 952                         j1 = J[i1 + 1] - 1;
 953                         J[i1] = j1;
 954                         change(file1, f1, file2, f2, i0, i1, j0, j1, &flags);
 955                 }
 956         } else {
 957                 for (i0 = m; i0 >= 1; i0 = i1 - 1) {
 958                         while (i0 >= 1 && J[i0] == J[i0 + 1] - 1 && J[i0] != 0)
 959                                 i0--;
 960                         j0 = J[i0 + 1] - 1;
 961                         i1 = i0 + 1;
 962                         while (i1 > 1 && J[i1 - 1] == 0)
 963                                 i1--;
 964                         j1 = J[i1 - 1] + 1;
 965                         J[i1] = j1;
 966                         change(file1, f1, file2, f2, i1, i0, j1, j0, &flags);
 967                 }
 968         }
 969         if (m == 0)
 970                 change(file1, f1, file2, f2, 1, 0, 1, len[1], &flags);
 971         if (diff_format == D_IFDEF || diff_format == D_GFORMAT) {
 972                 for (;;) {
 973 #define c i0
 974                         if ((c = getc(f1)) == EOF)
 975                                 return;
 976                         diff_output("%c", c);
 977                 }
 978 #undef c
 979         }
 980         if (anychange != 0) {
 981                 if (diff_format == D_CONTEXT)
 982                         dump_context_vec(f1, f2, flags);
 983                 else if (diff_format == D_UNIFIED)
 984                         dump_unified_vec(f1, f2, flags);
 985         }
 986 }
 987
 988 static void
 989 range(int a, int b, const char *separator)
 990 {
 991         diff_output("%d", a > b ? b : a);
 992         if (a < b)
 993                 diff_output("%s%d", separator, b);
 994 }
 995
 996 static void
 997 uni_range(int a, int b)
 998 {
 999         if (a < b)
1000                 diff_output("%d,%d", a, b - a + 1);
1001         else if (a == b)
1002                 diff_output("%d", b);
1003         else
1004                 diff_output("%d,0", b);
1005 }
1006
1007 static char *
1008 preadline(int fd, size_t rlen, off_t off)
1009 {
1010         char *line;
1011         ssize_t nr;
1012
1013         line = xmalloc(rlen + 1);
1014         if ((nr = pread(fd, line, rlen, off)) < 0)
1015                 err(2, "preadline");
1016         if (nr > 0 && line[nr-1] == '\n')
1017                 nr--;
1018         line[nr] = '\0';
1019         return (line);
1020 }
1021
1022 static bool
1023 ignoreline_pattern(char *line)
1024 {
1025         int ret;
1026
1027         ret = regexec(&ignore_re, line, 0, NULL, 0);
1028         free(line);
1029         return (ret == 0);      /* if it matched, it should be ignored. */
1030 }
1031
1032 static bool
1033 ignoreline(char *line, bool skip_blanks)
1034 {
1035
1036         if (ignore_pats != NULL && skip_blanks)
1037                 return (ignoreline_pattern(line) || *line == '\0');
1038         if (ignore_pats != NULL)
1039                 return (ignoreline_pattern(line));
1040         if (skip_blanks)
1041                 return (*line == '\0');
1042         /* No ignore criteria specified */
1043         return (false);
1044 }
1045
1046 /*
1047  * Indicate that there is a difference between lines a and b of the from file
1048  * to get to lines c to d of the to file.  If a is greater then b then there
1049  * are no lines in the from file involved and this means that there were
1050  * lines appended (beginning at b).  If c is greater than d then there are
1051  * lines missing from the to file.
1052  */
1053 static void
1054 change(char *file1, FILE *f1, char *file2, FILE *f2, int a, int b, int c, int d,
1055     int *pflags)
1056 {
1057         static size_t max_context = 64;
1058         long curpos;
1059         int i, nc, f;
1060         const char *walk;
1061         bool skip_blanks;
1062
1063         skip_blanks = (*pflags & D_SKIPBLANKLINES);
1064 restart:
1065         if ((diff_format != D_IFDEF || diff_format == D_GFORMAT) &&
1066             a > b && c > d)
1067                 return;
1068         if (ignore_pats != NULL || skip_blanks) {
1069                 char *line;
1070                 /*
1071                  * All lines in the change, insert, or delete must
1072                  * match an ignore pattern for the change to be
1073                  * ignored.
1074                  */
1075                 if (a <= b) {           /* Changes and deletes. */
1076                         for (i = a; i <= b; i++) {
1077                                 line = preadline(fileno(f1),
1078                                     ixold[i] - ixold[i - 1], ixold[i - 1]);
1079                                 if (!ignoreline(line, skip_blanks))
1080                                         goto proceed;
1081                         }
1082                 }
1083                 if (a > b || c <= d) {  /* Changes and inserts. */
1084                         for (i = c; i <= d; i++) {
1085                                 line = preadline(fileno(f2),
1086                                     ixnew[i] - ixnew[i - 1], ixnew[i - 1]);
1087                                 if (!ignoreline(line, skip_blanks))
1088                                         goto proceed;
1089                         }
1090                 }
1091                 return;
1092         }
1093 proceed:
1094         if (*pflags & D_HEADER && diff_format != D_BRIEF) {
1095                 diff_output("%s %s %s\n", diffargs, file1, file2);
1096                 *pflags &= ~D_HEADER;
1097         }
1098         if (diff_format == D_CONTEXT || diff_format == D_UNIFIED) {
1099                 /*
1100                  * Allocate change records as needed.
1101                  */
1102                 if (context_vec_ptr == context_vec_end - 1) {
1103                         ptrdiff_t offset = context_vec_ptr - context_vec_start;
1104                         max_context <<= 1;
1105                         context_vec_start = xreallocarray(context_vec_start,
1106                             max_context, sizeof(*context_vec_start));
1107                         context_vec_end = context_vec_start + max_context;
1108                         context_vec_ptr = context_vec_start + offset;
1109                 }
1110                 if (anychange == 0) {
1111                         /*
1112                          * Print the context/unidiff header first time through.
1113                          */
1114                         print_header(file1, file2);
1115                         anychange = 1;
1116                 } else if (a > context_vec_ptr->b + (2 * diff_context) + 1 &&
1117                     c > context_vec_ptr->d + (2 * diff_context) + 1) {
1118                         /*
1119                          * If this change is more than 'diff_context' lines from the
1120                          * previous change, dump the record and reset it.
1121                          */
1122                         if (diff_format == D_CONTEXT)
1123                                 dump_context_vec(f1, f2, *pflags);
1124                         else
1125                                 dump_unified_vec(f1, f2, *pflags);
1126                 }
1127                 context_vec_ptr++;
1128                 context_vec_ptr->a = a;
1129                 context_vec_ptr->b = b;
1130                 context_vec_ptr->c = c;
1131                 context_vec_ptr->d = d;
1132                 return;
1133         }
1134         if (anychange == 0)
1135                 anychange = 1;
1136         switch (diff_format) {
1137         case D_BRIEF:
1138                 return;
1139         case D_NORMAL:
1140         case D_EDIT:
1141                 range(a, b, ",");
1142                 diff_output("%c", a > b ? 'a' : c > d ? 'd' : 'c');
1143                 if (diff_format == D_NORMAL)
1144                         range(c, d, ",");
1145                 diff_output("\n");
1146                 break;
1147         case D_REVERSE:
1148                 diff_output("%c", a > b ? 'a' : c > d ? 'd' : 'c');
1149                 range(a, b, " ");
1150                 diff_output("\n");
1151                 break;
1152         case D_NREVERSE:
1153                 if (a > b)
1154                         diff_output("a%d %d\n", b, d - c + 1);
1155                 else {
1156                         diff_output("d%d %d\n", a, b - a + 1);
1157                         if (!(c > d))
1158                                 /* add changed lines */
1159                                 diff_output("a%d %d\n", b, d - c + 1);
1160                 }
1161                 break;
1162         }
1163         if (diff_format == D_GFORMAT) {
1164                 curpos = ftell(f1);
1165                 /* print through if append (a>b), else to (nb: 0 vs 1 orig) */
1166                 nc = ixold[a > b ? b : a - 1] - curpos;
1167                 for (i = 0; i < nc; i++)
1168                         diff_output("%c", getc(f1));
1169                 for (walk = group_format; *walk != '\0'; walk++) {
1170                         if (*walk == '%') {
1171                                 walk++;
1172                                 switch (*walk) {
1173                                 case '<':
1174                                         fetch(ixold, a, b, f1, '<', 1, *pflags);
1175                                         break;
1176                                 case '>':
1177                                         fetch(ixnew, c, d, f2, '>', 0, *pflags);
1178                                         break;
1179                                 default:
1180                                         diff_output("%%%c", *walk);
1181                                         break;
1182                                 }
1183                                 continue;
1184                         }
1185                         diff_output("%c", *walk);
1186                 }
1187         }
1188         if (diff_format == D_NORMAL || diff_format == D_IFDEF) {
1189                 fetch(ixold, a, b, f1, '<', 1, *pflags);
1190                 if (a <= b && c <= d && diff_format == D_NORMAL)
1191                         diff_output("---\n");
1192         }
1193         f = 0;
1194         if (diff_format != D_GFORMAT)
1195                 f = fetch(ixnew, c, d, f2, diff_format == D_NORMAL ? '>' : '\0', 0, *pflags);
1196         if (f != 0 && diff_format == D_EDIT) {
1197                 /*
1198                  * A non-zero return value for D_EDIT indicates that the
1199                  * last line printed was a bare dot (".") that has been
1200                  * escaped as ".." to prevent ed(1) from misinterpreting
1201                  * it.  We have to add a substitute command to change this
1202                  * back and restart where we left off.
1203                  */
1204                 diff_output(".\n");
1205                 diff_output("%ds/.//\n", a + f - 1);
1206                 b = a + f - 1;
1207                 a = b + 1;
1208                 c += f;
1209                 goto restart;
1210         }
1211         if ((diff_format == D_EDIT || diff_format == D_REVERSE) && c <= d)
1212                 diff_output(".\n");
1213         if (inifdef) {
1214                 diff_output("#endif /* %s */\n", ifdefname);
1215                 inifdef = 0;
1216         }
1217 }
1218
1219 static int
1220 fetch(long *f, int a, int b, FILE *lb, int ch, int oldfile, int flags)
1221 {
1222         int i, j, c, lastc, col, nc;
1223         int     newcol;
1224
1225         /*
1226          * When doing #ifdef's, copy down to current line
1227          * if this is the first file, so that stuff makes it to output.
1228          */
1229         if ((diff_format == D_IFDEF) && oldfile) {
1230                 long curpos = ftell(lb);
1231                 /* print through if append (a>b), else to (nb: 0 vs 1 orig) */
1232                 nc = f[a > b ? b : a - 1] - curpos;
1233                 for (i = 0; i < nc; i++)
1234                         diff_output("%c", getc(lb));
1235         }
1236         if (a > b)
1237                 return (0);
1238         if (diff_format == D_IFDEF) {
1239                 if (inifdef) {
1240                         diff_output("#else /* %s%s */\n",
1241                             oldfile == 1 ? "!" : "", ifdefname);
1242                 } else {
1243                         if (oldfile)
1244                                 diff_output("#ifndef %s\n", ifdefname);
1245                         else
1246                                 diff_output("#ifdef %s\n", ifdefname);
1247                 }
1248                 inifdef = 1 + oldfile;
1249         }
1250         for (i = a; i <= b; i++) {
1251                 fseek(lb, f[i - 1], SEEK_SET);
1252                 nc = f[i] - f[i - 1];
1253                 if ((diff_format != D_IFDEF && diff_format != D_GFORMAT) &&
1254                     ch != '\0') {
1255                         diff_output("%c", ch);
1256                         if (Tflag && (diff_format == D_NORMAL || diff_format == D_CONTEXT
1257                             || diff_format == D_UNIFIED))
1258                                 diff_output("\t");
1259                         else if (diff_format != D_UNIFIED)
1260                                 diff_output(" ");
1261                 }
1262                 col = 0;
1263                 for (j = 0, lastc = '\0'; j < nc; j++, lastc = c) {
1264                         if ((c = getc(lb)) == EOF) {
1265                                 if (diff_format == D_EDIT || diff_format == D_REVERSE ||
1266                                     diff_format == D_NREVERSE)
1267                                         warnx("No newline at end of file");
1268                                 else
1269                                         diff_output("\n\\ No newline at end of "
1270                                             "file\n");
1271                                 return (0);
1272                         }
1273                         if (c == '\t' && (flags & D_EXPANDTABS)) {
1274                                 newcol = ((col/tabsize)+1)*tabsize;
1275                                 do {
1276                                         diff_output(" ");
1277                                 } while (++col < newcol);
1278                         } else {
1279                                 if (diff_format == D_EDIT && j == 1 && c == '\n'
1280                                     && lastc == '.') {
1281                                         /*
1282                                          * Don't print a bare "." line
1283                                          * since that will confuse ed(1).
1284                                          * Print ".." instead and return,
1285                                          * giving the caller an offset
1286                                          * from which to restart.
1287                                          */
1288                                         diff_output(".\n");
1289                                         return (i - a + 1);
1290                                 }
1291                                 diff_output("%c", c);
1292                                 col++;
1293                         }
1294                 }
1295         }
1296         return (0);
1297 }
1298
1299 /*
1300  * Hash function taken from Robert Sedgewick, Algorithms in C, 3d ed., p 578.
1301  */
1302 static int
1303 readhash(FILE *f, int flags)
1304 {
1305         int i, t, space;
1306         int sum;
1307
1308         sum = 1;
1309         space = 0;
1310         if ((flags & (D_FOLDBLANKS|D_IGNOREBLANKS)) == 0) {
1311                 if (flags & D_IGNORECASE)
1312                         for (i = 0; (t = getc(f)) != '\n'; i++) {
1313                                 if (flags & D_STRIPCR && t == '\r') {
1314                                         t = getc(f);
1315                                         if (t == '\n')
1316                                                 break;
1317                                         ungetc(t, f);
1318                                 }
1319                                 if (t == EOF) {
1320                                         if (i == 0)
1321                                                 return (0);
1322                                         break;
1323                                 }
1324                                 sum = sum * 127 + chrtran(t);
1325                         }
1326                 else
1327                         for (i = 0; (t = getc(f)) != '\n'; i++) {
1328                                 if (flags & D_STRIPCR && t == '\r') {
1329                                         t = getc(f);
1330                                         if (t == '\n')
1331                                                 break;
1332                                         ungetc(t, f);
1333                                 }
1334                                 if (t == EOF) {
1335                                         if (i == 0)
1336                                                 return (0);
1337                                         break;
1338                                 }
1339                                 sum = sum * 127 + t;
1340                         }
1341         } else {
1342                 for (i = 0;;) {
1343                         switch (t = getc(f)) {
1344                         case '\r':
1345                         case '\t':
1346                         case '\v':
1347                         case '\f':
1348                         case ' ':
1349                                 space++;
1350                                 continue;
1351                         default:
1352                                 if (space && (flags & D_IGNOREBLANKS) == 0) {
1353                                         i++;
1354                                         space = 0;
1355                                 }
1356                                 sum = sum * 127 + chrtran(t);
1357                                 i++;
1358                                 continue;
1359                         case EOF:
1360                                 if (i == 0)
1361                                         return (0);
1362                                 /* FALLTHROUGH */
1363                         case '\n':
1364                                 break;
1365                         }
1366                         break;
1367                 }
1368         }
1369         /*
1370          * There is a remote possibility that we end up with a zero sum.
1371          * Zero is used as an EOF marker, so return 1 instead.
1372          */
1373         return (sum == 0 ? 1 : sum);
1374 }
1375
1376 static int
1377 asciifile(FILE *f)
1378 {
1379         unsigned char buf[BUFSIZ];
1380         size_t cnt;
1381
1382         if (f == NULL)
1383                 return (1);
1384
1385         rewind(f);
1386         cnt = fread(buf, 1, sizeof(buf), f);
1387         return (memchr(buf, '\0', cnt) == NULL);
1388 }
1389
1390 #define begins_with(s, pre) (strncmp(s, pre, sizeof(pre)-1) == 0)
1391
1392 static char *
1393 match_function(const long *f, int pos, FILE *fp)
1394 {
1395         unsigned char buf[FUNCTION_CONTEXT_SIZE];
1396         size_t nc;
1397         int last = lastline;
1398         const char *state = NULL;
1399
1400         lastline = pos;
1401         while (pos > last) {
1402                 fseek(fp, f[pos - 1], SEEK_SET);
1403                 nc = f[pos] - f[pos - 1];
1404                 if (nc >= sizeof(buf))
1405                         nc = sizeof(buf) - 1;
1406                 nc = fread(buf, 1, nc, fp);
1407                 if (nc > 0) {
1408                         buf[nc] = '\0';
1409                         buf[strcspn(buf, "\n")] = '\0';
1410                         if (isalpha(buf[0]) || buf[0] == '_' || buf[0] == '$') {
1411                                 if (begins_with(buf, "private:")) {
1412                                         if (!state)
1413                                                 state = " (private)";
1414                                 } else if (begins_with(buf, "protected:")) {
1415                                         if (!state)
1416                                                 state = " (protected)";
1417                                 } else if (begins_with(buf, "public:")) {
1418                                         if (!state)
1419                                                 state = " (public)";
1420                                 } else {
1421                                         strlcpy(lastbuf, buf, sizeof lastbuf);
1422                                         if (state)
1423                                                 strlcat(lastbuf, state,
1424                                                     sizeof lastbuf);
1425                                         lastmatchline = pos;
1426                                         return lastbuf;
1427                                 }
1428                         }
1429                 }
1430                 pos--;
1431         }
1432         return lastmatchline > 0 ? lastbuf : NULL;
1433 }
1434
1435 /* dump accumulated "context" diff changes */
1436 static void
1437 dump_context_vec(FILE *f1, FILE *f2, int flags)
1438 {
1439         struct context_vec *cvp = context_vec_start;
1440         int lowa, upb, lowc, upd, do_output;
1441         int a, b, c, d;
1442         char ch, *f;
1443
1444         if (context_vec_start > context_vec_ptr)
1445                 return;
1446
1447         b = d = 0;              /* gcc */
1448         lowa = MAX(1, cvp->a - diff_context);
1449         upb = MIN(len[0], context_vec_ptr->b + diff_context);
1450         lowc = MAX(1, cvp->c - diff_context);
1451         upd = MIN(len[1], context_vec_ptr->d + diff_context);
1452
1453         diff_output("***************");
1454         if ((flags & D_PROTOTYPE)) {
1455                 f = match_function(ixold, lowa-1, f1);
1456                 if (f != NULL)
1457                         diff_output(" %s", f);
1458         }
1459         diff_output("\n*** ");
1460         range(lowa, upb, ",");
1461         diff_output(" ****\n");
1462
1463         /*
1464          * Output changes to the "old" file.  The first loop suppresses
1465          * output if there were no changes to the "old" file (we'll see
1466          * the "old" lines as context in the "new" list).
1467          */
1468         do_output = 0;
1469         for (; cvp <= context_vec_ptr; cvp++)
1470                 if (cvp->a <= cvp->b) {
1471                         cvp = context_vec_start;
1472                         do_output++;
1473                         break;
1474                 }
1475         if (do_output) {
1476                 while (cvp <= context_vec_ptr) {
1477                         a = cvp->a;
1478                         b = cvp->b;
1479                         c = cvp->c;
1480                         d = cvp->d;
1481
1482                         if (a <= b && c <= d)
1483                                 ch = 'c';
1484                         else
1485                                 ch = (a <= b) ? 'd' : 'a';
1486
1487                         if (ch == 'a')
1488                                 fetch(ixold, lowa, b, f1, ' ', 0, flags);
1489                         else {
1490                                 fetch(ixold, lowa, a - 1, f1, ' ', 0, flags);
1491                                 fetch(ixold, a, b, f1,
1492                                     ch == 'c' ? '!' : '-', 0, flags);
1493                         }
1494                         lowa = b + 1;
1495                         cvp++;
1496                 }
1497                 fetch(ixold, b + 1, upb, f1, ' ', 0, flags);
1498         }
1499         /* output changes to the "new" file */
1500         diff_output("--- ");
1501         range(lowc, upd, ",");
1502         diff_output(" ----\n");
1503
1504         do_output = 0;
1505         for (cvp = context_vec_start; cvp <= context_vec_ptr; cvp++)
1506                 if (cvp->c <= cvp->d) {
1507                         cvp = context_vec_start;
1508                         do_output++;
1509                         break;
1510                 }
1511         if (do_output) {
1512                 while (cvp <= context_vec_ptr) {
1513                         a = cvp->a;
1514                         b = cvp->b;
1515                         c = cvp->c;
1516                         d = cvp->d;
1517
1518                         if (a <= b && c <= d)
1519                                 ch = 'c';
1520                         else
1521                                 ch = (a <= b) ? 'd' : 'a';
1522
1523                         if (ch == 'd')
1524                                 fetch(ixnew, lowc, d, f2, ' ', 0, flags);
1525                         else {
1526                                 fetch(ixnew, lowc, c - 1, f2, ' ', 0, flags);
1527                                 fetch(ixnew, c, d, f2,
1528                                     ch == 'c' ? '!' : '+', 0, flags);
1529                         }
1530                         lowc = d + 1;
1531                         cvp++;
1532                 }
1533                 fetch(ixnew, d + 1, upd, f2, ' ', 0, flags);
1534         }
1535         context_vec_ptr = context_vec_start - 1;
1536 }
1537
1538 /* dump accumulated "unified" diff changes */
1539 static void
1540 dump_unified_vec(FILE *f1, FILE *f2, int flags)
1541 {
1542         struct context_vec *cvp = context_vec_start;
1543         int lowa, upb, lowc, upd;
1544         int a, b, c, d;
1545         char ch, *f;
1546
1547         if (context_vec_start > context_vec_ptr)
1548                 return;
1549
1550         b = d = 0;              /* gcc */
1551         lowa = MAX(1, cvp->a - diff_context);
1552         upb = MIN(len[0], context_vec_ptr->b + diff_context);
1553         lowc = MAX(1, cvp->c - diff_context);
1554         upd = MIN(len[1], context_vec_ptr->d + diff_context);
1555
1556         diff_output("@@ -");
1557         uni_range(lowa, upb);
1558         diff_output(" +");
1559         uni_range(lowc, upd);
1560         diff_output(" @@");
1561         if ((flags & D_PROTOTYPE)) {
1562                 f = match_function(ixold, lowa-1, f1);
1563                 if (f != NULL)
1564                         diff_output(" %s", f);
1565         }
1566         diff_output("\n");
1567
1568         /*
1569          * Output changes in "unified" diff format--the old and new lines
1570          * are printed together.
1571          */
1572         for (; cvp <= context_vec_ptr; cvp++) {
1573                 a = cvp->a;
1574                 b = cvp->b;
1575                 c = cvp->c;
1576                 d = cvp->d;
1577
1578                 /*
1579                  * c: both new and old changes
1580                  * d: only changes in the old file
1581                  * a: only changes in the new file
1582                  */
1583                 if (a <= b && c <= d)
1584                         ch = 'c';
1585                 else
1586                         ch = (a <= b) ? 'd' : 'a';
1587
1588                 switch (ch) {
1589                 case 'c':
1590                         fetch(ixold, lowa, a - 1, f1, ' ', 0, flags);
1591                         fetch(ixold, a, b, f1, '-', 0, flags);
1592                         fetch(ixnew, c, d, f2, '+', 0, flags);
1593                         break;
1594                 case 'd':
1595                         fetch(ixold, lowa, a - 1, f1, ' ', 0, flags);
1596                         fetch(ixold, a, b, f1, '-', 0, flags);
1597                         break;
1598                 case 'a':
1599                         fetch(ixnew, lowc, c - 1, f2, ' ', 0, flags);
1600                         fetch(ixnew, c, d, f2, '+', 0, flags);
1601                         break;
1602                 }
1603                 lowa = b + 1;
1604                 lowc = d + 1;
1605         }
1606         fetch(ixnew, d + 1, upd, f2, ' ', 0, flags);
1607
1608         context_vec_ptr = context_vec_start - 1;
1609 }
1610
1611 static void
1612 print_header(const char *file1, const char *file2)
1613 {
1614         const char *time_format;
1615         char buf1[256];
1616         char buf2[256];
1617         char end1[10];
1618         char end2[10];
1619         struct tm tm1, tm2, *tm_ptr1, *tm_ptr2;
1620         int nsec1 = stb1.st_mtim.tv_nsec;
1621         int nsec2 = stb2.st_mtim.tv_nsec;
1622
1623         time_format = "%Y-%m-%d %H:%M:%S";
1624
1625         if (cflag)
1626                 time_format = "%c";
1627         tm_ptr1 = localtime_r(&stb1.st_mtime, &tm1);
1628         tm_ptr2 = localtime_r(&stb2.st_mtime, &tm2);
1629         strftime(buf1, 256, time_format, tm_ptr1);
1630         strftime(buf2, 256, time_format, tm_ptr2);
1631         if (!cflag) {
1632                 strftime(end1, 10, "%z", tm_ptr1);
1633                 strftime(end2, 10, "%z", tm_ptr2);
1634                 sprintf(buf1, "%s.%.9d %s", buf1, nsec1, end1);
1635                 sprintf(buf2, "%s.%.9d %s", buf2, nsec2, end2);
1636         }
1637         if (label[0] != NULL)
1638                 diff_output("%s %s\n", diff_format == D_CONTEXT ? "***" : "---",
1639                     label[0]);
1640         else
1641                 diff_output("%s %s\t%s\n", diff_format == D_CONTEXT ? "***" : "---",
1642                     file1, buf1);
1643         if (label[1] != NULL)
1644                 diff_output("%s %s\n", diff_format == D_CONTEXT ? "---" : "+++",
1645                     label[1]);
1646         else
1647                 diff_output("%s %s\t%s\n", diff_format == D_CONTEXT ? "---" : "+++",
1648                     file2, buf2);
1649 }