lib-mx/mh.c

   1 /*
   2  * Copyright notice from original mutt:
   3  * Copyright (C) 1996-2002 Michael R. Elkins <me@mutt.org>
   4  * Copyright (C) 1999-2002 Thomas Roessler <roessler@does-not-exist.org>
   5  *
   6  * This file is part of mutt-ng, see http://www.muttng.org/.
   7  * It's licensed under the GNU General Public License,
   8  * please see the file GPL in the top level source directory.
   9  */
  10
  11 /*
  12  * This file contains routines specific to MH and ``maildir'' style
  13  * mailboxes.
  14  */
  15
  16 #include <lib-lib/lib-lib.h>
  17 #include <utime.h>
  18
  19 #include <lib-ui/lib-ui.h>
  20
  21 #include "mutt.h"
  22 #include "mx.h"
  23 #include "mh.h"
  24 #include "mbox.h"
  25 #include "copy.h"
  26 #include "buffy.h"
  27 #include "sort.h"
  28 #include "thread.h"
  29 #include "hcache.h"
  30
  31 struct maildir {
  32   HEADER *h;
  33   char *canon_fname;
  34   unsigned header_parsed:1;
  35   struct maildir *next;
  36 };
  37
  38 typedef struct mh_sequences {
  39     int size;
  40     char flags[];
  41 } mh_sequences;
  42
  43 /* mh_sequences support */
  44 #define MH_SEQ_UNSEEN  (1 << 0)
  45 #define MH_SEQ_REPLIED (1 << 1)
  46 #define MH_SEQ_FLAGGED (1 << 2)
  47
  48 /* prototypes */
  49 static int maildir_check_empty (const char*);
  50 static int maildir_check_mailbox (CONTEXT*, int*, int);
  51 static int mh_check_mailbox (CONTEXT*, int*, int);
  52
  53 static mh_sequences *mhs_new(void)
  54 {
  55     mh_sequences *res = xmalloc(sizeof(mh_sequences) + 128);
  56     res->size = 128;
  57     return res;
  58 }
  59
  60 static void mhs_ensure(mh_sequences *mhs, int i)
  61 {
  62     if (i > mhs->size) {
  63         xrealloc((void *)&mhs, sizeof(mh_sequences) + mhs->size + 128);
  64         p_clear(mhs->flags + mhs->size, 128);
  65         mhs->size += 128;
  66     }
  67 }
  68
  69 static void mhs_delete(mh_sequences **mhs)
  70 {
  71     p_delete(mhs);
  72 }
  73
  74 static short mhs_check (struct mh_sequences *mhs, int i)
  75 {
  76     return i > mhs->size ? 0 : mhs->flags[i];
  77 }
  78
  79 static short mhs_set (struct mh_sequences *mhs, int i, short f)
  80 {
  81     mhs_ensure(mhs, i);
  82     mhs->flags[i] |= f;
  83     return mhs->flags[i];
  84 }
  85
  86 static void mh_read_token (char *t, int *first, int *last)
  87 {
  88   char *p;
  89
  90   if ((p = strchr (t, '-'))) {
  91     *p++ = '\0';
  92     *first = atoi (t);
  93     *last = atoi (p);
  94   }
  95   else
  96     *first = *last = atoi (t);
  97 }
  98
  99 static void mh_read_sequences (struct mh_sequences *mhs, const char *path)
 100 {
 101   FILE *fp;
 102   int line = 1;
 103   char *buff = NULL;
 104   char *t;
 105   ssize_t sz = 0;
 106
 107   short f;
 108   int first, last;
 109
 110   char pathname[_POSIX_PATH_MAX];
 111
 112   snprintf (pathname, sizeof (pathname), "%s/.mh_sequences", path);
 113
 114   if (!(fp = fopen (pathname, "r")))
 115     return;
 116
 117   while ((buff = mutt_read_line (buff, &sz, fp, &line))) {
 118     if (!(t = strtok (buff, " \t:")))
 119       continue;
 120
 121     if (!m_strcmp(t, MhUnseen))
 122       f = MH_SEQ_UNSEEN;
 123     else if (!m_strcmp(t, MhFlagged))
 124       f = MH_SEQ_FLAGGED;
 125     else if (!m_strcmp(t, MhReplied))
 126       f = MH_SEQ_REPLIED;
 127     else                        /* unknown sequence */
 128       continue;
 129
 130     while ((t = strtok (NULL, " \t:"))) {
 131       mh_read_token (t, &first, &last);
 132       for (; first <= last; first++)
 133         mhs_set (mhs, first, f);
 134     }
 135   }
 136
 137   p_delete(&buff);
 138   m_fclose(&fp);
 139 }
 140
 141 int mh_buffy (const char *path)
 142 {
 143     mh_sequences *mhs = mhs_new();
 144     int i;
 145
 146     mh_read_sequences(mhs, path);
 147     for (i = 0; i <= mhs->size; i++) {
 148         if (mhs_check(mhs, i) & MH_SEQ_UNSEEN) {
 149             mhs_delete(&mhs);
 150             return 1;
 151         }
 152     }
 153
 154     mhs_delete(&mhs);
 155     return 0;
 156 }
 157
 158 static int mh_mkstemp (CONTEXT * dest, FILE ** fp, char **tgt)
 159 {
 160   static int Counter = 0;
 161   int fd;
 162   char path[_POSIX_PATH_MAX];
 163
 164   for (;;) {
 165     snprintf (path, _POSIX_PATH_MAX, "%s/.mutt-%s-%d-%d",
 166               dest->path, NONULL(mod_core.shorthost), (int) getpid (), Counter++);
 167     umask (Umask);
 168     if ((fd = open (path, O_WRONLY | O_EXCL | O_CREAT, 0666)) == -1) {
 169       if (errno != EEXIST) {
 170         mutt_perror (path);
 171         return -1;
 172       }
 173     }
 174     else {
 175       *tgt = m_strdup(path);
 176       break;
 177     }
 178   }
 179
 180   if ((*fp = fdopen (fd, "w")) == NULL) {
 181     p_delete(tgt);
 182     close (fd);
 183     unlink (path);
 184     return (-1);
 185   }
 186
 187   return 0;
 188 }
 189
 190 static void mhs_write_one_sequence(FILE * fp, struct mh_sequences *mhs,
 191                                    short f, const char *tag)
 192 {
 193   int i;
 194   int first, last;
 195
 196   fprintf (fp, "%s:", tag);
 197
 198   first = -1;
 199   last = -1;
 200
 201   for (i = 0; i <= mhs->size; i++) {
 202     if ((mhs_check (mhs, i) & f)) {
 203       if (first < 0)
 204         first = i;
 205       else
 206         last = i;
 207     }
 208     else if (first >= 0) {
 209       if (last < 0)
 210         fprintf (fp, " %d", first);
 211       else
 212         fprintf (fp, " %d-%d", first, last);
 213
 214       first = -1;
 215       last = -1;
 216     }
 217   }
 218
 219   if (first >= 0) {
 220     if (last < 0)
 221       fprintf (fp, " %d", first);
 222     else
 223       fprintf (fp, " %d-%d", first, last);
 224   }
 225
 226   fputc ('\n', fp);
 227 }
 228
 229 /* XXX - we don't currently remove deleted messages from sequences we don't know.  Should we? */
 230
 231 static void mh_update_sequences (CONTEXT * ctx)
 232 {
 233   FILE *ofp, *nfp;
 234
 235   char sequences[_POSIX_PATH_MAX];
 236   char *tmpfname;
 237   char *buff = NULL;
 238   char *p;
 239   ssize_t s;
 240   int l = 0;
 241   int i;
 242
 243   int unseen = 0;
 244   int flagged = 0;
 245   int replied = 0;
 246
 247   char seq_unseen[STRING];
 248   char seq_replied[STRING];
 249   char seq_flagged[STRING];
 250   mh_sequences *mhs = mhs_new();
 251
 252   snprintf(seq_unseen,  sizeof(seq_unseen),  "%s:", NONULL(MhUnseen));
 253   snprintf(seq_replied, sizeof(seq_replied), "%s:", NONULL(MhReplied));
 254   snprintf(seq_flagged, sizeof(seq_flagged), "%s:", NONULL(MhFlagged));
 255
 256   if (mh_mkstemp (ctx, &nfp, &tmpfname) != 0) {
 257     /* error message? */
 258     return;
 259   }
 260
 261   snprintf (sequences, sizeof (sequences), "%s/.mh_sequences", ctx->path);
 262
 263
 264   /* first, copy unknown sequences */
 265   if ((ofp = fopen (sequences, "r"))) {
 266     while ((buff = mutt_read_line (buff, &s, ofp, &l))) {
 267       if (!m_strncmp(buff, seq_unseen, m_strlen(seq_unseen)))
 268         continue;
 269       if (!m_strncmp(buff, seq_flagged, m_strlen(seq_flagged)))
 270         continue;
 271       if (!m_strncmp(buff, seq_replied, m_strlen(seq_replied)))
 272         continue;
 273
 274       fprintf (nfp, "%s\n", buff);
 275     }
 276   }
 277   m_fclose(&ofp);
 278
 279   /* now, update our unseen, flagged, and replied sequences */
 280   for (l = 0; l < ctx->msgcount; l++) {
 281     if (ctx->hdrs[l]->deleted)
 282       continue;
 283
 284     if ((p = strrchr (ctx->hdrs[l]->path, '/')))
 285       p++;
 286     else
 287       p = ctx->hdrs[l]->path;
 288
 289     i = atoi (p);
 290
 291     if (!ctx->hdrs[l]->read) {
 292       mhs_set(mhs, i, MH_SEQ_UNSEEN);
 293       unseen++;
 294     }
 295     if (ctx->hdrs[l]->flagged) {
 296       mhs_set(mhs, i, MH_SEQ_FLAGGED);
 297       flagged++;
 298     }
 299     if (ctx->hdrs[l]->replied) {
 300       mhs_set(mhs, i, MH_SEQ_REPLIED);
 301       replied++;
 302     }
 303   }
 304
 305   /* write out the new sequences */
 306   if (unseen)
 307     mhs_write_one_sequence(nfp, mhs, MH_SEQ_UNSEEN, NONULL (MhUnseen));
 308   if (flagged)
 309     mhs_write_one_sequence(nfp, mhs, MH_SEQ_FLAGGED, NONULL (MhFlagged));
 310   if (replied)
 311     mhs_write_one_sequence(nfp, mhs, MH_SEQ_REPLIED, NONULL (MhReplied));
 312
 313   mhs_delete(&mhs);
 314
 315   /* try to commit the changes - no guarantee here */
 316   m_fclose(&nfp);
 317
 318   unlink (sequences);
 319   if (safe_rename (tmpfname, sequences) != 0) {
 320     /* report an error? */
 321     unlink (tmpfname);
 322   }
 323
 324   p_delete(&tmpfname);
 325 }
 326
 327 static void mh_sequences_add_one (CONTEXT * ctx, int n, short unseen,
 328                                   short flagged, short replied)
 329 {
 330   short unseen_done = 0;
 331   short flagged_done = 0;
 332   short replied_done = 0;
 333
 334   FILE *ofp = NULL, *nfp = NULL;
 335
 336   char *tmpfname;
 337   char sequences[_POSIX_PATH_MAX];
 338
 339   char seq_unseen[STRING];
 340   char seq_replied[STRING];
 341   char seq_flagged[STRING];
 342
 343   char *buff = NULL;
 344   int line;
 345   ssize_t sz;
 346
 347   if (mh_mkstemp (ctx, &nfp, &tmpfname) == -1)
 348     return;
 349
 350   snprintf (seq_unseen, sizeof (seq_unseen), "%s:", NONULL (MhUnseen));
 351   snprintf (seq_replied, sizeof (seq_replied), "%s:", NONULL (MhReplied));
 352   snprintf (seq_flagged, sizeof (seq_flagged), "%s:", NONULL (MhFlagged));
 353
 354   snprintf (sequences, sizeof (sequences), "%s/.mh_sequences", ctx->path);
 355   if ((ofp = fopen (sequences, "r"))) {
 356     while ((buff = mutt_read_line (buff, &sz, ofp, &line))) {
 357       if (unseen && !m_strncmp (buff, seq_unseen, m_strlen(seq_unseen))) {
 358         fprintf (nfp, "%s %d\n", buff, n);
 359         unseen_done = 1;
 360       }
 361       else if (flagged
 362                && !m_strncmp (buff, seq_flagged, m_strlen(seq_flagged))) {
 363         fprintf (nfp, "%s %d\n", buff, n);
 364         flagged_done = 1;
 365       }
 366       else if (replied
 367                && !m_strncmp (buff, seq_replied, m_strlen(seq_replied))) {
 368         fprintf (nfp, "%s %d\n", buff, n);
 369         replied_done = 1;
 370       }
 371       else
 372         fprintf (nfp, "%s\n", buff);
 373     }
 374   }
 375   m_fclose(&ofp);
 376   p_delete(&buff);
 377
 378   if (!unseen_done && unseen)
 379     fprintf (nfp, "%s: %d\n", NONULL (MhUnseen), n);
 380   if (!flagged_done && flagged)
 381     fprintf (nfp, "%s: %d\n", NONULL (MhFlagged), n);
 382   if (!replied_done && replied)
 383     fprintf (nfp, "%s: %d\n", NONULL (MhReplied), n);
 384
 385   m_fclose(&nfp);
 386
 387   unlink (sequences);
 388   if (safe_rename (tmpfname, sequences) != 0)
 389     unlink (tmpfname);
 390
 391   p_delete(&tmpfname);
 392 }
 393
 394 static void mh_update_maildir (struct maildir *md, struct mh_sequences *mhs)
 395 {
 396   int i;
 397   short f;
 398   char *p;
 399
 400   for (; md; md = md->next) {
 401     if ((p = strrchr (md->h->path, '/')))
 402       p++;
 403     else
 404       p = md->h->path;
 405
 406     i = atoi (p);
 407     f = mhs_check (mhs, i);
 408
 409     md->h->read = (f & MH_SEQ_UNSEEN) ? 0 : 1;
 410     md->h->flagged = (f & MH_SEQ_FLAGGED) ? 1 : 0;
 411     md->h->replied = (f & MH_SEQ_REPLIED) ? 1 : 0;
 412   }
 413 }
 414
 415 /* maildir support */
 416
 417 static void maildir_free_entry (struct maildir **md)
 418 {
 419   if (!md || !*md)
 420     return;
 421
 422   p_delete(&(*md)->canon_fname);
 423   if ((*md)->h)
 424     header_delete(&(*md)->h);
 425
 426   p_delete(md);
 427 }
 428
 429 static void maildir_free_maildir (struct maildir **md)
 430 {
 431   struct maildir *p, *q;
 432
 433   if (!md || !*md)
 434     return;
 435
 436   for (p = *md; p; p = q) {
 437     q = p->next;
 438     maildir_free_entry (&p);
 439   }
 440 }
 441
 442 static void maildir_parse_flags (HEADER * h, const char *path)
 443 {
 444   char *p, *q = NULL;
 445
 446   h->flagged = 0;
 447   h->read = 0;
 448   h->replied = 0;
 449
 450   if ((p = strrchr (path, ':')) != NULL && m_strncmp(p + 1, "2,", 2) == 0) {
 451     p += 3;
 452
 453     m_strreplace(&h->maildir_flags, p);
 454     q = h->maildir_flags;
 455
 456     while (*p) {
 457       switch (*p) {
 458       case 'F':
 459
 460         h->flagged = 1;
 461         break;
 462
 463       case 'S':                /* seen */
 464
 465         h->read = 1;
 466         break;
 467
 468       case 'R':                /* replied */
 469
 470         h->replied = 1;
 471         break;
 472
 473       case 'T':                /* trashed */
 474         h->trash = 1;
 475         h->deleted = 1;
 476         break;
 477
 478       default:
 479         *q++ = *p;
 480         break;
 481       }
 482       p++;
 483     }
 484   }
 485
 486   if (q == h->maildir_flags)
 487     p_delete(&h->maildir_flags);
 488   else if (q)
 489     *q = '\0';
 490 }
 491
 492 static void maildir_update_mtime (CONTEXT * ctx)
 493 {
 494   char buf[_POSIX_PATH_MAX];
 495   struct stat st;
 496
 497   if (ctx->magic == M_MAILDIR) {
 498     snprintf (buf, sizeof (buf), "%s/%s", ctx->path, "cur");
 499     if (stat (buf, &st) == 0)
 500       ctx->mtime_cur = st.st_mtime;
 501     snprintf (buf, sizeof (buf), "%s/%s", ctx->path, "new");
 502   }
 503   else {
 504     snprintf (buf, sizeof (buf), "%s/.mh_sequences", ctx->path);
 505     if (stat (buf, &st) == 0)
 506       ctx->mtime_cur = st.st_mtime;
 507
 508     m_strcpy(buf, sizeof(buf), ctx->path);
 509   }
 510
 511   if (stat (buf, &st) == 0)
 512     ctx->mtime = st.st_mtime;
 513 }
 514
 515 /*
 516  * Actually parse a maildir message.  This may also be used to fill
 517  * out a fake header structure generated by lazy maildir parsing.
 518  */
 519 static HEADER *maildir_parse_message (int magic, const char *fname,
 520                                       int is_old, HEADER * _h)
 521 {
 522   FILE *f;
 523   HEADER *h = _h;
 524   struct stat st;
 525
 526   if ((f = fopen (fname, "r")) != NULL) {
 527     if (!h)
 528       h = header_new();
 529     h->env = mutt_read_rfc822_header (f, h, 0, 0);
 530
 531     fstat (fileno (f), &st);
 532     m_fclose(&f);
 533
 534     if (!h->received)
 535       h->received = h->date_sent;
 536
 537     if (h->content->length <= 0)
 538       h->content->length = st.st_size - h->content->offset;
 539
 540     h->index = -1;
 541
 542     if (magic == M_MAILDIR) {
 543       /*
 544        * maildir stores its flags in the filename, so ignore the
 545        * flags in the header of the message
 546        */
 547
 548       h->old = is_old;
 549       maildir_parse_flags (h, fname);
 550     }
 551     return h;
 552   }
 553   return NULL;
 554 }
 555
 556 /*
 557  * Note that this routine will _not_ modify the context given by
 558  * ctx.
 559  *
 560  * It's used in the first parsing pass on maildir and MH folders.
 561  * In the MH case, this means full parsing of the folder.  In the
 562  * maildir case, it means that we only look at flags, and create a
 563  * fake HEADER structure, which may later be filled in by
 564  * maildir_parse_message(), when called from
 565  * maildir_delayed_parsing().
 566  *
 567  */
 568
 569 static int maildir_parse_entry (CONTEXT * ctx, struct maildir ***last,
 570                                 const char *subdir, const char *fname,
 571                                 int *count, int is_old, ino_t inode __attribute__ ((unused)))
 572 {
 573   struct maildir *entry;
 574   HEADER *h = NULL;
 575   char buf[_POSIX_PATH_MAX];
 576
 577   if (subdir)
 578     snprintf (buf, sizeof (buf), "%s/%s/%s", ctx->path, subdir, fname);
 579   else
 580     snprintf (buf, sizeof (buf), "%s/%s", ctx->path, fname);
 581
 582   if (ctx->magic == M_MH)
 583     h = maildir_parse_message (ctx->magic, buf, is_old, NULL);
 584   else {
 585     h = header_new();
 586     h->old = is_old;
 587     maildir_parse_flags (h, buf);
 588   }
 589
 590   if (h != NULL) {
 591     if (count) {
 592       (*count)++;
 593       if (!ctx->quiet && ReadInc && ((*count % ReadInc) == 0 || *count == 1))
 594         mutt_message (_("Reading %s... %d"), ctx->path, *count);
 595     }
 596
 597     if (subdir) {
 598       snprintf (buf, sizeof (buf), "%s/%s", subdir, fname);
 599       h->path = m_strdup(buf);
 600     }
 601     else
 602       h->path = m_strdup(fname);
 603
 604     entry = p_new(struct maildir, 1);
 605     entry->h = h;
 606     entry->header_parsed = (ctx->magic == M_MH);
 607     **last = entry;
 608     *last = &entry->next;
 609
 610     return 0;
 611   }
 612
 613   return -1;
 614 }
 615
 616
 617
 618 /* Ignore the garbage files.  A valid MH message consists of only
 619  * digits.  Deleted message get moved to a filename with a comma before
 620  * it.
 621  */
 622
 623 int mh_valid_message (const char *s)
 624 {
 625   for (; *s; s++) {
 626     if (!isdigit ((unsigned char) *s))
 627       return 0;
 628   }
 629   return 1;
 630 }
 631
 632 static int maildir_parse_dir (CONTEXT * ctx, struct maildir ***last,
 633                               const char *subdir, int *count)
 634 {
 635   DIR *dirp;
 636   struct dirent *de;
 637   char buf[_POSIX_PATH_MAX];
 638   int is_old = 0;
 639
 640   if (subdir) {
 641     snprintf (buf, sizeof (buf), "%s/%s", ctx->path, subdir);
 642     is_old = (m_strcmp("cur", subdir) == 0);
 643   }
 644   else
 645     m_strcpy(buf, sizeof(buf), ctx->path);
 646
 647   if ((dirp = opendir (buf)) == NULL)
 648     return -1;
 649
 650   while ((de = readdir (dirp)) != NULL) {
 651
 652     if ((ctx->magic == M_MH && !mh_valid_message (de->d_name))
 653         || (ctx->magic == M_MAILDIR && *de->d_name == '.'))
 654       continue;
 655
 656     /* FOO - really ignore the return value? */
 657
 658     maildir_parse_entry (ctx, last, subdir, de->d_name, count, is_old,
 659 #ifdef HAVE_DIRENT_D_INO
 660                          de->d_ino
 661 #else
 662                          0
 663 #endif
 664                         );
 665   }
 666
 667   closedir (dirp);
 668   return 0;
 669 }
 670
 671 static int maildir_add_to_context (CONTEXT * ctx, struct maildir *md)
 672 {
 673   int oldmsgcount = ctx->msgcount;
 674
 675   while (md) {
 676
 677     if (md->h) {
 678       if (ctx->msgcount == ctx->hdrmax)
 679         mx_alloc_memory (ctx);
 680
 681       ctx->hdrs[ctx->msgcount] = md->h;
 682       ctx->hdrs[ctx->msgcount]->index = ctx->msgcount;
 683       ctx->size +=
 684         md->h->content->length + md->h->content->offset -
 685         md->h->content->hdr_offset;
 686
 687       md->h = NULL;
 688       ctx->msgcount++;
 689     }
 690     md = md->next;
 691   }
 692
 693   if (ctx->msgcount > oldmsgcount) {
 694     mx_update_context (ctx, ctx->msgcount - oldmsgcount);
 695     return 1;
 696   }
 697   return 0;
 698 }
 699
 700 static int maildir_move_to_context (CONTEXT * ctx, struct maildir **md)
 701 {
 702   int r;
 703
 704   r = maildir_add_to_context (ctx, *md);
 705   maildir_free_maildir (md);
 706   return r;
 707 }
 708
 709 #ifdef USE_HCACHE
 710 static ssize_t maildir_hcache_keylen (const char *fn)
 711 {
 712     return m_strchrnul(fn, ':') - fn;
 713 }
 714 #endif
 715
 716 /*
 717  * This function does the second parsing pass for a maildir-style
 718  * folder.
 719  */
 720 static void maildir_delayed_parsing (CONTEXT * ctx, struct maildir *md)
 721 {
 722   struct maildir *p;
 723   char fn[_POSIX_PATH_MAX];
 724   int count;
 725
 726 #ifdef USE_HCACHE
 727   hcache_t *hc = NULL;
 728   void *data;
 729   struct timeval *when = NULL;
 730   struct stat lastchanged;
 731   int ret;
 732
 733   hc = mutt_hcache_open(ctx->path);
 734 #endif
 735
 736   for (p = md, count = 0; p; p = p->next, count++) {
 737     if (!(p && p->h && !p->header_parsed))
 738       continue;
 739
 740 #ifdef USE_HCACHE
 741     data = mutt_hcache_fetch (hc, p->h->path + 3, &maildir_hcache_keylen);
 742     when = (struct timeval *) data;
 743 #endif
 744
 745     if (!ctx->quiet && ReadInc && ((count % ReadInc) == 0 || count == 1))
 746       mutt_message (_("Reading %s... %d"), ctx->path, count);
 747     snprintf (fn, sizeof (fn), "%s/%s", ctx->path, p->h->path);
 748
 749 #ifdef USE_HCACHE
 750     ret = stat(fn, &lastchanged);
 751     if (data && !ret && lastchanged.st_mtime <= when->tv_sec) {
 752       p->h = mutt_hcache_restore(data, &p->h);
 753       maildir_parse_flags (p->h, fn);
 754     } else
 755 #endif
 756     if (maildir_parse_message (ctx->magic, fn, p->h->old, p->h)) {
 757       p->header_parsed = 1;
 758       maildir_parse_flags (p->h, fn);
 759 #ifdef USE_HCACHE
 760       mutt_hcache_store (hc, p->h->path + 3, p->h, 0, &maildir_hcache_keylen);
 761 #endif
 762     } else {
 763       header_delete(&p->h);
 764     }
 765 #ifdef USE_HCACHE
 766     p_delete(&data);
 767 #endif
 768   }
 769 #ifdef USE_HCACHE
 770   mutt_hcache_close (&hc);
 771 #endif
 772 }
 773
 774 /* Read a MH/maildir style mailbox.
 775  *
 776  * args:
 777  *      ctx [IN/OUT]    context for this mailbox
 778  *      subdir [IN]     NULL for MH mailboxes, otherwise the subdir of the
 779  *                      maildir mailbox to read from
 780  */
 781 static int _mh_read_dir (CONTEXT * ctx, const char *subdir)
 782 {
 783   struct maildir *md = NULL, **last = &md;
 784   int count = 0;
 785
 786   maildir_update_mtime (ctx);
 787
 788   if (maildir_parse_dir (ctx, &last, subdir, &count) == -1)
 789     return -1;
 790
 791   if (ctx->magic == M_MH) {
 792     mh_sequences *mhs = mhs_new();
 793     mh_read_sequences(mhs, ctx->path);
 794     mh_update_maildir(md, mhs);
 795     mhs_delete(&mhs);
 796   }
 797
 798   if (ctx->magic == M_MAILDIR)
 799     maildir_delayed_parsing (ctx, md);
 800
 801   maildir_move_to_context (ctx, &md);
 802   return 0;
 803 }
 804
 805 static int mh_read_dir (CONTEXT* ctx) {
 806   return (_mh_read_dir (ctx, NULL));
 807 }
 808
 809 /* read a maildir style mailbox */
 810 static int maildir_read_dir (CONTEXT * ctx)
 811 {
 812   /* maildir looks sort of like MH, except that there are two subdirectories
 813    * of the main folder path from which to read messages
 814    */
 815   if (_mh_read_dir (ctx, "new") == -1 || _mh_read_dir (ctx, "cur") == -1)
 816     return (-1);
 817
 818   return 0;
 819 }
 820
 821 /*
 822  * Open a new (temporary) message in an MH folder.
 823  */
 824
 825 static int mh_open_new_message (MESSAGE * msg, CONTEXT * dest, HEADER * hdr __attribute__ ((unused)))
 826 {
 827   return mh_mkstemp (dest, &msg->fp, &msg->path);
 828 }
 829
 830 static int ch_compar (const void *a, const void *b)
 831 {
 832   return (int) (*((const char *) a) - *((const char *) b));
 833 }
 834
 835 static void maildir_flags (char *dest, ssize_t destlen, HEADER * hdr)
 836 {
 837   *dest = '\0';
 838
 839   /*
 840    * The maildir specification requires that all files in the cur
 841    * subdirectory have the :unique string appeneded, regardless of whether
 842    * or not there are any flags.  If .old is set, we know that this message
 843    * will end up in the cur directory, so we include it in the following
 844    * test even though there is no associated flag.
 845    */
 846
 847   if (hdr
 848       && (hdr->flagged || hdr->replied || hdr->read || hdr->deleted
 849           || hdr->old || hdr->maildir_flags)) {
 850     char tmp[LONG_STRING];
 851
 852     snprintf (tmp, sizeof (tmp),
 853               "%s%s%s%s%s",
 854               hdr->flagged ? "F" : "",
 855               hdr->replied ? "R" : "",
 856               hdr->read ? "S" : "", hdr->deleted ? "T" : "",
 857               NONULL (hdr->maildir_flags));
 858     if (hdr->maildir_flags)
 859       qsort (tmp, m_strlen(tmp), 1, ch_compar);
 860     snprintf (dest, destlen, ":2,%s", tmp);
 861   }
 862 }
 863
 864
 865 /*
 866  * Open a new (temporary) message in a maildir folder.
 867  *
 868  * Note that this uses _almost_ the maildir file name format, but
 869  * with a {cur,new} prefix.
 870  *
 871  */
 872
 873 static int maildir_open_new_message (MESSAGE * msg, CONTEXT * dest, HEADER * hdr)
 874 {
 875   static int Counter = 0;
 876   int fd;
 877   char path[_POSIX_PATH_MAX];
 878   char suffix[16];
 879   char subdir[16];
 880
 881   if (hdr) {
 882     short deleted = hdr->deleted;
 883
 884     hdr->deleted = 0;
 885
 886     maildir_flags (suffix, sizeof (suffix), hdr);
 887
 888     hdr->deleted = deleted;
 889   }
 890   else
 891     *suffix = '\0';
 892
 893   if (hdr && (hdr->read || hdr->old))
 894     m_strcpy(subdir, sizeof(subdir), "cur");
 895   else
 896     m_strcpy(subdir, sizeof(subdir), "new");
 897
 898   for (;;) {
 899     snprintf (path, _POSIX_PATH_MAX, "%s/tmp/%s.%ld.%u_%d.%s%s",
 900               dest->path, subdir, (long) time (NULL),
 901               (unsigned int) getpid (), Counter++, NONULL (mod_core.shorthost), suffix);
 902
 903     umask (Umask);
 904     if ((fd = open (path, O_WRONLY | O_EXCL | O_CREAT, 0666)) == -1) {
 905       if (errno != EEXIST) {
 906         mutt_perror (path);
 907         return -1;
 908       }
 909     } else {
 910       msg->path = m_strdup(path);
 911       break;
 912     }
 913   }
 914
 915   if ((msg->fp = fdopen (fd, "w")) == NULL) {
 916     p_delete(&msg->path);
 917     close (fd);
 918     unlink (path);
 919     return (-1);
 920   }
 921
 922   return 0;
 923 }
 924
 925
 926
 927 /*
 928  * Commit a message to a maildir folder.
 929  *
 930  * msg->path contains the file name of a file in tmp/. We take the
 931  * flags from this file's name.
 932  *
 933  * ctx is the mail folder we commit to.
 934  *
 935  * hdr is a header structure to which we write the message's new
 936  * file name.  This is used in the mh and maildir folder synch
 937  * routines.  When this routine is invoked from mx_commit_message,
 938  * hdr is NULL.
 939  *
 940  * msg->path looks like this:
 941  *
 942  *    tmp/{cur,new}.mutt-HOSTNAME-PID-COUNTER:flags
 943  *
 944  * See also maildir_open_new_message().
 945  *
 946  */
 947
 948 static int maildir_commit_message (MESSAGE * msg, CONTEXT * ctx, HEADER * hdr)
 949 {
 950   static int Counter = 0;
 951   char subdir[4];
 952   char suffix[16];
 953   char path[_POSIX_PATH_MAX];
 954   char full[_POSIX_PATH_MAX];
 955   char *s;
 956
 957   if (m_fclose(&msg->fp) != 0)
 958     return -1;
 959
 960   /* extract the subdir */
 961   s = strrchr (msg->path, '/') + 1;
 962   m_strcpy(subdir, sizeof(subdir), s);
 963
 964   /* extract the flags */
 965   if ((s = strchr (s, ':')))
 966     m_strcpy(suffix, sizeof(suffix), s);
 967   else
 968     suffix[0] = '\0';
 969
 970   /* construct a new file name. */
 971   for (;;) {
 972     snprintf (path, _POSIX_PATH_MAX, "%s/%ld.%u_%d.%s%s", subdir,
 973               (long) time (NULL), (unsigned int) getpid (), Counter++,
 974               NONULL (mod_core.shorthost), suffix);
 975     snprintf (full, _POSIX_PATH_MAX, "%s/%s", ctx->path, path);
 976
 977     if (safe_rename (msg->path, full) == 0) {
 978       if (hdr)
 979         m_strreplace(&hdr->path, path);
 980       p_delete(&msg->path);
 981
 982       /*
 983        * Adjust the mtime on the file to match the time at which this
 984        * message was received.  Currently this is only set when copying
 985        * messages between mailboxes, so we test to ensure that it is
 986        * actually set.
 987        */
 988       if (msg->received) {
 989         struct utimbuf ut;
 990
 991         ut.actime = msg->received;
 992         ut.modtime = msg->received;
 993         if (utime (full, &ut)) {
 994           mutt_perror (_
 995                        ("maildir_commit_message(): unable to set time on file"));
 996           return -1;
 997         }
 998       }
 999
1000       return 0;
1001     }
1002     else if (errno != EEXIST) {
1003       mutt_perror (ctx->path);
1004       return -1;
1005     }
1006   }
1007 }
1008
1009 /*
1010  * commit a message to an MH folder.
1011  *
1012  */
1013
1014
1015 static int _mh_commit_message (MESSAGE * msg, CONTEXT * ctx, HEADER * hdr,
1016                                short updseq)
1017 {
1018   DIR *dirp;
1019   struct dirent *de;
1020   char *cp, *dep;
1021   unsigned int n, hi = 0;
1022   char path[_POSIX_PATH_MAX];
1023   char tmp[16];
1024
1025   if (m_fclose(&msg->fp) != 0)
1026     return -1;
1027
1028   if ((dirp = opendir (ctx->path)) == NULL) {
1029     mutt_perror (ctx->path);
1030     return (-1);
1031   }
1032
1033   /* figure out what the next message number is */
1034   while ((de = readdir (dirp)) != NULL) {
1035     dep = de->d_name;
1036     if (*dep == ',')
1037       dep++;
1038     cp = dep;
1039     while (*cp) {
1040       if (!isdigit ((unsigned char) *cp))
1041         break;
1042       cp++;
1043     }
1044     if (!*cp) {
1045       n = atoi (dep);
1046       if (n > hi)
1047         hi = n;
1048     }
1049   }
1050   closedir (dirp);
1051
1052   /*
1053    * Now try to rename the file to the proper name.
1054    *
1055    * Note: We may have to try multiple times, until we find a free
1056    * slot.
1057    */
1058
1059   for (;;) {
1060     hi++;
1061     snprintf (tmp, sizeof (tmp), "%d", hi);
1062     snprintf (path, sizeof (path), "%s/%s", ctx->path, tmp);
1063     if (safe_rename (msg->path, path) == 0) {
1064       if (hdr)
1065         m_strreplace(&hdr->path, tmp);
1066       p_delete(&msg->path);
1067       break;
1068     }
1069     else if (errno != EEXIST) {
1070       mutt_perror (ctx->path);
1071       return -1;
1072     }
1073   }
1074   if (updseq)
1075     mh_sequences_add_one (ctx, hi, !msg->flags.read, msg->flags.flagged,
1076                           msg->flags.replied);
1077   return 0;
1078 }
1079
1080 static int mh_commit_message (MESSAGE * msg, CONTEXT * ctx, HEADER * hdr) {
1081   return _mh_commit_message (msg, ctx, hdr, 1);
1082 }
1083
1084 /* Sync a message in an MH folder.
1085  *
1086  * This code is also used for attachment deletion in maildir
1087  * folders.
1088  */
1089
1090 static int mh_rewrite_message (CONTEXT * ctx, int msgno)
1091 {
1092   HEADER *h = ctx->hdrs[msgno];
1093   MESSAGE *dest;
1094
1095   int rc;
1096   short restore = 1;
1097   char oldpath[_POSIX_PATH_MAX];
1098   char newpath[_POSIX_PATH_MAX];
1099   char partpath[_POSIX_PATH_MAX];
1100
1101   long old_body_offset = h->content->offset;
1102   long old_body_length = h->content->length;
1103   long old_hdr_lines = h->lines;
1104
1105   if ((dest = mx_open_new_message (ctx, h, 0)) == NULL)
1106     return -1;
1107
1108   if ((rc = mutt_copy_message (dest->fp, ctx, h,
1109                                M_CM_UPDATE, CH_UPDATE | CH_UPDATE_LEN)) == 0)
1110   {
1111     snprintf (oldpath, sizeof(oldpath), "%s/%s", ctx->path, h->path);
1112     m_strcpy(partpath, sizeof(partpath), h->path);
1113
1114     if (ctx->magic == M_MAILDIR)
1115       rc = maildir_commit_message (dest, ctx, h);
1116     else
1117       rc = _mh_commit_message (dest, ctx, h, 0);
1118
1119     mx_close_message (&dest);
1120
1121     if (rc == 0) {
1122       unlink (oldpath);
1123       restore = 0;
1124     }
1125
1126     /*
1127      * Try to move the new message to the old place.
1128      * (MH only.)
1129      *
1130      * This is important when we are just updating flags.
1131      *
1132      * Note that there is a race condition against programs which
1133      * use the first free slot instead of the maximum message
1134      * number.  Mutt does _not_ behave like this.
1135      *
1136      * Anyway, if this fails, the message is in the folder, so
1137      * all what happens is that a concurrently runnung mutt will
1138      * lose flag modifications.
1139      */
1140
1141     if (ctx->magic == M_MH && rc == 0) {
1142       snprintf (newpath, _POSIX_PATH_MAX, "%s/%s", ctx->path, h->path);
1143       if ((rc = safe_rename (newpath, oldpath)) == 0)
1144         m_strreplace(&h->path, partpath);
1145     }
1146   }
1147   else
1148     mx_close_message (&dest);
1149
1150   if (rc == -1 && restore) {
1151     h->content->offset = old_body_offset;
1152     h->content->length = old_body_length;
1153     h->lines = old_hdr_lines;
1154   }
1155
1156   body_list_wipe(&h->content->parts);
1157   return rc;
1158 }
1159
1160 static int mh_sync_message (CONTEXT * ctx, int msgno)
1161 {
1162   HEADER *h = ctx->hdrs[msgno];
1163
1164   if (h->attach_del ||
1165       (h->env && (h->env->refs_changed || h->env->irt_changed)))
1166     if (mh_rewrite_message (ctx, msgno) != 0)
1167       return -1;
1168
1169   return 0;
1170 }
1171
1172 static int maildir_sync_message (CONTEXT * ctx, int msgno)
1173 {
1174   HEADER *h = ctx->hdrs[msgno];
1175
1176   if (h->attach_del ||
1177       (h->env && (h->env->refs_changed || h->env->irt_changed))) {
1178     /* when doing attachment deletion/rethreading, fall back to the MH case. */
1179     if (mh_rewrite_message (ctx, msgno) != 0)
1180       return (-1);
1181   }
1182   else {
1183     /* we just have to rename the file. */
1184
1185     char newpath[_POSIX_PATH_MAX];
1186     char partpath[_POSIX_PATH_MAX];
1187     char fullpath[_POSIX_PATH_MAX];
1188     char oldpath[_POSIX_PATH_MAX];
1189     char suffix[16];
1190     char *p;
1191
1192     if ((p = strrchr (h->path, '/')) == NULL) {
1193       return (-1);
1194     }
1195     p++;
1196     m_strcpy(newpath, sizeof(newpath), p);
1197
1198     /* kill the previous flags */
1199     if ((p = strchr (newpath, ':')) != NULL)
1200       *p = 0;
1201
1202     maildir_flags (suffix, sizeof (suffix), h);
1203
1204     snprintf (partpath, sizeof (partpath), "%s/%s%s",
1205               (h->read || h->old) ? "cur" : "new", newpath, suffix);
1206     snprintf (fullpath, sizeof (fullpath), "%s/%s", ctx->path, partpath);
1207     snprintf (oldpath, sizeof (oldpath), "%s/%s", ctx->path, h->path);
1208
1209     if (m_strcmp(fullpath, oldpath) == 0) {
1210       /* message hasn't really changed */
1211       return 0;
1212     }
1213
1214     /* record that the message is possibly marked as trashed on disk */
1215     h->trash = h->deleted;
1216
1217     if (rename (oldpath, fullpath) != 0) {
1218       mutt_perror ("rename");
1219       return (-1);
1220     }
1221     m_strreplace(&h->path, partpath);
1222   }
1223   return (0);
1224 }
1225
1226 static int mh_sync_mailbox (CONTEXT * ctx, int unused __attribute__ ((unused)), int *index_hint)
1227 {
1228   char path[_POSIX_PATH_MAX], tmp[_POSIX_PATH_MAX];
1229   int i, j;
1230
1231 #ifdef USE_HCACHE
1232   void *hc = NULL;
1233 #endif /* USE_HCACHE */
1234
1235   if (ctx->magic == M_MH)
1236     i = mh_check_mailbox (ctx, index_hint, 0);
1237   else
1238     i = maildir_check_mailbox (ctx, index_hint, 0);
1239
1240   if (i != 0)
1241     return i;
1242
1243 #ifdef USE_HCACHE
1244   if (ctx->magic == M_MAILDIR)
1245     hc = mutt_hcache_open(ctx->path);
1246 #endif /* USE_HCACHE */
1247
1248   for (i = 0; i < ctx->msgcount; i++) {
1249     if (ctx->hdrs[i]->deleted
1250         && (ctx->magic != M_MAILDIR || !option (OPTMAILDIRTRASH))) {
1251       snprintf (path, sizeof (path), "%s/%s", ctx->path, ctx->hdrs[i]->path);
1252       if (ctx->magic == M_MAILDIR
1253           || (option (OPTMHPURGE) && ctx->magic == M_MH)) {
1254 #ifdef USE_HCACHE
1255         if (ctx->magic == M_MAILDIR)
1256           mutt_hcache_delete (hc, ctx->hdrs[i]->path + 3,
1257                               &maildir_hcache_keylen);
1258 #endif /* USE_HCACHE */
1259         unlink (path);
1260       }
1261       else if (ctx->magic == M_MH) {
1262         /* MH just moves files out of the way when you delete them */
1263         if (*ctx->hdrs[i]->path != ',') {
1264           snprintf (tmp, sizeof (tmp), "%s/,%s", ctx->path,
1265                     ctx->hdrs[i]->path);
1266           unlink (tmp);
1267           rename (path, tmp);
1268         }
1269
1270       }
1271     }
1272     else if (ctx->hdrs[i]->changed || ctx->hdrs[i]->attach_del ||
1273              (ctx->magic == M_MAILDIR
1274               && (option (OPTMAILDIRTRASH) || ctx->hdrs[i]->trash)
1275               && (ctx->hdrs[i]->deleted != ctx->hdrs[i]->trash))) {
1276       if (ctx->magic == M_MAILDIR) {
1277         if (maildir_sync_message (ctx, i) == -1)
1278           goto err;
1279       }
1280       else {
1281         if (mh_sync_message (ctx, i) == -1)
1282           goto err;
1283       }
1284     }
1285   }
1286
1287 #ifdef USE_HCACHE
1288   if (ctx->magic == M_MAILDIR)
1289     mutt_hcache_close (hc);
1290 #endif /* USE_HCACHE */
1291
1292   if (ctx->magic == M_MH)
1293     mh_update_sequences (ctx);
1294
1295   /* XXX race condition? */
1296
1297   maildir_update_mtime (ctx);
1298
1299   /* adjust indices */
1300
1301   if (ctx->deleted) {
1302     for (i = 0, j = 0; i < ctx->msgcount; i++) {
1303       if (!ctx->hdrs[i]->deleted
1304           || (ctx->magic == M_MAILDIR && option (OPTMAILDIRTRASH)))
1305         ctx->hdrs[i]->index = j++;
1306     }
1307   }
1308
1309   return 0;
1310
1311 err:
1312 #ifdef USE_HCACHE
1313   if (ctx->magic == M_MAILDIR)
1314     mutt_hcache_close (hc);
1315 #endif /* USE_HCACHE */
1316   return -1;
1317 }
1318
1319 static char *maildir_canon_filename (char *dest, const char *src, ssize_t l)
1320 {
1321   char *t, *u;
1322
1323   if ((t = strrchr (src, '/')))
1324     src = t + 1;
1325
1326   m_strcpy(dest, l, src);
1327   if ((u = strrchr (dest, ':')))
1328     *u = '\0';
1329
1330   return dest;
1331 }
1332
1333 static void maildir_update_tables (CONTEXT * ctx, int *index_hint)
1334 {
1335   short old_sort;
1336   int old_count;
1337   int i, j;
1338
1339   if (Sort != SORT_ORDER) {
1340     old_sort = Sort;
1341     Sort = SORT_ORDER;
1342     mutt_sort_headers (ctx, 1);
1343     Sort = old_sort;
1344   }
1345
1346   old_count = ctx->msgcount;
1347   for (i = 0, j = 0; i < old_count; i++) {
1348     if (ctx->hdrs[i]->active && index_hint && *index_hint == i)
1349       *index_hint = j;
1350
1351     if (ctx->hdrs[i]->active)
1352       ctx->hdrs[i]->index = j++;
1353   }
1354
1355   mx_update_tables (ctx, 0);
1356   mutt_clear_threads (ctx);
1357 }
1358
1359 static void maildir_update_flags (CONTEXT * ctx, HEADER * o, HEADER * n)
1360 {
1361   /* save the global state here so we can reset it at the
1362    * end of list block if required.
1363    */
1364   int context_changed = ctx->changed;
1365
1366   /* user didn't modify this message.  alter the flags to
1367    * match the current state on disk.  This may not actually
1368    * do anything, but we can't tell right now.  mutt_set_flag()
1369    * will just ignore the call if the status bits are
1370    * already properly set.
1371    */
1372   mutt_set_flag (ctx, o, M_FLAG, n->flagged);
1373   mutt_set_flag (ctx, o, M_REPLIED, n->replied);
1374   mutt_set_flag (ctx, o, M_READ, n->read);
1375   mutt_set_flag (ctx, o, M_OLD, n->old);
1376
1377   /* mutt_set_flag() will set this, but we don't need to
1378    * sync the changes we made because we just updated the
1379    * context to match the current on-disk state of the
1380    * message.
1381    */
1382   o->changed = 0;
1383
1384   /* if the mailbox was not modified before we made these
1385    * changes, unset the changed flag since nothing needs to
1386    * be synchronized.
1387    */
1388   if (!context_changed)
1389     ctx->changed = 0;
1390 }
1391
1392
1393 /* This function handles arrival of new mail and reopening of
1394  * maildir folders.  The basic idea here is we check to see if either
1395  * the new or cur subdirectories have changed, and if so, we scan them
1396  * for the list of files.  We check for newly added messages, and
1397  * then merge the flags messages we already knew about.  We don't treat
1398  * either subdirectory differently, as mail could be copied directly into
1399  * the cur directory from another agent.
1400  */
1401 static int maildir_check_mailbox (CONTEXT * ctx, int *index_hint, int unused __attribute__ ((unused)))
1402 {
1403   struct stat st_new;           /* status of the "new" subdirectory */
1404   struct stat st_cur;           /* status of the "cur" subdirectory */
1405   char buf[_POSIX_PATH_MAX];
1406   int changed = 0;              /* bitmask representing which subdirectories
1407                                    have changed.  0x1 = new, 0x2 = cur */
1408   int occult = 0;               /* messages were removed from the mailbox */
1409   int have_new = 0;             /* messages were added to the mailbox */
1410   struct maildir *md;           /* list of messages in the mailbox */
1411   struct maildir **last, *p;
1412   int i;
1413   hash_t *fnames;                 /* hash table for quickly looking up the base filename
1414                                    for a maildir message */
1415
1416   if (!option (OPTCHECKNEW))
1417     return 0;
1418
1419   snprintf (buf, sizeof (buf), "%s/new", ctx->path);
1420   if (stat (buf, &st_new) == -1)
1421     return -1;
1422
1423   snprintf (buf, sizeof (buf), "%s/cur", ctx->path);
1424   if (stat (buf, &st_cur) == -1)
1425     return -1;
1426
1427   /* determine which subdirectories need to be scanned */
1428   if (st_new.st_mtime > ctx->mtime)
1429     changed = 1;
1430   if (st_cur.st_mtime > ctx->mtime_cur)
1431     changed |= 2;
1432
1433   if (!changed)
1434     return 0;                   /* nothing to do */
1435
1436   /* update the modification times on the mailbox */
1437   ctx->mtime_cur = st_cur.st_mtime;
1438   ctx->mtime = st_new.st_mtime;
1439
1440   /* do a fast scan of just the filenames in
1441    * the subdirectories that have changed.
1442    */
1443   md = NULL;
1444   last = &md;
1445   if (changed & 1)
1446     maildir_parse_dir (ctx, &last, "new", NULL);
1447   if (changed & 2)
1448     maildir_parse_dir (ctx, &last, "cur", NULL);
1449
1450   /* we create a hash table keyed off the canonical (sans flags) filename
1451    * of each message we scanned.  This is used in the loop over the
1452    * existing messages below to do some correlation.
1453    */
1454   fnames = hash_new (1031, 0);
1455
1456   for (p = md; p; p = p->next) {
1457     maildir_canon_filename (buf, p->h->path, sizeof (buf));
1458     p->canon_fname = m_strdup(buf);
1459     hash_insert (fnames, p->canon_fname, p);
1460   }
1461
1462   /* check for modifications and adjust flags */
1463   for (i = 0; i < ctx->msgcount; i++) {
1464     ctx->hdrs[i]->active = 0;
1465     maildir_canon_filename (buf, ctx->hdrs[i]->path, sizeof (buf));
1466     p = hash_find (fnames, buf);
1467     if (p && p->h) {
1468       /* message already exists, merge flags */
1469       ctx->hdrs[i]->active = 1;
1470
1471       /* check to see if the message has moved to a different
1472        * subdirectory.  If so, update the associated filename.
1473        */
1474       if (m_strcmp(ctx->hdrs[i]->path, p->h->path))
1475         m_strreplace(&ctx->hdrs[i]->path, p->h->path);
1476
1477       /* if the user hasn't modified the flags on this message, update
1478        * the flags we just detected.
1479        */
1480       if (!ctx->hdrs[i]->changed)
1481         maildir_update_flags (ctx, ctx->hdrs[i], p->h);
1482
1483       if (ctx->hdrs[i]->deleted == ctx->hdrs[i]->trash)
1484         ctx->hdrs[i]->deleted = p->h->deleted;
1485       ctx->hdrs[i]->trash = p->h->trash;
1486
1487       /* this is a duplicate of an existing header, so remove it */
1488       header_delete(&p->h);
1489     }
1490     /* This message was not in the list of messages we just scanned.
1491      * Check to see if we have enough information to know if the
1492      * message has disappeared out from underneath us.
1493      */
1494     else if (((changed & 1) && (!m_strncmp (ctx->hdrs[i]->path, "new/", 4))) ||
1495              ((changed & 2) && (!m_strncmp (ctx->hdrs[i]->path, "cur/", 4)))) {
1496       /* This message disappeared, so we need to simulate a "reopen"
1497        * event.  We know it disappeared because we just scanned the
1498        * subdirectory it used to reside in.
1499        */
1500       occult = 1;
1501     }
1502     else {
1503       /* This message resides in a subdirectory which was not
1504        * modified, so we assume that it is still present and
1505        * unchanged.
1506        */
1507       ctx->hdrs[i]->active = 1;
1508     }
1509   }
1510
1511   /* destroy the file name hash */
1512   hash_delete (&fnames, NULL);
1513
1514   /* If we didn't just get new mail, update the tables. */
1515   if (occult)
1516     maildir_update_tables (ctx, index_hint);
1517
1518   /* do any delayed parsing we need to do. */
1519   maildir_delayed_parsing (ctx, md);
1520
1521   /* Incorporate new messages */
1522   have_new = maildir_move_to_context (ctx, &md);
1523
1524   return occult ? M_REOPENED : (have_new ? M_NEW_MAIL : 0);
1525 }
1526
1527 /*
1528  * This function handles arrival of new mail and reopening of
1529  * mh/maildir folders. Things are getting rather complex because we
1530  * don't have a well-defined "mailbox order", so the tricks from
1531  * mbox.c and mx.c won't work here.
1532  *
1533  * Don't change this code unless you _really_ understand what
1534  * happens.
1535  *
1536  */
1537
1538 static int mh_check_mailbox (CONTEXT * ctx, int *index_hint, int unused __attribute__ ((unused)))
1539 {
1540   char buf[_POSIX_PATH_MAX];
1541   struct stat st, st_cur;
1542   short modified = 0, have_new = 0, occult = 0;
1543   struct maildir *md = NULL, **last = &md, *p;
1544   mh_sequences *mhs;
1545   hash_t *fnames;
1546   int i;
1547
1548   if (!option (OPTCHECKNEW))
1549     return 0;
1550
1551   m_strcpy(buf, sizeof(buf), ctx->path);
1552   if (stat (buf, &st) == -1)
1553     return -1;
1554
1555   /* create .mh_sequences when there isn't one. */
1556   snprintf (buf, sizeof (buf), "%s/.mh_sequences", ctx->path);
1557   if ((i = stat (buf, &st_cur) == -1) && errno == ENOENT) {
1558     char *tmp;
1559     FILE *fp = NULL;
1560
1561     if (mh_mkstemp (ctx, &fp, &tmp) == 0) {
1562       m_fclose(&fp);
1563       if (safe_rename (tmp, buf) == -1)
1564         unlink (tmp);
1565       p_delete(&tmp);
1566     }
1567   }
1568
1569   if (i == -1 && stat (buf, &st_cur) == -1)
1570     modified = 1;
1571
1572   if (st.st_mtime > ctx->mtime || st_cur.st_mtime > ctx->mtime_cur)
1573     modified = 1;
1574
1575   if (!modified)
1576     return 0;
1577
1578   ctx->mtime_cur = st_cur.st_mtime;
1579   ctx->mtime = st.st_mtime;
1580
1581   maildir_parse_dir (ctx, &last, NULL, NULL);
1582   mhs = mhs_new();
1583   mh_read_sequences(mhs, ctx->path);
1584   mh_update_maildir(md, mhs);
1585   mhs_delete(&mhs);
1586
1587   /* check for modifications and adjust flags */
1588   fnames = hash_new (1031, 0);
1589
1590   for (p = md; p; p = p->next)
1591     hash_insert (fnames, p->h->path, p);
1592
1593   for (i = 0; i < ctx->msgcount; i++) {
1594     ctx->hdrs[i]->active = 0;
1595
1596     if ((p = hash_find (fnames, ctx->hdrs[i]->path)) && p->h &&
1597         (mutt_cmp_header (ctx->hdrs[i], p->h))) {
1598       ctx->hdrs[i]->active = 1;
1599       /* found the right message */
1600       if (!ctx->hdrs[i]->changed)
1601         maildir_update_flags (ctx, ctx->hdrs[i], p->h);
1602
1603       header_delete(&p->h);
1604     }
1605     else                        /* message has disappeared */
1606       occult = 1;
1607   }
1608
1609   /* destroy the file name hash */
1610
1611   hash_delete (&fnames, NULL);
1612
1613   /* If we didn't just get new mail, update the tables. */
1614   if (occult)
1615     maildir_update_tables (ctx, index_hint);
1616
1617   /* Incorporate new messages */
1618   have_new = maildir_move_to_context (ctx, &md);
1619
1620   return occult ? M_REOPENED : (have_new ? M_NEW_MAIL : 0);
1621 }
1622
1623
1624 /*
1625  * These functions try to find a message in a maildir folder when it
1626  * has moved under our feet.  Note that this code is rather expensive, but
1627  * then again, it's called rarely.
1628  */
1629 static FILE *_maildir_open_find_message(const char *folder, const char *unique,
1630                                         const char *subfolder)
1631 {
1632   char dir[_POSIX_PATH_MAX];
1633   char tunique[_POSIX_PATH_MAX];
1634   char fname[_POSIX_PATH_MAX];
1635
1636   DIR *dp;
1637   struct dirent *de;
1638
1639   FILE *fp = NULL;
1640   int oe = ENOENT;
1641
1642   snprintf (dir, sizeof (dir), "%s/%s", folder, subfolder);
1643
1644   if ((dp = opendir (dir)) == NULL) {
1645     errno = ENOENT;
1646     return NULL;
1647   }
1648
1649   while ((de = readdir (dp))) {
1650     maildir_canon_filename (tunique, de->d_name, sizeof (tunique));
1651
1652     if (!m_strcmp(tunique, unique)) {
1653       snprintf (fname, sizeof (fname), "%s/%s/%s", folder, subfolder,
1654                 de->d_name);
1655       fp = fopen(fname, "r");
1656       oe = errno;
1657       break;
1658     }
1659   }
1660
1661   closedir (dp);
1662
1663   errno = oe;
1664   return fp;
1665 }
1666
1667 FILE *maildir_open_find_message (const char *folder, const char *msg)
1668 {
1669   char unique[_POSIX_PATH_MAX];
1670   FILE *fp;
1671
1672   static unsigned int new_hits = 0, cur_hits = 0;       /* simple dynamic optimization */
1673
1674   maildir_canon_filename (unique, msg, sizeof (unique));
1675
1676   if ((fp =
1677        _maildir_open_find_message (folder, unique,
1678                                    new_hits > cur_hits ? "new" : "cur"))
1679       || errno != ENOENT) {
1680     if (new_hits < UINT_MAX && cur_hits < UINT_MAX) {
1681       new_hits += (new_hits > cur_hits ? 1 : 0);
1682       cur_hits += (new_hits > cur_hits ? 0 : 1);
1683     }
1684
1685     return fp;
1686   }
1687   if ((fp =
1688        _maildir_open_find_message (folder, unique,
1689                                    new_hits > cur_hits ? "cur" : "new"))
1690       || errno != ENOENT) {
1691     if (new_hits < UINT_MAX && cur_hits < UINT_MAX) {
1692       new_hits += (new_hits > cur_hits ? 0 : 1);
1693       cur_hits += (new_hits > cur_hits ? 1 : 0);
1694     }
1695
1696     return fp;
1697   }
1698
1699   return NULL;
1700 }
1701
1702
1703 /*
1704  * Returns:
1705  * 1 if there are no messages in the mailbox
1706  * 0 if there are messages in the mailbox
1707  * -1 on error
1708  */
1709 static int maildir_check_empty (const char *path)
1710 {
1711   DIR *dp;
1712   struct dirent *de;
1713   int r = 1;                    /* assume empty until we find a message */
1714   char frealpath[_POSIX_PATH_MAX];
1715   int iter = 0;
1716
1717   /* Strategy here is to look for any file not beginning with a period */
1718
1719   do {
1720     /* we do "cur" on the first iteration since its more likely that we'll
1721      * find old messages without having to scan both subdirs
1722      */
1723     snprintf (frealpath, sizeof (frealpath), "%s/%s", path,
1724               iter == 0 ? "cur" : "new");
1725     if ((dp = opendir (frealpath)) == NULL)
1726       return -1;
1727     while ((de = readdir (dp))) {
1728       if (*de->d_name != '.') {
1729         r = 0;
1730         break;
1731       }
1732     }
1733     closedir (dp);
1734     iter++;
1735   } while (r && iter < 2);
1736
1737   return r;
1738 }
1739
1740 /*
1741  * Returns:
1742  * 1 if there are no messages in the mailbox
1743  * 0 if there are messages in the mailbox
1744  * -1 on error
1745  */
1746 static int mh_check_empty (const char *path)
1747 {
1748   DIR *dp;
1749   struct dirent *de;
1750   int r = 1;                    /* assume empty until we find a message */
1751
1752   if ((dp = opendir (path)) == NULL)
1753     return -1;
1754   while ((de = readdir (dp))) {
1755     if (mh_valid_message (de->d_name)) {
1756       r = 0;
1757       break;
1758     }
1759   }
1760   closedir (dp);
1761
1762   return r;
1763 }
1764
1765 static int mh_is_magic(const char *path, struct stat *st)
1766 {
1767     static char const * const files[] = {
1768         ".mh_sequences", ".xmhcache", ".mew_cache",
1769         ".mew-cache", ".sylpheed_cache",
1770     };
1771
1772     if (S_ISDIR(st->st_mode)) {
1773         for (int i = 0; i < countof(files); i++) {
1774             char tmp[_POSIX_PATH_MAX];
1775
1776             snprintf(tmp, sizeof(tmp), "%s/%s", path, files[i]);
1777             if (access(tmp, F_OK) == 0)
1778                 return M_MH;
1779         }
1780     }
1781
1782     return -1;
1783 }
1784
1785 static int maildir_is_magic (const char *path, struct stat *st)
1786 {
1787     if (S_ISDIR(st->st_mode)) {
1788         char tmp[_POSIX_PATH_MAX];
1789         struct stat sb;
1790
1791         snprintf(tmp, sizeof(tmp), "%s/cur", path);
1792         if (stat(tmp, &sb) == 0 && S_ISDIR(sb.st_mode))
1793             return M_MAILDIR;
1794     }
1795
1796     return -1;
1797 }
1798
1799 static int mh_commit (MESSAGE* msg, CONTEXT* ctx) {
1800   return (mh_commit_message (msg, ctx, NULL));
1801 }
1802
1803 static int maildir_commit (MESSAGE* msg, CONTEXT* ctx) {
1804   return (maildir_commit_message (msg, ctx, NULL));
1805 }
1806
1807 mx_t const maildir_mx = {
1808     M_MAILDIR,
1809     1,
1810     maildir_is_magic,
1811     maildir_check_empty,
1812     access,
1813     maildir_read_dir,
1814     maildir_open_new_message,
1815     NULL,
1816     maildir_check_mailbox,
1817     NULL,
1818     mh_sync_mailbox,
1819     maildir_commit
1820 };
1821
1822 mx_t const mh_mx = {
1823     M_MH,
1824     1,
1825     mh_is_magic,
1826     mh_check_empty,
1827     access,
1828     mh_read_dir,
1829     mh_open_new_message,
1830     NULL,
1831     mh_check_mailbox,
1832     NULL,
1833     mh_sync_mailbox,
1834     mh_commit
1835 };