imap-send.c

   1 /*
   2  * git-imap-send - drops patches into an imap Drafts folder
   3  *                 derived from isync/mbsync - mailbox synchronizer
   4  *
   5  * Copyright (C) 2000-2002 Michael R. Elkins <me@mutt.org>
   6  * Copyright (C) 2002-2004 Oswald Buddenhagen <ossi@users.sf.net>
   7  * Copyright (C) 2004 Theodore Y. Ts'o <tytso@mit.edu>
   8  * Copyright (C) 2006 Mike McCormack
   9  *
  10  *  This program is free software; you can redistribute it and/or modify
  11  *  it under the terms of the GNU General Public License as published by
  12  *  the Free Software Foundation; either version 2 of the License, or
  13  *  (at your option) any later version.
  14  *
  15  *  This program is distributed in the hope that it will be useful,
  16  *  but WITHOUT ANY WARRANTY; without even the implied warranty of
  17  *  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  18  *  GNU General Public License for more details.
  19  *
  20  *  You should have received a copy of the GNU General Public License
  21  *  along with this program; if not, write to the Free Software
  22  *  Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
  23  */
  24
  25 #include "cache.h"
  26
  27 typedef struct store_conf {
  28         char *name;
  29         const char *path; /* should this be here? its interpretation is driver-specific */
  30         char *map_inbox;
  31         char *trash;
  32         unsigned max_size; /* off_t is overkill */
  33         unsigned trash_remote_new:1, trash_only_new:1;
  34 } store_conf_t;
  35
  36 typedef struct string_list {
  37         struct string_list *next;
  38         char string[1];
  39 } string_list_t;
  40
  41 typedef struct channel_conf {
  42         struct channel_conf *next;
  43         char *name;
  44         store_conf_t *master, *slave;
  45         char *master_name, *slave_name;
  46         char *sync_state;
  47         string_list_t *patterns;
  48         int mops, sops;
  49         unsigned max_messages; /* for slave only */
  50 } channel_conf_t;
  51
  52 typedef struct group_conf {
  53         struct group_conf *next;
  54         char *name;
  55         string_list_t *channels;
  56 } group_conf_t;
  57
  58 /* For message->status */
  59 #define M_RECENT       (1<<0) /* unsyncable flag; maildir_* depend on this being 1<<0 */
  60 #define M_DEAD         (1<<1) /* expunged */
  61 #define M_FLAGS        (1<<2) /* flags fetched */
  62
  63 typedef struct message {
  64         struct message *next;
  65         /* string_list_t *keywords; */
  66         size_t size; /* zero implies "not fetched" */
  67         int uid;
  68         unsigned char flags, status;
  69 } message_t;
  70
  71 typedef struct store {
  72         store_conf_t *conf; /* foreign */
  73
  74         /* currently open mailbox */
  75         const char *name; /* foreign! maybe preset? */
  76         char *path; /* own */
  77         message_t *msgs; /* own */
  78         int uidvalidity;
  79         unsigned char opts; /* maybe preset? */
  80         /* note that the following do _not_ reflect stats from msgs, but mailbox totals */
  81         int count; /* # of messages */
  82         int recent; /* # of recent messages - don't trust this beyond the initial read */
  83 } store_t;
  84
  85 typedef struct {
  86         char *data;
  87         int len;
  88         unsigned char flags;
  89         unsigned int crlf:1;
  90 } msg_data_t;
  91
  92 #define DRV_OK          0
  93 #define DRV_MSG_BAD     -1
  94 #define DRV_BOX_BAD     -2
  95 #define DRV_STORE_BAD   -3
  96
  97 static int Verbose, Quiet;
  98
  99 static void imap_info( const char *, ... );
 100 static void imap_warn( const char *, ... );
 101
 102 static char *next_arg( char ** );
 103
 104 static void free_generic_messages( message_t * );
 105
 106 static int nfsnprintf( char *buf, int blen, const char *fmt, ... );
 107
 108 static int nfvasprintf(char **strp, const char *fmt, va_list ap)
 109 {
 110         int len;
 111         char tmp[8192];
 112
 113         len = vsnprintf(tmp, sizeof(tmp), fmt, ap);
 114         if (len < 0)
 115                 die("Fatal: Out of memory\n");
 116         if (len >= sizeof(tmp))
 117                 die("imap command overflow !\n");
 118         *strp = xmemdupz(tmp, len);
 119         return len;
 120 }
 121
 122 static void arc4_init( void );
 123 static unsigned char arc4_getbyte( void );
 124
 125 typedef struct imap_server_conf {
 126         char *name;
 127         char *tunnel;
 128         char *host;
 129         int port;
 130         char *user;
 131         char *pass;
 132 } imap_server_conf_t;
 133
 134 typedef struct imap_store_conf {
 135         store_conf_t gen;
 136         imap_server_conf_t *server;
 137         unsigned use_namespace:1;
 138 } imap_store_conf_t;
 139
 140 #define NIL     (void*)0x1
 141 #define LIST    (void*)0x2
 142
 143 typedef struct _list {
 144         struct _list *next, *child;
 145         char *val;
 146         int len;
 147 } list_t;
 148
 149 typedef struct {
 150         int fd;
 151 } Socket_t;
 152
 153 typedef struct {
 154         Socket_t sock;
 155         int bytes;
 156         int offset;
 157         char buf[1024];
 158 } buffer_t;
 159
 160 struct imap_cmd;
 161
 162 typedef struct imap {
 163         int uidnext; /* from SELECT responses */
 164         list_t *ns_personal, *ns_other, *ns_shared; /* NAMESPACE info */
 165         unsigned caps, rcaps; /* CAPABILITY results */
 166         /* command queue */
 167         int nexttag, num_in_progress, literal_pending;
 168         struct imap_cmd *in_progress, **in_progress_append;
 169         buffer_t buf; /* this is BIG, so put it last */
 170 } imap_t;
 171
 172 typedef struct imap_store {
 173         store_t gen;
 174         int uidvalidity;
 175         imap_t *imap;
 176         const char *prefix;
 177         unsigned /*currentnc:1,*/ trashnc:1;
 178 } imap_store_t;
 179
 180 struct imap_cmd_cb {
 181         int (*cont)( imap_store_t *ctx, struct imap_cmd *cmd, const char *prompt );
 182         void (*done)( imap_store_t *ctx, struct imap_cmd *cmd, int response);
 183         void *ctx;
 184         char *data;
 185         int dlen;
 186         int uid;
 187         unsigned create:1, trycreate:1;
 188 };
 189
 190 struct imap_cmd {
 191         struct imap_cmd *next;
 192         struct imap_cmd_cb cb;
 193         char *cmd;
 194         int tag;
 195 };
 196
 197 #define CAP(cap) (imap->caps & (1 << (cap)))
 198
 199 enum CAPABILITY {
 200         NOLOGIN = 0,
 201         UIDPLUS,
 202         LITERALPLUS,
 203         NAMESPACE,
 204 };
 205
 206 static const char *cap_list[] = {
 207         "LOGINDISABLED",
 208         "UIDPLUS",
 209         "LITERAL+",
 210         "NAMESPACE",
 211 };
 212
 213 #define RESP_OK    0
 214 #define RESP_NO    1
 215 #define RESP_BAD   2
 216
 217 static int get_cmd_result( imap_store_t *ctx, struct imap_cmd *tcmd );
 218
 219
 220 static const char *Flags[] = {
 221         "Draft",
 222         "Flagged",
 223         "Answered",
 224         "Seen",
 225         "Deleted",
 226 };
 227
 228 static void
 229 socket_perror( const char *func, Socket_t *sock, int ret )
 230 {
 231         if (ret < 0)
 232                 perror( func );
 233         else
 234                 fprintf( stderr, "%s: unexpected EOF\n", func );
 235 }
 236
 237 static int
 238 socket_read( Socket_t *sock, char *buf, int len )
 239 {
 240         ssize_t n = xread( sock->fd, buf, len );
 241         if (n <= 0) {
 242                 socket_perror( "read", sock, n );
 243                 close( sock->fd );
 244                 sock->fd = -1;
 245         }
 246         return n;
 247 }
 248
 249 static int
 250 socket_write( Socket_t *sock, const char *buf, int len )
 251 {
 252         int n = write_in_full( sock->fd, buf, len );
 253         if (n != len) {
 254                 socket_perror( "write", sock, n );
 255                 close( sock->fd );
 256                 sock->fd = -1;
 257         }
 258         return n;
 259 }
 260
 261 /* simple line buffering */
 262 static int
 263 buffer_gets( buffer_t * b, char **s )
 264 {
 265         int n;
 266         int start = b->offset;
 267
 268         *s = b->buf + start;
 269
 270         for (;;) {
 271                 /* make sure we have enough data to read the \r\n sequence */
 272                 if (b->offset + 1 >= b->bytes) {
 273                         if (start) {
 274                                 /* shift down used bytes */
 275                                 *s = b->buf;
 276
 277                                 assert( start <= b->bytes );
 278                                 n = b->bytes - start;
 279
 280                                 if (n)
 281                                         memmove(b->buf, b->buf + start, n);
 282                                 b->offset -= start;
 283                                 b->bytes = n;
 284                                 start = 0;
 285                         }
 286
 287                         n = socket_read( &b->sock, b->buf + b->bytes,
 288                                          sizeof(b->buf) - b->bytes );
 289
 290                         if (n <= 0)
 291                                 return -1;
 292
 293                         b->bytes += n;
 294                 }
 295
 296                 if (b->buf[b->offset] == '\r') {
 297                         assert( b->offset + 1 < b->bytes );
 298                         if (b->buf[b->offset + 1] == '\n') {
 299                                 b->buf[b->offset] = 0;  /* terminate the string */
 300                                 b->offset += 2; /* next line */
 301                                 if (Verbose)
 302                                         puts( *s );
 303                                 return 0;
 304                         }
 305                 }
 306
 307                 b->offset++;
 308         }
 309         /* not reached */
 310 }
 311
 312 static void
 313 imap_info( const char *msg, ... )
 314 {
 315         va_list va;
 316
 317         if (!Quiet) {
 318                 va_start( va, msg );
 319                 vprintf( msg, va );
 320                 va_end( va );
 321                 fflush( stdout );
 322         }
 323 }
 324
 325 static void
 326 imap_warn( const char *msg, ... )
 327 {
 328         va_list va;
 329
 330         if (Quiet < 2) {
 331                 va_start( va, msg );
 332                 vfprintf( stderr, msg, va );
 333                 va_end( va );
 334         }
 335 }
 336
 337 static char *
 338 next_arg( char **s )
 339 {
 340         char *ret;
 341
 342         if (!s || !*s)
 343                 return NULL;
 344         while (isspace( (unsigned char) **s ))
 345                 (*s)++;
 346         if (!**s) {
 347                 *s = NULL;
 348                 return NULL;
 349         }
 350         if (**s == '"') {
 351                 ++*s;
 352                 ret = *s;
 353                 *s = strchr( *s, '"' );
 354         } else {
 355                 ret = *s;
 356                 while (**s && !isspace( (unsigned char) **s ))
 357                         (*s)++;
 358         }
 359         if (*s) {
 360                 if (**s)
 361                         *(*s)++ = 0;
 362                 if (!**s)
 363                         *s = NULL;
 364         }
 365         return ret;
 366 }
 367
 368 static void
 369 free_generic_messages( message_t *msgs )
 370 {
 371         message_t *tmsg;
 372
 373         for (; msgs; msgs = tmsg) {
 374                 tmsg = msgs->next;
 375                 free( msgs );
 376         }
 377 }
 378
 379 static int
 380 nfsnprintf( char *buf, int blen, const char *fmt, ... )
 381 {
 382         int ret;
 383         va_list va;
 384
 385         va_start( va, fmt );
 386         if (blen <= 0 || (unsigned)(ret = vsnprintf( buf, blen, fmt, va )) >= (unsigned)blen)
 387                 die( "Fatal: buffer too small. Please report a bug.\n");
 388         va_end( va );
 389         return ret;
 390 }
 391
 392 static struct {
 393         unsigned char i, j, s[256];
 394 } rs;
 395
 396 static void
 397 arc4_init( void )
 398 {
 399         int i, fd;
 400         unsigned char j, si, dat[128];
 401
 402         if ((fd = open( "/dev/urandom", O_RDONLY )) < 0 && (fd = open( "/dev/random", O_RDONLY )) < 0) {
 403                 fprintf( stderr, "Fatal: no random number source available.\n" );
 404                 exit( 3 );
 405         }
 406         if (read_in_full( fd, dat, 128 ) != 128) {
 407                 fprintf( stderr, "Fatal: cannot read random number source.\n" );
 408                 exit( 3 );
 409         }
 410         close( fd );
 411
 412         for (i = 0; i < 256; i++)
 413                 rs.s[i] = i;
 414         for (i = j = 0; i < 256; i++) {
 415                 si = rs.s[i];
 416                 j += si + dat[i & 127];
 417                 rs.s[i] = rs.s[j];
 418                 rs.s[j] = si;
 419         }
 420         rs.i = rs.j = 0;
 421
 422         for (i = 0; i < 256; i++)
 423                 arc4_getbyte();
 424 }
 425
 426 static unsigned char
 427 arc4_getbyte( void )
 428 {
 429         unsigned char si, sj;
 430
 431         rs.i++;
 432         si = rs.s[rs.i];
 433         rs.j += si;
 434         sj = rs.s[rs.j];
 435         rs.s[rs.i] = sj;
 436         rs.s[rs.j] = si;
 437         return rs.s[(si + sj) & 0xff];
 438 }
 439
 440 static struct imap_cmd *
 441 v_issue_imap_cmd( imap_store_t *ctx, struct imap_cmd_cb *cb,
 442                   const char *fmt, va_list ap )
 443 {
 444         imap_t *imap = ctx->imap;
 445         struct imap_cmd *cmd;
 446         int n, bufl;
 447         char buf[1024];
 448
 449         cmd = xmalloc( sizeof(struct imap_cmd) );
 450         nfvasprintf( &cmd->cmd, fmt, ap );
 451         cmd->tag = ++imap->nexttag;
 452
 453         if (cb)
 454                 cmd->cb = *cb;
 455         else
 456                 memset( &cmd->cb, 0, sizeof(cmd->cb) );
 457
 458         while (imap->literal_pending)
 459                 get_cmd_result( ctx, NULL );
 460
 461         bufl = nfsnprintf( buf, sizeof(buf), cmd->cb.data ? CAP(LITERALPLUS) ?
 462                            "%d %s{%d+}\r\n" : "%d %s{%d}\r\n" : "%d %s\r\n",
 463                            cmd->tag, cmd->cmd, cmd->cb.dlen );
 464         if (Verbose) {
 465                 if (imap->num_in_progress)
 466                         printf( "(%d in progress) ", imap->num_in_progress );
 467                 if (memcmp( cmd->cmd, "LOGIN", 5 ))
 468                         printf( ">>> %s", buf );
 469                 else
 470                         printf( ">>> %d LOGIN <user> <pass>\n", cmd->tag );
 471         }
 472         if (socket_write( &imap->buf.sock, buf, bufl ) != bufl) {
 473                 free( cmd->cmd );
 474                 free( cmd );
 475                 if (cb)
 476                         free( cb->data );
 477                 return NULL;
 478         }
 479         if (cmd->cb.data) {
 480                 if (CAP(LITERALPLUS)) {
 481                         n = socket_write( &imap->buf.sock, cmd->cb.data, cmd->cb.dlen );
 482                         free( cmd->cb.data );
 483                         if (n != cmd->cb.dlen ||
 484                             (n = socket_write( &imap->buf.sock, "\r\n", 2 )) != 2)
 485                         {
 486                                 free( cmd->cmd );
 487                                 free( cmd );
 488                                 return NULL;
 489                         }
 490                         cmd->cb.data = NULL;
 491                 } else
 492                         imap->literal_pending = 1;
 493         } else if (cmd->cb.cont)
 494                 imap->literal_pending = 1;
 495         cmd->next = NULL;
 496         *imap->in_progress_append = cmd;
 497         imap->in_progress_append = &cmd->next;
 498         imap->num_in_progress++;
 499         return cmd;
 500 }
 501
 502 static struct imap_cmd *
 503 issue_imap_cmd( imap_store_t *ctx, struct imap_cmd_cb *cb, const char *fmt, ... )
 504 {
 505         struct imap_cmd *ret;
 506         va_list ap;
 507
 508         va_start( ap, fmt );
 509         ret = v_issue_imap_cmd( ctx, cb, fmt, ap );
 510         va_end( ap );
 511         return ret;
 512 }
 513
 514 static int
 515 imap_exec( imap_store_t *ctx, struct imap_cmd_cb *cb, const char *fmt, ... )
 516 {
 517         va_list ap;
 518         struct imap_cmd *cmdp;
 519
 520         va_start( ap, fmt );
 521         cmdp = v_issue_imap_cmd( ctx, cb, fmt, ap );
 522         va_end( ap );
 523         if (!cmdp)
 524                 return RESP_BAD;
 525
 526         return get_cmd_result( ctx, cmdp );
 527 }
 528
 529 static int
 530 imap_exec_m( imap_store_t *ctx, struct imap_cmd_cb *cb, const char *fmt, ... )
 531 {
 532         va_list ap;
 533         struct imap_cmd *cmdp;
 534
 535         va_start( ap, fmt );
 536         cmdp = v_issue_imap_cmd( ctx, cb, fmt, ap );
 537         va_end( ap );
 538         if (!cmdp)
 539                 return DRV_STORE_BAD;
 540
 541         switch (get_cmd_result( ctx, cmdp )) {
 542         case RESP_BAD: return DRV_STORE_BAD;
 543         case RESP_NO: return DRV_MSG_BAD;
 544         default: return DRV_OK;
 545         }
 546 }
 547
 548 static int
 549 is_atom( list_t *list )
 550 {
 551         return list && list->val && list->val != NIL && list->val != LIST;
 552 }
 553
 554 static int
 555 is_list( list_t *list )
 556 {
 557         return list && list->val == LIST;
 558 }
 559
 560 static void
 561 free_list( list_t *list )
 562 {
 563         list_t *tmp;
 564
 565         for (; list; list = tmp) {
 566                 tmp = list->next;
 567                 if (is_list( list ))
 568                         free_list( list->child );
 569                 else if (is_atom( list ))
 570                         free( list->val );
 571                 free( list );
 572         }
 573 }
 574
 575 static int
 576 parse_imap_list_l( imap_t *imap, char **sp, list_t **curp, int level )
 577 {
 578         list_t *cur;
 579         char *s = *sp, *p;
 580         int n, bytes;
 581
 582         for (;;) {
 583                 while (isspace( (unsigned char)*s ))
 584                         s++;
 585                 if (level && *s == ')') {
 586                         s++;
 587                         break;
 588                 }
 589                 *curp = cur = xmalloc( sizeof(*cur) );
 590                 curp = &cur->next;
 591                 cur->val = NULL; /* for clean bail */
 592                 if (*s == '(') {
 593                         /* sublist */
 594                         s++;
 595                         cur->val = LIST;
 596                         if (parse_imap_list_l( imap, &s, &cur->child, level + 1 ))
 597                                 goto bail;
 598                 } else if (imap && *s == '{') {
 599                         /* literal */
 600                         bytes = cur->len = strtol( s + 1, &s, 10 );
 601                         if (*s != '}')
 602                                 goto bail;
 603
 604                         s = cur->val = xmalloc( cur->len );
 605
 606                         /* dump whats left over in the input buffer */
 607                         n = imap->buf.bytes - imap->buf.offset;
 608
 609                         if (n > bytes)
 610                                 /* the entire message fit in the buffer */
 611                                 n = bytes;
 612
 613                         memcpy( s, imap->buf.buf + imap->buf.offset, n );
 614                         s += n;
 615                         bytes -= n;
 616
 617                         /* mark that we used part of the buffer */
 618                         imap->buf.offset += n;
 619
 620                         /* now read the rest of the message */
 621                         while (bytes > 0) {
 622                                 if ((n = socket_read (&imap->buf.sock, s, bytes)) <= 0)
 623                                         goto bail;
 624                                 s += n;
 625                                 bytes -= n;
 626                         }
 627
 628                         if (buffer_gets( &imap->buf, &s ))
 629                                 goto bail;
 630                 } else if (*s == '"') {
 631                         /* quoted string */
 632                         s++;
 633                         p = s;
 634                         for (; *s != '"'; s++)
 635                                 if (!*s)
 636                                         goto bail;
 637                         cur->len = s - p;
 638                         s++;
 639                         cur->val = xmemdupz(p, cur->len);
 640                 } else {
 641                         /* atom */
 642                         p = s;
 643                         for (; *s && !isspace( (unsigned char)*s ); s++)
 644                                 if (level && *s == ')')
 645                                         break;
 646                         cur->len = s - p;
 647                         if (cur->len == 3 && !memcmp ("NIL", p, 3)) {
 648                                 cur->val = NIL;
 649                         } else {
 650                                 cur->val = xmemdupz(p, cur->len);
 651                         }
 652                 }
 653
 654                 if (!level)
 655                         break;
 656                 if (!*s)
 657                         goto bail;
 658         }
 659         *sp = s;
 660         *curp = NULL;
 661         return 0;
 662
 663   bail:
 664         *curp = NULL;
 665         return -1;
 666 }
 667
 668 static list_t *
 669 parse_imap_list( imap_t *imap, char **sp )
 670 {
 671         list_t *head;
 672
 673         if (!parse_imap_list_l( imap, sp, &head, 0 ))
 674                 return head;
 675         free_list( head );
 676         return NULL;
 677 }
 678
 679 static list_t *
 680 parse_list( char **sp )
 681 {
 682         return parse_imap_list( NULL, sp );
 683 }
 684
 685 static void
 686 parse_capability( imap_t *imap, char *cmd )
 687 {
 688         char *arg;
 689         unsigned i;
 690
 691         imap->caps = 0x80000000;
 692         while ((arg = next_arg( &cmd )))
 693                 for (i = 0; i < ARRAY_SIZE(cap_list); i++)
 694                         if (!strcmp( cap_list[i], arg ))
 695                                 imap->caps |= 1 << i;
 696         imap->rcaps = imap->caps;
 697 }
 698
 699 static int
 700 parse_response_code( imap_store_t *ctx, struct imap_cmd_cb *cb, char *s )
 701 {
 702         imap_t *imap = ctx->imap;
 703         char *arg, *p;
 704
 705         if (*s != '[')
 706                 return RESP_OK;         /* no response code */
 707         s++;
 708         if (!(p = strchr( s, ']' ))) {
 709                 fprintf( stderr, "IMAP error: malformed response code\n" );
 710                 return RESP_BAD;
 711         }
 712         *p++ = 0;
 713         arg = next_arg( &s );
 714         if (!strcmp( "UIDVALIDITY", arg )) {
 715                 if (!(arg = next_arg( &s )) || !(ctx->gen.uidvalidity = atoi( arg ))) {
 716                         fprintf( stderr, "IMAP error: malformed UIDVALIDITY status\n" );
 717                         return RESP_BAD;
 718                 }
 719         } else if (!strcmp( "UIDNEXT", arg )) {
 720                 if (!(arg = next_arg( &s )) || !(imap->uidnext = atoi( arg ))) {
 721                         fprintf( stderr, "IMAP error: malformed NEXTUID status\n" );
 722                         return RESP_BAD;
 723                 }
 724         } else if (!strcmp( "CAPABILITY", arg )) {
 725                 parse_capability( imap, s );
 726         } else if (!strcmp( "ALERT", arg )) {
 727                 /* RFC2060 says that these messages MUST be displayed
 728                  * to the user
 729                  */
 730                 for (; isspace( (unsigned char)*p ); p++);
 731                 fprintf( stderr, "*** IMAP ALERT *** %s\n", p );
 732         } else if (cb && cb->ctx && !strcmp( "APPENDUID", arg )) {
 733                 if (!(arg = next_arg( &s )) || !(ctx->gen.uidvalidity = atoi( arg )) ||
 734                     !(arg = next_arg( &s )) || !(*(int *)cb->ctx = atoi( arg )))
 735                 {
 736                         fprintf( stderr, "IMAP error: malformed APPENDUID status\n" );
 737                         return RESP_BAD;
 738                 }
 739         }
 740         return RESP_OK;
 741 }
 742
 743 static int
 744 get_cmd_result( imap_store_t *ctx, struct imap_cmd *tcmd )
 745 {
 746         imap_t *imap = ctx->imap;
 747         struct imap_cmd *cmdp, **pcmdp, *ncmdp;
 748         char *cmd, *arg, *arg1, *p;
 749         int n, resp, resp2, tag;
 750
 751         for (;;) {
 752                 if (buffer_gets( &imap->buf, &cmd ))
 753                         return RESP_BAD;
 754
 755                 arg = next_arg( &cmd );
 756                 if (*arg == '*') {
 757                         arg = next_arg( &cmd );
 758                         if (!arg) {
 759                                 fprintf( stderr, "IMAP error: unable to parse untagged response\n" );
 760                                 return RESP_BAD;
 761                         }
 762
 763                         if (!strcmp( "NAMESPACE", arg )) {
 764                                 imap->ns_personal = parse_list( &cmd );
 765                                 imap->ns_other = parse_list( &cmd );
 766                                 imap->ns_shared = parse_list( &cmd );
 767                         } else if (!strcmp( "OK", arg ) || !strcmp( "BAD", arg ) ||
 768                                    !strcmp( "NO", arg ) || !strcmp( "BYE", arg )) {
 769                                 if ((resp = parse_response_code( ctx, NULL, cmd )) != RESP_OK)
 770                                         return resp;
 771                         } else if (!strcmp( "CAPABILITY", arg ))
 772                                 parse_capability( imap, cmd );
 773                         else if ((arg1 = next_arg( &cmd ))) {
 774                                 if (!strcmp( "EXISTS", arg1 ))
 775                                         ctx->gen.count = atoi( arg );
 776                                 else if (!strcmp( "RECENT", arg1 ))
 777                                         ctx->gen.recent = atoi( arg );
 778                         } else {
 779                                 fprintf( stderr, "IMAP error: unable to parse untagged response\n" );
 780                                 return RESP_BAD;
 781                         }
 782                 } else if (!imap->in_progress) {
 783                         fprintf( stderr, "IMAP error: unexpected reply: %s %s\n", arg, cmd ? cmd : "" );
 784                         return RESP_BAD;
 785                 } else if (*arg == '+') {
 786                         /* This can happen only with the last command underway, as
 787                            it enforces a round-trip. */
 788                         cmdp = (struct imap_cmd *)((char *)imap->in_progress_append -
 789                                offsetof(struct imap_cmd, next));
 790                         if (cmdp->cb.data) {
 791                                 n = socket_write( &imap->buf.sock, cmdp->cb.data, cmdp->cb.dlen );
 792                                 free( cmdp->cb.data );
 793                                 cmdp->cb.data = NULL;
 794                                 if (n != (int)cmdp->cb.dlen)
 795                                         return RESP_BAD;
 796                         } else if (cmdp->cb.cont) {
 797                                 if (cmdp->cb.cont( ctx, cmdp, cmd ))
 798                                         return RESP_BAD;
 799                         } else {
 800                                 fprintf( stderr, "IMAP error: unexpected command continuation request\n" );
 801                                 return RESP_BAD;
 802                         }
 803                         if (socket_write( &imap->buf.sock, "\r\n", 2 ) != 2)
 804                                 return RESP_BAD;
 805                         if (!cmdp->cb.cont)
 806                                 imap->literal_pending = 0;
 807                         if (!tcmd)
 808                                 return DRV_OK;
 809                 } else {
 810                         tag = atoi( arg );
 811                         for (pcmdp = &imap->in_progress; (cmdp = *pcmdp); pcmdp = &cmdp->next)
 812                                 if (cmdp->tag == tag)
 813                                         goto gottag;
 814                         fprintf( stderr, "IMAP error: unexpected tag %s\n", arg );
 815                         return RESP_BAD;
 816                   gottag:
 817                         if (!(*pcmdp = cmdp->next))
 818                                 imap->in_progress_append = pcmdp;
 819                         imap->num_in_progress--;
 820                         if (cmdp->cb.cont || cmdp->cb.data)
 821                                 imap->literal_pending = 0;
 822                         arg = next_arg( &cmd );
 823                         if (!strcmp( "OK", arg ))
 824                                 resp = DRV_OK;
 825                         else {
 826                                 if (!strcmp( "NO", arg )) {
 827                                         if (cmdp->cb.create && cmd && (cmdp->cb.trycreate || !memcmp( cmd, "[TRYCREATE]", 11 ))) { /* SELECT, APPEND or UID COPY */
 828                                                 p = strchr( cmdp->cmd, '"' );
 829                                                 if (!issue_imap_cmd( ctx, NULL, "CREATE \"%.*s\"", strchr( p + 1, '"' ) - p + 1, p )) {
 830                                                         resp = RESP_BAD;
 831                                                         goto normal;
 832                                                 }
 833                                                 /* not waiting here violates the spec, but a server that does not
 834                                                    grok this nonetheless violates it too. */
 835                                                 cmdp->cb.create = 0;
 836                                                 if (!(ncmdp = issue_imap_cmd( ctx, &cmdp->cb, "%s", cmdp->cmd ))) {
 837                                                         resp = RESP_BAD;
 838                                                         goto normal;
 839                                                 }
 840                                                 free( cmdp->cmd );
 841                                                 free( cmdp );
 842                                                 if (!tcmd)
 843                                                         return 0;       /* ignored */
 844                                                 if (cmdp == tcmd)
 845                                                         tcmd = ncmdp;
 846                                                 continue;
 847                                         }
 848                                         resp = RESP_NO;
 849                                 } else /*if (!strcmp( "BAD", arg ))*/
 850                                         resp = RESP_BAD;
 851                                 fprintf( stderr, "IMAP command '%s' returned response (%s) - %s\n",
 852                                          memcmp (cmdp->cmd, "LOGIN", 5) ?
 853                                                         cmdp->cmd : "LOGIN <user> <pass>",
 854                                                         arg, cmd ? cmd : "");
 855                         }
 856                         if ((resp2 = parse_response_code( ctx, &cmdp->cb, cmd )) > resp)
 857                                 resp = resp2;
 858                   normal:
 859                         if (cmdp->cb.done)
 860                                 cmdp->cb.done( ctx, cmdp, resp );
 861                         free( cmdp->cb.data );
 862                         free( cmdp->cmd );
 863                         free( cmdp );
 864                         if (!tcmd || tcmd == cmdp)
 865                                 return resp;
 866                 }
 867         }
 868         /* not reached */
 869 }
 870
 871 static void
 872 imap_close_server( imap_store_t *ictx )
 873 {
 874         imap_t *imap = ictx->imap;
 875
 876         if (imap->buf.sock.fd != -1) {
 877                 imap_exec( ictx, NULL, "LOGOUT" );
 878                 close( imap->buf.sock.fd );
 879         }
 880         free_list( imap->ns_personal );
 881         free_list( imap->ns_other );
 882         free_list( imap->ns_shared );
 883         free( imap );
 884 }
 885
 886 static void
 887 imap_close_store( store_t *ctx )
 888 {
 889         imap_close_server( (imap_store_t *)ctx );
 890         free_generic_messages( ctx->msgs );
 891         free( ctx );
 892 }
 893
 894 static store_t *
 895 imap_open_store( imap_server_conf_t *srvc )
 896 {
 897         imap_store_t *ctx;
 898         imap_t *imap;
 899         char *arg, *rsp;
 900         struct hostent *he;
 901         struct sockaddr_in addr;
 902         int s, a[2], preauth;
 903         pid_t pid;
 904
 905         ctx = xcalloc( sizeof(*ctx), 1 );
 906
 907         ctx->imap = imap = xcalloc( sizeof(*imap), 1 );
 908         imap->buf.sock.fd = -1;
 909         imap->in_progress_append = &imap->in_progress;
 910
 911         /* open connection to IMAP server */
 912
 913         if (srvc->tunnel) {
 914                 imap_info( "Starting tunnel '%s'... ", srvc->tunnel );
 915
 916                 if (socketpair( PF_UNIX, SOCK_STREAM, 0, a )) {
 917                         perror( "socketpair" );
 918                         exit( 1 );
 919                 }
 920
 921                 pid = fork();
 922                 if (pid < 0)
 923                         _exit( 127 );
 924                 if (!pid) {
 925                         if (dup2( a[0], 0 ) == -1 || dup2( a[0], 1 ) == -1)
 926                                 _exit( 127 );
 927                         close( a[0] );
 928                         close( a[1] );
 929                         execl( "/bin/sh", "sh", "-c", srvc->tunnel, NULL );
 930                         _exit( 127 );
 931                 }
 932
 933                 close (a[0]);
 934
 935                 imap->buf.sock.fd = a[1];
 936
 937                 imap_info( "ok\n" );
 938         } else {
 939                 memset( &addr, 0, sizeof(addr) );
 940                 addr.sin_port = htons( srvc->port );
 941                 addr.sin_family = AF_INET;
 942
 943                 imap_info( "Resolving %s... ", srvc->host );
 944                 he = gethostbyname( srvc->host );
 945                 if (!he) {
 946                         perror( "gethostbyname" );
 947                         goto bail;
 948                 }
 949                 imap_info( "ok\n" );
 950
 951                 addr.sin_addr.s_addr = *((int *) he->h_addr_list[0]);
 952
 953                 s = socket( PF_INET, SOCK_STREAM, 0 );
 954
 955                 imap_info( "Connecting to %s:%hu... ", inet_ntoa( addr.sin_addr ), ntohs( addr.sin_port ) );
 956                 if (connect( s, (struct sockaddr *)&addr, sizeof(addr) )) {
 957                         close( s );
 958                         perror( "connect" );
 959                         goto bail;
 960                 }
 961                 imap_info( "ok\n" );
 962
 963                 imap->buf.sock.fd = s;
 964
 965         }
 966
 967         /* read the greeting string */
 968         if (buffer_gets( &imap->buf, &rsp )) {
 969                 fprintf( stderr, "IMAP error: no greeting response\n" );
 970                 goto bail;
 971         }
 972         arg = next_arg( &rsp );
 973         if (!arg || *arg != '*' || (arg = next_arg( &rsp )) == NULL) {
 974                 fprintf( stderr, "IMAP error: invalid greeting response\n" );
 975                 goto bail;
 976         }
 977         preauth = 0;
 978         if (!strcmp( "PREAUTH", arg ))
 979                 preauth = 1;
 980         else if (strcmp( "OK", arg ) != 0) {
 981                 fprintf( stderr, "IMAP error: unknown greeting response\n" );
 982                 goto bail;
 983         }
 984         parse_response_code( ctx, NULL, rsp );
 985         if (!imap->caps && imap_exec( ctx, NULL, "CAPABILITY" ) != RESP_OK)
 986                 goto bail;
 987
 988         if (!preauth) {
 989
 990                 imap_info ("Logging in...\n");
 991                 if (!srvc->user) {
 992                         fprintf( stderr, "Skipping server %s, no user\n", srvc->host );
 993                         goto bail;
 994                 }
 995                 if (!srvc->pass) {
 996                         char prompt[80];
 997                         sprintf( prompt, "Password (%s@%s): ", srvc->user, srvc->host );
 998                         arg = getpass( prompt );
 999                         if (!arg) {
1000                                 perror( "getpass" );
1001                                 exit( 1 );
1002                         }
1003                         if (!*arg) {
1004                                 fprintf( stderr, "Skipping account %s@%s, no password\n", srvc->user, srvc->host );
1005                                 goto bail;
1006                         }
1007                         /*
1008                          * getpass() returns a pointer to a static buffer.  make a copy
1009                          * for long term storage.
1010                          */
1011                         srvc->pass = xstrdup( arg );
1012                 }
1013                 if (CAP(NOLOGIN)) {
1014                         fprintf( stderr, "Skipping account %s@%s, server forbids LOGIN\n", srvc->user, srvc->host );
1015                         goto bail;
1016                 }
1017                 imap_warn( "*** IMAP Warning *** Password is being sent in the clear\n" );
1018                 if (imap_exec( ctx, NULL, "LOGIN \"%s\" \"%s\"", srvc->user, srvc->pass ) != RESP_OK) {
1019                         fprintf( stderr, "IMAP error: LOGIN failed\n" );
1020                         goto bail;
1021                 }
1022         } /* !preauth */
1023
1024         ctx->prefix = "";
1025         ctx->trashnc = 1;
1026         return (store_t *)ctx;
1027
1028   bail:
1029         imap_close_store( &ctx->gen );
1030         return NULL;
1031 }
1032
1033 static int
1034 imap_make_flags( int flags, char *buf )
1035 {
1036         const char *s;
1037         unsigned i, d;
1038
1039         for (i = d = 0; i < ARRAY_SIZE(Flags); i++)
1040                 if (flags & (1 << i)) {
1041                         buf[d++] = ' ';
1042                         buf[d++] = '\\';
1043                         for (s = Flags[i]; *s; s++)
1044                                 buf[d++] = *s;
1045                 }
1046         buf[0] = '(';
1047         buf[d++] = ')';
1048         return d;
1049 }
1050
1051 #define TUIDL 8
1052
1053 static int
1054 imap_store_msg( store_t *gctx, msg_data_t *data, int *uid )
1055 {
1056         imap_store_t *ctx = (imap_store_t *)gctx;
1057         imap_t *imap = ctx->imap;
1058         struct imap_cmd_cb cb;
1059         char *fmap, *buf;
1060         const char *prefix, *box;
1061         int ret, i, j, d, len, extra, nocr;
1062         int start, sbreak = 0, ebreak = 0;
1063         char flagstr[128], tuid[TUIDL * 2 + 1];
1064
1065         memset( &cb, 0, sizeof(cb) );
1066
1067         fmap = data->data;
1068         len = data->len;
1069         nocr = !data->crlf;
1070         extra = 0, i = 0;
1071         if (!CAP(UIDPLUS) && uid) {
1072           nloop:
1073                 start = i;
1074                 while (i < len)
1075                         if (fmap[i++] == '\n') {
1076                                 extra += nocr;
1077                                 if (i - 2 + nocr == start) {
1078                                         sbreak = ebreak = i - 2 + nocr;
1079                                         goto mktid;
1080                                 }
1081                                 if (!memcmp( fmap + start, "X-TUID: ", 8 )) {
1082                                         extra -= (ebreak = i) - (sbreak = start) + nocr;
1083                                         goto mktid;
1084                                 }
1085                                 goto nloop;
1086                         }
1087                 /* invalid message */
1088                 free( fmap );
1089                 return DRV_MSG_BAD;
1090          mktid:
1091                 for (j = 0; j < TUIDL; j++)
1092                         sprintf( tuid + j * 2, "%02x", arc4_getbyte() );
1093                 extra += 8 + TUIDL * 2 + 2;
1094         }
1095         if (nocr)
1096                 for (; i < len; i++)
1097                         if (fmap[i] == '\n')
1098                                 extra++;
1099
1100         cb.dlen = len + extra;
1101         buf = cb.data = xmalloc( cb.dlen );
1102         i = 0;
1103         if (!CAP(UIDPLUS) && uid) {
1104                 if (nocr) {
1105                         for (; i < sbreak; i++)
1106                                 if (fmap[i] == '\n') {
1107                                         *buf++ = '\r';
1108                                         *buf++ = '\n';
1109                                 } else
1110                                         *buf++ = fmap[i];
1111                 } else {
1112                         memcpy( buf, fmap, sbreak );
1113                         buf += sbreak;
1114                 }
1115                 memcpy( buf, "X-TUID: ", 8 );
1116                 buf += 8;
1117                 memcpy( buf, tuid, TUIDL * 2 );
1118                 buf += TUIDL * 2;
1119                 *buf++ = '\r';
1120                 *buf++ = '\n';
1121                 i = ebreak;
1122         }
1123         if (nocr) {
1124                 for (; i < len; i++)
1125                         if (fmap[i] == '\n') {
1126                                 *buf++ = '\r';
1127                                 *buf++ = '\n';
1128                         } else
1129                                 *buf++ = fmap[i];
1130         } else
1131                 memcpy( buf, fmap + i, len - i );
1132
1133         free( fmap );
1134
1135         d = 0;
1136         if (data->flags) {
1137                 d = imap_make_flags( data->flags, flagstr );
1138                 flagstr[d++] = ' ';
1139         }
1140         flagstr[d] = 0;
1141
1142         if (!uid) {
1143                 box = gctx->conf->trash;
1144                 prefix = ctx->prefix;
1145                 cb.create = 1;
1146                 if (ctx->trashnc)
1147                         imap->caps = imap->rcaps & ~(1 << LITERALPLUS);
1148         } else {
1149                 box = gctx->name;
1150                 prefix = !strcmp( box, "INBOX" ) ? "" : ctx->prefix;
1151                 cb.create = 0;
1152         }
1153         cb.ctx = uid;
1154         ret = imap_exec_m( ctx, &cb, "APPEND \"%s%s\" %s", prefix, box, flagstr );
1155         imap->caps = imap->rcaps;
1156         if (ret != DRV_OK)
1157                 return ret;
1158         if (!uid)
1159                 ctx->trashnc = 0;
1160         else
1161                 gctx->count++;
1162
1163         return DRV_OK;
1164 }
1165
1166 #define CHUNKSIZE 0x1000
1167
1168 static int
1169 read_message( FILE *f, msg_data_t *msg )
1170 {
1171         struct strbuf buf;
1172
1173         memset(msg, 0, sizeof(*msg));
1174         strbuf_init(&buf, 0);
1175
1176         do {
1177                 if (strbuf_fread(&buf, CHUNKSIZE, f) <= 0)
1178                         break;
1179         } while (!feof(f));
1180
1181         msg->len  = buf.len;
1182         msg->data = strbuf_detach(&buf, NULL);
1183         return msg->len;
1184 }
1185
1186 static int
1187 count_messages( msg_data_t *msg )
1188 {
1189         int count = 0;
1190         char *p = msg->data;
1191
1192         while (1) {
1193                 if (!prefixcmp(p, "From ")) {
1194                         count++;
1195                         p += 5;
1196                 }
1197                 p = strstr( p+5, "\nFrom ");
1198                 if (!p)
1199                         break;
1200                 p++;
1201         }
1202         return count;
1203 }
1204
1205 static int
1206 split_msg( msg_data_t *all_msgs, msg_data_t *msg, int *ofs )
1207 {
1208         char *p, *data;
1209
1210         memset( msg, 0, sizeof *msg );
1211         if (*ofs >= all_msgs->len)
1212                 return 0;
1213
1214         data = &all_msgs->data[ *ofs ];
1215         msg->len = all_msgs->len - *ofs;
1216
1217         if (msg->len < 5 || prefixcmp(data, "From "))
1218                 return 0;
1219
1220         p = strchr( data, '\n' );
1221         if (p) {
1222                 p = &p[1];
1223                 msg->len -= p-data;
1224                 *ofs += p-data;
1225                 data = p;
1226         }
1227
1228         p = strstr( data, "\nFrom " );
1229         if (p)
1230                 msg->len = &p[1] - data;
1231
1232         msg->data = xmemdupz(data, msg->len);
1233         *ofs += msg->len;
1234         return 1;
1235 }
1236
1237 static imap_server_conf_t server =
1238 {
1239         NULL,   /* name */
1240         NULL,   /* tunnel */
1241         NULL,   /* host */
1242         0,      /* port */
1243         NULL,   /* user */
1244         NULL,   /* pass */
1245 };
1246
1247 static char *imap_folder;
1248
1249 static int
1250 git_imap_config(const char *key, const char *val, void *cb)
1251 {
1252         char imap_key[] = "imap.";
1253
1254         if (strncmp( key, imap_key, sizeof imap_key - 1 ))
1255                 return 0;
1256
1257         if (!val)
1258                 return config_error_nonbool(key);
1259
1260         key += sizeof imap_key - 1;
1261
1262         if (!strcmp( "folder", key )) {
1263                 imap_folder = xstrdup( val );
1264         } else if (!strcmp( "host", key )) {
1265                 {
1266                         if (!prefixcmp(val, "imap:"))
1267                                 val += 5;
1268                         if (!server.port)
1269                                 server.port = 143;
1270                 }
1271                 if (!prefixcmp(val, "//"))
1272                         val += 2;
1273                 server.host = xstrdup( val );
1274         }
1275         else if (!strcmp( "user", key ))
1276                 server.user = xstrdup( val );
1277         else if (!strcmp( "pass", key ))
1278                 server.pass = xstrdup( val );
1279         else if (!strcmp( "port", key ))
1280                 server.port = git_config_int( key, val );
1281         else if (!strcmp( "tunnel", key ))
1282                 server.tunnel = xstrdup( val );
1283         return 0;
1284 }
1285
1286 int
1287 main(int argc, char **argv)
1288 {
1289         msg_data_t all_msgs, msg;
1290         store_t *ctx = NULL;
1291         int uid = 0;
1292         int ofs = 0;
1293         int r;
1294         int total, n = 0;
1295
1296         /* init the random number generator */
1297         arc4_init();
1298
1299         git_config(git_imap_config, NULL);
1300
1301         if (!imap_folder) {
1302                 fprintf( stderr, "no imap store specified\n" );
1303                 return 1;
1304         }
1305         if (!server.host) {
1306                 if (!server.tunnel) {
1307                         fprintf( stderr, "no imap host specified\n" );
1308                         return 1;
1309                 }
1310                 server.host = "tunnel";
1311         }
1312
1313         /* read the messages */
1314         if (!read_message( stdin, &all_msgs )) {
1315                 fprintf(stderr,"nothing to send\n");
1316                 return 1;
1317         }
1318
1319         total = count_messages( &all_msgs );
1320         if (!total) {
1321                 fprintf(stderr,"no messages to send\n");
1322                 return 1;
1323         }
1324
1325         /* write it to the imap server */
1326         ctx = imap_open_store( &server );
1327         if (!ctx) {
1328                 fprintf( stderr,"failed to open store\n");
1329                 return 1;
1330         }
1331
1332         fprintf( stderr, "sending %d message%s\n", total, (total!=1)?"s":"" );
1333         ctx->name = imap_folder;
1334         while (1) {
1335                 unsigned percent = n * 100 / total;
1336                 fprintf( stderr, "%4u%% (%d/%d) done\r", percent, n, total );
1337                 if (!split_msg( &all_msgs, &msg, &ofs ))
1338                         break;
1339                 r = imap_store_msg( ctx, &msg, &uid );
1340                 if (r != DRV_OK) break;
1341                 n++;
1342         }
1343         fprintf( stderr,"\n" );
1344
1345         imap_close_store( ctx );
1346
1347         return 0;
1348 }