organize / cleanup
[distro-setup] / mail-setup
index 7921a22fd0ed262ff47760e9397e5c1293bd6e48..fdb4c219d4eb2b9154c500c93fe6d751fe962113 100755 (executable)
@@ -1,4 +1,6 @@
-#!/bin/bash -l
+#!/bin/bash
+set -x
+
 # Copyright (C) 2016 Ian Kelling
 
 # Licensed under the Apache License, Version 2.0 (the "License");
 set -eE -o pipefail
 trap 'echo "$0:$LINENO:error: \"$BASH_COMMAND\" returned $?" >&2' ERR
 
+[[ $EUID == 0 ]] || exec sudo -E "$BASH_SOURCE" "$@"
+
+usage() {
+    cat <<EOF
+Usage: ${0##*/} exim4|postfix
+Setup exim4 / postfix / dovecot
+
+The minimal assumption we have is that /etc/mailpass exists
+
+
+I\'ve had problems with postfix on debian:
+on stretch, a startup ordering issue caused all mail to fail.
+postfix changed defaults to only use ipv6 dns, causing all my mail to fail.
+I haven\'t gotten around to getting a non-debian exim
+setup.
+
+-h|--help  Print help and exit.
+EOF
+    exit $1
+}
+
+type=$1
+postfix() { [[ $type == postfix ]]; }
+exim() { [[ $type == exim4 ]]; }
+
+if ! exim && ! postfix; then
+    usage 1
+fi
+
+if [[ ! $SUDO_USER ]]; then
+    echo "$0: error: requires running as nonroot or sudo"
+fi
+u=$SUDO_USER
+
+
 ####### begin perstent password instructions ######
 # # exim passwords:
 # # for hosts which have all private files I just use the same user
@@ -27,7 +64,7 @@ trap 'echo "$0:$LINENO:error: \"$BASH_COMMAND\" returned $?" >&2' ERR
 # apg -m 50 -x 70 -n 1 -a 1 -M CLN >$f
 # s sed -i "/^$user:/d" /p/c/filesystem/etc/exim4/passwd
 # echo "$user:$(mkpasswd -m sha-512 -s <$f)" >>/p/c/filesystem/etc/exim4/passwd
-# echo "mail.iankelling.org:$user:$(<$f)" >> /p/c/machine_specific/$user/filesystem/etc/mailpass
+# echo "mail.iankelling.org $user $(<$f)" >> /p/c/machine_specific/$user/filesystem/etc/mailpass
 # # then run this script, or part of it which uses /etc/mailpass
 
 # # dovecot password, i just need 1 as I\'m the only user
@@ -77,12 +114,17 @@ trap 'echo "$0:$LINENO:error: \"$BASH_COMMAND\" returned $?" >&2' ERR
 # # via the mail-setup scripts
 
 # # 2017-02 dmarc policies:
+# # host -t txt _dmarc.gmail.com
 # # yahoo: p=reject, hotmail: p=none, gmail: p=none, fastmail none for legacy reasons
-# # gmail will be changing to p=reject, which is expected to cause problems
+# # there were articles claiming gmail would be  changing
+# # to p=reject, in early 2017, which didn\'t happen. I see no sources on them. It\'s
+# # expected to cause problems
 # # with a few old mailing lists, copying theirs for now.
+#
 # echo "dmarc dns, name: _dmarc value: v=DMARC1; p=none; rua=mailto:mailauth-reports@$domain"
 
 # # 2017-02 spf policies:
+# # host -t txt lists.fedoraproject.org
 # # google ~all, hotmail -all, yahoo: ?all, fastmail ?all
 # # i include fastmail\'s settings, per their instructions,
 # # and follow their policy. In mail in a box, or similar instructions,
@@ -120,6 +162,8 @@ trap 'echo "$0:$LINENO:error: \"$BASH_COMMAND\" returned $?" >&2' ERR
 # The full list of option settings for any particular driver instance,
 # including all the defaulted values, can be extracted by making use of
 # the -bP command line option.
+# exim -bP config_file to see what config file it used
+# exim -bP config to see
 
 # exim clear out message queue. as root:
 # adapted from somewhere on stackoverflow.
@@ -130,78 +174,70 @@ trap 'echo "$0:$LINENO:error: \"$BASH_COMMAND\" returned $?" >&2' ERR
 # New one is smtp.fastmail.com
 
 # test delivery & rewrite settings:
-#exim4 -bt ian@localhost
-
-
-type=$1
-postfix() { [[ $type == postfix ]]; }
-exim() { [[ $type == exim4 ]]; }
-if ! exim && ! postfix; then
-    echo "$1: error: expected exim4 or postfix as first arg"
-    exit 1
+#exim4 -bt iank@localhost
+
+
+postconfin() {
+    local MAPFILE
+    mapfile -t
+    local s
+    postconf -ev "${MAPFILE[@]}"
+}
+e() { printf "%s\n" "$*"; }
+
+postmaster=$u
+mxhost=mail.iankelling.org
+mxport=25
+forward=$u@$mxhost
+
+# old setup. left as comment for example
+# mxhost=mail.messagingengine.com
+# mxport=587
+# forward=ian@iankelling.org
+
+relayhost="[$mxhost]:$mxport" # postfix
+smarthost="$mxhost::$mxport" # exim
+
+# trisquel 8 = openvpn, debian stretch = openvpn-client
+vpn_ser=openvpn-client
+if [[ ! -e /lib/systemd/system/openvpn-client@.service ]]; then
+    vpn_ser=openvpn
 fi
 
-
-local_mx=mail.iankelling.org
-
-host=$local_mx
-relayhost="[$host]:25" # postfix
-smarthost="$host::25" # exim
-
-
-# this was for when I used the exim config type
-# "mail sent by smarthost; received via SMTP or fetchmail"
-# if [[ $HOSTNAME == $MAIL_HOST ]]; then
-#     host=mail.messagingengine.com
-#     relayhost="[$host]:587" # postfix
-#     smarthost="$host::587" # exim
-# fi
-
-forward=ian@$local_mx
-
-
 if [[ $HOSTNAME == $MAIL_HOST ]]; then
-    # if we are MAIL_HOST, exim config sets up an /etc/alias from
-    # root to the postmaster, which i config to ian, as long as there
-    # exists an entry for root, or there was no preexisting aliases file.
-    # based on the postinst file.
-    s rm -f /etc/aliases
+    # afaik, these will get ignored because they are routing to my own
+    # machine, but rm them is safer
+    rm -f $(eval echo ~$postmaster)/.forward /root/.forward
 else
-    # linode image has a root alias, I think it might override our .forward
-    sudo sed -i '/^root:/d' /etc/aliases
-    s newaliases
-
-    # background: This also works instead of ~/.forward
-    # s sed -i --follow-symlinks '/^root/d' /etc/aliases ||:
-    #echo "root: $HOSTNAME@$SOME_DOMAIN" | s tee -a /etc/aliases
     # this can\'t be a symlink and has permission restrictions
     # it might work in /etc/aliases, but this seems more proper.
-    e $forward > ~/.forward
-    e $forward | s tee /root/.forward
-    # 644 is required. shouldn\'t need changing, but set it just in case.
-    s chmod 644 ~/.forward /root/.forward
+    install -m 644 {-o,-g}$postmaster <(e $forward) $(eval echo ~$postmaster)/.forward
 fi
 
 # offlineimap uses this too, it is much easier to use one location than to
 # condition it\'s config and postfix\'s config
-case $distro in
-    fedora) s lnf -T ca-certificates.crt /etc/ssl/ca-bundle.trust.crt ;;
-    *) :
-esac
+if [[ -f /etc/fedora-release ]]; then
+    /a/exe/lnf -T ca-certificates.crt /etc/ssl/ca-bundle.trust.crt
+fi
 
 if postfix; then
     # dunno why, but debian installed postfix with builddep emacs
     # but I will just explicitly install it here since
     # I use it for sending mail in emacs.
-    if isdeb; then
-        debconf-set-selections <<EOF
+    if command -v apt-get &> /dev/null; then
+        debconf-set-selections <<EOF
 postfix postfix/main_mailer_type select Satellite system
 postfix postfix/mailname string $HOSTNAME
 postfix postfix/relayhost string $relayhost
+postfix postfix/root_address string $postmaster
 EOF
-
-        pi postfix
+        if dpkg -s postfix &>/dev/null; then
+            dpkg-reconfigure -u -fnoninteractive postfix
+        else
+            apt-get -y install --purge --auto-remove postfix
+        fi
     else
+        source /a/bin/distro-functions/src/package-manager-abstractions
         pi postfix
         # Settings from reading the output when installing on debian,
         # then seeing which were different in a default install on arch.
@@ -213,8 +249,8 @@ relayhost = $relayhost
 inet_interfaces = loopback-only
 EOF
 
-        s systemctl enable postfix
-        s systemctl start postfix
+        systemctl enable postfix
+        systemctl start postfix
     fi
     # i\'m assuming mail just won\'t work on systems without the sasl_passwd.
     postconfin <<'EOF'
@@ -227,26 +263,78 @@ smtp_tls_CAfile = /etc/ssl/certs/ca-certificates.crt
 inet_protocols = ipv4
 EOF
     # msg_size_limit: I ran into a log file not sending cuz of size. double from 10 to 20 meg limit
-    # inet_protocols: without this, postfix tries an ipv6 lookup then gives
-    # up and fails. snippet from syslog: type=AAAA: Host not found, try again
+    # inet_protocols: without this, I\'ve had postfix try an ipv6 lookup then gives
+    # up and fail forever. snippet from syslog: type=AAAA: Host not found, try again
 
 
     f=/etc/postfix/sasl_passwd
-    s rm -f $f
-    s touch $f
-    s chmod 600 $f
-    s cat /etc/mailpass| while read -r domain port pass; do
+    install -m 600 /dev/null $f
+    cat /etc/mailpass| while read -r domain port pass; do
         # format: domain port user:pass
         # mailpass is just a name i made up, since postfix and
         # exim both use a slightly crazy format to translate to
         # each other, it\'s easier to use my own format.
-        printf "[%s]:%s %s" "$domain" "$port" "${pass/@/#}" | s tee -a $f >/dev/null
+        printf "[%s]:%s %s" "$domain" "$port" "${pass/@/#}" >>$f
     done
-    s postmap hash:/etc/postfix/sasl_passwd
-    s service postfix reload
+    postmap hash:/etc/postfix/sasl_passwd
+    # need restart instead of reload when changing
+    # inet_protocols
+    service postfix restart
+
+else # begin exim. has debian specific stuff for now
+
+    if ! dpkg -s openvpn &>/dev/null; then
+        apt-get -y install --purge --auto-remove openvpn
+    fi
+
+    if [[ -e /p/c/filesystem ]]; then
+        # to put the hostname in the known hosts
+        ssh -o StrictHostKeyChecking=no root@li.iankelling.org :
+        /a/exe/vpn-mk-client-cert -b mail -n mail li.iankelling.org
+    fi
+
+    cat >/etc/systemd/system/mailroute.service <<EOF
+[Unit]
+# this unit is configured to start and stop whenever $vpn_ser@mail.service
+# does
+Description=Routing for email vpn
+After=network.target
+BindsTo=$vpn_ser@mail.service
+After=$vpn_ser@mail.service
+
+[Service]
+Type=oneshot
+ExecStart=/a/bin/distro-setup/mail-route start
+ExecStop=/a/bin/distro-setup/mail-route stop
+RemainAfterExit=yes
 
-else # exim. has debian specific stuff for now
+[Install]
+RequiredBy=$vpn_ser@mail.service
+EOF
 
+    cat >/etc/systemd/system/offlineimapsync.timer <<'EOF'
+[Unit]
+Description=Run offlineimap-sync once every 5 mins
+
+[Timer]
+OnCalendar=*:0/5
+
+[Install]
+WantedBy=timers.target
+EOF
+
+    cat >/etc/systemd/system/offlineimapsync.service <<EOF
+[Unit]
+Description=Offlineimap sync
+After=multi-user.target
+
+[Service]
+User=$u
+Type=oneshot
+ExecStart=/a/bin/log-quiet/sysd-mail-once offlineimap-sync /a/bin/distro-setup/offlineimap-sync
+EOF
+    systemctl daemon-reload
+    systemctl enable mailroute
 
     # wording of question from dpkg-reconfigure exim4-config
     # 1. internet site; mail is sent and received directly using SMTP
@@ -265,21 +353,77 @@ else # exim. has debian specific stuff for now
 
     # most of these settings get translated into settings
     # in /etc/exim4/update-exim4.conf.conf
+    # how /etc/exim4/update-exim4.conf.conf translates into actual exim settings is
+    # documented in man update-exim4.conf, which outputs to the config that
+    # exim actually reads. except the man page is not perfect, for example,
+    # it doesn't document that it sets
+    # DCconfig_${dc_eximconfig_configtype}" "1"
+    # which is a line from update-exim4.conf, which is a relatively short bash script.
     # mailname setting sets /etc/mailname
 
-    debconf-set-selections <<EOF
+    debconf-set-selections <<EOF
 exim4-config exim4/use_split_config boolean true
 EOF
 
     source /a/bin/bash_unpublished/source-semi-priv
     exim_main_dir=/etc/exim4/conf.d/main
-    s mkdir -p exim_main_dir
+    mkdir -p $exim_main_dir
+
+
+
+    #### begin mail cert setup ###
+    f=/usr/local/bin/mail-cert-cron
+    cat >$f <<'EOF'
+set -eE -o pipefail
+trap 'echo "$0:$LINENO:error: \"$BASH_COMMAND\" returned $?" >&2' ERR
+
+[[ $EUID == 0 ]] || exec sudo "$BASH_SOURCE" "$@"
+
+f=/a/bin/bash_unpublished/source-semi-priv
+if [[ -e $f ]]; then
+    source $f
+fi
+if [[ $HOSTNAME == $MAIL_HOST ]]; then
+    local_mx=mail.iankelling.org
+    rsync_common="rsync -ogtL --chown=root:Debian-exim --chmod=640 root@li:/etc/letsencrypt/live/$local_mx/"
+    ${rsync_common}fullchain.pem /etc/exim4/exim.crt
+    ${rsync_common}privkey.pem /etc/exim4/exim.key
+fi
+EOF
+    chmod 755 $f
+
+    cat >/etc/systemd/system/mailcert.service <<'EOF'
+[Unit]
+Description=Mail cert rsync
+After=multi-user.target
+
+[Service]
+Type=oneshot
+ExecStart=/a/bin/log-quiet/sysd-mail-once mailcert /usr/local/bin/mail-cert-cron
+EOF
+
+    cat >/etc/systemd/system/mailcert.timer <<'EOF'
+[Unit]
+Description=Run mail-cert once a day
+
+[Timer]
+OnCalendar=daily
+
+[Install]
+WantedBy=timers.target
+EOF
+    systemctl daemon-reload
+    systemctl start mailcert
+    systemctl restart mailcert.timer
+    systemctl enable mailcert.timer
+
+    ##### end mailcert setup #####
+
+
+
     if [[ $HOSTNAME == $MAIL_HOST ]]; then
-        # afaik, these will get ignored, routing to my own machine, but rm
-        # them to make me feel better.
-        s rm -f ~/.forward /root/.forward
 
-        debconf-set-selections <<EOF
+        debconf-set-selections <<EOF
 # Mail Server configuration
 # -------------------------
 
@@ -316,7 +460,7 @@ exim4-config exim4/dc_eximconfig_configtype select internet site; mail is sent a
 # This name won\'t appear on From: lines of outgoing messages if rewriting is enabled.
 
 # System mail name:
-exim4-config exim4/mailname string li.iankelling.org
+exim4-config exim4/mailname string mail.iankelling.org
 
 
 
@@ -334,7 +478,7 @@ exim4-config exim4/mailname string li.iankelling.org
 # Other destinations for which mail is accepted:
 # iank.bid is for testing
 # mail.iankelling.org is for machines i own
-exim4-config exim4/dc_other_hostnames string *.iankelling.org;iankelling.org;*iank.bid;iank.bid;*zroe.org;zroe.org
+exim4-config exim4/dc_other_hostnames string *.iankelling.org;iankelling.org;*iank.bid;iank.bid;*zroe.org;zroe.org;*.b8.nz;b8.nz
 
 
 
@@ -371,7 +515,7 @@ exim4-config exim4/dc_local_interfaces      string
 # Multiple user names need to be separated by spaces.
 
 # Root and postmaster mail recipient:
-exim4-config exim4/dc_postmaster string ian
+exim4-config exim4/dc_postmaster string $postmaster
 
 
 
@@ -391,7 +535,10 @@ EOF
         # MAIN_HARDCODE_PRIMARY_HOSTNAME might mess up the
         # smarthost config type, not sure. all other settings
         # would be unused in that config type.
-        s dd of=$exim_main_dir/000_localmacros 2>/dev/null <<'EOF'
+        cat >$exim_main_dir/000_localmacros <<EOF
+# i don't have ipv6 setup for my tunnel yet.
+disable_ipv6 = true
+
 MAIN_TLS_ENABLE = true
 
 DKIM_CANON = relaxed
@@ -401,88 +548,213 @@ DKIM_SELECTOR = li
 # https://debian-administration.org/article/718/DKIM-signing_outgoing_mail_with_exim4
 
 # The file is based on the outgoing domain-name in the from-header.
-DKIM_DOMAIN = ${lc:${domain:$h_from:}}
+DKIM_DOMAIN = \${lc:\${domain:\$h_from:}}
 # sign if key exists
-DKIM_PRIVATE_KEY= ${if exists{/etc/exim4/${dkim_domain}-private.pem} {/etc/exim4/${dkim_domain}-private.pem}}
+DKIM_PRIVATE_KEY= \${if exists{/etc/exim4/\${dkim_domain}-private.pem} {/etc/exim4/\${dkim_domain}-private.pem}}
 
 
 # failing message on mail-tester.com:
 # We check if there is a server (A Record) behind your hostname treetowl.
 # You may want to publish a DNS record (A type) for the hostname treetowl or use a different hostname in your mail software
 # https://serverfault.com/questions/46545/how-do-i-change-exim4s-primary-hostname-on-a-debian-box
-# and this one seemed appropriate from grepping config
-MAIN_HARDCODE_PRIMARY_HOSTNAME = li.iankelling.org
+# and this one seemed appropriate from grepping config.
+# I originally set this to li.iankelling.org, but then ended up with errors when li tried to send
+# mail to treetowl, so this should basically be a name that no host has as their
+# canonical hostname since the actual host sits behind a nat and changes.
+# Seems logical for this to be the same as mailname.
+MAIN_HARDCODE_PRIMARY_HOSTNAME = mail.iankelling.org
 
 # normally empty, I set this so I can set the envelope address
 # when doing mail redelivery to invoke filters
-MAIN_TRUSTED_GROUPS = ian
+MAIN_TRUSTED_GROUPS = $u
 
 LOCAL_DELIVERY = dovecot_lmtp
 
+# options exim has to avoid having to alter the default config files
 CHECK_RCPT_LOCAL_ACL_FILE = /etc/exim4/rcpt_local_acl
+CHECK_DATA_LOCAL_ACL_FILE = /etc/exim4/data_local_acl
+
+# debian exim config added this in 2016 or so?
+# it's part of the smtp spec, to limit lines to 998 chars
+# but a fair amount of legit mail does not adhere to it. I don't think
+# this should be default, like it says in
+# https://bugs.debian.org/cgi-bin/bugreport.cgi?bug=828801
+# todo: the bug for introducing this was about headers, but
+# the fix maybe is for all lines? one says gmail rejects, the
+# other says gmail does not reject. figure out and open a new bug.
+IGNORE_SMTP_LINE_LENGTH_LIMIT = true
+
+# most of the ones that gmail seems to use.
+# Exim has horrible default of signing unincluded
+# list- headers since they got mentioned in an
+# rfc, but this messes up mailing lists, like gnu/debian which want to
+# keep your dkim signature intact but add list- headers.
+DKIM_SIGN_HEADERS = mime-version:in-reply-to:references:from:date:subject:to
+
 EOF
 
 
-        s dd of=/etc/systemd/system/offlineimapsync.timer <<'EOF'
-[Unit]
-Description=Run offlineimap-sync once every 5 mins
+        ####### begin dovecot setup ########
+        # based on a little google and package search, just the dovecot
+        # packages we need instead of dovecot-common.
+        #
+        # dovecot-lmtpd is for exim to deliver to dovecot instead of maildir
+        # directly.  The reason to do this is to use dovecot\'s sieve, which
+        # has extensions that allow it to be almost equivalent to exim\'s
+        # filter capabilities, some ways probably better, some worse, and
+        # sieve has the benefit of being supported in postfix and
+        # proprietary/weird environments, so there is more examples on the
+        # internet. I was torn about whether to do this or not, meh.
+        apt-get -y install --purge --auto-remove \
+                dovecot-core dovecot-imapd dovecot-sieve dovecot-lmtpd
+
+        # if we changed 90-sieve.conf and removed the active part of the
+        # sieve option, we wouldn\'t need this, but I\'d rather not modify a
+        # default config if not needed. This won\'t work as a symlink in /a/c
+        # unfortunately.
+        sudo -u $postmaster /a/exe/lnf -T sieve/main.sieve $(eval echo ~$postmaster)/.dovecot.sieve
+
+        sed -ri -f - /etc/dovecot/conf.d/10-mail.conf <<'EOF'
+1i mail_location = maildir:/m/md:LAYOUT=fs:INBOX=/m/md/INBOX
+/^\s*mail_location\s*=/d
+EOF
 
-[Timer]
-OnCalendar=*:0/5
+        cat >/etc/dovecot/conf.d/20-lmtp.conf <<EOF
+protocol lmtp {
+#per https://wiki2.dovecot.org/Pigeonhole/Sieve/Configuration
+  mail_plugins = \$mail_plugins sieve
+# default was
+  #mail_plugins = \$mail_plugins
+
+# For a normal setup with exim, we need something like this, which
+# removes the domain part
+#  auth_username_format = %Ln
+#
+#  or else # Exim says something like
+#  "LMTP error after RCPT ... 550 ... User doesn't exist someuser@somedomain"
+# Dovecot verbose log says something like
+# "auth-worker(9048): passwd(someuser@somedomain): unknown user"
+# reference: http://wiki.dovecot.org/LMTP/Exim
+#
+# However, I use this to direct all mail to the same inbox.
+# A normal way to do this, which I did at first is to have
+# a router in exim almost at the end, eg 950,
+#local_catchall:
+#  debug_print = "R: catchall for \$local_part@\$domain"
+#  driver = redirect
+#  domains = +local_domains
+#  data = $u
+# based on
+# http://blog.alteholz.eu/2015/04/exim4-and-catchall-email-address/
+# with superflous options removed.
+# However, this causes the envelope to be rewritten,
+# which makes filtering into mailboxes a little less robust or more complicated,
+# so I've done it this way instead. it also requires
+# modifying the local router in exim.
+  auth_username_format = $u
+}
 
-[Install]
-WantedBy=timers.target
 EOF
 
-        s dd of=/etc/systemd/system/offlineimapsync.service <<'EOF'
-[Unit]
-Description=Offlineimap sync
-After=multi-user.target
 
-[Service]
-User=ian
-Type=oneshot
-ExecStart=/a/bin/log-quiet/sysd-mail-once offlineimap-sync /a/bin/distro-setup/offlineimap-sync
+        cat >/etc/dovecot/local.conf <<'EOF'
+# so I can use a different login that my shell login for mail.  this is
+# worth doing solely for the reason that if this login is compromised,
+# it won't also compromise my shell password.
+!include conf.d/auth-passwdfile.conf.ext
+
+# settings derived from wiki and 10-ssl.conf
+ssl = required
+ssl_cert = </etc/exim4/exim.crt
+ssl_key = </etc/exim4/exim.key
+# https://github.com/certbot/certbot/raw/master/certbot-apache/certbot_apache/options-ssl-apache.conf
+# in my cert cronjob, I check if that has changed upstream.
+ssl_cipher_list = ECDHE-RSA-AES128-GCM-SHA256:ECDHE-ECDSA-AES128-GCM-SHA256:ECDHE-RSA-AES256-GCM-SHA384:ECDHE-ECDSA-AES256-GCM-SHA384:DHE-RSA-AES128-GCM-SHA256:DHE-DSS-AES128-GCM-SHA256:kEDH+AESGCM:ECDHE-RSA-AES128-SHA256:ECDHE-ECDSA-AES128-SHA256:ECDHE-RSA-AES128-SHA:ECDHE-ECDSA-AES128-SHA:ECDHE-RSA-AES256-SHA384:ECDHE-ECDSA-AES256-SHA384:ECDHE-RSA-AES256-SHA:ECDHE-ECDSA-AES256-SHA:DHE-RSA-AES128-SHA256:DHE-RSA-AES128-SHA:DHE-DSS-AES128-SHA256:DHE-RSA-AES256-SHA256:DHE-DSS-AES256-SHA:DHE-RSA-AES256-SHA:AES128-GCM-SHA256:AES256-GCM-SHA384:AES128-SHA256:AES256-SHA256:AES128-SHA:AES256-SHA:AES:CAMELLIA:DES-CBC3-SHA:!aNULL:!eNULL:!EXPORT:!DES:!RC4:!MD5:!PSK:!aECDH:!EDH-DSS-DES-CBC3-SHA:!EDH-RSA-DES-CBC3-SHA:!KRB5-DES-CBC3-SHA
+
+# ian: added this, more secure, per google etc
+ssl_prefer_server_ciphers = yes
+
+# for debugging info, uncomment these.
+# logs go to syslog and to /var/log/mail.log
+# auth_verbose=yes
+#mail_debug=yes
 EOF
-        s systemctl daemon-reload
-        s systemctl enable offlineimapsync.timer
-        s systemctl start offlineimapsync.timer
+        ####### end dovecot setup ########
+
+
+        systemctl enable offlineimapsync.timer
+        systemctl start offlineimapsync.timer
+        systemctl restart $vpn_ser@mail
+        systemctl enable $vpn_ser@mail
+        systemctl enable dovecot
+        systemctl restart dovecot
 
     else # $HOSTNAME != $MAIL_HOST
-        s systemctl disable offlineimapsync.timer &>/dev/null ||:
-        s systemctl stop offlineimapsync.timer &>/dev/null ||:
+        systemctl disable offlineimapsync.timer &>/dev/null ||:
+        systemctl stop offlineimapsync.timer &>/dev/null ||:
+        systemctl disable $vpn_ser@mail
+        systemctl stop $vpn_ser@mail
+        systemctl disable dovecot ||:
+        systemctl stop dovecot ||:
         #
         #
         # would only exist because I wrote it i the previous condition,
         # it\'s not part of exim
-        rm -f $exim_main_dir/000_localmacros
-        debconf-set-selections <<EOF
+        rm -f $exim_main_dir/000_localmacros
+        debconf-set-selections <<EOF
 exim4-config exim4/dc_eximconfig_configtype select mail sent by smarthost; no local mail
 exim4-config exim4/dc_smarthost string $smarthost
+# the default, i think is from /etc/mailname. better to set it to
+# whatever the current fqdn is.
+exim4-config exim4/mailname string $(hostname -f)
 EOF
-    fi
+
+    fi # end $HOSTNAME != $MAIL_HOST
 
     # if we already have it installed, need to reconfigure, without being prompted
     if dpkg -s exim4-config &>/dev/null; then
         # gotta remove this, otherwise the set-selections are completely
         # ignored. It woulda been nice if this was documented somewhere!
-        s rm -f /etc/exim4/update-exim4.conf.conf
-        s dpkg-reconfigure -u -fnoninteractive exim4-config
+        rm -f /etc/exim4/update-exim4.conf.conf
+        dpkg-reconfigure -u -fnoninteractive exim4-config
+    fi
+
+    # i have the spool directory be common to distro multi-boot, so
+    # we need the uid to be the same. 608 cuz it's kind of in the middle
+    # of the free system uids.
+    IFS=:; read _ _ uid _ < <(getent passwd Debian-exim ); unset IFS
+    IFS=:; read _ _ gid _ < <(getent group Debian-exim ); unset IFS
+    if [[ ! $uid ]]; then
+        # from /var/lib/dpkg/info/exim4-base.postinst, plus uid and gid options
+       adduser --uid 608 --gid 608 --system --group --quiet --home /var/spool/exim4 \
+               --no-create-home --disabled-login --force-badname Debian-exim
+    elif [[ $uid != 608 ]]; then
+        systemctl stop exim4 ||:
+        usermod -u 608 Debian-exim
+        groupmod -g 608 Debian-exim
+        usermod -g 608 Debian-exim
+        find / /nocow -xdev -uid $uid -exec chown -h 608 {} +
+        find / /nocow -xdev -gid $gid -exec chgrp -h 608 {} +
     fi
-    # light version does not have sasl auth support.
-    pi exim4-daemon-heavy spamassassin
+
+    # light version of exim does not have sasl auth support.
+    apt-get -y install --purge --auto-remove exim4-daemon-heavy spamassassin
+
+
+
 
     ##### begin spamassassin config
-    ser enable spamassassin
+    systemctl enable spamassassin
     # per readme.debian
-    s sed -i '/^\s*CRON\s*=/d' /etc/default/spamassassin
-    s tee -a /etc/default/spamassassin <<<CRON=1
+    sed -i '/^\s*CRON\s*=/d' /etc/default/spamassassin
+    e CRON=1 >>/etc/default/spamassassin
     # just noticed this in the config file, seems like a good idea.
-    s sed -i '/^\s*NICE\s*=/d' /etc/default/spamassassin
-    s tee -a /etc/default/spamassassin <<<'NICE="--nicelevel 15"'
-    ser reload spamassassin
+    sed -i '/^\s*NICE\s*=/d' /etc/default/spamassassin
+    e 'NICE="--nicelevel 15"' >>/etc/default/spamassassin
+    systemctl start spamassassin
+    systemctl reload spamassassin
 
-    s dd of=/etc/systemd/system/spamddnsfix.service <<'EOF'
+    cat >/etc/systemd/system/spamddnsfix.service <<'EOF'
 [Unit]
 Description=spamd dns bug fix cronjob
 
@@ -490,7 +762,10 @@ Description=spamd dns bug fix cronjob
 Type=oneshot
 ExecStart=/a/bin/distro-setup/spamd-dns-fix
 EOF
-    s dd of=/etc/systemd/system/spamddnsfix.timer <<'EOF'
+    # 2017-09, debian closed the bug on this saying upstream had fixed it.
+    # remove this when i\'m using the newer package, ie, debian 10, or maybe
+    # ubuntu 18.04.
+    cat >/etc/systemd/system/spamddnsfix.timer <<'EOF'
 [Unit]
 Description=run spamd bug fix script every 10 minutes
 
@@ -504,108 +779,175 @@ OnUnitActiveSec=550
 [Install]
 WantedBy=timers.target
 EOF
-    ser daemon-reload
-    sgo spamddnsfix.timer
+    systemctl daemon-reload
+    systemctl restart spamddnsfix.timer
+    systemctl enable spamddnsfix.timer
     #
     #####   end spamassassin config
 
-    gitslink # needed to install the execstart files below
-    s dd of=/etc/systemd/system/mailcert.service <<'EOF'
-[Unit]
-Description=Mail cert rsync
-After=multi-user.target
 
-[Service]
-Type=oneshot
-ExecStart=/usr/local/bin/sysd-mail-once mailcert /usr/local/bin/mail-cert-cron
-EOF
 
-    s dd of=/etc/systemd/system/mailcert.timer <<'EOF'
-[Unit]
-Description=Run mail-cert once a day
 
-[Timer]
-OnCalendar=daily
 
-[Install]
-WantedBy=timers.target
+    cat >/etc/exim4/rcpt_local_acl <<'EOF'
+# Only hosts we control send to mail.iankelling.org, so make sure
+# they are all authed.
+# Note, if we wanted authed senders for all domains,
+# we could make this condition in acl_check_mail
+deny
+  message = ian trusted domain recepient but no auth
+  !authenticated = *
+  domains = mail.iankelling.org
 EOF
-    ser daemon-reload
-    ser start mailcert
-    sgo mailcert.timer
+    cat >/etc/exim4/data_local_acl <<'EOF'
+# Except for the "condition =", this was
+# a comment in the check_data acl. The comment about this not
+# being suitable is mostly bs. The only thing related I found was to
+# add the condition =, cuz spamassassin has problems with big
+# messages and spammers don't bother with big messages,
+# but I've increased the size from 10k
+# suggested in official docs, and 100k in the wiki example because
+# those docs are rather old and I see a 110k spam message
+# pretty quickly looking through my spam folder.
+  warn
+    condition = ${if < {$message_size}{2000K}}
+    spam = Debian-exim:true
+    add_header = X-Spam_score: $spam_score\n\
+              X-Spam_score_int: $spam_score_int\n\
+              X-Spam_bar: $spam_bar\n\
+              X-Spam_report: $spam_report
 
+EOF
+    cat >/etc/exim4/conf.d/auth/29_exim4-config_auth <<'EOF'
+# from 30_exim4-config_examples
+
+plain_server:
+driver = plaintext
+public_name = PLAIN
+server_condition = "${if crypteq{$auth3}{${extract{1}{:}{${lookup{$auth2}lsearch{CONFDIR/passwd}{$value}{*:*}}}}}{1}{0}}"
+server_set_id = $auth2
+server_prompts = :
+.ifndef AUTH_SERVER_ALLOW_NOTLS_PASSWORDS
+server_advertise_condition = ${if eq{$tls_in_cipher}{}{}{*}}
+.endif
+EOF
 
-    # based on a little google and package search, just the dovecot
-    # packages we need instead of dovecot-common.
-    #
-    # dovecot-lmtpd is for exim to deliver to dovecot instead of maildir
-    # directly.  The reason to do this is to use dovecot\'s sieve, which
-    # has extensions that allow it to be almost equivalent to exim\'s
-    # filter capabilities, some ways probably better, some worse, and
-    # sieve has the benefit of being supported in postfix and
-    # proprietary/weird environments, so there is more examples on the
-    # internet. I was torn about whether to do this or not, meh.
-    pi dovecot-core dovecot-imapd dovecot-sieve dovecot-lmtpd
-
-    # if we changed 90-sieve.conf and removed the active part of the
-    # sieve option, we wouldn\'t need this, but I\'d rather not modify a
-    # default config if not needed. This won\'t work as a symlink in /a/c
-    # unfortunately.
-    lnf -T sieve/main.sieve ~/.dovecot.sieve
-
-    # we have a few config files which installing exim/dovecot overwrites,
-    # and might as well have this before reading /etc/mailpass,
-    # which this sets up too.
-    conflink
+    cat >/etc/exim4/conf.d/router/900_exim4-config_local_user <<'EOF'
+### router/900_exim4-config_local_user
+#################################
+
+# This router matches local user mailboxes. If the router fails, the error
+# message is "Unknown user".
+
+local_user:
+  debug_print = "R: local_user for $local_part@$domain"
+  driver = accept
+  domains = +local_domains
+# ian: commented this, in conjunction with a dovecot lmtp
+# change so I get mail for all users.
+#  check_local_user
+  local_parts = ! root
+  transport = LOCAL_DELIVERY
+  cannot_route_message = Unknown user
+EOF
+    cat >/etc/exim4/conf.d/transport/30_exim4-config_dovecot_lmtp <<'EOF'
+dovecot_lmtp:
+        driver = lmtp
+        socket = /var/run/dovecot/lmtp
+        #maximum number of deliveries per batch, default 1
+        batch_max = 200
+EOF
+
+    cat >/etc/exim4/conf.d/router/190_exim4-config_fsfsmarthost <<'EOF'
+# smarthost for fsf mail
+# ian: copied from /etc/exim4/conf.d/router/200_exim4-config_primary, and added senders = and
+# replaced DCsmarthost with mail.fsf.org
+fsfsmarthost:
+  debug_print = "R: smarthost for $local_part@$domain"
+  driver = manualroute
+  domains = ! +local_domains
+  senders = *@fsf.org
+  transport = remote_smtp_smarthost
+  route_list = * mail.fsf.org byname
+  host_find_failed = ignore
+  same_domain_copy_routing = yes
+  no_more
+EOF
+
+    # https://blog.dhampir.no/content/make-exim4-on-debian-respect-forward-and-etcaliases-when-using-a-smarthost
+    # i only need .forwards, so just doing that one.
+    cd /etc/exim4/conf.d/router
+    b=userforward_higher_priority
+    # replace the router name so it is unique
+    sed -r s/^\\S+:/$b:/ 600_exim4-config_userforward >175_$b
 
     # begin setup passwd.client
     f=/etc/exim4/passwd.client
-    s rm -f $f
-    s touch $f
-    s chmod 640 $f
-    s chown root:Debian-exim $f
-    # note: this will go away
-    s cat /etc/mailpass| while read -r domain port pass; do
+    rm -f /etc/exim4/passwd.client
+    install -m 640 -g Debian-exim /dev/null $f
+    cat /etc/mailpass| while read -r domain port pass; do
         # reference: exim4_passwd_client(5)
-        printf "%s:%s\n" "$domain" "$pass" | s tee -a $f >/dev/null
+        printf "%s:%s\n" "$domain" "$pass" >>$f
     done
     # end setup passwd.client
 
-    # https://blog.dhampir.no/content/make-exim4-on-debian-respect-forward-and-etcaliases-when-using-a-smarthost
-    # i only need .forwards, so just doing that one.
-    cd /etc/exim4/conf.d/router
-    a=userforward
-    b=${a}_higher_priority
-    tmp=$(mktemp)
-    of=175_$b
-    # sed to make the router name unique
-    sed -r s/^\\S+:/$b:/ 600_exim4-config_$a | s dd of=$tmp 2>/dev/null
-    if ! diff -q $tmp $of &>/dev/null; then
-        s dd if=$tmp of=$of >/dev/null
-    fi
-
+    systemctl restart exim4
 
-    ser restart exim4
+fi  #### end if exim4
 
+# /etc/alias setup is debian specific, and
+# exim config sets up an /etc/alias from root to the postmaster, which i
+# config to ian, as long as there exists an entry for root, or there was
+# no preexisting aliases file. based on the postinst file. postfix
+# won\'t set up a root to $postmaster alias if it\'s already installed.
+# Since postfix is not the greatest, just set it ourselves.
+if [[ $postmaster != root ]]; then
+    sed -i --follow-symlinks -f - /etc/aliases <<EOF
+\$a root: $postmaster
+/^root:/d
+EOF
+    newaliases
 fi
 
-
-
-
-
+# put spool dir in directory that spans multiple distros.
 # based on http://www.postfix.org/qmgr.8.html and my notes in gnus
+#
+# todo: I\'m suspicious of uids for Debian-exim being the same across
+# distros. It would be good to test this.
 dir=/nocow/$type
 sdir=/var/spool/$type
-if [[ $(readlink -f $sdir) != $dir ]]; then
-    ser stop $type
+# we only do this if our system has $dir
+if [[ -e /nocow && $(readlink -f $sdir) != $dir ]]; then
+    systemctl stop $type
     if [[ ! -e $dir && -d $sdir ]]; then
-        mv $sdir $dir
+        mv $sdir $dir
     fi
-    lnf -T $dir $sdir
+    /a/exe/lnf -T $dir $sdir
 fi
 
-sgo $type
+systemctl restart $type
+systemctl enable $type
 
+# MAIL_HOST also does radicale, and easier to start and stop it here
+# for when MAIL_HOST changes, so radicale gets the synced files and
+# does not stop us from remounting /o.
+if dpkg -s radicale &>/dev/null; then
+    if [[ $HOSTNAME == $MAIL_HOST ]]; then
+        systemctl restart radicale
+        systemctl enable radicale
+        if [[ -e /etc/logrotate.d/radicale.disabled ]]; then
+            mv /etc/logrotate.d/radicale{.disabled,}
+        fi
+    else
+        systemctl stop radicale
+        systemctl disable radicale
+        # weekly logrotate tries to restart radicale even if it's a disabled service in flidas.
+        if [[ -e /etc/logrotate.d/radicale ]]; then
+            mv /etc/logrotate.d/radicale{,.disabled}
+        fi
+    fi
+fi
+exit 0
 
 # if I wanted the from address to be renamed and sent to a different address,
 # echo "sdx@localhost development@localhost" | sudo dd of=/etc/postfix/recipient_canonical