fix some things, add znc arbtt
authorIan Kelling <iank@fsf.org>
Mon, 22 Jan 2018 01:30:03 +0000 (20:30 -0500)
committerIan Kelling <iank@fsf.org>
Mon, 22 Jan 2018 01:55:03 +0000 (20:55 -0500)
distro-begin
distro-end
mail-route
mail-setup
mastodon-upgrade
mymimes
switch-mail-host

index a408d27bec7b3919e5a24e05e69502de9c4c4eb9..9a7a9adae33d41b3298d98e78971d2cba1556a0c 100755 (executable)
@@ -289,11 +289,14 @@ case $distro in
     trisquel|ubuntu)
         # noticed in flidas.
         #https://bugs.launchpad.net/ubuntu/+source/module-init-tools/+bug/240553
+        #https://wiki.debian.org/KernelModuleBlacklisting
+        #common advice when searching is to use /etc/modprobe.d/blacklist.conf,
+        #but that file won't work and will get automatically reverted
         sudo rmmod evbug ||: # might not be loaded yet
-        file=/etc/modprobe.d/blacklist.conf
+        file=/etc/modprobe.d/evbug.conf
         line="blacklist evbug"
         if ! grep -xFq "$line" $file; then
-            sudo tee -a $file &>/dev/null <<<"$line"
+            sudo dd of=$file 2>/dev/null <<<"$line"
             sudo depmod -a
             sudo update-initramfs -u
         fi
index ea16efc5a1f204fd44d04163903729fcd4749b6c..96fd07b58c83b9a4b2785d90776e14685295561b 100755 (executable)
@@ -119,6 +119,7 @@ case $HOSTNAME in
             kid3-qt
             kid3-cli
             konsole
+            libreoffice
             linphone
             linux-doc
             locate
@@ -129,6 +130,7 @@ case $HOSTNAME in
             mb2md
             meld
             mps-youtube
+            mpv
             mumble
             nagstamon
             ncdu
@@ -408,7 +410,6 @@ COMMIT
 EOF
 
 
-
         sudo dd of=/etc/systemd/system/vpnmail.service <<EOF
 [Unit]
 Description=Turns on iptables mail nat
@@ -490,8 +491,8 @@ EOF
 
         # stretch node is too old
         # https://nodejs.org/en/download/package-manager/
-        curl -sL https://deb.nodesource.com/setup_6.x | sudo -E bash -
-        pi nodejs
+        curl -sL https://deb.nodesource.com/setup_8.x | sudo -E bash -
+        pi nodejs graphicsmagick mongodb
         cd /home/iank
         if [[ -e pump.io ]]; then
             cd pump.io
@@ -504,7 +505,7 @@ EOF
         npm install
         npm run build
         # normally, next command would be
-        # s npm install -g databank-mongodb
+        # s npm install -g   odb
         # but it\'s this until a bug in pump gets fixed
         # https://github.com/pump-io/pump.io/issues/1287
         s npm install -g databank-mongodb@0.19.2
@@ -577,11 +578,14 @@ EOF
         # note, docker required, but we installed it earlier
 
         # i subscrubed to https://github.com/docker/compose/releases.atom
-        # to deal with updates manually. So far, it means just reving the
-        # version number, then restarting docker-compose with
-        # cd ~/mastodon
-        # docker-compose up -d
-        curl -L https://github.com/docker/compose/releases/download/1.13.0/docker-compose-`uname -s`-`uname -m` | s dd of=/usr/local/bin/docker-compose
+        # to see release notes.
+        # i had some problems upgrading. blew things away with
+        # docker-compose down
+        # docker rmi $(docker images -q)
+        # s reboot now
+        # when running docker-compose run, kernel stack traces are printed to the journal.
+        # things seem to succeed, google says nothing, so ignoring them.
+        curl -L https://github.com/docker/compose/releases/download/1.18.0/docker-compose-`uname -s`-`uname -m` | s dd of=/usr/local/bin/docker-compose
         s chmod +x /usr/local/bin/docker-compose
 
 
@@ -609,7 +613,7 @@ LOCAL_HTTPS=true
 
 SINGLE_USER_MODE=true
 
-SMTP_SERVER=10.8.0.4
+SMTP_SERVER=mail.iankelling.org
 SMTP_PORT=25
 SMTP_LOGIN=li
 SMTP_FROM_ADDRESS=notifications@mast.iankelling.org
@@ -619,26 +623,39 @@ EOF
 
         for key in PAPERCLIP_SECRET SECRET_KEY_BASE OTP_SECRET; do
             # 1 minute 7 seconds to run this docker command
-            # to generate a secret. wtf, wtf, wtf, wtf
-            printf "%s=%s\n" $key "$(docker-compose run --rm web rake secret|tail -n1)" >>.env.production
+            # to generate a secret, and it has ^M chars at the end. wtf. really dumb
+            printf "%s=%s\n" $key "$(docker-compose run --rm web rake secret|dos2unix|tail -n1)" >>.env.production
         done
         found=false
-        s cat /etc/mailpass| while read -r domain port pass; do
+        while read -r domain port pass; do
             if [[ $domain == mail.iankelling.org ]]; then
                 found=true
+                # remove the username part
+                pass="${pass#*:}"
                 printf "SMTP_PASSWORD=%s\n" "$pass" >>.env.production
                 break
             fi
-        done
+        done < <(s cat /etc/mailpass)
         if ! $found; then
             echo "$0: error, failed to find mailpass domain for mastadon"
             exit 1
         fi
 
+        # docker compose makes an interface named like br-8f3e208558f2. we need mail to
+        # get routed to us.
+        if ! s /sbin/iptables -t nat -C PREROUTING -i br-+ -p tcp -m tcp --dport 25 -j DNAT --to-destination 10.8.0.4:25; then
+            s /sbin/iptables -t nat -A PREROUTING -i br-+ -p tcp -m tcp --dport 25 -j DNAT --to-destination 10.8.0.4:25
+        fi
+
         docker-compose run --rm web rake mastodon:webpush:generate_vapid_key | grep -E '^VAPID_PUBLIC_KEY=|^VAPID_PRIVATE_KEY=' >> .env.production
         logq docker-compose run --rm web rake db:migrate
         docker-compose run --rm web rails assets:precompile
 
+        # avatar failed to upload, did
+        # docker logs mastodon_web_1
+        # google lead me to this
+        s chown -R 991:991 public/system
+
         # docker daemon takes care of starting on boot.
         docker-compose up -d
 
@@ -679,6 +696,44 @@ EOF
         # we use nsupdate to update the ip of home
         pi bind9
 
+        pi znc
+        # znc config generated by doing
+        # znc --makeconf
+        # selected port is also used in erc config
+        # comma separated channel list worked.
+        # while figuring things out, running znc -D for debug in foreground.
+        # to exit and save config:
+        # /msg *status shutdown
+        # configed auth on freenode by following
+        # https://wiki.znc.in/Sasl
+        # created the system service after, and had to do
+        # mv /home/iank/.znc/* /var/lib/znc
+        # sed -i 's,/home/iank/.znc/,/var/lib/znc,' /var/lib/znc/config/znc.conf
+        # and made a copy of the config files into /p/c
+        # added LoadModule = log -sanitize to the top level
+        # to get into the web interface,
+        # cat /etc/letsencrypt/live/iankelling.org/{privkey,cert,chain}.pem > /var/lib/znc/znc.pem
+        # then use non-main browser or else it doesn't allow it based on ocsp stapling from my main site.
+        # i'm going to figure out how to automate this when it expires. i know i can hook a script into the renewal. https://wiki.znc.in/FAQ seems to imply that znc doesn\'t need restart.
+        # todo: in config file AllowWeb = true should be false. better security if that is off unless we need it.
+        # todo: figure out how to make playback in erc happe.n
+        s useradd --create-home -d /var/lib/znc --system --shell /sbin/nologin --comment "Account to run ZNC daemon" --user-group znc || [[ $? == 9 ]] # 9 if it exists already
+        chmod 700 /var/lib/znc
+        s dd of=/etc/systemd/system/znc.service 2>/dev/null <<'EOF'
+[Unit]
+Description=ZNC, an advanced IRC bouncer
+After=network-online.target
+
+[Service]
+ExecStart=/usr/bin/znc -f --datadir=/var/lib/znc
+User=znc
+
+[Install]
+WantedBy=multi-user.target
+EOF
+        ser daemon-reload
+        sgo znc
+
         echo "$0: $(date): ending now)"
         exit 0
         ;;
@@ -812,7 +867,7 @@ EOF
 fi
 
 ######### begin  pump.io periodic backup #############
-if [[ $HOSTNAME == tp ]]; then
+if [[ $HOSTNAME == frodo ]]; then
     s dd of=/etc/systemd/system/pumpbackup.service <<'EOF'
 [Unit]
 Description=pump li backup
@@ -840,7 +895,8 @@ fi
 
 case $distro in
     debian|trisquel|ubuntu)
-        # suggests because we want the resolvconf package.
+        # suggests because we want the resolvconf package. however, i install it earlier
+        # as well, so this is redundant.
         # todo: check other distros to make sure it\'s installed
         pi-nostart --install-suggests openvpn
         # pi-nostart does not disable
@@ -957,6 +1013,14 @@ reset-sakura
 sudo -u traci -i reset-sakura
 reset-konsole
 sudo -u traci -i reset-konsole
+reset-xscreensaver
+# this is packaged, but i see it's gotten a fair amount of development lately,
+# so install from cabal. the options are needed to get over incompatible xmonad library versions
+# but that stuff is in the global namespace, and it seems they don't conflict in practice.
+pi libxss-dev # dependency based on build failure
+cabal update
+cabal install --upgrade-dependencies  --force-reinstalls arbtt
+lnf -T /m/arbtt-capture.log ~/.arbtt/capture.log
 
 if [[ ! -e ~/.linphonerc && -e /p/.linphonerc-initial ]]; then
     cp /p/.linphonerc-initial ~/.linphonerc
@@ -1646,6 +1710,11 @@ case $distro in
 esac
 lnf -T /a/opt/sketches ~/Arduino
 
+# this is for the mail command too. update-alternatives is kind of misleading
+# since at least it's main commands pretend mail does not exist.
+# bsd's mail got pulled in on some dumb dependency, i dunno how.
+s update-alternatives --set mailx /usr/bin/mail.mailutils
+
 ######### end misc packages #########
 
 
@@ -1905,12 +1974,6 @@ esac
 ######### begin stuff belonging at the end    ##########
 
 
-# Apps we want to override others for default file handler:
-# simplest way in debian is to just install them last.
-simple_packages+=(
-    mpv
-)
-
 case $distro in
     ubuntu|debian)
         spa spacefm-gtk3 ;;
index 29f152b7c7fb2d23ac1a7ad2a2cb9d99a77eb2bf..95cbf8d8ef7c1bf4be8efd3d0a069f6d1a077b66 100755 (executable)
@@ -81,6 +81,7 @@ show() {
 }
 
 
+# code common to start and stop.
 modify() {
     # match source or dest port. note, when we send to a port, it picks a random high port as
     # the source.
index afbc1945d553102a2aaef46f22a85194b20e0ed3..930ddcca0edd3b4d5dfd2d88c9e4407e3f006fad 100755 (executable)
@@ -850,6 +850,28 @@ dovecot_lmtp:
         batch_max = 200
 EOF
 
+    cat >/etc/exim4/conf.d/router/190_exim4-config_fsfsmarthost <<'EOF'
+# smarthost for fsf mail
+# ian: copied from /etc/exim4/conf.d/router/200_exim4-config_primary, and added senders = and
+# replaced DCsmarthost with mail.fsf.org
+fsfsmarthost:
+  debug_print = "R: smarthost for $local_part@$domain"
+  driver = manualroute
+  domains = ! +local_domains
+  senders = *@fsf.org
+  transport = remote_smtp_smarthost
+  route_list = * mail.fsf.org byname
+  host_find_failed = ignore
+  same_domain_copy_routing = yes
+  no_more
+EOF
+
+    # https://blog.dhampir.no/content/make-exim4-on-debian-respect-forward-and-etcaliases-when-using-a-smarthost
+    # i only need .forwards, so just doing that one.
+    cd /etc/exim4/conf.d/router
+    b=userforward_higher_priority
+    # replace the router name so it is unique
+    sed -r s/^\\S+:/$b:/ 600_exim4-config_userforward >175_$b
 
     # begin setup passwd.client
     f=/etc/exim4/passwd.client
@@ -861,12 +883,6 @@ EOF
     done
     # end setup passwd.client
 
-    # https://blog.dhampir.no/content/make-exim4-on-debian-respect-forward-and-etcaliases-when-using-a-smarthost
-    # i only need .forwards, so just doing that one.
-    cd /etc/exim4/conf.d/router
-    b=userforward_higher_priority
-    # replace the router name so it is unique
-    sed -r s/^\\S+:/$b:/ 600_exim4-config_userforward >175_$b
     systemctl restart exim4
 
 fi  #### end if exim4
index 00cda2acc1d920d8dc85ae14cf207c169e194f13..8958f7fa13ca10b7b26fb4fbece79b7ae3e626b6 100755 (executable)
@@ -8,7 +8,7 @@ trap 'echo "$0:$LINENO:error: \"$BASH_COMMAND\" returned $?" >&2' ERR
 
 [[ $EUID == 0 ]] || exec sudo -E "$BASH_SOURCE" "$@"
 
-cd /home/ian/mastodon
+cd /home/iank/mastodon
 git fetch
 git stash
 git checkout $(git tag | grep -v rc | tail -n1)
diff --git a/mymimes b/mymimes
index 010d418b543e32fcf063c83eb098137e12dc0d3f..2130c3776b7432ac61d2333782be20d324f9a08b 100755 (executable)
--- a/mymimes
+++ b/mymimes
@@ -8,7 +8,7 @@ trap 'echo "$0:$LINENO:error: \"$BASH_COMMAND\" returned $?" >&2' ERR
 shopt -s extglob nullglob
 
 echo '[Default Applications]' >/etc/xdg/defaults.list
-sed -r '/^MimeType=/!d;s/^MimeType=//;s/;/=mpv.desktop;\n/g' /usr/share/applications/mpv.desktop >>/etc/xdg/defaults.list
+sed -r '/^MimeType=/!d;s/^MimeType=//;s/;/=mpv.desktop\n/g' /usr/share/applications/mpv.desktop >>/etc/xdg/defaults.list
 
 # this is the new one, according to
 # https://specifications.freedesktop.org/mime-apps-spec/mime-apps-spec-1.0.html
@@ -19,3 +19,5 @@ cp /etc/xdg/defaults.list /etc/xdg/mimapps.list
 for f in /usr/share/applications/!(defaults).list; do
     cp /etc/xdg/defaults.list /etc/xdg/${f##*/}
 done
+
+update-desktop-database
index 96e03ef494e911ed4fce3cfef7ef5589e45b0567..9315807d6ca00196574a06d967158c951f7becfc 100755 (executable)
@@ -120,6 +120,15 @@ if $old_shell systemctl is-active btrbk.timer; then
     restore_old_btrbk=true
 fi
 
+for ((i=0; i<10; i++)); do
+    $old_shell killall arbtt-capture || break
+    sleep 1
+    if [[ i == 9 ]]; then
+        warn="WARNING!!! failed to kill arbtt-capture"
+        fi
+    done
+
+
 $new_shell bash -s <<'EOF'
 set -eE
 if mountpoint /m; then sudo umount /m; fi
@@ -208,3 +217,7 @@ fi
 if $restore_old_btrbk; then
     $old_shell sudo systemctl start btrbk.timer
 fi
+
+$new_shell arbtt-capture --sample-rate=10 &
+
+echo $warn