various improvements and fixes
[distro-setup] / distro-end
index f9439102dac184f0b648a114f5b50c038c7542d1..ea16efc5a1f204fd44d04163903729fcd4749b6c 100755 (executable)
@@ -67,7 +67,10 @@ case $HOSTNAME in
         # mutagen for pithos
         # guvcview set webcam brightness to highest
         # pidgin-otr, i went into pidgin pluggin settings and generated a key for some accounts
+        # xawtv has webcam cli control. v4lctl bright 80%; v4lctl list
+        # guvcview also adjusts webcam
         simple_packages+=(
+            adb
             apache2
             apache2-doc
             apt-doc
@@ -83,6 +86,7 @@ case $HOSTNAME in
             cloc
             cpulimit
             cron
+            debootstrap
             debconf-doc
             dirmngr
             dnsutils
@@ -114,6 +118,8 @@ case $HOSTNAME in
             jq
             kid3-qt
             kid3-cli
+            konsole
+            linphone
             linux-doc
             locate
             lshw
@@ -143,10 +149,10 @@ case $HOSTNAME in
             pry
             python-autopep8
             python3-doc
-            python3-mutagen
             qrencode
             reportbug
             $(aptitude show ruby | sed -rn 's/Depends: (.*)/\1/p')-doc
+            schroot
             sqlite3-doc
             squashfs-tools
             swh-plugins
@@ -157,6 +163,13 @@ case $HOSTNAME in
             vlc
             whois
             wondershaper
+            xawtv
+            xbacklight
+            xprintidle
+            xscreensaver
+            xscreensaver-data-extra
+            xscreensaver-gl
+            xscreensaver-gl-extra
         )
         spa $(apt-cache search ruby[.0-9]+-doc| awk '{print $1}')
         ;;
@@ -273,8 +286,8 @@ if isdebian; then
 fi
 
 # we've got a few dependencies later on, so install them now.
-pi eatmydata
-s eatmydata apt-get -y install --purge --auto-remove "${simple_packages[@]}"
+pi eatmydata; PI_PREFIX=eatmydata
+pi "${simple_packages[@]}"
 simple_packages=()
 
 
@@ -296,36 +309,58 @@ fi
 ###  end docker install ####
 
 
+### begin certbot install ###
 case $distro in
     debian)
         # note, need python-certbot-nginx for nginx, but it depends on nginx,
-        # and I'm not installing nginx by default right now
-        if isdebian-testing; then
-            pi --install-suggests certbot
+        # and I'm not installing nginx by default right now.
+        # note python-certbot-apache is in suggests, but so is a doc package that brought in xorg
+        if [[ $(debian-codename) == jessie ]]; then
+            pi -t jessie-backports certbot python-certbot-apache
         else
-            pi --install-suggests -t jessie-backports certbot
+            pi certbot python-certbot-apache
         fi
-        # make a version of the certbot timer that emails me.
-        x=/systemd/system/certbot
-        $sed -r -f - /lib$x.timer <<'EOF' |s dd of=/etc${x}mail.timer
-s,^Description.*,\0 mail version,
-EOF
-        $sed -r -f - /lib$x.service <<'EOF' |s dd of=/etc${x}mail.service
-s,(ExecStart=)(/usr/bin/certbot),\1/a/bin/log-quiet/sysd-mail-once certbotmail \2 --renew-hook /a/bin/distro-setup/certbot-renew-hook,
-EOF
-        ser daemon-reload
-        sgo certbotmail.timer
-
         ;;
     trisquel|ubuntu)
         # not packaged in xenial or flidas
         pi software-properties-common
-        s add-apt-repository -y ppa:certbot/certbot
+        # this fails with:
+        #
+        # gpg: key 75BCA694: public key "Launchpad PPA for certbot" imported
+        # gpg: Total number processed: 1
+        # gpg:               imported: 1
+        # gpg: no valid OpenPGP data found.
+        # Failed to add key.
+        #
+        # but it seems to work fine, perhaps it's only failing on the second run.
+        s add-apt-repository -y ppa:certbot/certbot ||:
         p update
         pi python-certbot-apache
         ;;
     # todo: other distros unknown
 esac
+# make a version of the certbot timer that emails me.
+x=/systemd/system/certbot
+$sed -r -f - /lib$x.timer <<'EOF' |s dd of=/etc${x}mail.timer
+s,^Description.*,\0 mail version,
+EOF
+$sed -r -f - /lib$x.service <<'EOF' |s dd of=/etc${x}mail.service
+s,(ExecStart=)(/usr/bin/certbot),\1/a/bin/log-quiet/sysd-mail-once certbotmail \2 --renew-hook /a/bin/distro-setup/certbot-renew-hook,
+EOF
+ser daemon-reload
+sgo certbotmail.timer
+### end certbot install ###
+
+
+# dogcam setup
+case $HOSTNAME in
+    lj|li)
+        /a/bin/webcam/install-server
+        ;;
+    kw)
+        /a/bin/webcam/install-client
+        ;;
+esac
 
 # website setup
 case $HOSTNAME in
@@ -339,7 +374,6 @@ case $HOSTNAME in
         /a/h/build.rb
 
         sudo -E /a/bin/mediawiki-setup/mw-setup-script
-        #$src/phab-setup
 
         pi-nostart mumble-server
         s $sed -ri "s/^ *(serverpassword=).*/\1$(< /a/bin/bash_unpublished/mumble_pass)/" /etc/mumble-server.ini
@@ -356,11 +390,24 @@ EOF
 
         sgo mumble-server
 
-        vpn-server-setup -d
-        tee /etc/openvpn/client-config/mail <<'EOF'
+        vpn-server-setup -rd
+        tee /etc/openvpn/client-config/mail <<'EOF'
 ifconfig-push 10.8.0.4 255.255.255.0
 EOF
 
+        # it\'s strange. docker seems to make the default for forward
+        # be drop, but then I set it to accept and it\'s stuck that way,
+        # I dun know why. But, let\'s make sure we can forward anyways.
+        s DEBIAN_FRONTEND=noninteractive pi iptables-persistent
+        rm /etc/iptables/rules.v6
+        s tee /etc/iptables/rules.v4 <<'EOF'
+*filter
+-A FORWARD -i tun+ -o eth0 -j ACCEPT
+-A FORWARD -i eth0 -o tun+ -j ACCEPT
+COMMIT
+EOF
+
+
 
         sudo dd of=/etc/systemd/system/vpnmail.service <<EOF
 [Unit]
@@ -379,7 +426,12 @@ EOF
         ser enable vpnmail.service
         # needed for li's local mail delivery.
         tu /etc/hosts <<<"10.8.0.4 mail.iankelling.org"
-        sgo openvpn
+        if [[ -e /lib/systemd/system/openvpn-server@.service ]]; then
+            vpn_service=openvpn-server@server
+        else
+            vpn_service=openvpn@server
+        fi
+        sgo $vpn_service
         # setup let's encrypt cert
         web-conf apache2 mail.iankelling.org
         s rm /etc/apache2/sites-enabled/mail.iankelling.org{,-redir}.conf
@@ -397,7 +449,7 @@ EOF
                 # setup one time, with root:www-data, 640
                 AuthUserFile "/etc/caldav-htpasswd"
                 Require valid-user
-        <Location />
+        </Location>
 EOF
         # nginx version of above would be:
         # auth_basic "Not currently available";
@@ -436,22 +488,29 @@ EOF
 EOF
         s sed -i "s#SECRET_REPLACE_ME#$(cat /p/c/machine_specific/li/pump-secret)#" /etc/pump.io.json
 
-        # jessie\'s node is too old
+        # stretch node is too old
         # https://nodejs.org/en/download/package-manager/
         curl -sL https://deb.nodesource.com/setup_6.x | sudo -E bash -
         pi nodejs
         cd /home/iank
-        rm -rf pump.io.git
-        git clone https://github.com/pump-io/pump.io.git
-        cd pump.io
+        if [[ -e pump.io ]]; then
+            cd pump.io
+            git pull
+        else
+            git clone https://github.com/pump-io/pump.io.git
+            cd pump.io
+        fi
         # note: doing this or the npm install pump.io as root had problems.
         npm install
         npm run build
         # normally, next command would be
         # s npm install -g databank-mongodb
         # but it\'s this until a bug in pump gets fixed
+        # https://github.com/pump-io/pump.io/issues/1287
         s npm install -g databank-mongodb@0.19.2
-        s useradd -m -s /bin/false pumpio
+        if ! getent passwd pumpio &>/dev/null; then
+            s useradd -m -s /bin/false pumpio
+        fi
         sudo -u pumpio mkdir -p /home/pumpio/pumpdata
         # for testing browser when only listening to localhost,
         # in the pump.io.json, set hostname localhost, urlPort 5233
@@ -506,6 +565,8 @@ EOF
 
         ############# begin setup mastodon ##############
 
+        # main doc is Docker-Guide.md in docs repo
+
         # I'd like to try gnu social just cuz of gnu, but it's not being
         # well maintained, for example, simple pull requests
         # languishing:
@@ -525,6 +586,7 @@ EOF
 
 
         cd ~
+        s rm -rf mastodon
         i clone https://github.com/tootsuite/mastodon
         cd mastodon
         # subbed to atom feed to deal with updates
@@ -556,17 +618,25 @@ SMTP_DELIVERY_METHOD=smtp
 EOF
 
         for key in PAPERCLIP_SECRET SECRET_KEY_BASE OTP_SECRET; do
-            printf "%s=%s" $key "$(docker-compose run --rm web rake secret)" >>.env.production
+            # 1 minute 7 seconds to run this docker command
+            # to generate a secret. wtf, wtf, wtf, wtf
+            printf "%s=%s\n" $key "$(docker-compose run --rm web rake secret|tail -n1)" >>.env.production
         done
+        found=false
         s cat /etc/mailpass| while read -r domain port pass; do
             if [[ $domain == mail.iankelling.org ]]; then
-                printf "SMTP_PASSWORD=%s" "$pass" >>.env.production
+                found=true
+                printf "SMTP_PASSWORD=%s\n" "$pass" >>.env.production
                 break
             fi
         done
+        if ! $found; then
+            echo "$0: error, failed to find mailpass domain for mastadon"
+            exit 1
+        fi
 
-
-
+        docker-compose run --rm web rake mastodon:webpush:generate_vapid_key | grep -E '^VAPID_PUBLIC_KEY=|^VAPID_PRIVATE_KEY=' >> .env.production
+        logq docker-compose run --rm web rake db:migrate
         docker-compose run --rm web rails assets:precompile
 
         # docker daemon takes care of starting on boot.
@@ -615,6 +685,13 @@ EOF
 esac
 
 
+# needed for checkrestart
+if isdeb; then
+    spa debian-goodies
+fi
+
+
+
 ########### end section including li/lj ###############
 
 case $distro in
@@ -631,10 +708,6 @@ case $distro in
 esac
 
 
-if isdeb; then
-    spa debian-goodies
-fi
-
 
 case $distro in
     debian)
@@ -665,8 +738,6 @@ case $distro in
 esac
 
 
-
-
 ### begin home vpn server setup
 
 
@@ -678,26 +749,27 @@ esac
 # vpn-server-setup -rds
 # s cp -r --parents /etc/openvpn/easy-rsa/keys /p/c/filesystem
 # s chown -R 1000:1000 /p/c/filesystem/etc/openvpn/easy-rsa/keys
+# # kw = kgpe work machine.
 # for host in x2 kw; do
-#     vpn-mk-client-cert -b $host -n home b8.nz
-#     dir=/p/c/machine_specific/$host/filesystem/etc/openvpn/client
-#     mkdir -p $dir
-#     s bash -c "cp /etc/openvpn/client/home* $dir"
+# vpn-mk-client-cert -b $host -n home b8.nz 1196
+# dir=/p/c/machine_specific/$host/filesystem/etc/openvpn/client
+# mkdir -p $dir
+# s bash -c "cp /etc/openvpn/client/home* $dir"
 #     # note: /etc/update-resolv-conf-home also exists for all systems with /p
 # done
 
-
+# key already exists, so this won't generate one, just the configs.
 vpn-server-setup -rds
 s tee -a /etc/openvpn/server/server.conf <<'EOF'
 push "dhcp-option DNS 192.168.1.1"
 push "route 192.168.1.0 255.255.255.0"
 client-connect /a/bin/distro-setup/vpn-client-connect
 EOF
-s sed -i --follow-symlinks 's/10.8./10.9./g' /etc/openvpn/server/server.conf
+s sed -i --follow-symlinks 's/10.8./10.9./g;s/^\s*port\s.*/port 1196/' /etc/openvpn/server/server.conf
 
 if [[ $HOSTNAME == tp ]]; then
     if [[ -e /lib/systemd/system/openvpn-server@.service ]]; then
-        vpn_service=openvpn-server@.service
+        vpn_service=openvpn-server@server
     else
         vpn_service=openvpn@server
     fi
@@ -820,6 +892,7 @@ if [[ $HOSTNAME == frodo ]]; then
             ;;
     esac
     lnf -T /w/syncthing /home/iank/.config/syncthing
+    ser daemon-reload # syncthing likely not properly packaged
     sgo syncthing@iank # runs as iank
 
     # these things persist in ~/.config/syncthing, which I save in
@@ -837,7 +910,7 @@ if [[ $HOSTNAME == frodo ]]; then
     # Set gui username and password.
     #
     # install syncthing via f-droid,
-    # folder setting, turn off master folder (makes it read only).
+    # folder setting, turn off send only.
     # on phone, add device, click bar code icon
     # on dekstop, top right, actions, device id
     # after adding, notification will appear on desktop to confirm
@@ -848,7 +921,8 @@ if [[ $HOSTNAME == frodo ]]; then
     # notification will appear in android\'s notifications, you have to
     # swipe down and tap it to add the folder. It won\'t appear in the
     # syncthing ui, which would be intuitive, but don\'t wait for it
-    # there.
+    # there. The notification may not work, instead open the web gui
+    # from in the app, there should be a notification within there.
     #
     # On phone, set settings to run syncthing all the time, and
     # show no notification.
@@ -877,7 +951,43 @@ case $distro in
 esac
 
 
-####### misc packages ###########
+####### begin misc packages ###########
+
+reset-sakura
+sudo -u traci -i reset-sakura
+reset-konsole
+sudo -u traci -i reset-konsole
+
+if [[ ! -e ~/.linphonerc && -e /p/.linphonerc-initial ]]; then
+    cp /p/.linphonerc-initial ~/.linphonerc
+fi
+
+
+### begin spd install
+pi libswitch-perl libdigest-md5-file-perl libgnupg-interface-perl
+t=$(mktemp)
+wget -O $t http://mirror.fsf.org/fsfsys-trisquel/fsfsys-trisquel/pool/main/s/spd-perl/spd-perl_0.2-1_amd64.deb
+s dpkg -i $t
+rm $t
+# this guesses at the appropriate directory, adjust if needed
+x=(/usr/lib/x86_64-linux-gnu/perl/5.*)
+sudo ln -sf ../../../perl/5.18.2/SPD/ $x
+# newer distro had gpg2 as default, older one, flidas, need to make it that way
+x=$(which gpg2)
+if [[ $x ]]; then
+    s lnf -T $x /usr/local/bin/gpg
+fi
+### end spd install
+
+
+if [[ $HOSTNAME == kw ]]; then
+    cat <<'EOF'
+NOTE: after this finishes, i did
+s nmtui-connect
+# remove br from auto:
+s vim /etc/network/interfaces
+EOF
+fi
 
 # nagstamon setting which were set through the ui
 # in filters tab:
@@ -890,7 +1000,23 @@ esac
 # services on unreachable osts
 # hosts in soft state
 # services in soft state
-# in display tab: icon in systray.
+# in display tab: fullscreen
+
+# these translate to these settings I think
+# filter_acknowledged_hosts_services = True
+# filter_all_unknown_services = True
+# filter_all_warning_services = True
+# filter_hosts_in_soft_state = True
+# filter_hosts_services_maintenance = True
+# filter_services_in_soft_state = True
+# filter_services_on_down_hosts = True
+# filter_services_on_hosts_in_maintenance = True
+# filter_services_on_unreachable_hosts = True
+# notify_if_up = False
+# statusbar_floating = False
+# fullscreen = True
+# but i'm just going to rely on the webpage plus sms for now.
+
 
 case $distro in
     debian|trisquel|ubuntu)
@@ -902,12 +1028,89 @@ case $distro in
     # others unknown
 esac
 
+# /run and /dev/shm are listed as required for pulseaudio. All 4 in the group
+# listed in the default config as suggested.
+# /run/usr/1000 i noticed was missing for pulseaudio
+# /run/user/0 just seemed like a not bad idea, given the above
+tu /etc/schroot/desktop/fstab <<'EOF'
+/run           /run            none    rw,bind         0       0
+/run/lock      /run/lock       none    rw,bind         0       0
+/dev/shm       /dev/shm        none    rw,bind         0       0
+/run/shm       /run/shm        none    rw,bind         0       0
+/run/user/1000 /run/user/1000  none    rw,bind         0       0
+/run/user/1001 /run/user/1001  none    rw,bind         0       0
+/run/user/0    /run/user/0     none    rw,bind         0       0
+EOF
+
+mkschroot() {
+    n=$1
+    shift
+    apps=($@)
+    d=/nocow/schroot/$n
+    s dd of=/etc/schroot/chroot.d/$n.conf <<EOF
+[$n]
+description=$n
+type=directory
+directory=$d
+profile=desktop
+preserve-environment=true
+users=$USER,traci
+EOF
+    if [[ -e $d/bin ]]; then
+        s chroot $d apt-get update
+        s chroot $d apt-get -y dist-upgrade --purge --auto-remove
+        cd; s schroot -c $n -- apt-get install --allow-unauthenticated -y ${apps[@]}
+    else
+        s mkdir -p $d
+        s debootstrap $n $d http://deb.debian.org/debian/
+        cd; s schroot -c $n -- apt-get install --allow-unauthenticated -y ${apps[@]}
+    fi
+    s cp -P {,$d}/etc/localtime
+}
+s dd of=/etc/systemd/system/schrootupdate.service <<'EOF'
+[Unit]
+Description=schrootupdate
+After=multi-user.target
+
+[Service]
+Type=oneshot
+ExecStart=/a/bin/log-quiet/sysd-mail-once schrootupdate /a/bin/distro-setup/schrootupdate
+EOF
+s dd of=/etc/systemd/system/schrootupdate.timer <<'EOF'
+[Unit]
+Description=schrootupdate
+
+[Timer]
+OnCalendar=*-*-* 04:20:00
+
+[Install]
+WantedBy=timers.target
+EOF
+s systemctl daemon-reload
+sgo schrootupdate.timer
+
+
 
+
+# for my roommate
+case $distro in
+    trisquel)
+        mkschroot stretch firefox-esr pulseaudio chromium
+        ;;
+esac
+
+s mkdir -p /nocow/user
+s chown $USER:$USER /nocow/user
 case $distro in
     debian)
-        # no recommends because it wanted some other unstable package, something to
-        # do with math or something, which I didn't want to deal with.
-        p -y --no-install-recommends install python3-send2trash/unstable anki/unstable
+        case $(debian-codename) in
+            jessie)
+                pi anki
+                ;;
+            *)
+                mkschroot jessie anki pulsaudio mplayer
+                ;;
+        esac
         ;;
     trisquel|ubuntu)
         pi anki
@@ -1167,7 +1370,8 @@ esac
 
 case $distro in
     arch) spa firefox pulseaudio;;
-    *) : ;; # comes default or with other packages
+    trisquel) spa abrowser ;;
+    *) : ;; # comes default or with other packages, or uknown
 esac
 
 
@@ -1308,7 +1512,7 @@ esac
 
 case $distro in
     debian)
-        s eatmydata apt-get -y install --purge --auto-remove task-mate-desktop
+        pi task-mate-desktop
         # in settings, change scrolling to two-finger,
         # because the default edge scroll doesn\'t work.
         pu transmission-gtk
@@ -1316,15 +1520,14 @@ case $distro in
     trisquel)
         # mate-indicator-applet and beyond are msc things I noticed diffing a
         # standard install with mine.
-        s eatmydata apt-get -y install --purge --auto-remove xorg lightdm mate-desktop-environment mate-desktop-environment-extras mate-indicator-applet anacron
+        pi xorg lightdm mate-desktop-environment mate-desktop-environment-extras mate-indicator-applet anacron
         ;;
     # others unknown
 esac
 
 case $distro in
     arch) spa apg  ;;
-
-    # already in debian jessie
+    # already in debian
 esac
 
 
@@ -1414,8 +1617,9 @@ fi
 # esac
 
 
-
+pi --no-install-recommends kdeconnect-plasma
 ### kdeconnect for gnome. started in /a/bin/distro-setup/desktop-20-autostart.sh
+### but gnome + xmonad not working in flidas, so i disabled it
 pi libgtk-3-dev python3-requests-oauthlib valac cmake python-nautilus libappindicator3-dev
 cd /a/opt/indicator-kdeconnect
 mkdir -p build
@@ -1428,6 +1632,20 @@ sudo make install
 # /etc/xdg/autostart/kdeconnectd.desktop
 # I'm not seeing the icon, but the clipboard replication is working
 
+
+### model 01 arduino support ###
+# https://github.com/keyboardio/Kaleidoscope/wiki/Install-Arduino-support-on-Linux
+# also built latest arduino in /a/opt/Arduino, (just cd build; ant build; ant run )
+# set arduino var in bashrc,
+# have system config file setup too.
+sudo adduser $USER dialout
+case $distro in
+    arch)
+        sudo usermod -a -G uucp $USER
+        ;;
+esac
+lnf -T /a/opt/sketches ~/Arduino
+
 ######### end misc packages #########
 
 
@@ -1471,23 +1689,31 @@ DEVICESCAN -a -o on -S on -n standby,q $sched \
 
 ########### misc stuff
 
+
+/a/bin/distro-setup/mymimes
+
+
 # stop autopoping windows when i plug in an android phone.
 # dbus-launch makes this work within an ssh connection, otherwise you get this message,
 # with still 0 exit code.
 # dconf-WARNING **: failed to commit changes to dconf: Cannot autolaunch D-Bus without X11 $DISPLAY
 dbus-launch gsettings set org.gnome.desktop.media-handling automount-open false
 
+
+# on grub upgrade, we get prompts unless we do this
 devs=()
 for dev in $(s btrfs fi show /boot | sed -nr 's#.*path\s+(\S+)$#\1#p'); do
     devs+=($(devbyid $dev),)
 done
 devs[-1]=${devs[-1]%,} # jonied by commas
-
-# on grub upgrade, we get prompts unless we do this
 s debconf-set-selections <<EOF
 grub-pc grub-pc/install_devices multiselect ${devs[*]}
 EOF
 
+# btrfs maintenance
+sgo btrfsmaint.timer
+sgo btrfsmaintstop.timer
+
 
 # the wiki backup script from ofswiki.org uses generic paths
 s lnf /p/c/machine_specific/li/mw_vars /root