On découpe nos playbooks Ansible par rôles :
pycon.yml: Pour les pycon.frbackup.yml: Configure rsnapshot pour sauvegarder nos serveurs.- ...
En partant de là, on peut utiliser les commandes suivantes :
Après avoir cloné ce repo, installé Ansible (dans un venv), installez les roles nécessaires via :
- ansible-galaxy install julienpalard.nginx
Récupérez le secret dans afpy/pass:
git clone https://github.com/AFPy/pass/
PASSWORD_STORE_DIR=pass/infra pass Ansible-Vault > ~/.ansible-afpy-vault
Puis pour jouer les playbooks :
- Pour tout relancer :
ansible-parallel *.yml - Pour configurer les PyCons :
ansible-playbook pycons.yml
Faire : Configurer les machines :
apt install,- fichiers de configuration,
- créer les utilisateurs,
- éventuellement un premier
git clonepour que ça marche si c'est un site statique.
Ne pas faire :
- Deployer. En dehors de l'éventuel premier git clone, c'est le rôle de la CI (Github Actions, ...), pas de nos playbooks.
La distinction services/serveurs :
- Un serveur contient un nombre dans son nom : deb2.afpy.org, bbb2.afpy.org, …
- Un service ne contient pas de chiffre dans son hostname : discuss.afpy.org, bbb.afpy.org, www.afpy.org, …
♥ Machine sponsorisée par Gandi ♥
C'est un VPS V-R4 2 CPUs · 4 GB RAM.
Elle héberge les services suivants :
- https://www.afpy.org (source)
- https://discuss.afpy.org une instance Discourse.
- https://.pycon.fr/ (que des sites statiuques)
- Alain le bot IRC du canal #afpy (source)
- La gate IRC—Discord
- https://dl.afpy.org: un directory listing nginx des vidéos de nos conférences.
- https://logs.afpy.org: Les logs du salon IRC #afpy (source)
- https://pydocteur.afpy.org: Un bot utilisé dans le repo de la traduction (source)
♥ Machine sponsorisée par Gandi ♥
C'est un VPS V-R8 4 CPUs · 8 GB RAM.
♥ Machine sponsorisée par Gandi ♥
C'est un « Gandi Cloud V5 » à Bissen au Luxembourg avec 512MB de RAM
et 512GB de disque, il sauvegarde (via rsnapshot) les autres machines
(voir backup.yml).
Dernière vérification de backup1.afpy.org le 1er novembre 2022 :
- 51% du disque utilisé (stable)
- Dans
/srv/backups/rsnapshot_afpy/daily.0/:- Stocke 7.1GB de bbb.afpy.org
- Stocke 123MB de git.afpy.org
- Stocke 231GB de deb2.afpy.org
deb.afpy.org/var/discourse/shared/standalone/backups/default/contient bien des sauvegardes récentes.deb.afpy.org/var/www/logs.afpy.org/contient bien des fichiers récents.git.afpy.org/var/backups/gitea/n'était pas à jour (problème de droits, résolu).
Julien Palard a aussi un rsnapshot sur silence.palard.fr, vérifié le 1er novembre 2022 :
- 56% du disque utilisé
- Dans
/srv/backups/rsnapshot/daily.0/:- Stocke 7.1GB de bbb.afpy.org
- Stocke 231GB de deb2.afpy.org
- Stocke 124MB de git.afpy.org
- deb.afpy.org/var/discourse/shared/standalone/backups/default/` contient bien les sauvegardes récentes.
♥ Machine sponsorisée par Gandi ♥
C’est un « Gandi VPS V-R1 » 1 CPU, 1 GB RAM, 25 GB disk.
C’est la machine derrière git.afpy.org, déployée via gitea.yml.
Pour faire une mise à jour, se connecter en root à la machine puis exécuter :
systemctl start gitea-backup.service
backupopts="-c /etc/gitea/app.ini --file /var/backups/gitea/before-upgrade.zip" gitea-upgrade.sh
(Oui, je sais, ça fait deux sauvegardes, une par nous (avec un
pg_dump), une par le script de gitea dont le SQL n’est pas aussi
propre que celui généré par pg_dump).
Une fois la mise à jour terminée, il est de bon goût de mettre à jour
gitea_version dans gitea.yml.
La machine est sauvegardée automatiquement sur backup1.afpy.org (voir backup.yml).
Adapté de : https://docs.gitea.io/en-us/backup-and-restore/#restore-command-restore
Les sauvegardes sont sur backup1.afpy.org dans /srv/backups/,
copiez-les d’abord vers gitea1.afpy.org.
Une fois la sauvegarde rappatriée (gitea.zip ET gitea.sql) :
systemctl stop gitea
unzip gitea.zip
mv app.ini /etc/gitea/app.ini
rsync -vah --delete data/ /var/lib/gitea/data/
rsync -vah --delete repos/ /var/lib/gitea/data/gitea-repositories/
rsync -vah --delete custom/ /var/lib/gitea/custom/
chown -R git:git /var/lib/gitea/
sudo --user git psql -d gitea < gitea.sql
Puis passer le playbook gitea.yml pour remettre les bons droits partout (le playbook démarrera aussi gitea).
On utilies ces rôles Ansible :
Ce rôle configure un nginx avec Letsencrypt en DNS-01 via l'API Gandi (nos domaines étant chez Gandi).
L'avantage du DNS-01 c'est qu'on peut configurer un nouveau serveur avant que le DNS ne pointe sur lui.
Ce rôle configure un nginx avec Letsencrypt en HTTP-01, on l'utilise
assez peu maintenant, on l'utilise là où on ne peut pas faire de
DNS-01 (pour fr.pycon.org par exemple).
Voir la doc.
common est un rôle "de base" permettant d'avoir une conf "normale" sur toutes nos machines (emacs et vim installés, nos authorized-keys, pas de mlocate, hostname propre, firewall, ce genre de broutilles).
Hébergé sur bbb2.afpy.org chez Gandi.
J'y ai appliqué un poil de ssh-hardening :
AuthenticationMethods publickey
LogLevel VERBOSE
Ensuite j'ai rsync les enregistrements depuis le bbb précédent.
Puis j'ai sauvegardé/restauré la DB de greenlight :
# Sur l'ancienne machine :
docker exec greenlight_db_1 /usr/bin/pg_dumpall -U postgres -f /var/lib/postgresql/data/dump.sql
# Sur la nouvelle machine :
# Copier la sauvegarde sur le nouveau serveur :
cd ~root/greenlight
rsync bbb.afpy.org:/root/greenlight/db/production/dump.sql ./
docker-compose down
rm -fr db
# Configurer le même mot de passe dans .env et docker-compose.yml que l'ancienne machine
# En profiter pour vérifier le SAFE_HOSTS dans le .env.
docker-compose up -d
# Attendre un peu avec un top sous les yeux que ça se termine vraiment
docker exec greenlight_db_1 /usr/local/bin/psql -U postgres -c "DROP DATABASE greenlight_production;"
mv dump.sql db/production/
docker exec greenlight_db_1 /usr/local/bin/psql -U postgres -f /var/lib/postgresql/data/dump.sql
rm db/production/dump.sql
docker-compose down
docker-compose up -d # Il va s'occuper de la migration
docker-compose logs -f # pour voir si tout va bien
rsync des certificats TLS aussi :
rsync -vah bbb.afpy.org:/etc/letsencrypt/ /etc/letsencrypt/
Ça a pris un petit :
sed s/sd-106563.dedibox.fr/bbb.afpy.org/ /etc/nginx/sites-available/bigbluebutton
Il faut attendre un moment avec un top qui tourne, ruby a tout plein
de truc a faire avant de démarrer.
Pour accepter le password reset, BBB doit avoir :
ALLOW_MAIL_NOTIFICATIONS=true
dans /root/greenlight/.env
(Pour relire le .env: cd /root/greenlight; docker-compose down && docker-compose up -d)
Pour vérifier la conf :
docker run --rm --env-file .env bigbluebutton/greenlight:v2 bundle exec rake conf:check
Il y a des chances que ça ne passe pas, il faut laisser les mails sortir de leur conteneur Docker (par défaut il utilise sendmail DANS le conteneur).
Il faut configurer le .env tel que:
SMTP_SERVER=172.17.0.1
SMTP_PORT=25
SMTP_DOMAIN=greenlight.afpy.org
SMTP_SENDER=bbb@afpy.org
Puis vérifier qu'exim et le firewall (attention c'est peut-être ufw)
les acceptent.
L'installation de BBB n'étant pas gérée par Ansible, pour le moment la conf TURN/STUN est faite à la main, c'est la seule chose à faire, elle ressemble à :
<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://www.springframework.org/schema/beans
http://www.springframework.org/schema/beans/spring-beans-2.5.xsd
">
<bean id="stun0" class="org.bigbluebutton.web.services.turn.StunServer">
<constructor-arg index="0" value="stun:turn.afpy.org"/>
</bean>
<bean id="turn0" class="org.bigbluebutton.web.services.turn.TurnServer">
<constructor-arg index="0" value="[redacte]"/>
<constructor-arg index="1" value="turns:turn.afpy.org:443?transport=tcp"/>
<constructor-arg index="2" value="86400"/>
</bean>
<bean id="stunTurnService" class="org.bigbluebutton.web.services.turn.StunTurnService">
<property name="stunServers">
<set>
<ref bean="stun0" />
</set>
</property>
<property name="turnServers">
<set>
<ref bean="turn0" />
</set>
</property>
<property name="remoteIceCandidates">
<set>
</set>
</property>
</bean>
</beans>dans /usr/share/bbb-web/WEB-INF/classes/spring/turn-stun-servers.xml.
Le playbook exim configure une clé DKIM et signe les mails avec. Mais un humain doit la propager sur les DNS.
Le nom d'hote est le nom du serveur, donc pour deb2,
d=deb2.afpy.org, et le selecteur vaut le nom de domaine avec des
-, soit s=deb2-afpy-org.
TL;DR la configuration qu'il faut faire ressemble à :
deb2-afpy-org._domainkey.deb2.afpy.org. IN TXT "v=DKIM1; k=rsa; p=MIG...QAB"
La clé publique se situe dans /etc/exim4/dkim/*.pem et est donc récupérable via :
ssh root@deb2.afpy.org cat /etc/exim4/dkim/deb2-afpy-org.pem | grep -v ^- | tr -d '\n'