'''Sujet:''' 
https://rex.plil.fr/Enseignement/Systeme/Tutorat.IMA2a4.Messagerie/ 
 
'''Archive:''' 
[[file:2022-PSR-archive.zip]]
 
 
= '''PROGRESS''' =
*'''DONE''' : Pour prévenir les failles, les deux serveurs SMTP seront écrits à partir de zéro en respectant la RFC 5321 mais avec des simplifications ; 
*'''DONE''' : Les serveurs doivent être codés en langage C en utilisant la bibliothèque des sockets ; 
*'''DONE''' : Les commandes VRFY et EXPN qui permettent au client de vérifier si une messagerie est disponible pour la transmission, ne seront pas implémentées ; 
*'''DONE''' : Le routage des messages ne doit pas être implémenté et la gestion des messages non transmis est optionnel ; 
*Un système doit être réalisé permettant au serveur SMTP sortant de mettre en file d’attente les messages non remis à destination pour cause d’erreur transitoire du serveur SMTP cible ; 
*'''DONE''' : Les communications peuvent ne pas être chiffrées, les communications non chiffrés sont reçues sur le port 25 ; 
*Les communications peuvent être chiffrées par TLS, les communication chiffrées peuvent être négociées directement sur le port 465 ; 
*Il doit être possible de basculer sur une communication chiffrée à partir du port 25 en utilisant les commandes EHLO et STARTTLS ; 
*'''DONE''' : Chaque connexion doit être gérée via un processus léger (Thread) et chaque commande par une fonction à laquelle est passée une structure représentant l’état du dialogue entre le client et le serveur ; 
*'''DONE''' : Les serveurs SMTP doivent gérer les enregistrements MX permettant d’associer un nom de domaine à un serveur de messagerie, le recours aux enregistrements AAAA et A est à utiliser en cas d’absence de MX ; 
*'''DONE''' : Les serveurs SMTP doivent être contactables en IPv4 et en IPv6, ils doivent aussi prendre en charge IPv4 et IPv6 pour la transmission vers les serveurs SMTP cibles ; 
*Pour la transmission vers les serveurs SMTP cibles, une communication chiffrée doit être préférée ; 
*'''DONE''' : Les deux serveurs ne diffèrent que par la méthode de distribution finale (stockage dans un système de fichiers ou envoi à un serveur SMTP cible) ; 
*'''DONE''' : Le serveur SMTP sortant ne doit être lié qu’à l’interface réseau loopback ; 
*'''DONE''' : Le serveur SMTP entrant ne doit être lié qu’à l’interface réseau menant à Internet. 
 
Qq précisions: 
 
*'''DONE''' : Ne doivent être stockés que les courriels à destination d’un utilisateur local ; 
*'''DONE''' : Le format de stockage doit être le format maildir qui est une structure de répertoires particulière utilisée pour sauvegarder des courriers électroniques (le format maildir est très bien décrit sur Wikipédia); 
*'''DONE''' : Chaque message entrant doit être ajouté au dossier de réception Maildir propre à l’utilisateur de destination ; 
*'''DONE''' : Le processus de remise stocke le message dans le sous-répertoire Maildir/tmp puis le déplace dans le sous-répertoire Maildir/new, déplacement doit être fait par la primitive rename ; 
*'''DONE''' : Pour assurer un nom unique aux fichiers de stockage, utilisez la date en seconde (fonction time), le PID et un compteur commun à tous les flux d’exécution (utilisation de sémaphores indispensable). 
 

= '''03/02/2023:''' =
== '''Def of done''' ==
'''Démarrage de la VM:''' 
''ssh pifou@capbreton'' 
''xen list'' pour voir la liste des VM déjà démarrées 
''xen create /etc/xen/dio1.cfg'' 
Pour éteindre la VM : <code>''xen shut dio1''</code> 
 
'''Installation de GCC:''' 
''ssh root@193.48.57.186'' 
''apt update'' 
''apt install gcc'' 
 
'''Environment:''' 
Serveur dans ~/ldelepla 
''scp -r ldelepla/ root@193.48.57.186:~'' 

= '''10/02/2023:''' =
== '''Def of done''' ==
Dans libs/Flux/mutex.c : ajout du free dans la fonction mutex_fin 
Dégager le process qui écoute le port 25 : 
''ss -tpln'' 
Pour trouver le process et 
''service <name> stop'' 
 
On peut maintenant lancer les serveurs SMTP 
 
Dans src/SMTPin/in.c ligne 56, vérification que la connexion est correctement faite et que le message s'est envoyé 
MAILDIR_NEW avec le rename : dans src/SMTPout/out.c ligne 171 
Ajout d'un MX sur la VM: 
''vi /etc/bind/db.raclette'' 
''cd raclette.site.dnssec/'' 
''dnssec-signzone -o raclette.site -k raclette.site-ksk.key ../db.raclette raclette.site-zsk.key'' 
''service named restart'' 
Pour le test SMTP : [https://mxtoolbox.com/diagnostic.aspx] 
 

= '''17/03/2023:''' =
== '''Objectifs''' ==
*Permettre aux deux serveurs de fonctionner ensemble: SMTPin sur l'interface loopback et SMTPout sur l'interface ETH0 
*Essai d'envoi de message(''voir site web pour le test juste au dessus'') 

== '''Def of done''' ==
'''Faire fonctionner les deux serveurs ensemble''' 
''./SMTPin -l'' Pour mettre SMTPin sur ''loopback'' 
 
Dans ''~/ldelepla/src/SMTPout/args.c'' modification pour avoir l'interface ETH0: 
*Ligne 12 dans la fonction ''AfficheSyntaxe'': Ajout fprintf 
*Ligne 24 dans la fonction ''AnalyseArguments'' 
*Ligne 40 à 42 dans la fonction ''AnalyseArguments'': strncpy de l'interface 
Dans ''~/ldelepla/src/SMTPout/args.h'' ajout d'un élément char nommé interface de taille max CONFIG_MAX_INTERFACE 
Dans ''~/ldelepla/libs/Reseau/reseau.c'' dans la fonction initialisation serveur à la ligne 44, si interface!=NULL alors il se met sur la bonne interface 
Dans ''~/ldelepla/src/SMTPout/out.c'' à la ligne 202 *interface = config.interface; 
Dans le Makefile: ''-g'' à la compilation pour avoir la ligne du segfault avec valgrind 
 
'''SMTPin et SMTPout fonctionnent ensemble respectivement sur lo et eth0''' 
 
'''Tests''' 
Effectués avec le site sur la section ci-dessus 
Premiers résulats venant du site: 
 
''Connecting to 193.48.57.186'' 
 
''250 Welcome [143 ms]'' 
''EHLO keeper-us-east-1d.mxtoolbox.com'' 
 
''SendSMTPCommand: Timeout waiting for response after 15 seconds.'' 
 
''LookupServer 16003ms'' 
 
Remarque: Compiler avec ''-j <nom du fichier>'' pour avoir les logs 
En ouvrant le fichier de log, rien n'apparaît... 
 
Essai d'envoi avec nc depuis une machine polytech 
Remarque: compiler avec make debug et les arguments -j log.txt 255 pour remplir le journal 
 
Toujours aucun résultat avec le site web 
Pourtant /r/n présents dans le protocol 
Avec strace, on remarque que le serveur continue de lire alors que le message est fini. 
Pour cela, modification dans ''libs/SMTP/smtp.c'' : Dans la boucle de lecture commencant à la ligne 143, la boucle ne traite pas le cas où ''p->traitement == NULL'', dans ce cas là, on a l'erreur 502 
Ajout dans du renvoi d'erreur <code>"Not Implemented"</code> (code 502) dans ''libs/SMTP/smtp_private.h'' à la ligne 24 
 

= '''22/03/2023:''' =
== '''Objectifs''' ==
*Réaliser les tests et corriger les premiers bugs 

== '''Def of done''' ==
Fonctionne avec netcat: 
Sur une autre machine: 
''nc 193.48.57.186 25'' 
''HELO raclette.site'' 
''MAIL FROM: ldelepla@polyetch-lille.fr 
''RCPT TO: root@raclette.site'' 
''DATA'' 
''SUBJECT: <sujet>'' 
''<corps du mail>'' 
''.'' 
''QUIT'' 
Sur le terminal de la VM on reçoit bien le message 
Mais à chaque commande SMTPout renvoi le code 502 à chaque commande 
Il manque un break dans la modification du code faite à la séance précédente dans ''smtp.c'' à la ligne 171 
 
Essai d'envoi avec la boite mail polytech 
'''ERREUR''' 
Il faut modifier la fonction ''gestion_MAIL'' et gestion_RCPT'' 
L'erreur est lié au format de l'envoi des commandes 
''Modification avant et après les if(statut!=2)'' 
 
En mode debug on voit maintenant la réception du mail sur le terminal
 
Le mail doit normalement être stocké dans /tmp mais il n'y à rien, Il faut permettre le debug avec le journal pour savoir où est l'erreur 
Cela est fait dans ''SMTPout/out.c'' dans la fonction ''gestionCourriel'' 
'''=>'''Ne passe pas le ''P(MUTEX_COMPTEUR):'' 
 

= '''INTER-SEANCE:''' =
== '''Objectifs''' ==
-Faire tourner les deux serveurs en arrière plan, pour voir s'ils SEGFAULT 

== '''Def of done''' ==
Pour éviter que les serveurs soient tuer par le signal SIGHUP en quittant la session à distance je lance le programme de cette manière: 
''nohup ./SMTPout -i eth0 -j log.txt -n 255 &'' 
 
''nohup ./SMTPin -l -j log.txt -n 255 &'' 
Avec la commande: 
''ps -ef | grep SMTP'' 
Même après avoir quitter la VM, on voit que SMTPin et SMTPout tournent toujours 
 

= '''29/03/2023:''' =
== '''Objectifs''' ==
Comprendre et corriger le bug lié au non stockage des mails reçus 

== '''Def of done''' ==
Résultat du test fait en INTER-SEANCE: pas de SEGFAULT 
 
A la compilation, ajouter ''-u carte.txt'' pour indiquer le fichier avec les utilisateurs possible, sous la forme: 
''root : root@raclette'' 
''user1 : user1@raclette'' 
 
Dans ''/tmp'' il faut créer les répertoires des utilisateurs: 
''/tmp/root/tmp'' 
''/tmp/root/new'' 
 
''/tmp/user1/tmp'' 
''/tmp/user1/new'' 
Dans ''out.c'', dans la fonction ''scanCarteUtilisateur'' il manque ''==0'' dans le ''if'' avec le ''strcasecmp'' 
Dans la fonction ''adresseVersUtilisateur'', erreur: ''strlen(destinataire)'' et non ''strlen(adresse)'' 
 
Dans ''smtp.c'' dans la fonction ''gestion_RCPT'', il y avait encore la chaine de char tag liè à la modification de cette fonction durant la séance 22/03 
 
'''Le mail est bien recu et est stocké dans les dossiers associés''' 
 
 
Modification nécessaire dans ''smtp.c'': 
Dans la fonction ''gestion_DATA'' et ''SMTP_gestion'' dans le while ligne 111, toujours en renvoi de ''SUCCESS_DATA_CODE'' 
 
Jusqu'à la prochaine séance je laisse tourner les deux serveurs: 
''nohup ./SMTPout -i eth0 -j log.txt -n 255 -u carte.txt &'' 
 
''nohup ./SMTPin -l -j log.txt -n 255 &'' 
 

= '''05/04/2023:''' =
== '''Objectifs''' ==
-Modif de ''smtp.c'' 
-Commencer à débuger SMTPin 

== '''Def of done''' ==
*Aucun segfault ou crash des deux serveurs 
 
*Pour envoyer un mail: 
nc localhost 25 
 
Modification de ''reseau.c'' dans la fonction ''connexionServeur'': 
while(1){ 
if(p->ai_family==AF_INET6) ipv6=1; 
if(p->ai_family==AF_INET) ipv4=1; 
p=p->ai_next; 
} 
 

= '''31/05/2023: WORKSHOP''' =
== '''Objectifs''' ==
Mutualiser le travail avec Simon, Farid et Jerôme pour avoir un SMTPin et un SMTPout fonctionnel

== '''Def of done''' ==
'''SMTPin:''' 
Les codes dans private_smtp.h ne sont pas correct 
On ajoute du code pour débuger dans smtp.c 
static int retour_generique(FILE *dialogue,int succes,char *erreur,int taille){ 
char ligne[MAX_LIGNE]; 
#ifdef DEVERMINE 
printf("SMTP -> retour generique\n"); 
#endif 
if(fgets(ligne,MAX_LIGNE,dialogue)==NULL) return -1; 
ligne[MAX_LIGNE-1]='\0'; 
int code; 
int statut=sscanf(ligne,"%d",&code); 
#ifdef DEVERMINE 
printf("statut =%d\n", statut); 
printf("succes =%d\n", succes); 
printf("code =%d\n", code); 
#endif 
if(statut==1 && code!=succes){ 
strncpy(erreur,ligne,taille-1); 
#ifdef DEVERMINE 
printf("retour_generique ERROR\n"); 
#endif 
} 
return (statut==1 && code==succes)?0:-1; 
} 
En lancant SMTPin avec strace on retrouve les codes attendus à modifier dans private_smtp.h 
nc localhost 25 
HELO polytech-lille.net 
MAIL FROM: root@raclette.site 
RCPT TO: ldelepla@polytech-lille.net 
DATA 
SUBJECT: TEST 
TEST 
. 
QUIT 
Le mail est bien reçu sur ma boîte polytech 
 
'''SMTPout:''' 
Le serveur ne stocke plus les mails 
 

= '''07/06/2023:''' =
== '''Objectifs''' ==
*Verifier les deux serveurs 
*Tests de charge 
*Tests de charge avec erreurs aléatoires 

== '''Def of done''' ==
SMTPout restock les mails reçus 
 
Soit le fichier test suivant:
HELO TEST
MAIL FROM: root@raclette.site
RCPT TO: ldelepla@polyetch-lille.net
DATA
SUBJECT: TEST

BONJOUR
.
QUIT

nc -C -q0 -i1 localhost 25 < test 

'''Le mail est bien reçu sur ma boîte mail polytech''' 
 
Pour automatiser: 
i=0 ; while [ $i -lt 10 ] ; do nc -C -q0 -i1 localhost 25 < test & i='expr $i + 1'; done 
'''Fonctionne en envoyant 100 mails''' 
 
'''Test pour le SMTPout:''' 
Même méthode mais sur une autre machine 
Pour automatiser: 
#!/bin/bash 
i=0 
while [ $i -lt $2 ] 
do 
nc -C -q0 -i1 $1 25 < $3 & 
i=`expr $i + 1` 
done 
./test.sh <adresse> <nb_envoi> <fichier> 

= '''14/06/2023:''' =
== '''Objectifs''' ==
*Test de charge pour l'envoi 
*Test de charge avec erreurs aléatoires 
*Recherche des leaks avec valgrind 

== '''Def of done''' ==
Lors de l'envoi de mail (SMTPin) j'ai remarqué qu'il faut obligatoirement les chevrons. Il faut modifier la fonction ''*adresseVersUtilisateur''. Maintenant le test de charge fonctionne correctement. 

'''Test de charge avec erreurs aléatoires:''' 
Pour créer des erreurs aléatoires j'ai écris en bash: 
<pre>
#!/bin/bash 
i=0 
while [ $i -lt $2 ] 
do 
nombre=$RANDOM 
nombre=`expr $nombre \% 5` 
case $nombre in 
1) 
nc -C -q0 -i1 $1 25 < $4 & 
;; 
*) 
nc -C -q0 -i1 $1 25 < $3 & 
;; 
esac 
i=`expr $i + 1` 
done 
</pre>
Avec comme premier argument l'adresse ip, le suivant le nombre de messages a envoyer, le suivant un fichier test.txt contenant aucune erreur, et un autre argument contenant des erreurs. Ainsi dans ce cas, il y a une chance sur cinq de tomber sur une erreur. 
 
Le serveur tient toujours la charge avec de nombreux mails contenant 1 fois sur 5 des erreurs. 
 
'''Fuites mémoires''' 
Avec: 
<code>valgrind --leak-check=full --show-leak-kinds=all -s ./SMTPout -i eth0 -u carte.txt > /tmp/log</code> 
On vérifie les fuites mémoires. On constate que 30ko sont définitivement perdues. 
Après vérification il y a une erreur dans le malloc de la fonction adresseVersUtilisateur de out.c il faut ajouter un +1 dans le malloc dans le cas ou il n'y a aucun destinataire. 
Aussi, on remarque qu'il y a autant de blocks perdues que de messages envoyés, en fait, il n'y a pas de <code>free(donnees)</code> dans la fonction SMTP_gestion.

Ldelepla : /* Def of done */

https://rex.plil.fr/Enseignement/Systeme/Tutorat.IMA2a4.Messagerie/ 
 
[[file:2022-PSR-archive.zip]]
 
= '''PROGRESS''' =
-'''DONE''' : Pour prévenir les failles, les deux serveurs SMTP seront écrits à partir de zéro en respectant la RFC 5321 mais avec des simplifications ; 
-'''DONE''' : Les serveurs doivent être codés en langage C en utilisant la bibliothèque des sockets ; 
-'''DONE''' : Les commandes VRFY et EXPN qui permettent au client de vérifier si une messagerie est disponible pour la transmission, ne seront pas implémentées ; 
-'''DONE''' : Le routage des messages ne doit pas être implémenté et la gestion des messages non transmis est optionnel ; 
-Un système doit être réalisé permettant au serveur SMTP sortant de mettre en file d’attente les messages non remis à destination pour cause d’erreur transitoire du serveur SMTP cible ; 
-Les communications peuvent ne pas être chiffrées, les communications non chiffrés sont reçues sur le port 25 ; 
-Les communications peuvent être chiffrées par TLS, les communication chiffrées peuvent être négociées directement sur le port 465 ; 
-Il doit être possible de basculer sur une communication chiffrée à partir du port 25 en utilisant les commandes EHLO et STARTTLS ; 
-Chaque connexion doit être gérée via un processus léger (Thread) et chaque commande par une fonction à laquelle est passée une structure représentant l’état du dialogue entre le client et le serveur ; 
-'''DONE''' : Les serveurs SMTP doivent gérer les enregistrements MX permettant d’associer un nom de domaine à un serveur de messagerie, le recours aux enregistrements AAAA et A est à utiliser en cas d’absence de MX ; 
-Les serveurs SMTP doivent être contactables en IPv4 et en IPv6, ils doivent aussi prendre en charge IPv4 et IPv6 pour la transmission vers les serveurs SMTP cibles ; 
-Pour la transmission vers les serveurs SMTP cibles, une communication chiffrée doit être préférée ; 
-'''DONE''' : Les deux serveurs ne diffèrent que par la méthode de distribution finale (stockage dans un système de fichiers ou envoi à un serveur SMTP cible) ; 
-'''DONE''' : Le serveur SMTP sortant ne doit être lié qu’à l’interface réseau loopback ; 
-'''DONE''' : Le serveur SMTP entrant ne doit être lié qu’à l’interface réseau menant à Internet. 
 
Qq précisions: 
 
-'''DONE''' : Ne doivent être stockés que les courriels à destination d’un utilisateur local ; 
-'''DONE''' : Le format de stockage doit être le format maildir qui est une structure de répertoires particulière utilisée pour sauvegarder des courriers électroniques (le format maildir est très bien décrit sur Wikipédia); 
-'''DONE''' : Chaque message entrant doit être ajouté au dossier de réception Maildir propre à l’utilisateur de destination ; 
-'''DONE''' : Le processus de remise stocke le message dans le sous-répertoire Maildir/tmp puis le déplace dans le sous-répertoire Maildir/new, déplacement doit être fait par la primitive rename ; 
-'''DONE''' : Pour assurer un nom unique aux fichiers de stockage, utilisez la date en seconde (fonction time), le PID et un compteur commun à tous les flux d’exécution (utilisation de sémaphores indispensable). 
 

= '''03/02/2023:''' =
== '''Def of done''' ==
'''Démarrage de la VM:''' 
''ssh pifou@capbreton'' 
''xen list'' pour voir la liste des VM déjà démarrées 
''xen create /etc/xen/dio1.cfg'' 
Pour éteindre la VM : ''xen shut dio1'' 
 
'''Installation de GCC:''' 
''ssh root@193.48.57.186'' 
''apt update'' 
''apt install gcc'' 
 
'''Environment:''' 
Serveur dans ~/ldelepla 
''scp -r ldelepla/ root@193.48.57.186:~'' 

= '''10/02/2023:''' =
== '''Def of done''' ==
Dans libs/Flux/mutex.c : ajout du free dans la fonction mutex_fin 
Dégager le process qui écoute le port 25 : 
''ss -tpln'' 
Pour trouver le process et 
''service <name> stop'' 
 
On peut maintenant lancer les serveurs SMTP 
 
Dans src/SMTPin/in.c ligne 56, vérification que la connexion est correctement faite et que le message s'est envoyé 
MAILDIR_NEW avec le rename : dans src/SMTPout/out.c ligne 171 
Ajout d'un MX sur la VM: 
''vi /etc/bind/db.raclette'' 
''cd raclette.site.dnssec/'' 
''dnssec-signzone -o raclette.site -k raclette.site-ksk.key ../db.raclette raclette.site-zsk.key'' 
''service named restart'' 
Pour le test SMTP : [https://mxtoolbox.com/diagnostic.aspx] 
 

= '''17/03/2023:''' =
== '''Objectifs''' ==
-Permettre aux deux serveurs de fonctionner ensemble: SMTPin sur l'interface loopback et SMTPout sur l'interface ETH0 
-Essai d'envoi de message(''voir site web pour le test juste au dessus'') 

== '''Def of done''' ==
'''Faire fonctionner les deux serveurs ensemble''' 
''./SMTPin -l'' Pour mettre SMTPin sur ''loopback'' 
 
Dans ''~/ldelepla/src/SMTPout/args.c'' modification pour avoir l'interface ETH0: 
-Ligne 12 dans la fonction ''AfficheSyntaxe'': Ajout fprintf 
-Ligne 24 dans la fonction ''AnalyseArguments'' 
-Ligne 40 à 42 dans la fonction ''AnalyseArguments'': strncpy de l'interface 
Dans ''~/ldelepla/src/SMTPout/args.h'' ajout d'un élément char nommé interface de taille max CONFIG_MAX_INTERFACE 
Dans ''~/ldelepla/libs/Reseau/reseau.c'' dans la fonction initialisation serveur à la ligne 44, si interface!=NULL alors il se met sur la bonne interface 
Dans ''~/ldelepla/src/SMTPout/out.c'' à la ligne 202 *interface = config.interface; 
Dans le Makefile: ''-g'' à la compilation pour avoir la ligne du segfault avec valgrind 
 
'''SMTPin et SMTPout fonctionnent ensemble respectivement sur lo et eth0''' 
 
'''Tests''' 
Effectués avec le site sur la section ci-dessus 
Premiers résulats venant du site: 
 
''Connecting to 193.48.57.186'' 
 
''250 Welcome [143 ms]'' 
''EHLO keeper-us-east-1d.mxtoolbox.com'' 
 
''SendSMTPCommand: Timeout waiting for response after 15 seconds.'' 
 
''LookupServer 16003ms'' 
 
Remarque: Compiler avec ''-j <nom du fichier>'' pour avoir les logs 
En ouvrant le fichier de log, rien n'apparaît... 
 
Essai d'envoi avec nc depuis une machine polytech 
Remarque: compiler avec make debug et les arguments -j log.txt 255 pour remplir le journal 
 
Toujours aucun résultat avec le site web 
Pourtant /r/n présents dans le protocol 
Avec strace, on remarque que le serveur continue de lire alors que le message est fini. 
Pour cela, modification dans ''libs/SMTP/smtp.c'' : Dans la boucle de lecture commencant à la ligne 143, la boucle ne traite pas le cas où ''p->traitement == NULL'', dans ce cas là, on a l'erreur 502 
Ajout dans du renvoi d'erreur "Not Implemented" (code 502) dans ''libs/SMTP/smtp_private.h'' à la ligne 24 
 

= '''22/03/2023:''' =
== '''Objectifs''' ==
-Réaliser les tests et corriger les premiers bugs 

== '''Def of done''' ==
Fonctionne avec netcat: 
Sur une autre machine: 
''nc 193.48.57.186 25'' 
''HELO raclette.site'' 
''MAIL FROM: ldelepla@polyetch-lille.fr 
''RCPT TO: root@raclette.site'' 
''DATA'' 
''SUBJECT: <sujet>'' 
''<corps du mail>'' 
''.'' 
''QUIT'' 
Sur le terminal de la VM on reçoit bien le message 
Mais à chaque commande SMTPout renvoi le code 502 à chaque commande 
Il manque un break dans la modification du code faite à la séance précédente dans ''smtp.c'' à la ligne 171 
 
Essai d'envoi avec la boite mail polytech 
'''ERREUR''' 
Il faut modifier la fonction ''gestion_MAIL'' et gestion_RCPT'' 
L'erreur est lié au format de l'envoi des commandes 
''Modification avant et après les if(statut!=2)'' 
 
En mode debug on voit maintenant la réception du mail sur le terminal
 
Le mail doit normalement être stocké dans /tmp mais il n'y à rien, Il faut permettre le debug avec le journal pour savoir où est l'erreur 
Cela est fait dans ''SMTPout/out.c'' dans la fonction ''gestionCourriel'' 
'''=>'''Ne passe pas le ''P(MUTEX_COMPTEUR):'' 
 

= '''INTER-SEANCE:''' =
== '''Objectifs''' ==
-Faire tourner les deux serveurs en arrière plan, pour voir s'ils SEGFAULT 

== '''Def of done''' ==
Pour éviter que les serveurs soient tuer par le signal SIGHUP en quittant la session à distance je lance le programme de cette manière: 
''nohup ./SMTPout -i eth0 -j log.txt -n 255 &'' 
 
''nohup ./SMTPin -l -j log.txt -n 255 &'' 
Avec la commande: 
''ps -ef | grep SMTP'' 
Même après avoir quitter la VM, on voit que SMTPin et SMTPout tournent toujours 
 

= '''29/03/2023:''' =
== '''Objectifs''' ==
Comprendre et corriger le bug lié au non stockage des mails reçus 

== '''Def of done''' ==
Résultat du test fait en INTER-SEANCE: pas de SEGFAULT 
 
A la compilation, ajouter ''-u carte.txt'' pour indiquer le fichier avec les utilisateurs possible, sous la forme: 
''root : root@raclette'' 
''user1 : user1@raclette'' 
 
Dans ''/tmp'' il faut créer les répertoires des utilisateurs: 
''/tmp/root/tmp'' 
''/tmp/root/new'' 
 
''/tmp/user1/tmp'' 
''/tmp/user1/new'' 
Dans ''out.c'', dans la fonction ''scanCarteUtilisateur'' il manque ''==0'' dans le ''if'' avec le ''strcasecmp'' 
Dans la fonction ''adresseVersUtilisateur'', erreur: ''strlen(destinataire)'' et non ''strlen(adresse)'' 
 
Dans ''smtp.c'' dans la fonction ''gestion_RCPT'', il y avait encore la chaine de char tag liè à la modification de cette fonction durant la séance 22/03 
 
'''Le mail est bien recu et est stocké dans les dossiers associés''' 
 
 
Modification nécessaire dans ''smtp.c'': 
Dans la fonction ''gestion_DATA'' et ''SMTP_gestion'' dans le while ligne 111, toujours en renvoi de ''SUCCESS_DATA_CODE'' 
 
Jusqu'à la prochaine séance je laisse tourner les deux serveurs: 
''nohup ./SMTPout -i eth0 -j log.txt -n 255 -u carte.txt &'' 
 
''nohup ./SMTPin -l -j log.txt -n 255 &'' 
 

= '''05/04/2023:''' =
== '''Objectifs''' ==
-Modif de ''smtp.c'' 
-Commencer à débuger SMTPin 

== '''Def of done''' ==
-Aucun segfault ou crash des deux serveurs 
 
-Pour envoyer un mail: 
nc localhost 25 
 
Modification de ''reseau.c'' dans la fonction ''connexionServeur'': 
while(1){ 
if(p->ai_family==AF_INET6) ipv6=1; 
if(p->ai_family==AF_INET) ipv4=1; 
p=p->ai_next; 
} 
 

= '''31/05/2023: WORKSHOP''' =
== '''Objectifs''' ==
Mutualiser le travail avec Simon, Farid et Jerôme pour avoir un SMTPin et un SMTPout fonctionnel

== '''Def of done''' ==
'''SMTPin:''' 
Les codes dans private_smtp.h ne sont pas correct 
On ajoute du code pour débuger dans smtp.c 
static int retour_generique(FILE *dialogue,int succes,char *erreur,int taille){ 
char ligne[MAX_LIGNE]; 
#ifdef DEVERMINE 
printf("SMTP -> retour generique\n"); 
#endif 
if(fgets(ligne,MAX_LIGNE,dialogue)==NULL) return -1; 
ligne[MAX_LIGNE-1]='\0'; 
int code; 
int statut=sscanf(ligne,"%d",&code); 
#ifdef DEVERMINE 
printf("statut =%d\n", statut); 
printf("succes =%d\n", succes); 
printf("code =%d\n", code); 
#endif 
if(statut==1 && code!=succes){ 
strncpy(erreur,ligne,taille-1); 
#ifdef DEVERMINE 
printf("retour_generique ERROR\n"); 
#endif 
} 
return (statut==1 && code==succes)?0:-1; 
} 
En lancant SMTPin avec strace on retrouve les codes attendus à modifier dans private_smtp.h 
nc localhost 25 
HELO polytech-lille.net 
MAIL FROM: root@raclette.site 
RCPT TO: ldelepla@polytech-lille.net 
DATA 
SUBJECT: TEST 
TEST 
. 
QUIT 
Le mail est bien reçu sur ma boîte polytech 
 
'''SMTPout:''' 
Le serveur ne stocke plus les mails 
 

= '''07/06/2023:''' =
== '''Objectifs''' ==
-Verifier les deux serveurs 
-Tests de charge 
-Tests de charge avec erreurs aléatoires 

== '''Def of done''' ==
SMTPout restock les mails reçus 
 
Soit le fichier test suivant:
HELO TEST 
MAIL FROM: root@raclette.site 
RCPT TO: ldelepla@polyetch-lille.net 
DATA 
SUBJECT: TEST 
 
BONJOUR 
. 
QUIT 
 
nc -C -q0 -i1 localhost 25 < test 
 
'''Le mail est bien reçu sur ma boîte mail polytech''' 
 
Pour automatiser: 
i=0 ; while [ $i -lt 10 ] ; do nc -C -q0 -i1 localhost 25 < test & i='expr $i + 1'; done 
'''Fonctionne en envoyant 100 mails''' 
 
'''Test pour le SMTPout:''' 
Même méthode mais sur une autre machine 
Pour automatiser: 
#!/bin/bash 
 
i=0 
 
while [ $i -lt $2 ] 
do 
nc -C -q0 -i1 $1 25 < $3 & 
i=`expr $i + 1` 
done 
 
./test.sh <adresse> <nb_envoi> <fichier> 
'''Le SMTPout reçoit les mails mais ne crée pas les fichier dans /tmp'''

Fichier:2022-PSR-archive.zip

2023-06-14T10:36:26Z

Ldelepla : Ldelepla a téléversé une nouvelle version de Fichier:2022-PSR-archive.zip

Fichier:2022-PSR-archive.zip

2023-06-14T10:11:02Z

Ldelepla : Ldelepla a téléversé une nouvelle version de Fichier:2022-PSR-archive.zip

Fichier:2022-PSR-archive.zip

2023-06-14T10:10:43Z

Ldelepla : Ldelepla a téléversé une nouvelle version de Fichier:2022-PSR-archive.zip

PSR SE2a4 2022/2023 G7

2023-06-07T15:01:14Z

Ldelepla :

https://rex.plil.fr/Enseignement/Systeme/Tutorat.IMA2a4.Messagerie/ 
 
[[file:2022-PSR-archive.zip]]
 
= '''PROGRESS''' =
-'''DONE''' : Pour prévenir les failles, les deux serveurs SMTP seront écrits à partir de zéro en respectant la RFC 5321 mais avec des simplifications ; 
-'''DONE''' : Les serveurs doivent être codés en langage C en utilisant la bibliothèque des sockets ; 
-'''DONE''' : Les commandes VRFY et EXPN qui permettent au client de vérifier si une messagerie est disponible pour la transmission, ne seront pas implémentées ; 
-'''DONE''' : Le routage des messages ne doit pas être implémenté et la gestion des messages non transmis est optionnel ; 
-Un système doit être réalisé permettant au serveur SMTP sortant de mettre en file d’attente les messages non remis à destination pour cause d’erreur transitoire du serveur SMTP cible ; 
-Les communications peuvent ne pas être chiffrées, les communications non chiffrés sont reçues sur le port 25 ; 
-Les communications peuvent être chiffrées par TLS, les communication chiffrées peuvent être négociées directement sur le port 465 ; 
-Il doit être possible de basculer sur une communication chiffrée à partir du port 25 en utilisant les commandes EHLO et STARTTLS ; 
-Chaque connexion doit être gérée via un processus léger (Thread) et chaque commande par une fonction à laquelle est passée une structure représentant l’état du dialogue entre le client et le serveur ; 
-'''DONE''' : Les serveurs SMTP doivent gérer les enregistrements MX permettant d’associer un nom de domaine à un serveur de messagerie, le recours aux enregistrements AAAA et A est à utiliser en cas d’absence de MX ; 
-Les serveurs SMTP doivent être contactables en IPv4 et en IPv6, ils doivent aussi prendre en charge IPv4 et IPv6 pour la transmission vers les serveurs SMTP cibles ; 
-Pour la transmission vers les serveurs SMTP cibles, une communication chiffrée doit être préférée ; 
-'''DONE''' : Les deux serveurs ne diffèrent que par la méthode de distribution finale (stockage dans un système de fichiers ou envoi à un serveur SMTP cible) ; 
-'''DONE''' : Le serveur SMTP sortant ne doit être lié qu’à l’interface réseau loopback ; 
-'''DONE''' : Le serveur SMTP entrant ne doit être lié qu’à l’interface réseau menant à Internet. 
 
Qq précisions: 
 
-'''DONE''' : Ne doivent être stockés que les courriels à destination d’un utilisateur local ; 
-'''DONE''' : Le format de stockage doit être le format maildir qui est une structure de répertoires particulière utilisée pour sauvegarder des courriers électroniques (le format maildir est très bien décrit sur Wikipédia); 
-'''DONE''' : Chaque message entrant doit être ajouté au dossier de réception Maildir propre à l’utilisateur de destination ; 
-'''DONE''' : Le processus de remise stocke le message dans le sous-répertoire Maildir/tmp puis le déplace dans le sous-répertoire Maildir/new, déplacement doit être fait par la primitive rename ; 
-'''DONE''' : Pour assurer un nom unique aux fichiers de stockage, utilisez la date en seconde (fonction time), le PID et un compteur commun à tous les flux d’exécution (utilisation de sémaphores indispensable). 
 

= '''03/02/2023:''' =
== '''Def of done''' ==
'''Démarrage de la VM:''' 
''ssh pifou@capbreton'' 
''xen list'' pour voir la liste des VM déjà démarrées 
''xen create /etc/xen/dio1.cfg'' 
Pour éteindre la VM : ''xen shut dio1'' 
 
'''Installation de GCC:''' 
''ssh root@193.48.57.186'' 
''apt update'' 
''apt install gcc'' 
 
'''Environment:''' 
Serveur dans ~/ldelepla 
''scp -r ldelepla/ root@193.48.57.186:~'' 

= '''10/02/2023:''' =
== '''Def of done''' ==
Dans libs/Flux/mutex.c : ajout du free dans la fonction mutex_fin 
Dégager le process qui écoute le port 25 : 
''ss -tpln'' 
Pour trouver le process et 
''service <name> stop'' 
 
On peut maintenant lancer les serveurs SMTP 
 
Dans src/SMTPin/in.c ligne 56, vérification que la connexion est correctement faite et que le message s'est envoyé 
MAILDIR_NEW avec le rename : dans src/SMTPout/out.c ligne 171 
Ajout d'un MX sur la VM: 
''vi /etc/bind/db.raclette'' 
''cd raclette.site.dnssec/'' 
''dnssec-signzone -o raclette.site -k raclette.site-ksk.key ../db.raclette raclette.site-zsk.key'' 
''service named restart'' 
Pour le test SMTP : [https://mxtoolbox.com/diagnostic.aspx] 
 

= '''17/03/2023:''' =
== '''Objectifs''' ==
-Permettre aux deux serveurs de fonctionner ensemble: SMTPin sur l'interface loopback et SMTPout sur l'interface ETH0 
-Essai d'envoi de message(''voir site web pour le test juste au dessus'') 

== '''Def of done''' ==
'''Faire fonctionner les deux serveurs ensemble''' 
''./SMTPin -l'' Pour mettre SMTPin sur ''loopback'' 
 
Dans ''~/ldelepla/src/SMTPout/args.c'' modification pour avoir l'interface ETH0: 
-Ligne 12 dans la fonction ''AfficheSyntaxe'': Ajout fprintf 
-Ligne 24 dans la fonction ''AnalyseArguments'' 
-Ligne 40 à 42 dans la fonction ''AnalyseArguments'': strncpy de l'interface 
Dans ''~/ldelepla/src/SMTPout/args.h'' ajout d'un élément char nommé interface de taille max CONFIG_MAX_INTERFACE 
Dans ''~/ldelepla/libs/Reseau/reseau.c'' dans la fonction initialisation serveur à la ligne 44, si interface!=NULL alors il se met sur la bonne interface 
Dans ''~/ldelepla/src/SMTPout/out.c'' à la ligne 202 *interface = config.interface; 
Dans le Makefile: ''-g'' à la compilation pour avoir la ligne du segfault avec valgrind 
 
'''SMTPin et SMTPout fonctionnent ensemble respectivement sur lo et eth0''' 
 
'''Tests''' 
Effectués avec le site sur la section ci-dessus 
Premiers résulats venant du site: 
 
''Connecting to 193.48.57.186'' 
 
''250 Welcome [143 ms]'' 
''EHLO keeper-us-east-1d.mxtoolbox.com'' 
 
''SendSMTPCommand: Timeout waiting for response after 15 seconds.'' 
 
''LookupServer 16003ms'' 
 
Remarque: Compiler avec ''-j <nom du fichier>'' pour avoir les logs 
En ouvrant le fichier de log, rien n'apparaît... 
 
Essai d'envoi avec nc depuis une machine polytech 
Remarque: compiler avec make debug et les arguments -j log.txt 255 pour remplir le journal 
 
Toujours aucun résultat avec le site web 
Pourtant /r/n présents dans le protocol 
Avec strace, on remarque que le serveur continue de lire alors que le message est fini. 
Pour cela, modification dans ''libs/SMTP/smtp.c'' : Dans la boucle de lecture commencant à la ligne 143, la boucle ne traite pas le cas où ''p->traitement == NULL'', dans ce cas là, on a l'erreur 502 
Ajout dans du renvoi d'erreur "Not Implemented" (code 502) dans ''libs/SMTP/smtp_private.h'' à la ligne 24 
 

= '''22/03/2023:''' =
== '''Objectifs''' ==
-Réaliser les tests et corriger les premiers bugs 

== '''Def of done''' ==
Fonctionne avec netcat: 
Sur une autre machine: 
''nc 193.48.57.186 25'' 
''HELO raclette.site'' 
''MAIL FROM: ldelepla@polyetch-lille.fr 
''RCPT TO: root@raclette.site'' 
''DATA'' 
''SUBJECT: <sujet>'' 
''<corps du mail>'' 
''.'' 
''QUIT'' 
Sur le terminal de la VM on reçoit bien le message 
Mais à chaque commande SMTPout renvoi le code 502 à chaque commande 
Il manque un break dans la modification du code faite à la séance précédente dans ''smtp.c'' à la ligne 171 
 
Essai d'envoi avec la boite mail polytech 
'''ERREUR''' 
Il faut modifier la fonction ''gestion_MAIL'' et gestion_RCPT'' 
L'erreur est lié au format de l'envoi des commandes 
''Modification avant et après les if(statut!=2)'' 
 
En mode debug on voit maintenant la réception du mail sur le terminal
 
Le mail doit normalement être stocké dans /tmp mais il n'y à rien, Il faut permettre le debug avec le journal pour savoir où est l'erreur 
Cela est fait dans ''SMTPout/out.c'' dans la fonction ''gestionCourriel'' 
'''=>'''Ne passe pas le ''P(MUTEX_COMPTEUR):'' 
 

= '''INTER-SEANCE:''' =
== '''Objectifs''' ==
-Faire tourner les deux serveurs en arrière plan, pour voir s'ils SEGFAULT 

== '''Def of done''' ==
Pour éviter que les serveurs soient tuer par le signal SIGHUP en quittant la session à distance je lance le programme de cette manière: 
''nohup ./SMTPout -i eth0 -j log.txt -n 255 &'' 
 
''nohup ./SMTPin -l -j log.txt -n 255 &'' 
Avec la commande: 
''ps -ef | grep SMTP'' 
Même après avoir quitter la VM, on voit que SMTPin et SMTPout tournent toujours 
 

= '''29/03/2023:''' =
== '''Objectifs''' ==
Comprendre et corriger le bug lié au non stockage des mails reçus 

== '''Def of done''' ==
Résultat du test fait en INTER-SEANCE: pas de SEGFAULT 
 
A la compilation, ajouter ''-u carte.txt'' pour indiquer le fichier avec les utilisateurs possible, sous la forme: 
''root : root@raclette'' 
''user1 : user1@raclette'' 
 
Dans ''/tmp'' il faut créer les répertoires des utilisateurs: 
''/tmp/root/tmp'' 
 
''/tmp/user1/tmp'' 
Dans ''out.c'', dans la fonction ''scanCarteUtilisateur'' il manque ''==0'' dans le ''if'' avec le ''strcasecmp'' 
Dans la fonction ''adresseVersUtilisateur'', erreur: ''strlen(destinataire)'' et non ''strlen(adresse)'' 
 
Dans ''smtp.c'' dans la fonction ''gestion_RCPT'', il y avait encore la chaine de char tag liè à la modification de cette fonction durant la séance 22/03 
 
'''Le mail est bien recu et est stocké dans les dossiers associés''' 
 
 
Modification nécessaire dans ''smtp.c'': 
Dans la fonction ''gestion_DATA'' et ''SMTP_gestion'' dans le while ligne 111, toujours en renvoi de ''SUCCESS_DATA_CODE'' 
 
Jusqu'à la prochaine séance je laisse tourner les deux serveurs: 
''nohup ./SMTPout -i eth0 -j log.txt -n 255 -u carte.txt &'' 
 
''nohup ./SMTPin -l -j log.txt -n 255 &'' 
 

= '''05/04/2023:''' =
== '''Objectifs''' ==
-Modif de ''smtp.c'' 
-Commencer à débuger SMTPin 

== '''Def of done''' ==
-Aucun segfault ou crash des deux serveurs 
 
-Pour envoyer un mail: 
nc localhost 25 
 
Modification de ''reseau.c'' dans la fonction ''connexionServeur'': 
while(1){ 
if(p->ai_family==AF_INET6) ipv6=1; 
if(p->ai_family==AF_INET) ipv4=1; 
p=p->ai_next; 
} 
 

= '''31/05/2023: WORKSHOP''' =
== '''Objectifs''' ==
Mutualiser le travail avec Simon, Farid et Jerôme pour avoir un SMTPin et un SMTPout fonctionnel

== '''Def of done''' ==
'''SMTPin:''' 
Les codes dans private_smtp.h ne sont pas correct 
On ajoute du code pour débuger dans smtp.c 
static int retour_generique(FILE *dialogue,int succes,char *erreur,int taille){ 
char ligne[MAX_LIGNE]; 
#ifdef DEVERMINE 
printf("SMTP -> retour generique\n"); 
#endif 
if(fgets(ligne,MAX_LIGNE,dialogue)==NULL) return -1; 
ligne[MAX_LIGNE-1]='\0'; 
int code; 
int statut=sscanf(ligne,"%d",&code); 
#ifdef DEVERMINE 
printf("statut =%d\n", statut); 
printf("succes =%d\n", succes); 
printf("code =%d\n", code); 
#endif 
if(statut==1 && code!=succes){ 
strncpy(erreur,ligne,taille-1); 
#ifdef DEVERMINE 
printf("retour_generique ERROR\n"); 
#endif 
} 
return (statut==1 && code==succes)?0:-1; 
} 
En lancant SMTPin avec strace on retrouve les codes attendus à modifier dans private_smtp.h 
nc localhost 25 
HELO polytech-lille.net 
MAIL FROM: root@raclette.site 
RCPT TO: ldelepla@polytech-lille.net 
DATA 
SUBJECT: TEST 
TEST 
. 
QUIT 
Le mail est bien reçu sur ma boîte polytech 
 
'''SMTPout:''' 
Le serveur ne stocke plus les mails 
 

= '''07/06/2023:''' =
== '''Objectifs''' ==
-Verifier les deux serveurs 
-Tests de charge 
-Tests de charge avec erreurs aléatoires 

== '''Def of done''' ==
SMTPout restock les mails reçus 
 
Soit le fichier test suivant:
HELO TEST 
MAIL FROM: root@raclette.site 
RCPT TO: ldelepla@polyetch-lille.net 
DATA 
SUBJECT: TEST 
 
BONJOUR 
. 
QUIT 
 
nc -C -q0 -i1 localhost 25 < test 
 
'''Le mail est bien reçu sur ma boîte mail polytech''' 
 
Pour automatiser: 
i=0 ; while [ $i -lt 10 ] ; do nc -C -q0 -i1 localhost 25 < test & i='expr $i + 1'; done 
'''Fonctionne en envoyant 100 mails''' 
 
'''Test pour le SMTPout:''' 
Même méthode mais sur une autre machine 
Pour automatiser: 
#!/bin/bash 
 
i=0 
 
while [ $i -lt $2 ] 
do 
nc -C -q0 -i1 $1 25 < $3 & 
i=`expr $i + 1` 
done 
 
./test.sh <adresse> <nb_envoi> <fichier> 
'''Le SMTPout reçoit les mails mais ne crée pas les fichier dans /tmp'''

2023-06-07T12:49:41Z

Ldelepla : /* 07/06/2023: */

= '''PROGRESS''' =
-'''DONE''' : Pour prévenir les failles, les deux serveurs SMTP seront écrits à partir de zéro en respectant la RFC 5321 mais avec des simplifications ; 
-'''DONE''' : Les serveurs doivent être codés en langage C en utilisant la bibliothèque des sockets ; 
-'''DONE''' : Les commandes VRFY et EXPN qui permettent au client de vérifier si une messagerie est disponible pour la transmission, ne seront pas implémentées ; 
-'''DONE''' : Le routage des messages ne doit pas être implémenté et la gestion des messages non transmis est optionnel ; 
-Un système doit être réalisé permettant au serveur SMTP sortant de mettre en file d’attente les messages non remis à destination pour cause d’erreur transitoire du serveur SMTP cible ; 
-Les communications peuvent ne pas être chiffrées, les communications non chiffrés sont reçues sur le port 25 ; 
-Les communications peuvent être chiffrées par TLS, les communication chiffrées peuvent être négociées directement sur le port 465 ; 
-Il doit être possible de basculer sur une communication chiffrée à partir du port 25 en utilisant les commandes EHLO et STARTTLS ; 
-Chaque connexion doit être gérée via un processus léger (Thread) et chaque commande par une fonction à laquelle est passée une structure représentant l’état du dialogue entre le client et le serveur ; 
-'''DONE''' : Les serveurs SMTP doivent gérer les enregistrements MX permettant d’associer un nom de domaine à un serveur de messagerie, le recours aux enregistrements AAAA et A est à utiliser en cas d’absence de MX ; 
-Les serveurs SMTP doivent être contactables en IPv4 et en IPv6, ils doivent aussi prendre en charge IPv4 et IPv6 pour la transmission vers les serveurs SMTP cibles ; 
-Pour la transmission vers les serveurs SMTP cibles, une communication chiffrée doit être préférée ; 
-'''DONE''' : Les deux serveurs ne diffèrent que par la méthode de distribution finale (stockage dans un système de fichiers ou envoi à un serveur SMTP cible) ; 
-'''DONE''' : Le serveur SMTP sortant ne doit être lié qu’à l’interface réseau loopback ; 
-'''DONE''' : Le serveur SMTP entrant ne doit être lié qu’à l’interface réseau menant à Internet. 
 
Qq précisions: 
 
-'''DONE''' : Ne doivent être stockés que les courriels à destination d’un utilisateur local ; 
-'''DONE''' : Le format de stockage doit être le format maildir qui est une structure de répertoires particulière utilisée pour sauvegarder des courriers électroniques (le format maildir est très bien décrit sur Wikipédia); 
-'''DONE''' : Chaque message entrant doit être ajouté au dossier de réception Maildir propre à l’utilisateur de destination ; 
-'''DONE''' : Le processus de remise stocke le message dans le sous-répertoire Maildir/tmp puis le déplace dans le sous-répertoire Maildir/new, déplacement doit être fait par la primitive rename ; 
-'''DONE''' : Pour assurer un nom unique aux fichiers de stockage, utilisez la date en seconde (fonction time), le PID et un compteur commun à tous les flux d’exécution (utilisation de sémaphores indispensable). 
 

= '''03/02/2023:''' =
== '''Def of done''' ==
'''Démarrage de la VM:''' 
''ssh pifou@capbreton'' 
''xen list'' pour voir la liste des VM déjà démarrées 
''xen create /etc/xen/dio1.cfg'' 
Pour éteindre la VM : ''xen shut dio1'' 
 
'''Installation de GCC:''' 
''ssh root@193.48.57.186'' 
''apt update'' 
''apt install gcc'' 
 
'''Environment:''' 
Serveur dans ~/ldelepla 
''scp -r ldelepla/ root@193.48.57.186:~'' 

= '''10/02/2023:''' =
== '''Def of done''' ==
Dans libs/Flux/mutex.c : ajout du free dans la fonction mutex_fin 
Dégager le process qui écoute le port 25 : 
''ss -tpln'' 
Pour trouver le process et 
''service <name> stop'' 
 
On peut maintenant lancer les serveurs SMTP 
 
Dans src/SMTPin/in.c ligne 56, vérification que la connexion est correctement faite et que le message s'est envoyé 
MAILDIR_NEW avec le rename : dans src/SMTPout/out.c ligne 171 
Ajout d'un MX sur la VM: 
''vi /etc/bind/db.raclette'' 
''cd raclette.site.dnssec/'' 
''dnssec-signzone -o raclette.site -k raclette.site-ksk.key ../db.raclette raclette.site-zsk.key'' 
''service named restart'' 
Pour le test SMTP : [https://mxtoolbox.com/diagnostic.aspx] 
 

= '''17/03/2023:''' =
== '''Objectifs''' ==
-Permettre aux deux serveurs de fonctionner ensemble: SMTPin sur l'interface loopback et SMTPout sur l'interface ETH0 
-Essai d'envoi de message(''voir site web pour le test juste au dessus'') 

== '''Def of done''' ==
'''Faire fonctionner les deux serveurs ensemble''' 
''./SMTPin -l'' Pour mettre SMTPin sur ''loopback'' 
 
Dans ''~/ldelepla/src/SMTPout/args.c'' modification pour avoir l'interface ETH0: 
-Ligne 12 dans la fonction ''AfficheSyntaxe'': Ajout fprintf 
-Ligne 24 dans la fonction ''AnalyseArguments'' 
-Ligne 40 à 42 dans la fonction ''AnalyseArguments'': strncpy de l'interface 
Dans ''~/ldelepla/src/SMTPout/args.h'' ajout d'un élément char nommé interface de taille max CONFIG_MAX_INTERFACE 
Dans ''~/ldelepla/libs/Reseau/reseau.c'' dans la fonction initialisation serveur à la ligne 44, si interface!=NULL alors il se met sur la bonne interface 
Dans ''~/ldelepla/src/SMTPout/out.c'' à la ligne 202 *interface = config.interface; 
Dans le Makefile: ''-g'' à la compilation pour avoir la ligne du segfault avec valgrind 
 
'''SMTPin et SMTPout fonctionnent ensemble respectivement sur lo et eth0''' 
 
'''Tests''' 
Effectués avec le site sur la section ci-dessus 
Premiers résulats venant du site: 
 
''Connecting to 193.48.57.186'' 
 
''250 Welcome [143 ms]'' 
''EHLO keeper-us-east-1d.mxtoolbox.com'' 
 
''SendSMTPCommand: Timeout waiting for response after 15 seconds.'' 
 
''LookupServer 16003ms'' 
 
Remarque: Compiler avec ''-j <nom du fichier>'' pour avoir les logs 
En ouvrant le fichier de log, rien n'apparaît... 
 
Essai d'envoi avec nc depuis une machine polytech 
Remarque: compiler avec make debug et les arguments -j log.txt 255 pour remplir le journal 
 
Toujours aucun résultat avec le site web 
Pourtant /r/n présents dans le protocol 
Avec strace, on remarque que le serveur continue de lire alors que le message est fini. 
Pour cela, modification dans ''libs/SMTP/smtp.c'' : Dans la boucle de lecture commencant à la ligne 143, la boucle ne traite pas le cas où ''p->traitement == NULL'', dans ce cas là, on a l'erreur 502 
Ajout dans du renvoi d'erreur "Not Implemented" (code 502) dans ''libs/SMTP/smtp_private.h'' à la ligne 24 
 
= '''22/03/2023:''' =
== '''Objectifs''' ==
-Réaliser les tests et corriger les premiers bugs 

== '''Def of done''' ==
Fonctionne avec netcat: 
Sur une autre machine: 
''nc 193.48.57.186 25'' 
''HELO raclette.site'' 
''MAIL FROM: ldelepla@polyetch-lille.fr 
''RCPT TO: root@raclette.site'' 
''DATA'' 
''SUBJECT: <sujet>'' 
''<corps du mail>'' 
''.'' 
''QUIT'' 
Sur le terminal de la VM on reçoit bien le message 
Mais à chaque commande SMTPout renvoi le code 502 à chaque commande 
Il manque un break dans la modification du code faite à la séance précédente dans ''smtp.c'' à la ligne 171 
 
Essai d'envoi avec la boite mail polytech 
'''ERREUR''' 
Il faut modifier la fonction ''gestion_MAIL'' et gestion_RCPT'' 
L'erreur est lié au format de l'envoi des commandes 
''Modification avant et après les if(statut!=2)'' 
 
En mode debug on voit maintenant la réception du mail sur le terminal
 
Le mail doit normalement être stocké dans /tmp mais il n'y à rien, Il faut permettre le debug avec le journal pour savoir où est l'erreur 
Cela est fait dans ''SMTPout/out.c'' dans la fonction ''gestionCourriel'' 
'''=>'''Ne passe pas le ''P(MUTEX_COMPTEUR):'' 
 

= '''INTER-SEANCE:''' =
== '''Objectifs''' ==
-Faire tourner les deux serveurs en arrière plan, pour voir s'ils SEGFAULT 

== '''Def of done''' ==
Pour éviter que les serveurs soient tuer par le signal SIGHUP en quittant la session à distance je lance le programme de cette manière: 
''nohup ./SMTPout -i eth0 -j log.txt -n 255 &'' 
 
''nohup ./SMTPin -l -j log.txt -n 255 &'' 
Avec la commande: 
''ps -ef | grep SMTP'' 
Même après avoir quitter la VM, on voit que SMTPin et SMTPout tournent toujours 
 

= '''29/03/2023:''' =
== '''Objectifs''' ==
Comprendre et corriger le bug lié au non stockage des mails reçus 

== '''Def of done''' ==
Résultat du test fait en INTER-SEANCE: pas de SEGFAULT 
 
A la compilation, ajouter ''-u carte.txt'' pour indiquer le fichier avec les utilisateurs possible, sous la forme: 
''root : root@raclette'' 
''user1 : user1@raclette'' 
 
Dans ''/tmp'' il faut créer les répertoires des utilisateurs: 
''/tmp/root/tmp'' 
 
''/tmp/user1/tmp'' 
Dans ''out.c'', dans la fonction ''scanCarteUtilisateur'' il manque ''==0'' dans le ''if'' avec le ''strcasecmp'' 
Dans la fonction ''adresseVersUtilisateur'', erreur: ''strlen(destinataire)'' et non ''strlen(adresse)'' 
 
Dans ''smtp.c'' dans la fonction ''gestion_RCPT'', il y avait encore la chaine de char tag liè à la modification de cette fonction durant la séance 22/03 
 
'''Le mail est bien recu et est stocké dans les dossiers associés''' 
 
 
Modification nécessaire dans ''smtp.c'': 
Dans la fonction ''gestion_DATA'' et ''SMTP_gestion'' dans le while ligne 111, toujours en renvoi de ''SUCCESS_DATA_CODE'' 
 
Jusqu'à la prochaine séance je laisse tourner les deux serveurs: 
''nohup ./SMTPout -i eth0 -j log.txt -n 255 -u carte.txt &'' 
 
''nohup ./SMTPin -l -j log.txt -n 255 &'' 
 

= '''05/04/2023:''' =
== '''Objectifs''' ==
-Modif de ''smtp.c'' 
-Commencer à débuger SMTPin 

== '''Def of done''' ==
-Aucun segfault ou crash des deux serveurs 
 
-Pour envoyer un mail: 
nc localhost 25 
 
Modification de ''reseau.c'' dans la fonction ''connexionServeur'': 
while(1){ 
if(p->ai_family==AF_INET6) ipv6=1; 
if(p->ai_family==AF_INET) ipv4=1; 
p=p->ai_next; 
} 
 

= '''31/05/2023: WORKSHOP''' =
== '''Objectifs''' ==
Mutualiser le travail avec Simon, Farid et Jerôme pour avoir un SMTPin et un SMTPout fonctionnel

== '''Def of done''' ==
'''SMTPin:''' 
Les codes dans private_smtp.h ne sont pas correct 
On ajoute du code pour débuger dans smtp.c 
static int retour_generique(FILE *dialogue,int succes,char *erreur,int taille){ 
char ligne[MAX_LIGNE]; 
#ifdef DEVERMINE 
printf("SMTP -> retour generique\n"); 
#endif 
if(fgets(ligne,MAX_LIGNE,dialogue)==NULL) return -1; 
ligne[MAX_LIGNE-1]='\0'; 
int code; 
int statut=sscanf(ligne,"%d",&code); 
#ifdef DEVERMINE 
printf("statut =%d\n", statut); 
printf("succes =%d\n", succes); 
printf("code =%d\n", code); 
#endif 
if(statut==1 && code!=succes){ 
strncpy(erreur,ligne,taille-1); 
#ifdef DEVERMINE 
printf("retour_generique ERROR\n"); 
#endif 
} 
return (statut==1 && code==succes)?0:-1; 
} 
En lancant SMTPin avec strace on retrouve les codes attendus à modifier dans private_smtp.h 
nc localhost 25 
HELO polytech-lille.net 
MAIL FROM: root@raclette.site 
RCPT TO: ldelepla@polytech-lille.net 
DATA 
SUBJECT: TEST 
TEST 
. 
QUIT 
Le mail est bien reçu sur ma boîte polytech 
 
'''SMTPout:''' 
Le serveur ne stocke plus les mails 
 

= '''07/06/2023:''' =
== '''Objectifs''' ==
-Verifier les deux serveurs 
-Commencer le cryptage 

== '''Def of done''' ==
SMTPou restock les mails reçus

2023-05-31T16:02:00Z

Ldelepla :

= '''PROGRESS''' =
-'''DONE''' : Pour prévenir les failles, les deux serveurs SMTP seront écrits à partir de zéro en respectant la RFC 5321 mais avec des simplifications ; 
-'''DONE''' : Les serveurs doivent être codés en langage C en utilisant la bibliothèque des sockets ; 
-'''DONE''' : Les commandes VRFY et EXPN qui permettent au client de vérifier si une messagerie est disponible pour la transmission, ne seront pas implémentées ; 
-'''DONE''' : Le routage des messages ne doit pas être implémenté et la gestion des messages non transmis est optionnel ; 
-Un système doit être réalisé permettant au serveur SMTP sortant de mettre en file d’attente les messages non remis à destination pour cause d’erreur transitoire du serveur SMTP cible ; 
-Les communications peuvent ne pas être chiffrées, les communications non chiffrés sont reçues sur le port 25 ; 
-Les communications peuvent être chiffrées par TLS, les communication chiffrées peuvent être négociées directement sur le port 465 ; 
-Il doit être possible de basculer sur une communication chiffrée à partir du port 25 en utilisant les commandes EHLO et STARTTLS ; 
-Chaque connexion doit être gérée via un processus léger (Thread) et chaque commande par une fonction à laquelle est passée une structure représentant l’état du dialogue entre le client et le serveur ; 
-'''DONE''' : Les serveurs SMTP doivent gérer les enregistrements MX permettant d’associer un nom de domaine à un serveur de messagerie, le recours aux enregistrements AAAA et A est à utiliser en cas d’absence de MX ; 
-Les serveurs SMTP doivent être contactables en IPv4 et en IPv6, ils doivent aussi prendre en charge IPv4 et IPv6 pour la transmission vers les serveurs SMTP cibles ; 
-Pour la transmission vers les serveurs SMTP cibles, une communication chiffrée doit être préférée ; 
-'''DONE''' : Les deux serveurs ne diffèrent que par la méthode de distribution finale (stockage dans un système de fichiers ou envoi à un serveur SMTP cible) ; 
-'''DONE''' : Le serveur SMTP sortant ne doit être lié qu’à l’interface réseau loopback ; 
-'''DONE''' : Le serveur SMTP entrant ne doit être lié qu’à l’interface réseau menant à Internet. 
 
Qq précisions: 
 
-'''DONE''' : Ne doivent être stockés que les courriels à destination d’un utilisateur local ; 
-'''DONE''' : Le format de stockage doit être le format maildir qui est une structure de répertoires particulière utilisée pour sauvegarder des courriers électroniques (le format maildir est très bien décrit sur Wikipédia); 
-'''DONE''' : Chaque message entrant doit être ajouté au dossier de réception Maildir propre à l’utilisateur de destination ; 
-'''DONE''' : Le processus de remise stocke le message dans le sous-répertoire Maildir/tmp puis le déplace dans le sous-répertoire Maildir/new, déplacement doit être fait par la primitive rename ; 
-'''DONE''' : Pour assurer un nom unique aux fichiers de stockage, utilisez la date en seconde (fonction time), le PID et un compteur commun à tous les flux d’exécution (utilisation de sémaphores indispensable). 
 

= '''03/02/2023:''' =
== '''Def of done''' ==
'''Démarrage de la VM:''' 
''ssh pifou@capbreton'' 
''xen list'' pour voir la liste des VM déjà démarrées 
''xen create /etc/xen/dio1.cfg'' 
Pour éteindre la VM : ''xen shut dio1'' 
 
'''Installation de GCC:''' 
''ssh root@193.48.57.186'' 
''apt update'' 
''apt install gcc'' 
 
'''Environment:''' 
Serveur dans ~/ldelepla 
''scp -r ldelepla/ root@193.48.57.186:~'' 

= '''10/02/2023:''' =
== '''Def of done''' ==
Dans libs/Flux/mutex.c : ajout du free dans la fonction mutex_fin 
Dégager le process qui écoute le port 25 : 
''ss -tpln'' 
Pour trouver le process et 
''service <name> stop'' 
 
On peut maintenant lancer les serveurs SMTP 
 
Dans src/SMTPin/in.c ligne 56, vérification que la connexion est correctement faite et que le message s'est envoyé 
MAILDIR_NEW avec le rename : dans src/SMTPout/out.c ligne 171 
Ajout d'un MX sur la VM: 
 
''vi /etc/bind/db.raclette'' 
''cd raclette.site.dnssec/'' 
''dnssec-signzone -o raclette.site -k raclette.site-ksk.key ../db.raclette raclette.site-zsk.key'' 
''service named restart'' 
 
Pour le test SMTP : [https://mxtoolbox.com/diagnostic.aspx] 
 

= '''17/03/2023:''' =
== '''Objectifs''' ==
-Permettre aux deux serveurs de fonctionner ensemble: SMTPin sur l'interface loopback et SMTPout sur l'interface ETH0 
-Essai d'envoi de message(''voir site web pour le test juste au dessus'') 

== '''Def of done''' ==
'''Faire fonctionner les deux serveurs ensemble''' 
''./SMTPin -l'' Pour mettre SMTPin sur ''loopback'' 
 
Dans ''~/ldelepla/src/SMTPout/args.c'' modification pour avoir l'interface ETH0: 
-Ligne 12 dans la fonction ''AfficheSyntaxe'': Ajout fprintf 
-Ligne 24 dans la fonction ''AnalyseArguments'' 
-Ligne 40 à 42 dans la fonction ''AnalyseArguments'': strncpy de l'interface 
Dans ''~/ldelepla/src/SMTPout/args.h'' ajout d'un élément char nommé interface de taille max CONFIG_MAX_INTERFACE 
Dans ''~/ldelepla/libs/Reseau/reseau.c'' dans la fonction initialisation serveur à la ligne 44, si interface!=NULL alors il se met sur la bonne interface 
Dans ''~/ldelepla/src/SMTPout/out.c'' à la ligne 202 *interface = config.interface; 
Dans le Makefile: ''-g'' à la compilation pour avoir la ligne du segfault avec valgrind 
 
'''SMTPin et SMTPout fonctionnent ensemble respectivement sur lo et eth0''' 
 
'''Tests''' 
Effectués avec le site sur la section ci-dessus 
Premiers résulats venant du site: 
 
''Connecting to 193.48.57.186'' 
 
''250 Welcome [143 ms]'' 
''EHLO keeper-us-east-1d.mxtoolbox.com'' 
 
''SendSMTPCommand: Timeout waiting for response after 15 seconds.'' 
 
''LookupServer 16003ms'' 
 
Remarque: Compiler avec ''-j <nom du fichier>'' pour avoir les logs 
En ouvrant le fichier de log, rien n'apparaît... 
 
Essai d'envoi avec nc depuis une machine polytech 
Remarque: compiler avec make debug et les arguments -j log.txt 255 pour remplir le journal 
 
Toujours aucun résultat avec le site web 
Pourtant /r/n présents dans le protocol 
Avec strace, on remarque que le serveur continue de lire alors que le message est fini. 
Pour cela, modification dans ''libs/SMTP/smtp.c'' : Dans la boucle de lecture commencant à la ligne 143, la boucle ne traite pas le cas où ''p->traitement == NULL'', dans ce cas là, on a l'erreur 502 
Ajout dans du renvoi d'erreur "Not Implemented" (code 502) dans ''libs/SMTP/smtp_private.h'' à la ligne 24 
 
= '''22/03/2023:''' =
== '''Objectifs''' ==
-Réaliser les tests et corriger les premiers bugs 
 

== '''Def of done''' ==
Fonctionne avec netcat: 
Sur une autre machine: 
 
''nc 193.48.57.186 25'' 
''HELO raclette.site'' 
''MAIL FROM: ldelepla@polyetch-lille.fr 
''RCPT TO: root@raclette.site'' 
''DATA'' 
''SUBJECT: <sujet>'' 
''<corps du mail>'' 
''.'' 
''QUIT'' 
 
Sur le terminal de la VM on reçoit bien le message 
Mais à chaque commande SMTPout renvoi le code 502 à chaque commande 
Il manque un break dans la modification du code faite à la séance précédente dans ''smtp.c'' à la ligne 171 
 
Essai d'envoi avec la boite mail polytech 
'''ERREUR''' 
Il faut modifier la fonction ''gestion_MAIL'' et gestion_RCPT'' 
L'erreur est lié au format de l'envoi des commandes 
''Modification avant et après les if(statut!=2)'' 
 
En mode debug on voit maintenant la réception du mail sur le terminal
 
Le mail doit normalement être stocké dans /tmp mais il n'y à rien, Il faut permettre le debug avec le journal pour savoir où est l'erreur 
Cela est fait dans ''SMTPout/out.c'' dans la fonction ''gestionCourriel'' 
'''=>'''Ne passe pas le ''P(MUTEX_COMPTEUR):'' 
 

= '''INTER-SEANCE:''' =
== '''Objectifs''' ==
-Faire tourner les deux serveurs en arrière plan, pour voir s'ils SEGFAULT 
 
== '''Def of done''' ==
Pour éviter que les serveurs soient tuer par le signal SIGHUP en quittant la session à distance je lance le programme de cette manière: 
 
''nohup ./SMTPout -i eth0 -j log.txt -n 255 &'' 
 
''nohup ./SMTPin -l -j log.txt -n 255 &'' 
 
Avec la commande: 
''ps -ef | grep SMTP'' 
Même après avoir quitter la VM, on voit que SMTPin et SMTPout tournent toujours 
 

= '''29/03/2023:''' =
== '''Objectifs''' ==
Comprendre et corriger le bug lié au non stockage des mails reçus 
 

== '''Def of done''' ==
Résultat du test fait en INTER-SEANCE: pas de SEGFAULT 
 
A la compilation, ajouter ''-u carte.txt'' pour indiquer le fichier avec les utilisateurs possible, sous la forme: 
''root : root@raclette'' 
''user1 : user1@raclette'' 
 
Dans ''/tmp'' il faut créer les répertoires des utilisateurs: 
''/tmp/root/tmp'' 
''/tmp/user1/tmp'' 
 
Dans ''out.c'', dans la fonction ''scanCarteUtilisateur'' il manque ''==0'' dans le ''if'' avec le ''strcasecmp'' 
Dans la fonction ''adresseVersUtilisateur'', erreur: ''strlen(destinataire)'' et non ''strlen(adresse)'' 
 
Dans ''smtp.c'' dans la fonction ''gestion_RCPT'', il y avait encore la chaine de char tag liè à la modification de cette fonction durant la séance 22/03 
 
'''Le mail est bien recu et est stocké dans les dossiers associés''' 
 
 
Modification nécessaire dans ''smtp.c'': 
Dans la fonction ''gestion_DATA'' et ''SMTP_gestion'' dans le while ligne 111, toujours en renvoi de ''SUCCESS_DATA_CODE'' 
 
Jusqu'à la prochaine séance je laisse tourner les deux serveurs: 
 
''nohup ./SMTPout -i eth0 -j log.txt -n 255 -u carte.txt &'' 
 
''nohup ./SMTPin -l -j log.txt -n 255 &'' 
 

= '''05/04/2023:''' =
== '''Objectifs''' ==
-Modif de ''smtp.c'' 
-Commencer à débuger SMTPin 
 
== '''Def of done''' ==
-Aucun segfault ou crash des deux serveurs 
 
-Pour envoyer un mail: 
nc localhost 25 
 
Modification de ''reseau.c'' dans la fonction ''connexionServeur'': 
 
while(1){ 
if(p->ai_family==AF_INET6) ipv6=1; 
if(p->ai_family==AF_INET) ipv4=1; 
p=p->ai_next; 
} 
 

= '''31/05/2023: WORKSHOP''' =
== '''Objectifs''' ==
Mutualiser le travail avec Simon, Farid et Jerôme pour avoir un SMTPin et un SMTPout fonctionnel
 
== '''Def of done''' ==
'''SMTPin:''' 
Les codes dans private_smtp.h ne sont pas correct 
On ajoute du code pour débuger dans smtp.c 
 
static int retour_generique(FILE *dialogue,int succes,char *erreur,int taille){ 
char ligne[MAX_LIGNE]; 
#ifdef DEVERMINE 
printf("SMTP -> retour generique\n"); 
#endif 
if(fgets(ligne,MAX_LIGNE,dialogue)==NULL) return -1; 
ligne[MAX_LIGNE-1]='\0'; 
int code; 
int statut=sscanf(ligne,"%d",&code); 
#ifdef DEVERMINE 
printf("statut =%d\n", statut); 
printf("succes =%d\n", succes); 
printf("code =%d\n", code); 
#endif 
if(statut==1 && code!=succes){ 
strncpy(erreur,ligne,taille-1); 
#ifdef DEVERMINE 
printf("retour_generique ERROR\n"); 
#endif 
} 
return (statut==1 && code==succes)?0:-1; 
} 
 
En lancant SMTPin avec strace on retrouve les codes attendus à modifier dans private_smtp.h 
 
nc localhost 25 
HELO polytech-lille.net 
MAIL FROM: root@raclette.site 
RCPT TO: ldelepla@polytech-lille.net 
DATA 
SUBJECT: TEST 
TEST 
. 
QUIT 
 
Le mail est bien reçu sur ma boîte polytech 
 
'''SMTPout:''' 
Le serveur ne stocke plus les mails 

= '''07/06/2023: WORKSHOP''' =
== '''Objectifs''' ==
-Verifier les deux serveurs 
-Commencer le cryptage 
 
== '''Def of done''' ==