État des services de Globenet

Aller au contenu | Aller au menu | Aller à la recherche

vendredi 27 novembre 2015

Surcharge du serveur de mail mutualisé

Tous les services du serveur de mail mutualisé sont surchargés par des spams. Nous nous occupons de rétablir le service. Merci de votre compréhension.

12h35 : La source des spams a été identifiée et asséchée. Les spam sont en cours de nettoyage, les services seront rétablis dans la foulée.

13h35 : nettoyage terminé, tout semble être rentré dans l'ordre

jeudi 16 avril 2015

Certificats SSL de Globenet et no-log expirés

Les certificats SSL de globenet et no-log sont expirés, ce qui explique les messages d'alerte qui pourraient vous être signalés lors de la récupération de vos mails. nous les remplacerons par des nouveaux dans la journée.

Merci de votre patience.

mardi 24 mars 2015

Interruption des services no-log ce mardi soir.

Afin d'augmenter la mémoire de Bender, le serveur de mails de globenet, nous allons devoir l'arrêter ce mardi soir, vers 21h. Cet arret ne devrait durer que quelques dizaines de minutes.

lundi 17 novembre 2014

Le serveur de mails/listes des hébergés Globenet ne répond plus

Levant, le serveur de mail et listes de Globenet est en rade.

Un déplacement au datacenter est nécessaire pour le redémarrer, ce qui devrait être fait en fin d'après-midi.

Merci de votre patience et désolé pour la gène occasionnée.

mise à jour: 17h22

La machine est relancée.

mercredi 29 octobre 2014

Problème de charge sur le serveur de mails de no-log

Depuis plusieurs heures, le serveur de mail de no-log est soumis à une forte charge système, nottament à cause d'un trop grand nombre d'accès disques simultanés sur une des unités raid contenant les mails.

Nous essayons de réduire cette charge en coupant momentanément certains services afin d'aider à ce que certains processus qui engorgent le système puissent terminer leur tâche proprement.

Mise à jour à 15:30 :

Après avoir pu réduire la charge et traiter les messages en attente, nous avons pu relancer les services.

samedi 11 octobre 2014

Petit problème disque sur no-log.

Une des unités raid contenant les mail sur Bender, le serveur mail de no-log, est tombée cette nuit.

Nous arretons les services quelques minutes, le temps d'effectuer une verification du système de fichiers concerné.

Mise à Jour à 14h05:

La vérification s'est bien passée, nous relançons les services.

jeudi 25 septembre 2014

Incident sur le service de mails mutualisé

Nous avons fait des mises à jour de sécurité ce matin (un peu avant 11h) sur le serveur de mail (levant), et le service de greylisting 1 s'est planté. Je viens de le relancer, les mails devraient arriver dans le prochain quart d'heure.

Si ce n'était le cas dans l'heure qui vient, nous remonter le problème. Merci au Cedidelp de nous avoir remonté le problème.

1 https://fr.wikipedia.org/wiki/Greylisting

"Le greylisting (le mot anglais signifie : inscription sur liste grise) est une technique anti-spam très simple qui consiste à rejeter temporairement un message électronique. Dans la majorité des cas, les serveurs émetteurs réexpédient le courriel après quelques minutes. La plupart des serveurs émettant des spams ne prennent pas cette peine."

mardi 15 avril 2014

Mise à jour des certificats SSL

Les certificats SSL de globenet et no-log arrivant à expiration demain, nous les remplaçons par des nouveaux.

Si vous avez un message de la part de votre navigateur web ou client mail comme quoi le certificat a changé, c'est donc "normal".

Nouvelles empreintes pour le certificat globenet.org :

    SHA-1 : 45:A0:D7:E8:13:49:B4:82:EB:5E:48:8D:EB:53:F0:D1:B5:9D:FF:03
    MD5    : 0A:3B:70:E1:B0:76:E1:CD:22:C0:17:46:07:4C:B6:1D

Nouvelles empreintes pour le certificat no-log.org :

    SHA-1 : C8:E8:68:F6:28:85:C2:7C:BF:66:7E:40:F0:F7:25:6F:B3:C8:4C:40
    MD5    : 33:53:83:C3:B4:0D:C9:AC:35:C5:2D:FD:EA:09:81:D0

lundi 24 mars 2014

Problème sur le serveur de mails/listes des hébergés Globenet

Levan, le serveur gérant les mails et les listes des domaines hébergés par Globenet, ne répond plus depuis une vingtaine de minutes.

Une tentative de reboot à distance n'ayant aucun effet, nous nous allons à Paris-Bourse afin voir plus en détail ce qui se passe.

samedi 15 février 2014

Courte interruption des services dans la nuit de samedi à dimanche

Il y a aura une brève interruption des services cette nuit (entre le 15 et le 16 février 2014) afin de réaliser deux opérations :

- D'une part, vérifier visuellement les disques de sextant, ce qui nécessitera l'extinction de la machine une dizaine de minute. - D'autre part, procéder à une mise à jour de sécurité des machines du mutualisé suivie d'un redémarrage de ces même machines.

La coupure du mutualisé provoquera un arrêt du web, du webmail, des listes et des mails des domaines hébergés pendant quelques minutes.

UPDATE dimanche 16/02 14h30

Le redémarrage du serveur de mail ne s'est pas bien passé, un fichier de configuration des disques n'avait pas édité pour mémoriser les dernières modifications. La récupération de la machine a été longue et tous les services ont été en fin de nuit, sauf le webmail Globenet qui avait échappé à notre vigilance et qui vient seulement d'être rétabli. Tout devrait être rentré dans l'ordre. Laissez un mail au support si vous constatez la persistance d'autre problème.

mardi 7 janvier 2014

Problème sur le serveur de mails de Globenet

lundi 6 janvier 2014

Encore un début de semaine difficile pour levant. Il répond difficilement depuis le petit matin. Les disques tournent au maximum de leur capacité mais ce n'est pas suffisant. On regarde quels sont les processus (programmes) qui sont à l'origine de ces trop grandes sollicitations pour les stopper, histoire de redonner un peu d'air à la machine.

Vous pouvez avoir un petit aperçu en jetant un œil sur la métrologie du serveur https://supervision.globenet.org/munin/globenet.org/levant.globenet.org/index.html#disk

UPDATE : 14h

On a une partition système qui est pleine. Probablement les files d'attente de mail qui la remplissent complètement. On arrête le service d'envoi de mail et on diagnostique. La machine étant toujours très lente, c'est long d'avoir le résultat de chaque commande d'administration système.

UPDATE : 15h

Les services en cause ont été identifiés, on les a supprimé. Il semble que la conjonction de la reconstruction du RAID et du calcul d'occupation des boites mails ait été de trop ce mois-ci. Ce devrait être réglé. La charge système est retombée, on relance le service de réception de mail, si tout se passe bien, on pourra relancer les services POP et IMAP dans la foulée, ainsi que les listes de diffusion.

UPDATE : mardi 7 janvier 2014

Levant n'est toujours pas d'aplomb. Les disques n'étant pas encore changés et la synchronisation RAID est toujours en cours. Ce sera une journée difficile en perspective.

lundi 6 janvier 2014

Levant: maintenance prévue ce soir

En attendant le remplacement à venir de levant (serveur mail et liste des services mutualisés de Globenet), une intervention en deux temps est prévue afin de remplacer des disques du serveur.

Ce soir, modification de la configuration matérielle afin de pouvoir ajouter rapidement de nouveaux disques à venir dans les prochains jours. La machine sera redémarrée plusieurs fois (2 fois si tout se passe comme attendu).

UPDATE 23h35

Début de la maintenance. Coupure(s) des services dans l'heure.

dimanche 6 octobre 2013

Arret du serveur de mail mutualisé la nuit dernière

Hier soir, Levant (le serveur de mail des mutualisés de Globenet) est tombé en rade.

Nous avons essayé de le rebooter pendant la nuit, mais il semble que le paramétrage BIOS forçant le rallumage de la machine après une coupure/réactivation du courant a sauté il y a quelque temps.

Nous avons donc dû nous déplacer au datacenter afin de rallumer le serveur (et corriger le paramétrage BIOS au passage).

MISE À JOUR du vendredi 11/10/2013 9h10

Rebelote ce matin. La machine s'est plantée et n'a pas voulu redémarrer. Le BIOS a encore perdu son paramétrage, la pile doit être morte.

samedi 21 septembre 2013

Coupure des services pour maintenace

mardi 24 septembre 20913 à 23h00 : Nous prévoyons de redémarrer quelques machines suite à des mises à jour logicielles. Les accès aux services de Globenet seront coupés quelques minutes.

update: 23h45: sextant n'a pas redémarré et reste injoignable. Une personne est sur place pour jeter un oeil sur la machine.

update: 25/09 9h30: La machine a été rétablie à minuit. Le premier disque ne voulait plus permettre le démarrage, le choix du 2e disque du RAID de la partition de démarrage a débloqué la situation.

jeudi 20 juin 2013

Problème de connexion à certains services depuis Orange (France Telecom)

Ce matin, certains services Globenet étaient inaccessibles pour les utilisateurs et utilisatrices d'Orange. La machine levant (celle qui sert les mails et les listes de diffusion) n'était pas visible, alors que d'autres services comme les sites web l'étaient. Il est confirmé que c'était un problème interne au réseau d'Orange et leur souci serait réglé depuis 14h45 environ.

Pour les détails plus techniques, ce serait un problème de routage au niveau de l'AS5511 (Opentransit).

mardi 26 mars 2013

Globenet - les services de mail et listes de diffusion ne sont plus actifs

Depuis 7h00 ce matin, les services de mail et de liste de diffusion du mutualisé de Globenet ne répondent plus. À moins d'une bonne surprise, la situation risque de durer toute la matinée.

13h

Il a été constaté sur place que la machine était éteinte... pour une raison inconnue. Levant a été redémarrée, les services de mail et listes rétablis. Les mails n'ayant pas pu être reçus par la machine entre 7h et 13h devraient être livrés dans les prochaines heures.

lundi 11 mars 2013

Le serveur de mail et listes de diffusion a du mal à récupérer du déménagement

Depuis qu'elle a été rebranchée, levant est très occupée. Elle qui s'occupe des listes de diffusion (et des mails) du service mutualisé. Or, mailman n'a pas fini de traiter tous les bounces en retard. Ça lui prend du temps processeur et beaucoup de mémoire.

Du coup, les accès aux mails, aux listes et à leurs interface web sont (très) ralentis. Ce devrait être le cas jusqu'à ce que mailman ai fini ses traitements de fond, ça avait pris plusieurs jours la dernière fois.

21h00

Le service de liste de diffusion a été stoppé un moment, le temps que les autres services du serveur puissent s'exécuter. Il y avait une pelletée de services qui n'avaient plus le temps de fonctionner normalement et qui s'accumulaient en ajoutant de la charge sur le système. Ils ont pu être épurés, les listes de diffusions ont été relancées et le tout semble maintenant mieux se comporter. Ainsi, le niveau de service devrait être meilleur, en attendant que mailman finisse ses bounces.

mardi 13h00

Le serveur semble s'être stabilisé, il ne hoquette plus depuis ce matin 8h. Si vous rencontrez encore des problèmes de temps de réponse ou autre, merci de nous le signaler.

vendredi 28 décembre 2012

Incidents suite à la maintenance

Bonjour,

Suite à la maintenance de cette nuit, quelques soucis ont été rencontrés:

  • le serveur DNS récursif ne s'est pas initialisé au démarrage de passoire, retardant ainsi le redémarrage du service mutualisé de mails. corrigé dans le quart d'heure.
  • Les répertoires partagés ne se sont pas remontés depuis boreal, empêchant les comptes FTP mutualisés d'accéder à leurs répertoires, corrigé vers 10h15.
  • Les machines virtuelles hébergées sur mario ont perdu leur routage, problème réglé vers 14h15.

Si vous rencontrez d'autres problèmes, merci de nous le signaler.

mercredi 26 décembre 2012

Coupure des services pour maintenance

jeudi 27 décembre 2012 à 23h30 : Nous prévoyons de redémarrer quelques machines suite à des mises à jour logicielles. Les accès à l'ensemble des services de Globenet seront coupés quelques minutes. Et le service de mails du service mutualisé le sera un peu plus longtemps.

jeudi 4 octobre 2012

bug sur les listes de diffusion

il semblerait que nous avons un bug sur nos listes de diffusion.

Tous les messages contenant une (ou plusieurs) pièces jointes dont la taille totale dépasse 130Ko (à peu près) sont bloqués et disparaissent. Aucune notification, rien qui apparaisse dans les archives, les messages sont comme supprimés avant même d'être traités par la liste.

Merci à Nicolas de la Confédération paysanne pour son rapport de bug très précis.

Nous cherchons la source du problème pour le corriger.

EDIT du mercredi 10 octobre à 11h40

Il restait des fichiers corrompus suite au crash du serveur il y a trois semaines. Un nettoyage et une restauration de certains fichiers de configuration ont été faits, tout est rentré dans l'ordre.

EDIT du mardi 16 octobre à 14h20

Vous aurez pu constater des interruptions de service depuis quelques heures. Le serveur fait à nouveau des siennes. Un problème sur le système de fichier du système (séparé de celui des listes ou de celui des mails). Donc les données ne sont pas perdues mais le serveur n'est pas en forme. On est à son chevet.

- page 2 de 3 -