État des services de Globenet

Aller au contenu | Aller au menu | Aller à la recherche

Mot-clé - globenet

Fil des billets - Fil des commentaires

jeudi 24 avril 2014

Coupure du réseau de Globenet

Un équipement réseau est en rade chez Liazo. Du coup, notre connexion avec Gitoyen est coupée. Un technicien de Liazo est en route pour remplacer l'équipement défectueux. On vous tient au courant.

Mise à jour de 08h

On espère que le réseau soit rétablit pour 08h30.

Mise à jour de 09h20

Le réseau a été rétablit vers 09h05.

mardi 15 avril 2014

Mise à jour des certificats SSL

Les certificats SSL de globenet et no-log arrivant à expiration demain, nous les remplaçons par des nouveaux.

Si vous avez un message de la part de votre navigateur web ou client mail comme quoi le certificat a changé, c'est donc "normal".

Nouvelles empreintes pour le certificat globenet.org :

    SHA-1 : 45:A0:D7:E8:13:49:B4:82:EB:5E:48:8D:EB:53:F0:D1:B5:9D:FF:03
    MD5    : 0A:3B:70:E1:B0:76:E1:CD:22:C0:17:46:07:4C:B6:1D

Nouvelles empreintes pour le certificat no-log.org :

    SHA-1 : C8:E8:68:F6:28:85:C2:7C:BF:66:7E:40:F0:F7:25:6F:B3:C8:4C:40
    MD5    : 33:53:83:C3:B4:0D:C9:AC:35:C5:2D:FD:EA:09:81:D0

lundi 24 mars 2014

Problème sur le serveur de mails/listes des hébergés Globenet

Levan, le serveur gérant les mails et les listes des domaines hébergés par Globenet, ne répond plus depuis une vingtaine de minutes.

Une tentative de reboot à distance n'ayant aucun effet, nous nous allons à Paris-Bourse afin voir plus en détail ce qui se passe.

samedi 15 février 2014

Courte interruption des services dans la nuit de samedi à dimanche

Il y a aura une brève interruption des services cette nuit (entre le 15 et le 16 février 2014) afin de réaliser deux opérations :

- D'une part, vérifier visuellement les disques de sextant, ce qui nécessitera l'extinction de la machine une dizaine de minute. - D'autre part, procéder à une mise à jour de sécurité des machines du mutualisé suivie d'un redémarrage de ces même machines.

La coupure du mutualisé provoquera un arrêt du web, du webmail, des listes et des mails des domaines hébergés pendant quelques minutes.

UPDATE dimanche 16/02 14h30

Le redémarrage du serveur de mail ne s'est pas bien passé, un fichier de configuration des disques n'avait pas édité pour mémoriser les dernières modifications. La récupération de la machine a été longue et tous les services ont été en fin de nuit, sauf le webmail Globenet qui avait échappé à notre vigilance et qui vient seulement d'être rétabli. Tout devrait être rentré dans l'ordre. Laissez un mail au support si vous constatez la persistance d'autre problème.

mardi 7 janvier 2014

Problème sur le serveur de mails de Globenet

lundi 6 janvier 2014

Encore un début de semaine difficile pour levant. Il répond difficilement depuis le petit matin. Les disques tournent au maximum de leur capacité mais ce n'est pas suffisant. On regarde quels sont les processus (programmes) qui sont à l'origine de ces trop grandes sollicitations pour les stopper, histoire de redonner un peu d'air à la machine.

Vous pouvez avoir un petit aperçu en jetant un œil sur la métrologie du serveur https://supervision.globenet.org/munin/globenet.org/levant.globenet.org/index.html#disk

UPDATE : 14h

On a une partition système qui est pleine. Probablement les files d'attente de mail qui la remplissent complètement. On arrête le service d'envoi de mail et on diagnostique. La machine étant toujours très lente, c'est long d'avoir le résultat de chaque commande d'administration système.

UPDATE : 15h

Les services en cause ont été identifiés, on les a supprimé. Il semble que la conjonction de la reconstruction du RAID et du calcul d'occupation des boites mails ait été de trop ce mois-ci. Ce devrait être réglé. La charge système est retombée, on relance le service de réception de mail, si tout se passe bien, on pourra relancer les services POP et IMAP dans la foulée, ainsi que les listes de diffusion.

UPDATE : mardi 7 janvier 2014

Levant n'est toujours pas d'aplomb. Les disques n'étant pas encore changés et la synchronisation RAID est toujours en cours. Ce sera une journée difficile en perspective.

lundi 6 janvier 2014

Levant: maintenance prévue ce soir

En attendant le remplacement à venir de levant (serveur mail et liste des services mutualisés de Globenet), une intervention en deux temps est prévue afin de remplacer des disques du serveur.

Ce soir, modification de la configuration matérielle afin de pouvoir ajouter rapidement de nouveaux disques à venir dans les prochains jours. La machine sera redémarrée plusieurs fois (2 fois si tout se passe comme attendu).

UPDATE 23h35

Début de la maintenance. Coupure(s) des services dans l'heure.

jeudi 18 avril 2013

Mise à jour des certificats SSL

Les certificats SSL de globenet et no-log arrivant à expiration aujourd'hui, nous les remplaçons par des nouveaux.

Si vous avez des messages d'erreurs de la part de votre navigateur web ou client mail, c'est donc "normal". Cela disparaitra quand nous aurons terminé les opération de mise à jour.

Note : nous utiliserons maintenant Gandi SAS comme autorité de certification, en remplacement de CA-Cert.

Nouvelles empreintes pour le certificat globenet.org :

    SHA -1 : 88 36 34 49 1E B8 56 0E 92 4B 9A 4B C0 56 C8 BA C8 97 C2 97
    SHA-256 : E3 BD 60 8C A2 1B 4E 01 5A F9 31 67 FB 3D D3 2A 77 D9 CE 50 96 A1 2E D1 AE FC 82 E1 0C 00 2D 99

Nouvelles empreintes pour le certificat no-log.org :

  
    SHA-1 : 5A 63 88 32 9F FC CE 56 54 B7 E1 99 76 9B D8 25 70 5B B4 9B
    SHA-256 : D1 2D F0 47 08 38 37 CE 78 EF 16 8F 63 02 55 C3 0A 46 8C C7 68 03 01 FF 8E 33 DE ED 5A 01 D4 9C

mercredi 17 avril 2013

Interface d'administration alternc indisponible

Les certificats de Globenet et no-log expirent aujourd'hui. On est en train de les remplacer. L'interface de gestion des comptes AlternC sera indisponibles quelques temps aujourd'hui, le temps de revoir quelques réglages. désolé de la gène occasionnée.

dimanche 14 avril 2013

Courte interruption des services ce dimanche après midi.

Il y a aura une brève interruption des services cet après-midi, afin de réaliser deux opérations très courtes, qui ne devraient pas durer plus de quelques minutes :

- D'une part, ajouter de la mémoire à Couchant, notre serveur web. Ceci devrait corriger les problèmes de surcharge qu'on a eu ces derniers temps. - D'autre part, remplacer le cable d'alimentation d'un des switchs par un autre plus à même d'éviter des coupures intempestives lorsque nous interviendrons dans la baie.

La coupure de couchant provoquera un arret du web des domaines hébergés pendant quelques minutes. Par contre, si la coupure du switch touchera tous les services de globenet et no-log, elle ne devrait durer que quelques secondes.

mardi 9 avril 2013

Service web fortement ralenti cet après-midi

Le serveur mutualisé a été à nouveau très sollicité cet après-midi. Il ne s'est pas écroulé sous le nombre important de connexions comme mardi dernier mais les sites ont été fortement ralentis et inaccessibles un moment pour certains. Le grand nombre de connexion était le fait de quelques adresse ip localisées, nous les avons bloquées et avons à nouveau baissé le nombre maximum de connexions simultanées acceptées par le serveur.

Par ailleurs, Nous allons augmenter la capacité mémoire de la machine afin de faire face plus sereinement à ce genre d'atteintes.

mardi 2 avril 2013

Service web coupé ce matin

Le serveur mutualisé a été très sollicité ce matin. Il s'est écroulé sous un nombre trop important de connexions simultanées pour sa capacité. Nous avons pu le remettre d'aplomb et baisser le paramêtre du nombre maximum de connexions simultanées acceptées par le serveur.

mardi 26 mars 2013

Globenet - les services de mail et listes de diffusion ne sont plus actifs

Depuis 7h00 ce matin, les services de mail et de liste de diffusion du mutualisé de Globenet ne répondent plus. À moins d'une bonne surprise, la situation risque de durer toute la matinée.

13h

Il a été constaté sur place que la machine était éteinte... pour une raison inconnue. Levant a été redémarrée, les services de mail et listes rétablis. Les mails n'ayant pas pu être reçus par la machine entre 7h et 13h devraient être livrés dans les prochaines heures.

lundi 11 mars 2013

Le serveur de mail et listes de diffusion a du mal à récupérer du déménagement

Depuis qu'elle a été rebranchée, levant est très occupée. Elle qui s'occupe des listes de diffusion (et des mails) du service mutualisé. Or, mailman n'a pas fini de traiter tous les bounces en retard. Ça lui prend du temps processeur et beaucoup de mémoire.

Du coup, les accès aux mails, aux listes et à leurs interface web sont (très) ralentis. Ce devrait être le cas jusqu'à ce que mailman ai fini ses traitements de fond, ça avait pris plusieurs jours la dernière fois.

21h00

Le service de liste de diffusion a été stoppé un moment, le temps que les autres services du serveur puissent s'exécuter. Il y avait une pelletée de services qui n'avaient plus le temps de fonctionner normalement et qui s'accumulaient en ajoutant de la charge sur le système. Ils ont pu être épurés, les listes de diffusions ont été relancées et le tout semble maintenant mieux se comporter. Ainsi, le niveau de service devrait être meilleur, en attendant que mailman finisse ses bounces.

mardi 13h00

Le serveur semble s'être stabilisé, il ne hoquette plus depuis ce matin 8h. Si vous rencontrez encore des problèmes de temps de réponse ou autre, merci de nous le signaler.

samedi 9 mars 2013

Déménagement des machines - le suivi

Samedi 09h30

Bonjour,

L'équipe est sur place, au TH2. On vérifie une dernière fois les machines avant la coupure qui devrait se faire dans moins d'une heure.

11h00

Toutes les machines, mutualisé, virtuelles et dédiées, sont débranchées. On nettoie la baie pour retirer les câbles, tous les équipements pour les charger dans le van.

11h45

On quitte le Telehouse, direction Paris Bourse pour casser la croûte.

13h00

Les machines sont arrivées sans encombre à Paris Bourse. C'est la pause midi.

19h30

C'est plus long que prévu mais pas de galère. On a bien récupéré le réseau sans problème. Les machines de Globenet sont en place. Les serveurs hébergés le seront bientôt. On va rallumer les machines progressivement en vérifiant que tout va bien.

22h00

Ça fait quelques temps que les serveurs mutualisés et virtuels de Globenet tournent. Le serveur de mail est à fond, vous semblez avoir retenu votre souffle et il a pris du retard =) Mais ça devrait se tasser dans la soirée. On va maintenant s'occuper de no-log.

23h30

Bender, le serveur hébergeant les mails no-log ne démarre pas. Il semble que le raid système n'ai pas aimé le déplacement. Il va falloir ouvrir la bête pour vérifier.

dimanche 2h10

On va faire une sauvegarde du disque système et tenter de récupérer le raid, qui marchait sur 1 seule patte depuis 2 ans.

4h20

On a trouvé deux zones de quelques centaines de ko de secteurs défectueux sur le disque de bender. On finit la sauvegarde, ça devrait durer le reste de la nuit et on devrait pouvoir relancer demain dans la journée. On finit de ranger et on va dormir un peu.

13h15

De retour sur le front, mais d'abord un crochet par le TH2 (le datacenter où était Globenet jusque hier) pour brancher un câble qui rétablira un lien avec les machines d'Assodev/Marsnet (une connexion dédiée qui leur permet d'accéder à un de leur machine hébergée chez Globenet) et brancher un nouveau serveur de console pour Gitoyen, qui se trouve bien dépourvu puisqu'on leur prêtait un bout du nôtre.

15h20

Pendant ce temps, à Paris Bourse, la copie du disque sytème défectueux de bender vers un nouveau disque se termine, Très peux de dégats en fait, peut-etre juste ce qu'il faut pour empêche le serveur de redémarer. Avec un peu de chances, la remlse en route pourait etre assez rapide.

16h35

Bender est reparti ! On le laisse tourner un peu, le temps qu'il récupère les messages que vous attendez tous, et une fois que la charge aura un peu baissé, on relancera le webmail.

17h45

Voilà, le webmail no-log est relancé. Il ne nous reste plus que deux-trois branchements à finir et le déménagement pourra être considéré terminé. Merci de votre patience.

21h20

Evidemment, à la fin on oublie de faire les dernières vérifications, et on se contente de voir la page d'accueil du webmail pour se dire que tout va bien.

Sauf que là, on avait oublié de relancer la liaison IMAP entre bender et le webmail, ce qui fait qu'on ne pouvait pas accéder à sa boite....

C'est corrigé. ;-)

vendredi 1 mars 2013

Globenet déménage le 9 mars 2013 - Coupure de service

Un grand changement est en cours à Globenet, nous quittons le site Voltaire de Telehouse pour installer nos machines dans la nouvelle salle d'hébergement Paris Bourse de Liazo.

Du coup, les services seront coupés quelques heures dans la journée du 9 mars 2013, le temps de tout débrancher, déplacer et rebrancher.

Nous déplacerons à la fois les machines du mutualisé de Globenet, de No-Log, et toutes les autres machines hébergées dans la baie.

Un lien est déjà prévu entre la nouvelle salle et Gitoyen, notre opérateur internet.

mercredi 26 décembre 2012

Coupure des services pour maintenance

jeudi 27 décembre 2012 à 23h30 : Nous prévoyons de redémarrer quelques machines suite à des mises à jour logicielles. Les accès à l'ensemble des services de Globenet seront coupés quelques minutes. Et le service de mails du service mutualisé le sera un peu plus longtemps.

jeudi 4 octobre 2012

bug sur les listes de diffusion

il semblerait que nous avons un bug sur nos listes de diffusion.

Tous les messages contenant une (ou plusieurs) pièces jointes dont la taille totale dépasse 130Ko (à peu près) sont bloqués et disparaissent. Aucune notification, rien qui apparaisse dans les archives, les messages sont comme supprimés avant même d'être traités par la liste.

Merci à Nicolas de la Confédération paysanne pour son rapport de bug très précis.

Nous cherchons la source du problème pour le corriger.

EDIT du mercredi 10 octobre à 11h40

Il restait des fichiers corrompus suite au crash du serveur il y a trois semaines. Un nettoyage et une restauration de certains fichiers de configuration ont été faits, tout est rentré dans l'ordre.

EDIT du mardi 16 octobre à 14h20

Vous aurez pu constater des interruptions de service depuis quelques heures. Le serveur fait à nouveau des siennes. Un problème sur le système de fichier du système (séparé de celui des listes ou de celui des mails). Donc les données ne sont pas perdues mais le serveur n'est pas en forme. On est à son chevet.

jeudi 21 juin 2012

Modification des accès à votre hébergement mutualisé

Suite à la migration, l'architecture des services du mutualisé a été quelque peu modifiée. Par conséquent les accès à certains services ont changé d'adresse:

  • l'accès à votre webmail par une adresse du type http://votredomaine/webmail peut ne plus fonctionner. Vous pouvez toujours accéder à vos mails en passant par l'url https://secure.globenet.org/webmail
  • l'accès à votre compte ftp passe désormais par l'adresse ftp://ftp.globenet.org

lundi 18 juin 2012

Interruption de service

Globenet a subi une interruption de service suite à une attaque réseau sous forme de déni de service pendant 45 mn à partir de 17h. Au passage, cette attaque a également impacté notre opérateur internet Gitoyen.

Tout semble être rentré dans l'ordre.

Migration du serveur principal de l'hébergement mutualisé

On y est. On est dans la dernière ligne droite de la migration. Si tout se passe bien, on aura demain un hébergement mutualisé comme neuf, avec la dernière version du logiciel AlternC et des machines récentes.

Aucune coupure des services web et mail n'est prévue. Seule l'interface d'administration d'AlternC sera indisponible un moment.

Merci de votre patience et de votre compréhension.

=== MAJ de 16h ===

L'interface AlternC est coupée.

=== MAJ de 17h30 ===

Quand Murphy s'en mêle... L'opération de migration est reportée à demain, de gros soucis réseaux sont à déplorer sur l'ensemble du réseau Gitoyen nous empêchant de la mener dans de bonne conditions.

=== MAJ du mardi 19 juin à 18h30 ===

Nous avons avancé sur la migration. Il reste un peu de chemin à parcourir avant de procéder à la bascule proprement dite sur la nouvelle configuration. Si tout va bien, ce devrait être fait pour 13h demain.

=== MAJ du mercredi 20 juin à 11h50 ===

Une bascule est faite pour le webmail mutualisé. Par contre, bien que l'interface de gestion AlternC soit disponible, nous vous invitons à ne pas l'utiliser pour le moment, le temps que nous effectuions des vérifications, merci.

=== MAJ du mercredi 20 juin à 14h15 ===

Ça y est ! Les sites du mutualisé sont basculés sur le nouveau serveur. C'est maintenant la version 5.3.3 de PHP qui est utilisée. Signalez-nous les soucis que vous constateriez sur les sites.

- page 3 de 4 -