État des services de Globenet

Aller au contenu | Aller au menu | Aller à la recherche

Mot-clé - maintenance

Fil des billets - Fil des commentaires

mardi 20 janvier 2015

Coupure planifiée du réseau Globenet

Afin de ne plus avoir à procéder à la coupure totale du réseau en cas de défaillance d'un disque de passoire, nous allons procéder au remplacement du boîtier du serveur.

Une nouvelle (et dernière j'espère) coupure totale est donc programmée pour demain mercredi 21 janvier en soirée. Elle risque de prendre plus de temps, la machine devant être démontée et remontée.

mercredi 10 décembre 2014

Coupure planifiée du réseau Globenet

Suite à la défaillance d'un disque du routeur de Globenet (passoire), une intervention est prévue dans la nuit de mercredi 17 décembre au jeudi 18 décembre 2014. Comme il est nécessaire d'éteindre la machine pour le remplacement du disque et que cette machine assure le routage interne du réseau Globenet, tous les services hébergés seront inaccessible le temps de l'intervention, qui ne devrait pas durer plus de 15 minutes si tout se passe bien.

Des mises à jour de sécurité sur l'ensemble des machines seront faites dans le même temps. Des coupures des différents services sont donc à prévoir en plus.

jeudi 25 septembre 2014

Incident sur le service de mails mutualisé

Nous avons fait des mises à jour de sécurité ce matin (un peu avant 11h) sur le serveur de mail (levant), et le service de greylisting 1 s'est planté. Je viens de le relancer, les mails devraient arriver dans le prochain quart d'heure.

Si ce n'était le cas dans l'heure qui vient, nous remonter le problème. Merci au Cedidelp de nous avoir remonté le problème.

1 https://fr.wikipedia.org/wiki/Greylisting

"Le greylisting (le mot anglais signifie : inscription sur liste grise) est une technique anti-spam très simple qui consiste à rejeter temporairement un message électronique. Dans la majorité des cas, les serveurs émetteurs réexpédient le courriel après quelques minutes. La plupart des serveurs émettant des spams ne prennent pas cette peine."

vendredi 6 juin 2014

coupure planifiée du réseau Globenet

Suite à la défaillance d'un disque du routeur de Globenet (passoire), une intervention est prévue dans la nuit de samedi à dimanche de la semaine 23. Comme il est nécessaire d'éteindre la machine pour le remplacement du disque et que cette machine assure le routage interne du réseau Globenet, tous les services hébergés seront inaccessible le temps de l'intervention, qui ne devrait pas durer plus de 15 minutes.

Mise à jour du 7 juin 2014 à 20h45

Je vais en profiter pour faire des mises à jour de sécurité sur l'ensemble des machines. Des coupures des différents services sont donc à prévoir en plus.

Mise à jour du 7 juin 2014 à 23h50

J'éteind le routeur en espérant que ce ne sera pas trop long. rdv dans 15mn si tout va bien

Mise à jour du 8 juin 2014 à 00h35

Ça a été un peu plus long que prévu mais rien de grave, juste que les disques étaient vissés au boitier et que je n'avais pas préparé correctement le disque de remplacement. Les disques se synchronisent maintenant, je ferais un test de redémarrage de la machine avant de quitter les lieux.

Je passe à la mise à jour et au redémarrage des autres machines qui le nécessitent.

Mise à jour du 8 juin 2014 à 01h48

Le redémarrage de toutes les machines qui le nécessitait est effectué. Le nouveau disque de passoire est synchronisé avec l'ancien, il ne me reste plus qu'à redémarrer une dernière fois passoire pour vérifier que tout est OK. Ça va donc couper une dernière fois les services globenet.

Mise à jour du 8 juin 2014 à 01h54

C'est tout bon ! =)

samedi 15 février 2014

Courte interruption des services dans la nuit de samedi à dimanche

Il y a aura une brève interruption des services cette nuit (entre le 15 et le 16 février 2014) afin de réaliser deux opérations :

- D'une part, vérifier visuellement les disques de sextant, ce qui nécessitera l'extinction de la machine une dizaine de minute. - D'autre part, procéder à une mise à jour de sécurité des machines du mutualisé suivie d'un redémarrage de ces même machines.

La coupure du mutualisé provoquera un arrêt du web, du webmail, des listes et des mails des domaines hébergés pendant quelques minutes.

UPDATE dimanche 16/02 14h30

Le redémarrage du serveur de mail ne s'est pas bien passé, un fichier de configuration des disques n'avait pas édité pour mémoriser les dernières modifications. La récupération de la machine a été longue et tous les services ont été en fin de nuit, sauf le webmail Globenet qui avait échappé à notre vigilance et qui vient seulement d'être rétabli. Tout devrait être rentré dans l'ordre. Laissez un mail au support si vous constatez la persistance d'autre problème.

mercredi 15 janvier 2014

désinscriptions automatiques en masse sur les listes mutualisées

Certain-es hébergé-es s’inquiètent de constater que de nombreuses désinscriptions ont eu lieu sur les listes hébergées de Globenet. Elles ont lieu en masse vers 9h.

Il n'y a pas à s'inquiéter, c'est normal. Il s'agit bien d'une procédure automatique du serveur de mailman qui était cassée depuis des années. Les interventions de ces dernières semaines ont permis de mettre à jour les versions logicielles (passage a debian squeeze) et accessoirement de rétablir la gestion automatisée des erreurs de mailman.

Si vous pensez que des désinscriptions ont été faites à tort, envoyez une note au support.

lundi 6 janvier 2014

Levant: maintenance prévue ce soir

En attendant le remplacement à venir de levant (serveur mail et liste des services mutualisés de Globenet), une intervention en deux temps est prévue afin de remplacer des disques du serveur.

Ce soir, modification de la configuration matérielle afin de pouvoir ajouter rapidement de nouveaux disques à venir dans les prochains jours. La machine sera redémarrée plusieurs fois (2 fois si tout se passe comme attendu).

UPDATE 23h35

Début de la maintenance. Coupure(s) des services dans l'heure.

samedi 21 septembre 2013

Coupure des services pour maintenace

mardi 24 septembre 20913 à 23h00 : Nous prévoyons de redémarrer quelques machines suite à des mises à jour logicielles. Les accès aux services de Globenet seront coupés quelques minutes.

update: 23h45: sextant n'a pas redémarré et reste injoignable. Une personne est sur place pour jeter un oeil sur la machine.

update: 25/09 9h30: La machine a été rétablie à minuit. Le premier disque ne voulait plus permettre le démarrage, le choix du 2e disque du RAID de la partition de démarrage a débloqué la situation.

dimanche 28 juillet 2013

Globenet change de disque

Ces derniers jours deux disques dans deux machines différentes (mario et sextant, des serveurs Xen sont tombés en panne.

Les deux disques ont été remplacés tout à l'heure sans aucune interruption de service puisque l'opération a été réalisée "à chaud", c'est à dire sans éteindre les machines.

mercredi 17 avril 2013

Interface d'administration alternc indisponible

Les certificats de Globenet et no-log expirent aujourd'hui. On est en train de les remplacer. L'interface de gestion des comptes AlternC sera indisponibles quelques temps aujourd'hui, le temps de revoir quelques réglages. désolé de la gène occasionnée.

samedi 9 mars 2013

Déménagement des machines - le suivi

Samedi 09h30

Bonjour,

L'équipe est sur place, au TH2. On vérifie une dernière fois les machines avant la coupure qui devrait se faire dans moins d'une heure.

11h00

Toutes les machines, mutualisé, virtuelles et dédiées, sont débranchées. On nettoie la baie pour retirer les câbles, tous les équipements pour les charger dans le van.

11h45

On quitte le Telehouse, direction Paris Bourse pour casser la croûte.

13h00

Les machines sont arrivées sans encombre à Paris Bourse. C'est la pause midi.

19h30

C'est plus long que prévu mais pas de galère. On a bien récupéré le réseau sans problème. Les machines de Globenet sont en place. Les serveurs hébergés le seront bientôt. On va rallumer les machines progressivement en vérifiant que tout va bien.

22h00

Ça fait quelques temps que les serveurs mutualisés et virtuels de Globenet tournent. Le serveur de mail est à fond, vous semblez avoir retenu votre souffle et il a pris du retard =) Mais ça devrait se tasser dans la soirée. On va maintenant s'occuper de no-log.

23h30

Bender, le serveur hébergeant les mails no-log ne démarre pas. Il semble que le raid système n'ai pas aimé le déplacement. Il va falloir ouvrir la bête pour vérifier.

dimanche 2h10

On va faire une sauvegarde du disque système et tenter de récupérer le raid, qui marchait sur 1 seule patte depuis 2 ans.

4h20

On a trouvé deux zones de quelques centaines de ko de secteurs défectueux sur le disque de bender. On finit la sauvegarde, ça devrait durer le reste de la nuit et on devrait pouvoir relancer demain dans la journée. On finit de ranger et on va dormir un peu.

13h15

De retour sur le front, mais d'abord un crochet par le TH2 (le datacenter où était Globenet jusque hier) pour brancher un câble qui rétablira un lien avec les machines d'Assodev/Marsnet (une connexion dédiée qui leur permet d'accéder à un de leur machine hébergée chez Globenet) et brancher un nouveau serveur de console pour Gitoyen, qui se trouve bien dépourvu puisqu'on leur prêtait un bout du nôtre.

15h20

Pendant ce temps, à Paris Bourse, la copie du disque sytème défectueux de bender vers un nouveau disque se termine, Très peux de dégats en fait, peut-etre juste ce qu'il faut pour empêche le serveur de redémarer. Avec un peu de chances, la remlse en route pourait etre assez rapide.

16h35

Bender est reparti ! On le laisse tourner un peu, le temps qu'il récupère les messages que vous attendez tous, et une fois que la charge aura un peu baissé, on relancera le webmail.

17h45

Voilà, le webmail no-log est relancé. Il ne nous reste plus que deux-trois branchements à finir et le déménagement pourra être considéré terminé. Merci de votre patience.

21h20

Evidemment, à la fin on oublie de faire les dernières vérifications, et on se contente de voir la page d'accueil du webmail pour se dire que tout va bien.

Sauf que là, on avait oublié de relancer la liaison IMAP entre bender et le webmail, ce qui fait qu'on ne pouvait pas accéder à sa boite....

C'est corrigé. ;-)

vendredi 1 mars 2013

Globenet déménage le 9 mars 2013 - Coupure de service

Un grand changement est en cours à Globenet, nous quittons le site Voltaire de Telehouse pour installer nos machines dans la nouvelle salle d'hébergement Paris Bourse de Liazo.

Du coup, les services seront coupés quelques heures dans la journée du 9 mars 2013, le temps de tout débrancher, déplacer et rebrancher.

Nous déplacerons à la fois les machines du mutualisé de Globenet, de No-Log, et toutes les autres machines hébergées dans la baie.

Un lien est déjà prévu entre la nouvelle salle et Gitoyen, notre opérateur internet.

mercredi 26 décembre 2012

Coupure des services pour maintenance

jeudi 27 décembre 2012 à 23h30 : Nous prévoyons de redémarrer quelques machines suite à des mises à jour logicielles. Les accès à l'ensemble des services de Globenet seront coupés quelques minutes. Et le service de mails du service mutualisé le sera un peu plus longtemps.

lundi 18 juin 2012

Migration du serveur principal de l'hébergement mutualisé

On y est. On est dans la dernière ligne droite de la migration. Si tout se passe bien, on aura demain un hébergement mutualisé comme neuf, avec la dernière version du logiciel AlternC et des machines récentes.

Aucune coupure des services web et mail n'est prévue. Seule l'interface d'administration d'AlternC sera indisponible un moment.

Merci de votre patience et de votre compréhension.

=== MAJ de 16h ===

L'interface AlternC est coupée.

=== MAJ de 17h30 ===

Quand Murphy s'en mêle... L'opération de migration est reportée à demain, de gros soucis réseaux sont à déplorer sur l'ensemble du réseau Gitoyen nous empêchant de la mener dans de bonne conditions.

=== MAJ du mardi 19 juin à 18h30 ===

Nous avons avancé sur la migration. Il reste un peu de chemin à parcourir avant de procéder à la bascule proprement dite sur la nouvelle configuration. Si tout va bien, ce devrait être fait pour 13h demain.

=== MAJ du mercredi 20 juin à 11h50 ===

Une bascule est faite pour le webmail mutualisé. Par contre, bien que l'interface de gestion AlternC soit disponible, nous vous invitons à ne pas l'utiliser pour le moment, le temps que nous effectuions des vérifications, merci.

=== MAJ du mercredi 20 juin à 14h15 ===

Ça y est ! Les sites du mutualisé sont basculés sur le nouveau serveur. C'est maintenant la version 5.3.3 de PHP qui est utilisée. Signalez-nous les soucis que vous constateriez sur les sites.

vendredi 13 avril 2012

Le serveur principal du mutualisé en fin de vie

L'hébergement mutualisé de Globenet traverse une période plus que difficile. Ça a des impacts fâcheux pour tous les utilisateurs et utilisatrices.

C'est malheureusement la conséquence d'années de négligence sur l'entretien des machines et de leurs logiciels. Depuis plus d'un an, nous travaillons à rétablir le parc, en installant de nouvelles machines et en mettant à jour les logiciels.

Nous sommes dans la dernière ligne droite pour la migration du serveur principal du mutualisé (ouest, qui héberge directement AlternC et le serveur web). Ce serveur est comme vous l'avez bien constaté, régulièrement en difficulté et son état s'est subitement aggravé ces derniers jours. Il va être remplacé d'ici la fin de la semaine.

Ensuite, nous aurons un système à jour et tout à fait performant.

Merci de votre patience et de votre compréhension.

mercredi 15 février 2012

Maintenance :: Changement de routeur

Mercredi 15/2, nous avons programmé la fin de Casserole, le routeur de Globenet pour le remplacer par une machine toute neuve dénommée Passoire.

Cette intervention aura lieu l'après-midi de mercredi et occasionnera un arrêt complet des services de 5 à 10 minutes.

mardi 14 février 2012

Changement des switchs parisiens

Cet après-midi, mardi 14 février 2012, Globenet change les switchs de sa baie parisienne.

En conséquence, nous prévoyons qu'il y aura plusieurs interruptions des connexions aux sites internet et machines que Globenet héberge.
Ces interruptions pourront durer moins d'une minute dans la plupart des cas mais peut aussi comprendre un ou deux arrêts de plusieurs (5-7) minutes.

Cette intervention de maintenance débutera vers 15h et devrait se terminer vers 19h.
Le suivi de l'intervention sera exposé ici même.

Mise à jour 19h : les anciens switchs sont en train de mourir pendant l'intervention, une partie du réseau de Globenet a été inaccessible entre 18h40 et 19h. À moins d'un autre gros problème il ne devrait plus y avoir de coupure perceptible maintenant.

Fin de l'intervention vers 21h : les nouveaux switchs sont installés. Le réseau interne de Globenet passe au gigabit. L'intervention s'est plutôt bien déroulée. L'infrastructure de Globenet en sort renforcée. L'aventure continue !

mardi 20 décembre 2011

Hébergement mutualisé : Migration des serveurs

À l'intention des personnes utilisant les services mutualisés:

La grande migration attendue de longue va se faire les jeudi 22 et vendredi 23 décembre. Des coupures de service sont à prévoir.

Nous vous tiendrons informés lors de la migration.

== mise à jour vendredi ==

La préparation n'est pas terminée, la migration est donc reportée ultérieurement.

vendredi 26 août 2011

Services perturbés sur le mutualisé de Globenet

On a fait une mise à jour de la machine (répondant au nom de levant) hébergeant les mails et les listes de diffusion il y a deux jours et une des manipulations effectuées permet à un des morceaux des listes de diffusion de fonctionner à nouveau. Du coup, du travail en retard (plusieurs mois) a été repris par le serveur et a donné lieu à quelques problèmes de performance le temps de tout résorber, impactant l'accès aux boites mail par le protocole IMAP (webmail compris).

Par ailleurs, le comportement du logiciel servant à consulter les mails via le protocole IMAP (utilisé en particulier par le webmail) a changé d'une manière étonnante et imprévue.

Peu de boites mail ont été touchées parmi toutes celles hébergées par Globenet et nous avons donc mis du temps à pouvoir identifier le problème (en corrélant les caractéristiques des boites mails qui ne fonctionnaient plus correctement).

Le problème a été corrigé et vous devriez de nouveau pouvoir utiliser votre boite normalement, avec le protocole qui vous convient, ou via le webmail.

Si vous avez encore des difficultés avec le service de mail ou de liste de diffusion, merci de nous le signaler.

mercredi 22 juin 2011

Interruption des services no-log

Suite à une mise à jour de sécurité des machines, le service no-log est momentanément interrompu. On travaille à rétablir la situation.

  • UPDATE 1h12*

Tous les services sont de retour.

- page 2 de 3 -