État des services de Globenet

Aller au contenu | Aller au menu | Aller à la recherche

mardi 20 janvier 2015

Coupure planifiée du réseau Globenet

Afin de ne plus avoir à procéder à la coupure totale du réseau en cas de défaillance d'un disque de passoire, nous allons procéder au remplacement du boîtier du serveur.

Une nouvelle (et dernière j'espère) coupure totale est donc programmée pour demain mercredi 21 janvier en soirée. Elle risque de prendre plus de temps, la machine devant être démontée et remontée.

mercredi 10 décembre 2014

Coupure planifiée du réseau Globenet

Suite à la défaillance d'un disque du routeur de Globenet (passoire), une intervention est prévue dans la nuit de mercredi 17 décembre au jeudi 18 décembre 2014. Comme il est nécessaire d'éteindre la machine pour le remplacement du disque et que cette machine assure le routage interne du réseau Globenet, tous les services hébergés seront inaccessible le temps de l'intervention, qui ne devrait pas durer plus de 15 minutes si tout se passe bien.

Des mises à jour de sécurité sur l'ensemble des machines seront faites dans le même temps. Des coupures des différents services sont donc à prévoir en plus.

vendredi 6 juin 2014

coupure planifiée du réseau Globenet

Suite à la défaillance d'un disque du routeur de Globenet (passoire), une intervention est prévue dans la nuit de samedi à dimanche de la semaine 23. Comme il est nécessaire d'éteindre la machine pour le remplacement du disque et que cette machine assure le routage interne du réseau Globenet, tous les services hébergés seront inaccessible le temps de l'intervention, qui ne devrait pas durer plus de 15 minutes.

Mise à jour du 7 juin 2014 à 20h45

Je vais en profiter pour faire des mises à jour de sécurité sur l'ensemble des machines. Des coupures des différents services sont donc à prévoir en plus.

Mise à jour du 7 juin 2014 à 23h50

J'éteind le routeur en espérant que ce ne sera pas trop long. rdv dans 15mn si tout va bien

Mise à jour du 8 juin 2014 à 00h35

Ça a été un peu plus long que prévu mais rien de grave, juste que les disques étaient vissés au boitier et que je n'avais pas préparé correctement le disque de remplacement. Les disques se synchronisent maintenant, je ferais un test de redémarrage de la machine avant de quitter les lieux.

Je passe à la mise à jour et au redémarrage des autres machines qui le nécessitent.

Mise à jour du 8 juin 2014 à 01h48

Le redémarrage de toutes les machines qui le nécessitait est effectué. Le nouveau disque de passoire est synchronisé avec l'ancien, il ne me reste plus qu'à redémarrer une dernière fois passoire pour vérifier que tout est OK. Ça va donc couper une dernière fois les services globenet.

Mise à jour du 8 juin 2014 à 01h54

C'est tout bon ! =)

samedi 15 février 2014

Courte interruption des services dans la nuit de samedi à dimanche

Il y a aura une brève interruption des services cette nuit (entre le 15 et le 16 février 2014) afin de réaliser deux opérations :

- D'une part, vérifier visuellement les disques de sextant, ce qui nécessitera l'extinction de la machine une dizaine de minute. - D'autre part, procéder à une mise à jour de sécurité des machines du mutualisé suivie d'un redémarrage de ces même machines.

La coupure du mutualisé provoquera un arrêt du web, du webmail, des listes et des mails des domaines hébergés pendant quelques minutes.

UPDATE dimanche 16/02 14h30

Le redémarrage du serveur de mail ne s'est pas bien passé, un fichier de configuration des disques n'avait pas édité pour mémoriser les dernières modifications. La récupération de la machine a été longue et tous les services ont été en fin de nuit, sauf le webmail Globenet qui avait échappé à notre vigilance et qui vient seulement d'être rétabli. Tout devrait être rentré dans l'ordre. Laissez un mail au support si vous constatez la persistance d'autre problème.

dimanche 19 janvier 2014

Interruption des services globenet ce dimanche après-midi

Afin de remplacer un disque dur défectueux sur le routeur général de globenet, nous allons devoir éteindre la machine, ce qui entrainera l'interruption totale des services globenet.

Cependant, l'opération étant assez simple, cette coupure ne devrait durer que quelques minutes.

Mise à jour à 17h40 :

L'intervention est terminée, à priori sans problème.

jeudi 9 janvier 2014

Levant: ajout de disques

De nouveaux disques seront ajoutés sur la machine. On a choisi de mettre des disques plus rapides et ainsi de redonner la pêche à vos mails, enfin...

Suite à cet ajout, le serveur sera encore probablement lent un ou deux jours, le temps de la copie de tous vos mails sur les nouveaux disques.

Comptez une coupure ou deux des services dans la nuit.

UPDATE vendredi 10 janvier 17h

L'opération de cette nuit s'est bien passée. Ça semble avoir grandement amélioré les performances de la machine. À confirmer dans les prochains jours.

lundi 6 janvier 2014

Levant: maintenance prévue ce soir

En attendant le remplacement à venir de levant (serveur mail et liste des services mutualisés de Globenet), une intervention en deux temps est prévue afin de remplacer des disques du serveur.

Ce soir, modification de la configuration matérielle afin de pouvoir ajouter rapidement de nouveaux disques à venir dans les prochains jours. La machine sera redémarrée plusieurs fois (2 fois si tout se passe comme attendu).

UPDATE 23h35

Début de la maintenance. Coupure(s) des services dans l'heure.

vendredi 15 novembre 2013

Interruption des services mail et listes du mutualisé

En attendant le remplacement de la machine hébergeant les mails et listes de diffusion, à bout de souffle. Une maintenance logicielle est programmée en début de soirée afin de mettre à niveau la distribution GNU/Linux debian en version 6 (squeeze).

Les coupures de service ne devraient pas excéder quelques minutes si tout se passe bien.

UPDATE: 15/11/2013 22h30

maintenance reportée à un autre jour.

UPDATE: 28/12/2013 20h00

La maintenance se fait ce soir.

samedi 21 septembre 2013

Coupure des services pour maintenace

mardi 24 septembre 20913 à 23h00 : Nous prévoyons de redémarrer quelques machines suite à des mises à jour logicielles. Les accès aux services de Globenet seront coupés quelques minutes.

update: 23h45: sextant n'a pas redémarré et reste injoignable. Une personne est sur place pour jeter un oeil sur la machine.

update: 25/09 9h30: La machine a été rétablie à minuit. Le premier disque ne voulait plus permettre le démarrage, le choix du 2e disque du RAID de la partition de démarrage a débloqué la situation.

samedi 31 août 2013

Interruption des services no-log ce samedi après-midi

Depuis le déménagement des serveurs, et le changement imprévu d'un des deux disques système, les performances de bender (le serveur de mails de no-log) sont très dégradés. De plus, l'autre disque système commence à accuser son âge.

D'autre part, il est necessaire d'ajouter de la capacité disques pour les mails.

Nous alllons donc effectuer intervention qui nécessitera de couper le serveur (au moins de façon intermittente) endant deux bonnes heures, le temps d'installer les nouveaux disques et transférer le système.

Samedi, 16h:

Nous commençons l'intervention et coupons les services sur bender.

mise à jour à 18h:

Les disques système ont été remplacés à priori sans problème. L'installation des nouveaux disques pour les mails pouvant se faire pendant que la machine tourne, nous relançons les services. Cependant il est possible qu'il faudra rebooter la machine à la fin, pour stabiliser la config.

mise à jour à 18h50:

L'intervention est terminée, sans problème à signaler.

dimanche 14 avril 2013

Courte interruption des services ce dimanche après midi.

Il y a aura une brève interruption des services cet après-midi, afin de réaliser deux opérations très courtes, qui ne devraient pas durer plus de quelques minutes :

- D'une part, ajouter de la mémoire à Couchant, notre serveur web. Ceci devrait corriger les problèmes de surcharge qu'on a eu ces derniers temps. - D'autre part, remplacer le cable d'alimentation d'un des switchs par un autre plus à même d'éviter des coupures intempestives lorsque nous interviendrons dans la baie.

La coupure de couchant provoquera un arret du web des domaines hébergés pendant quelques minutes. Par contre, si la coupure du switch touchera tous les services de globenet et no-log, elle ne devrait durer que quelques secondes.

samedi 9 mars 2013

Déménagement des machines - le suivi

Samedi 09h30

Bonjour,

L'équipe est sur place, au TH2. On vérifie une dernière fois les machines avant la coupure qui devrait se faire dans moins d'une heure.

11h00

Toutes les machines, mutualisé, virtuelles et dédiées, sont débranchées. On nettoie la baie pour retirer les câbles, tous les équipements pour les charger dans le van.

11h45

On quitte le Telehouse, direction Paris Bourse pour casser la croûte.

13h00

Les machines sont arrivées sans encombre à Paris Bourse. C'est la pause midi.

19h30

C'est plus long que prévu mais pas de galère. On a bien récupéré le réseau sans problème. Les machines de Globenet sont en place. Les serveurs hébergés le seront bientôt. On va rallumer les machines progressivement en vérifiant que tout va bien.

22h00

Ça fait quelques temps que les serveurs mutualisés et virtuels de Globenet tournent. Le serveur de mail est à fond, vous semblez avoir retenu votre souffle et il a pris du retard =) Mais ça devrait se tasser dans la soirée. On va maintenant s'occuper de no-log.

23h30

Bender, le serveur hébergeant les mails no-log ne démarre pas. Il semble que le raid système n'ai pas aimé le déplacement. Il va falloir ouvrir la bête pour vérifier.

dimanche 2h10

On va faire une sauvegarde du disque système et tenter de récupérer le raid, qui marchait sur 1 seule patte depuis 2 ans.

4h20

On a trouvé deux zones de quelques centaines de ko de secteurs défectueux sur le disque de bender. On finit la sauvegarde, ça devrait durer le reste de la nuit et on devrait pouvoir relancer demain dans la journée. On finit de ranger et on va dormir un peu.

13h15

De retour sur le front, mais d'abord un crochet par le TH2 (le datacenter où était Globenet jusque hier) pour brancher un câble qui rétablira un lien avec les machines d'Assodev/Marsnet (une connexion dédiée qui leur permet d'accéder à un de leur machine hébergée chez Globenet) et brancher un nouveau serveur de console pour Gitoyen, qui se trouve bien dépourvu puisqu'on leur prêtait un bout du nôtre.

15h20

Pendant ce temps, à Paris Bourse, la copie du disque sytème défectueux de bender vers un nouveau disque se termine, Très peux de dégats en fait, peut-etre juste ce qu'il faut pour empêche le serveur de redémarer. Avec un peu de chances, la remlse en route pourait etre assez rapide.

16h35

Bender est reparti ! On le laisse tourner un peu, le temps qu'il récupère les messages que vous attendez tous, et une fois que la charge aura un peu baissé, on relancera le webmail.

17h45

Voilà, le webmail no-log est relancé. Il ne nous reste plus que deux-trois branchements à finir et le déménagement pourra être considéré terminé. Merci de votre patience.

21h20

Evidemment, à la fin on oublie de faire les dernières vérifications, et on se contente de voir la page d'accueil du webmail pour se dire que tout va bien.

Sauf que là, on avait oublié de relancer la liaison IMAP entre bender et le webmail, ce qui fait qu'on ne pouvait pas accéder à sa boite....

C'est corrigé. ;-)

vendredi 1 mars 2013

Globenet déménage le 9 mars 2013 - Coupure de service

Un grand changement est en cours à Globenet, nous quittons le site Voltaire de Telehouse pour installer nos machines dans la nouvelle salle d'hébergement Paris Bourse de Liazo.

Du coup, les services seront coupés quelques heures dans la journée du 9 mars 2013, le temps de tout débrancher, déplacer et rebrancher.

Nous déplacerons à la fois les machines du mutualisé de Globenet, de No-Log, et toutes les autres machines hébergées dans la baie.

Un lien est déjà prévu entre la nouvelle salle et Gitoyen, notre opérateur internet.

mercredi 26 décembre 2012

Coupure des services pour maintenance

jeudi 27 décembre 2012 à 23h30 : Nous prévoyons de redémarrer quelques machines suite à des mises à jour logicielles. Les accès à l'ensemble des services de Globenet seront coupés quelques minutes. Et le service de mails du service mutualisé le sera un peu plus longtemps.

lundi 18 juin 2012

Migration du serveur principal de l'hébergement mutualisé

On y est. On est dans la dernière ligne droite de la migration. Si tout se passe bien, on aura demain un hébergement mutualisé comme neuf, avec la dernière version du logiciel AlternC et des machines récentes.

Aucune coupure des services web et mail n'est prévue. Seule l'interface d'administration d'AlternC sera indisponible un moment.

Merci de votre patience et de votre compréhension.

=== MAJ de 16h ===

L'interface AlternC est coupée.

=== MAJ de 17h30 ===

Quand Murphy s'en mêle... L'opération de migration est reportée à demain, de gros soucis réseaux sont à déplorer sur l'ensemble du réseau Gitoyen nous empêchant de la mener dans de bonne conditions.

=== MAJ du mardi 19 juin à 18h30 ===

Nous avons avancé sur la migration. Il reste un peu de chemin à parcourir avant de procéder à la bascule proprement dite sur la nouvelle configuration. Si tout va bien, ce devrait être fait pour 13h demain.

=== MAJ du mercredi 20 juin à 11h50 ===

Une bascule est faite pour le webmail mutualisé. Par contre, bien que l'interface de gestion AlternC soit disponible, nous vous invitons à ne pas l'utiliser pour le moment, le temps que nous effectuions des vérifications, merci.

=== MAJ du mercredi 20 juin à 14h15 ===

Ça y est ! Les sites du mutualisé sont basculés sur le nouveau serveur. C'est maintenant la version 5.3.3 de PHP qui est utilisée. Signalez-nous les soucis que vous constateriez sur les sites.

lundi 23 avril 2012

Augmentation de l'espace disque pour les emails

L'espace disque disponible pour les boites emails sur le serveur levant est depuis longtemps trop petit.

Nous avons récemment achetés de nouveaux disques, de 2To, quatre fois plus gros que les disques de 500Go sur lesquels les boites email sont actuellement stockées.

Le remplacement s'effectuera en trois temps :

  • insertion d'un nouveau disque de 2To à la place d'un des deux disques actuels et copie des données
  • bascule sur le nouveau disque
  • insertion du deuxième disque de 2To à la place de l'ancien disque restant

La première opération a été effectuée ce lundi et la copie des boites email est lancée, elle devrait se terminer demain.

Mise à jour à 2h45 le mercredi 25 avril : l'opération de bascule sur le nouveau disque commence maintenant, les services devraient être coupés pendant une trentaine de minutes.

mercredi 15 février 2012

Maintenance :: Changement de routeur

Mercredi 15/2, nous avons programmé la fin de Casserole, le routeur de Globenet pour le remplacer par une machine toute neuve dénommée Passoire.

Cette intervention aura lieu l'après-midi de mercredi et occasionnera un arrêt complet des services de 5 à 10 minutes.

mardi 14 février 2012

Changement des switchs parisiens

Cet après-midi, mardi 14 février 2012, Globenet change les switchs de sa baie parisienne.

En conséquence, nous prévoyons qu'il y aura plusieurs interruptions des connexions aux sites internet et machines que Globenet héberge.
Ces interruptions pourront durer moins d'une minute dans la plupart des cas mais peut aussi comprendre un ou deux arrêts de plusieurs (5-7) minutes.

Cette intervention de maintenance débutera vers 15h et devrait se terminer vers 19h.
Le suivi de l'intervention sera exposé ici même.

Mise à jour 19h : les anciens switchs sont en train de mourir pendant l'intervention, une partie du réseau de Globenet a été inaccessible entre 18h40 et 19h. À moins d'un autre gros problème il ne devrait plus y avoir de coupure perceptible maintenant.

Fin de l'intervention vers 21h : les nouveaux switchs sont installés. Le réseau interne de Globenet passe au gigabit. L'intervention s'est plutôt bien déroulée. L'infrastructure de Globenet en sort renforcée. L'aventure continue !

mardi 20 décembre 2011

Hébergement mutualisé : Migration des serveurs

À l'intention des personnes utilisant les services mutualisés:

La grande migration attendue de longue va se faire les jeudi 22 et vendredi 23 décembre. Des coupures de service sont à prévoir.

Nous vous tiendrons informés lors de la migration.

== mise à jour vendredi ==

La préparation n'est pas terminée, la migration est donc reportée ultérieurement.

mardi 3 mai 2011

Brève interruption prévue des services

Pour raison de maintenance, les services hébergés par Globenet seront brièvement interrompus ce soir vers 23h.

Attendez-vous à quelques coupures.

- page 2 de 5 -