État des services de Globenet

Comme nous l'avons fait fin août avec Robby (le webmail), nous allons mettre à jour la configuration logicielle de Bender (le serveur de courrier).

L'intervention devrait débuter aux environ de 14h30 et devrait durer deux ou trois heures (ou plus, ou moins, selon l'état d'esprit de Murphy :-) )

Mise à jour à 14h50 :

Nous commencons l'intervention et coupons les services.

mise à jour à 18h :

Le plus gros de la mise à jour est faite, mais un petit problème sur deux partitions disques ayant eu lieu pendant la préparation de l'intervention nous forcent à les vérifier ce qui allonge de façon importante la durée de l'interruption. :-(

mise à jour à 22h :

Les admin font chauffer les claviers pour remettre tout en route. Le système de fichiers semble correct, les services sont en cours de "reconfiguration" et vont être remis en route progressivement.

mise à jour à 23h40 :

Nous avons encore quelques problèmes pour relancer le serveur web, mais les autres fonctionnent semblent-t-il correctement.

Vous pouvez donc récuperer votre courrier en pop/imap et accéder au webmail en allant directement sur https://webmail.no-log.org.

mise à jour à 1h00 :

Tous les services sont opérationnels.

Note : La mise à jour comprtant un changement de format dans la base de données postgrey, celle ci a été réinitialisée. IL faut donc s'attendre à avoir quelques retards d'arrivée de certains courriers pendant quelques jours.

Depuis 22h10, les serveurs hebergés par globenet ne sont plus accessible (aussi bien les sites hébergés, que no-log et les serveurs dédiés).

Apparament, il s'agit d'un problème sur le switch reliant les serveurs au routeur faisant la liaison avec le reste d'internet.

Nous essayons de rétablir le service le plus vite possible.

mise à jour à 0h10 :

Un petit déplacement express au TH2 (le datacenter où sont nos machines) pour rebooter le switch a été suffisant pour résoudre le problème. :-)

La qualité des connexions entre Globenet et le reste d'Internet semble perturbée. Nous cherchons l'explication.

Afin d'augmenter la taille de la partition contenant les mails des domaines hébergés par globenet (hors no-log.org), nous interrompons les services pendant quelques minutes.

L'accès au Webmail de no-log est actuellement impossible, les administrateurs travaillent à résoudre le problème, nous vous tiendrons informé de la suite des évènements.

13:50 Le service est relancé, le WebMail est de nouveau accessible.

Bonne journée à tous :)

Suite à la fin du support de la distribution Debian Sarge, grace à laquelle tournent les serveurs de no-log, une mise à jour de leur système devient de plus en plus nécessaire.

Robby (le webmail) devrait donc être mis à jour ce samedi soir, et Bender (le serveur de mails) devrait être mis à jour dimanche après midi.

Les interruptions de service ne devraient pas prendre plus d'une heure ou deux. Si tout va bien...

Dans aucun cas il n'y a de risque de perdre des messages.

Mise à jour à 20h50 :

Nous commençons la mise à jour de robby.

Mise à jour à 23h40 :

La mise à jour est terminée, tout semble s'être bien passé. Si vous constatez des choses anormales, n'hésitez pas à nous prévenir sur support@no-log.org.

Un problème sur une des partitions du serveur gérant les mails de globenet et des domaines hébergés (rien à voir avec les mails de no-log) empêche la réception et la récupération des messages.

Nous arrêtons les services et lançons une vérification de la partition.

lundi à 15h : Jacques est parti pour intervenir sur place et réparer la partition.

mardi à 02h00 : Si nous sommes quasiment assurés que nous pourrons récupérer tous les messages (y compris ceux arrivés lundi matin et qui n'ont donc pas été sauvegardés sur notre machine de backup), la remise en service des partitions touchés se révèle plus complexe que prévu. Nous arrêtons donc pour ce soir et continuerons demain.

Excusez nous pour les désagréments....

mardi à 12h :

Nous avons pu remettre en service les partitions, apparemment sans dommage. Nous relançons les services progressivement.

mardi à 12h30 :

Le service de mail est à nouveau opérationnel.

mardi à 22h00 :

Le service web pour la gestion des listes de discussion/diffusion est opérationnel

Le réseau Globenet semble coupé depuis 10 minutes; à première vue, ça ressemble à un souci matériel, câble ou prise. On cherche à en savoir plus.

mise a jour : ca vient d'un switch (équipement réseau), qui ne répond plus; soit il a juste un hoquet, et il repart dans quelques minutes, soit il est mort et il faut le remplacer (temporairement en ~ 1h, définitivement en quelques jours).

mise à jour à 12h45 : le switch a été redémarré, il va mieux et le service est entièrement rétabli.

Cette coupure concernait tout le réseau de Globenet, y compris les serveurs hébergés et No-log. Elle a duré 50 minutes environ.

Les mails envoyés pendant la coupure ne sont pas perdus : ils sont encore sur les serveurs d'envoi qui réessayeront de les envoyer plus tard dans la journée.

Pour améliorer la stabilité du réseau de Gitoyen (par lequel Globenet est relié au reste du monde), il y a cette nuit une intervention technique avec remplacement d'une machine. Cela occasionnera quelques coupures intermittentes de tous les services.

Ce ne seront que des interruptions de connexion, mais les données, messages, etc... ne sont pas perdus.

Afin de mettre à jour la configuration du pare-feu de Globenet, des opérations vont se dérouler samedi 10 et dimanche 11 mai sur la machine qui traîte le trafic Internet du réseau de Globenet.

Il n'est pas prévu de coupure de services. Néanmoins, il se peut qu'il y ait de brèves interruptions.

Dimanche 11 mai - 12h30 : La configuration du pare-feu a été mise à jour. Si vous constatez des comportements réseaux inhabituels, contactez le support de Globenet : support (at) globenet.org.

Il semble que le mail, sur la plateforme d'hébergement mutualisé, est partiellement indisponible; ça semble être un souci de filesystem. On regarde.

PS : cela ne concerne pas les mails @no-log.org.

Une panne de courant est intervenue sur l'ensemble de la rangée des baies dans laquelles se trouvent nos serveurs vers 15h15. L'electricité a été rétablie vers 15h40.

Certains serveurs sont repartis tous seuls, pas d'autres. Nous travaillons à les remettere en route.

maj 19h : en fait la panne impactait plus que notre rangée, mais la moitié d'un étage du datacenter, soir plusieurs centaines de machines; tout semble être rentré dans l'ordre sans dégâts.

maj 02h : en fait, le service de mailing-listes était resté en rade, un hoquet mal digéré; un petit coup de pouce et c'est reparti.

Depuis 18h20 environ, les boites des domaines hébergés sur globenet (et non les boites no-log) sont indisponibles.

Ceci est dû à un probleme de systeme de fichiers.

Nous venons de lancer une vérification, qui devrait prendre quelques dizaines de minutes.

Mise à jour à 22h10 :

Aucune perte de donnée constatée, nous relançons les services.

La pare feu de Globenet et No-log qui est sur la machine Casserole a subi un gros lifting ce week end.

Tous les services (services mutualisés, service mail No-log, accès RTC No-log, serveurs dédiés) peuvent potentiellement être impactés par des problèmes d'accès. Nous avons effectué un maximum de tests, mais nous ne pouvons faire de vérifications exhaustives.

Si vous constatez des problèmes d'accès aux services ou des dysfonctionnements merci de nous le signaler en envoyant un mail a support (at) globenet.org.

L'équipe Globenet-No-log

L'équipe des bénévoles de Globenet va travailler ce week-end pour des travaux de maintenance sur l'ensemble des machines. Des risques de coupure sont à prévoir dans la nuit, mais au matin l'IMAP sur no-log sera de nouveau en service.

Cela va affecter aussi bien les services de Globenet que ceux de no-log, un peu de patience vous est demandé pour des machines plus fiables dans l'avenir.

Merci Equipe Globenet/no-log