État du réseau Nouveautés & Informations

Chers clients,

Nous souhaitons vous tenir informés des récents incidents qui ont pu affecter la qualité de nos services et vous remercier pour votre patience. Récemment, un problème matériel a été identifié sur notre routeur principal, entraînant des coupures intermittentes. La source du problème est liée à une défaillance de notre composant mx204 (100G), qui a causé plusieurs interruptions de service.

Afin d'assurer une meilleure stabilité, notre fournisseur travaille actuellement à remplacer le routeur défectueux. En attendant la livraison et l'installation de cet équipement, nous avons mis en place une solution temporaire en ajoutant un lien de secours en 4x10G, garantissant que, si le 100G connaît un incident, le 4x10G prenne immédiatement le relais.

De plus, nous intégrons un deuxième fournisseur dans notre infrastructure dans les jours à venir pour renforcer notre résilience avec une redondance accrue. Cela permettra de minimiser le risque de futures interruptions et de vous offrir un service toujours plus fiable.

Nous restons à votre disposition pour toute question et vous remercions de votre compréhension.

Cordialement,
L’équipe de Caramania.Ca

Chers utilisateurs,

Nous souhaitons vous informer que nous allons procéder à des mises à jour du serveur et le redémarrer durant la nuit du 18 au 19 juillet. Ces opérations sont nécessaires pour garantir une performance optimale et la sécurité de nos services.

Veuillez noter que le serveur pourrait être indisponible pendant cette période. Nous nous excusons pour tout désagrément que cela pourrait causer et vous remercions de votre compréhension.

Si vous avez des questions ou des préoccupations, n'hésitez pas à nous contacter.

Cher(s) utilisateur(s),

Nous tenons à vous informer qu'il y a actuellement un problème réseau affectant notre serveur de webradio Europe. Cette situation perturbe la diffusion de nos services.

Nous travaillons en étroite collaboration avec notre fournisseur de services Internet pour résoudre ce problème le plus rapidement possible. Malheureusement, ce problème est hors de notre contrôle direct et nous ne pouvons pas fournir un délai précis pour la résolution.

Nous vous remercions de votre compréhension et de votre patience en ces circonstances difficiles. Nous vous tiendrons informés dès que la situation sera rétablie.

Update : Le réseau semble de nouveau stable.

Aujourd'hui, le 15/12/2023, l'un de nos fournisseurs internet a effectué une maintenance et une partie du trafic n'a pas été commutée correctement, ce qui a entraîné des problèmes de connexion pour certains clients en fonction des emplacements, en raison du réseau/chemin utilisé pour établir les connexions entre les pairs.

Suite à la maintenance du pair, nous avons effectué un redémarrage d'urgence de nos routeurs principaux à 11h11 HNE pour garantir la disponibilité de la redondance du chemin dans tous les emplacements.

Nous nous excusons pour les désagréments causés aux clients touchés.

Le réseau est maintenant de retour à la normale et la situation est maintenant résolue. Pour toutes questions ou assistances, s'il vous plait contactez notre équipe support.

Nous avons une coupure réseau au centre de données, notre équipe est en cours d'investigation.

Mise à jour #1 : Il semblerait qu'une coupure de fibre à l'extérieur du centre de données soit à l'origine de la panne, notre équipe travaille à en s'avoir plus sur le délai de réparation.

Mise à jour #2 : Notre équipe a passé le réseau sur un lien de secours le temps qu’il répare la fibre, normalement vos instances devraient être en ligne.

Mise à jour #3 : L'équipe du centre de données travaille actuellement à réparer la fibre, d'ici 1 heure tout devrait être revenu à la normale, une deuxième fibre sera ajoutée pour plus de redondance.

Le serveur a arrêté de répondre au PING...

Notre équipe sur place a été contactée et mène une enquête approfondie.

Nous apprécions votre compréhension et vous remercions de votre patience.

En attendant, n'hésitez pas à nous contacter si vous avez besoin d'aide supplémentaire.

Nous avons une panne de courant en cascade sur nos alimentations A et B (Datacenter US). Nos équipes travaillent pour rétablir le courant et nous vous tiendrons au courant sous peu.

Nous vous tiendrons au courant lorsque le serveur sera de nouveau en ligne.

Update : Notre infrastructure interne semble être en ligne pour le moment et le problème semble avoir été résolu. Nous nous excusons pour la gêne occasionnée et apprécions votre patience pendant cette panne.

Notre système de monitoring vient de détecter un défaut sur le serveur.

Notre équipe de techniciens sur site (opérationnelle 24h/24, 7j/7), a été informée de ce défaut et va intervenir.

Par conséquent, nous ne pouvons pas vous donner plus de précisions quant à l'heure de début de l'intervention.

=== Update ===

Un équipement réseau va être changé. Tous les serveurs seront inaccessibles pendant le correctif.

=== Update ===

L'équipement réseau a été remplacer et les serveurs sont en ligne, nous allons surveiller équipement réseau.

Cette fin de semaine nous allons déplacer les sites "temporairement" sur le NS2.publicssl.net dans le but de remplacer le système du NS1.publicssl.net qui est devenu obsolète.

Nous vous conseillons de ne pas faire de mise à jour de votre site web pour ne par perdre vos modifications durent le transfère d'un système à l'autre.

Une page sera affichée sur vos sites qui expliquent à vos visiteurs que votre site est en travaux pour maintenance du système.

La mise à jour devrait durer de plus ou moins 12 heures.

Un message sera envoyé une fois la mise à jour terminée.

Si vous avez des questions, vous pouvez nous contacter via notre site web.

===== UPDATE 20H54 GMT-5 =====

Tous les sites sont en ligne sur le NS2.

Je remets à neuf le NS1 avec la nouvelle configuration.

===== UPDATE 23H39 GMT-5 =====

Je viens de terminer l'installation du NS1 et la propagation DNS se fait normalement entre les 3 serveurs.

Je vais envoyer demain un message avec les nouvelles modifications et ajouts de la nouvelle configuration de l'hébergement web cloud.

Nous allons effectuer en fin de semaine prochaine (9 et 10 juin) une vérification du NODE où sont hébergés vos VPS.

Les VPS vont être arrêtés pour faire la vérification des composantes matérielle, je vous conseille de faire une sauvegarde de vos VPS pour éviter tout problème matériel.

Si vous avez des questions, vous pouvez nous contacter via notre site web Caramania.Ca.

=== UPDATE : 9 Juin 22:25 GMT-5 ===

Je vais commencer la maintenance du Node02.

Je vais couper tous les VPS's sur le node et faire la vérification matérielle.

=== UPDATE : 9 Juin 22:57 GMT-5 ===

Vérification matérielle effectuer à 50%.

=== UPDATE : 9 Juin 23:40 GMT-5 ===

Vérification matérielle effectuer à 68%.

=== UPDATE : 10 Juin 00:41 GMT-5 ===

Vérification terminer, nous allons redémarrer les VPS's.

=== UPDATE : 10 Juin 00:47 GMT-5 ===

VPS UP !!!

Un problème a été détecter sur le Node2, voici le message d'erreur.

Perte d’accès au volume 54ca76e5-2548bc6b-a7ad-0cc47a461752 (VPSHD) à cause de problèmes de connectivité. Une tentative de reprise est en cours et le résultat sera transmis dans peu de temps.
info : 2018-01-29 15:26:43 VPSHD

Bootbank cannot be found at path '/bootbank' (2018-01-29T21:03:01.295Z cpu0:3537977)
avertissement : 2018-01-29 16:03:01

Je vais contacter le datacenter pour faire le remplacement des pièces défectueuses.

=== UPDATE 16:40 ===

Nous vous informons que nos équipes techniques interviendront d'ici 15 minutes afin de réaliser l'intervention suivante: Remplacement de la carte raid

=== UPDATE 17:30 ===

Cette opération a été achevée le 2018-01-29 17:29:20 EST (UTC -05:00)

PS : Si vous avez des problèmes avec votre base de donner, merci de nous contacter via les tickets.

Nous éprouvons actuellement des difficultés avec le node2.

Nous avon programer une intervention qui devrais etre effectuer dans les heures qui suive.

Nous allons temporairement redémarrer les services le temps de faire l'intervention et la vérification des composantes matérielle.

=== UPDATE 15H06 ===

Nos équipes techniques interviendront d'ici 15 minutes afin de réaliser l'intervention de vérification.

=== UPDATE 16H26 ===

Après vérification du technicien, le problème ne vient pas du matériel, cela veut dire que ça vient du réseau de notre fournisseur qui crée une boucle et finit par surcharger le réseau.

Nous avons remonté le problème à notre fournisseur réseau.

Notre système de monitoring vient de détecter un défaut sur le serveur. Le défaut a été constaté à la date 2018-01-08 20:49:07.

Notre équipe de techniciens sur site (opérationnelle 24h/24, 7j/7), a été informée de ce défaut et va intervenir sur la machine.

Sachez que d'autres interventions peuvent être en cours actuellement et qu'il faut compter en moyenne 30 minutes par intervention et par machine.

=== UPDATE ===
Actions entreprises:
Remplacement de la carte mere.
Mise a jour de l'adresse MAC pour prise en compte du DHCP.
Redemarrage du serveur.

Resultat:
DHCP OK. Boot OK. Serveur sur 'login'. Ping OK, services demarres.

Nous éprouvons actuellement des difficultés avec le node2,

=== Update 13H13 ===

Nous avons fait les vérifications et tout semble normal.

Je vais redémarrer le node est les services.

=== Update 14H12 ===

Nous avons redémarré tous les services.

Nous allons upgrader ces équipements dans les dernières versions recommandées.

L'objectif sur le n7 est d'apporter la mise en oeuvre de nouvelles features et le support de nouveaux hardware dans l'année sur ces équipements.

Concernant les ASR9k, le but est de fixer un bug concernant les NP des linecards.

Durant la maintenance le routeur sera isolé, et le trafic s'écoulera par d'autres points de peering.

Nous prévoyons de faire la maintenance le Vendredi 8 décembre à 08:00am UTC.

Nous rencontrons un défaut du réseau public sur les baies T02E18 T02E20 T02E21 T02E22
Nous investiguons.

===== update =====

Nous avons rencontrer une anomalie software qui a nécessité le reload d'un process sur les routeurs. 
Nous remontons le cas a Cisco pour investiguer. 

Tout est revenu dans l'ordre,
Tous les serveurs sont maintenant joignables.

Nous venons de perdre l'accès a une partie de l'infrastructure, suite à un problème électrique nous avons perdu une quinzaine de siwtchs ...

Nous passons une partie des switches impactés sur des sources de secours ...

Le serveur a bloqué sans raison apparente, nous allons investiguer.

Update : Nous avons remarqué un autre blocage des automations, nous allons redémarrer le serveur et faire un suivi.

Update : Tout semble être revenu à la normale.

On Saturday evening we had a severe thunderstorm that came through and caused our power to surge and some of our servers and network devices to go down for a short time. The issue has been resolved at this time. 

On Saturday evening we had a severe thunderstorm that came through and caused our power to surge and some of our servers and network devices to go down for a short time. The issue has been resolved at this time. 

Chère cliente, cher client,

Nous allons procéder à une maintenance réseau ce jeudi 22 juin, à 5 heures EDT. Veuillez trouver ci-dessous les informations relatives à cette intervention.

L'équipement ne répond plus. Nous investiguons.

=== update ===
L'équipement est revenu quelques min après puis est retombé. 
Nous avons ouvert un ticket en urgence avec Cisco, nous sommes en cours d'investigation avec eux.

Le service est revenu à la normale pour le moment

=== update 2 ===
Le traffic est de nouveau stable depuis 13h41 GMT+2

Le serveur que nous utilisons actuellement a besoin d'être remplacé et pour éviter une coupure nous allons déplacer votre service sur un tout nouveau serveur webradio.

Les informations de connexion à votre serveur restent inchangées, la seule chose que vous avez à modifier c'est l'adresse IP de connexion.

Vous devez remplacer l'adresse IP "195.154.73.232" par "151.80.38.142".

D'ici le 20 mai, les serveurs vont être déplacés et cela va vous donner du temps pour faire vos changements.

Le 31 mai, nous allons fermer les serveurs sur l'IP "195.154.73.232".

Merci

Le serveur à redémarrer 2 fois en 2 jours, nous allons effectuer un "Test Hardware".

Le serveur sera indisponible pendant le test.

MAJ 16/02/2017 17h40 : 

Le disque dur a échoué au processus de test. J'ai remplacé le disque et mis en file d'attente une réinstallation du serveur.

Aucun n’impacte sur les services.

MAJ : Serveur UP

Nous avons détecté une latence sur le disque et nous avons déplacé le serveur.

Notre équipe va faire le suivi.

Nous avons détecté des problèmes de mises à jour de fichier avec OPCache et nous l'avons désactivé, le temps de voir si le problème persiste.

Édit: Après quelques jours de test, nous allons désactiver totalement OPCache de l'hébergement cloud.

Le certificat de sécurité sur le domaine publicssl.net a expiré.

Nous attendons toujours le nouveau certificat.

Vous pouvez simplement accepter et continuer sur le site si votre navigateur vous affiche un avertissement.

Cette semaine, nous allons passer le serveur d'hébergement à la version 6 de PHP.

Cette tache va être mise à jour au début et a la fin de l'intervention.

MISE À JOUR: nous allons faire la mise à jours dans la nuit de samedi à dimanche.

MISE À JOUR (11/10/16): Mise à jour effectuer. 

Un problème est apparu sur PhpMyAdmin et les 2 Webmail, je travaille sur le problème.

MISE À JOUR: Tout est entré à la normale.

Une attaque à couper la connexion du NODE01 dure 2 heures.

Notre équipe travaille sur le problème pour vérifier si l'attaque persiste toujours.

Update : 22H
Tout devrait être revenu à la normale.

Si vous avez encore des problèmes avec votre VPS, merci de nous contacter.

Un problème a fait en sorte que les automations se sont bloquées.

Après vérification, nous avons redémarré les automations.

Dans la nuit du 9 au 10 aout nous allons redémarrer le serveur d'automation.

Le serveur a figé sans raison.

Nous avons redémarré et tout devrait être revenu à la normale.

At about 3:45 local time we experienced a complete loss of utility power. 
At that time we switched to generators.
While on generators a capacitor in UPS 1 exploded. 
Once utility was restored, UPS 1 did not successfully handle the transfer and dropped its load causing a partial power outage on the data center floor.
At this time, power has been restored to all affected servers and Eaton personnel are onsite effecting repairs the the damaged unit.
We plan to have full UPS coverage restored in a few hours.

Le serveur de courriel a connu un ralentissement dans le soir du 19 juillet.

Nous avons réglé le problème.

Le NS1 a des soucis de réseau.

Nous investiguons.

===== UPDATE =====

Le réseau semble stable.

Je vais continuer à faire le suivi par le biais du Datacenter.