Op dit moment zijn problemen met een deel van de inkomende gesprekken op ons telefonie platform. We hebben dit nu in onderzoek.

De problemen komen uit het netwerk van de toeleverancier. Deze is een onderzoek aan het doen. Ondertussen zijn de gesprekken weer verstaanbaar. We wachten nog even op een afmelding.

Het blijkt dat een partij in het transport tussen de toeleverancier en ons een probleem met apparatuur had. Deze is opgelost en daardoor ook ons probleem met de telefonie. Alles is weer functioneel.

Er is op dit moment een storing in onze webmail omgeving. We werken aan de oplossing.

Na een relatief eenvoudige update van de software bleek de webmail omgeving niet meer te werken. We hebben de vorige versie terug geplaatst, waarna het weer werkt.

Er lijkt op dit moment een storing in het xDSL netwerk. We zoeken naar de oorzaak.

De verbinding naar het xDSL netwerk is weer online, maar we zien nog wel veel packet loss optreden. We blijven de situatie in de gaten houden.

De leverancier van de xDSL verbindingen meldt nu dat in hun netwerk zich een probleem voor doet. Er is nog geen oorzaak of oplostijd bekend.

De verbinding is weer online en alle xDSL lijnen moeten weer werken. We blijven de situatie nog enige tijd extra in de gaten houden.

Op dit moment ondervinden we problemen in ons netwerk. Alles is zeer traag. We zijn aan het onderzoeken.

Ondertussen lijkt het netwerk weer beter te werken. Alleen zijn daardoor diverse servers in de war. Die zijn we ook aan het herstarten.

Alle servers werken weer. We houden het nog even in de gaten. Voorlopig sluiten we dit incident.

Op dit moment ondervinden we hikkende gesprekken in de VoIP telefonie. Onze leverancier heeft dit bevestigd, ze zijn in onderzoek. We gaan op de hoogte gehouden worden.

Ondertussen is het probleem nog niet gevonden. Het betreft overigens een klein aantal van de telefoon nummers.

Het probleem is door de leverancier gevonden en opgelost.

Door een storing in de koelinstallatie in het datacenter in Rotterdam is sommige apparatuur daar uitgevallen. Ook de verbinding met het xDSL netwerk is verbroken. Er wordt hard gewerkt aan een oplossing.

De koelinstallatie is weer in werking. Zojuist is alle apparatuur weer gestart en zijn alle xDSL weer online.

Op dit moment zijn er serieuze problemen in ons netwerk, we zijn in onderzoek.

de problemen begonnen rond 02:52, daarna rond 03:05 raakte we ook ons management op afstand af. We gaan nu onderweg naar het datacenter.

Zojuist is er apparatuur herstart, ons netwerk is weer bereikbaar. Nog niet alle diensten zijn terug, dat hebben we nog in onderzoek.

Vanwege de netwerk problemen, kon ons cluster ook niet functioneren. Ondertussen is ons cluster weer stabiel. De meeste diensten zijn weer beschikbaar.

Alle diensten zijn al weer enige tijd beschikbaar en het netwerk is weer stabiel.

Op dit moment is er een voor ons nog onbekende storing die traagheid veroorzaakt. We zijn in onderzoek.

Er bleek een switch defect, die de vertraging in het netwerk gaf. Dit is opgelost waardoor alles weer normaal is.

Sinds 09:36 is er een storing in het gasvezel netwerk RTHA. De leverancier is hiervan op de hoogte en is op locatie in onderzoek.

Om 10:59 is het probleem door de leverancier opgelost. Alle verbindingen zijn weer online.

In de nacht van vrijdag 16 op zaterdag 17 december a.s. worden er tussen 00:00 en 02:00 uur werkzaamheden uitgevoerd aan onze core router. Hierdoor zal de verbinding met het internet enkele keren gedurende enkele minuten verbroken zijn.

De werkzaamheden zijn met succes afgerond. Er was rond 00:30 een onderbreking van enkele seconden.

Een van onze leveranciers van de glasvezel verbinding tussen Rotterdam en Capelle gaat in de nacht van donderdag 29 op vrijdag 30 september werkzaamheden uitvoeren tussen 23:00 en 07:00 uur. Het verkeer gaat daardoor over andere glasvezel verbinding met een iets beperktere capaciteit. We verwachtten daardoor nauwelijks tot geen impact op de dienstverlening.

Rond 00:35 uur kwam onze verbinding weer op en de leverancier geeft aan dat de werkzaamheden om 05:30 uur zijn afgerond.

Op dit moment lijken er door de NL-IX updates uitgevoerd te worden hun switches. Deze werkzaamheden waren aangekondigd, maar wij stonden er niet bij als partij die er hinder van zouden hebben. Hierdoor zijn sommige websites en diensten op het internet mogelijk moeilijker bereikbaar.

Rond 02:20 uur is de koppeling met AMS-IX weer op en werkt alles weer normaal.

Op dit moment zijn problemen met een deel van de inkomende gesprekken op ons telefonie platform. We hebben dit nu in onderzoek.

Ondertussen komen er weer alle inkomende gesprekken binnen. Het probleem liep tussen 13:58 en 14:28. Onze leverancier geeft aan bekend te zijn met het probleem en komt spoedig met een update.

Na 14:28 hebben wij gene probleem meer gezien. De leverancier heeft aangegeven dat het probleem op dat moment door hun is opgelost. We krijgen nog een RFO binnen een enkele dag. Vooralsnog sluiten we dit incident.
.

Op dit moment zien wij een dienstverstoring bij een leverancier van ons. Er zijn veel DSL verbindingen onbereikbaar. Daarmee zijn ook diverse VoIP diensten ook onbereikbaar. We gaan navragen wat er aan de hand is.

De diensten zijn vrij snel na onze melding weer online gekomen. We houden dit nog even in de gaten.

Er is (nog) geen antwoord gekomen op de vraag waarom de diensten kort onderbroken waren. Omdat alles gewoon online is, sluiten we dit ticket.

Sinds 1,5 uur ondervinden we grote netwerk problemen. We zijn in onderzoek, we hebben nog steeds geen idee.

In het netwerk hebben we 1 kabel gevonden die het probleem was. Deze kabel is nu los. We gaan verder met het opstarten van de diverse servers die in de problemen zijn geraakt.

Er zijn al een aantal diensten uit ons cluster weer beschikbaar. We gaan verder met de nog missende diensten op te starten.

Ondertussen hebben we zo goed als alles weer online. We lopen de laatste puntjes nog na.

Klik hier om te downloaden.

Op dit moment ondervinden we vertragingen in ons netwerk. We zijn aan het onderzoeken.

Er bleek een switch in de problemen, deze is opnieuw gestart, waarna de vertraging gestopt was.
.

Er zijn problemen op het AMS-IX internet knooppunt. We zien peers continu wegvallen en terugkomen, waardoor verkeer soms stokt. Tot de problemen opgelost zijn hebben we alle peers op AMS-IX uitgeschakeld, waardoor verkeer via andere routes wordt afgeleverd.

AMS-IX geeft aan dat het platform rond 10:45 uur weer stabiel is. Om 12:45 uur hebben wij de peers weer ingeschakeld.

Op dit moment zijn er problemen in ons netwerk, we zijn in onderzoek.

De problemen zijn nog aanwezig, toch zijn er diensten die wel werken. Het daadwerkelijke probleem is nog gevonden, we zoeken verder.

Op dit moment is het een en ander al weer even stabiel.

De problemen zijn opgelost, de exacte oorzaak is nog niet gevonden. Daar gaan we nog verder naar zoeken en misschien wordt t.z.t. aan dit incident een RFO toegevoegd.

In het datacenter in Rotterdam wordt in de nacht van 2 op 3 maart tussen 23:00 en 07:00 uur de UPS op de A-feed vervangen. Hierbij vinden aan de hand van een vooraf opgesteld en getoetst stappenplan schakelingen plaats op de hoofdverdeler en de UPS. Het datacenter acht het risico klein, maar mocht het mis gaan dan is de impact groot.

Rond 04:50 uur kwam de melding dat de werkzaamheden succesvol zijn afgerond.

Op dit moment is er een probleem met een cluster bij ons, waardoor een aantal websites trager of helemaal niet reageren. We zoeken naar een oplossing.

Er is een defecte SSD gevonden, die is uit het cluster gehaald. De SSD zal later vervangen worden. Ondertussen is het cluster weer stabiel.

Op dit moment is er een storing in onze mailservers voor klanten (mail.box.nl). We werken aan de oplossing.

Het probleem is verholpen en om het in de toekomst te voorkomen is de diskruimte van alle servers die samen mail.box.nl vormen met een factor 32 vergroot.

Sinds ongeveer 19:22 uur is er een storing op het xDSL netwerk. We hebben contact met de leverancier gezocht over de oorzaak. Zodra we meer weten wordt dat hier gemeld.

Om 20:40 uur zijn alle xDSL verbindingen weer online. We houden de situatie even extra in de gaten.

Op zaterdag 10 juli tussen 01:00 en 06:00 zal er een uitbreiding op de B- feed worden gerealiseerd in het datacenter in Rotterdam.

De betrokken partijen hebben op 6 juli het schakelplan goedgekeurd en alle onderdelen van de installatie zijn gecontroleerd en onderhouden.

Volgens plan is er een externe bypass gerealiseerd op de B-Feed en blijft de A- Feed en het UPS vermogen hierop gedurende het onderhoud volledig beschikbaar. De B-Feed zal tijdens de werkzaamheden niet meer beschikken over een UPS waardoor deze tijdelijk een short break wordt.

Om het risico op netuitval te ondervangen zullen alle werkzaamheden worden uitgevoerd met de installatie in eilandbedrijf.

Naar verwachting zullen de werkzaamheden eerder rond 02.30 zijn afgerond.
.

De werkzaamheden zijn succesvol en zonder incidenten afgerond.

Vanavond, 9 juni, zullen er software downgrades worden uitgevoerd op de apparatuur die de verbindingen op het Capelle Trade Center en Capelle XS verzorgen. Naar het zich laat aanzien worden de recente onderbrekingen veroorzaakt door de nieuwste software die nu in de apparatuur aanwezig is. Met deze downgrade hopen we dat te verhelpen. Hierdoor zullen er tussen ongeveer 22:00 en 23:00 uur enkele korte onderbrekingen in de verbindingen optreden.
.

De werkzaamheden zijn afgerond en alle verbindingen zijn weer online.

Vanavond, 7 juni, zullen er opnieuw updates worden uitgevoerd op de apparatuur die de verbindingen op het Capelle Trade Center en Capelle XS verzorgen. Hierdoor zullen er tussen ongeveer 22:00 en 23:00 uur enkele korte onderbrekingen in de verbindingen optreden.
.

De werkzaamheden zijn afgerond en alle verbindingen zijn weer online.

Vanavond, 4 juni, zullen er updates worden uitgevoerd op de apparatuur die de verbindingen op het Capelle Trade Center en Capelle XS verzorgen. Hierdoor zullen er tussen ongeveer 22:00 en 23:00 uur enkele korte onderbrekingen in de verbindingen optreden.
.

Het onderhoud is afgerond en alle verbindingen zijn weer online.

Vanavond, 11 mei, zullen er software updates worden uitgevoerd op de apparatuur die de verbindingen op het Capelle Trade Center en Capelle XS verzorgen. Hierdoor zullen er tussen ongeveer 20:00 en 22:00 uur enkele korte onderbrekingen in de verbindingen optreden.

De software updates zijn uitgevoerd en alle verbindingen zijn weer online.

Er is op dit moment een storing bij een van onze leveranciers van telefonie verbindingen, waardoor inkomende en uitgaande gesprekken niet werken.

De start van de storing is rond 09:35. We kunnen onze leverancier op dit moment niet bereiken.

Het blijkt dat al vanaf 09:23 de gesprekken niet tot stand kwamen, sinds 09:35 zijn de gesprekken niet meer op te bouwen.

Onze leverancier geeft zojuist aan dat ze zostraks een mededeling gaan doen. Ze erkennen dat er een probleem is en zijn met hun technische team daarmee aan de slag.

Op dit moment zijn der verbindingen met onze leverancier weer online. Zo te zien zijn er ook weer gesprekken.

Onze leverancier heeft aangegeven dat het probleem is opgelost. In een later moment krijgen we nog een uitleg. Voor nu sluiten wij dit incident.

Op vrijdag 30 april a.s. worden er in de ochtend preventieve controle werkzaamheden aan de UPS uitgevoerd in onze colocatie in Capelle aan den IJssel. We verwachten geen impact op de dienstverlening.

Het onderhoud is succesvol afgerond.

Er is op dit moment een stroomstoring in Capelle aan den IJssel, waardoor onze apparatuur op noodstroom draait. We gaan ter plaatse om te onderzoeken wat de verdere impact is.

Rond 06:57 uur kwam de netstroom terug en enkele minuten later is weer over geschakeld op netstroom bedrijf. Helaas bleken enkele systemen voor deze wisseling te gevoelig, waardoor ze opnieuw startte.

Er is op dit moment een storing in het xDSL netwerk. We hebben de leverancier gevraagd naar de oorzaak.

De xDSL verbindingen zijn weer online. Een oorzaak is nog niet bekend. We houden de situatie extra in de gaten.

Gebruikers die hun modem na de uitval uit en weer aan gedaan hebben krijgen geen verbinding. De oorzaak daarvan ligt bij de autorisatie server van de leverancier.

De leverancier meldt dat het probleem verholpen is. Ook wij zien inmiddels alle uitgevallen xDSL verbindingen weer online.

Onze nameserver (DNS) lijkt op dit moment niet overal te functioneren. We hebben dit nu in onderzoek.

Het probleem bleek alleen te liggen bij klanten van Caiway. Daar is blijkbaar de DNS niet functioneel. Door het aanpassen van de DNS in 1.1.1.1 kan het probleem verholpen worden.

Er doet zich op dit moment een probleem voor met de telefonie. Inkomende internationale gesprekken geven soms geen geluid. De leverancier onderzoekt het probleem.

Van onze leverancier kregen we de melding dat het probleem er nog is. Ze zijn er bezig om een oplossing te vinden.

Het probleem is door de leverancier rond 00:20 als opgelost gemeld.

Er zijn op dit moment problemen met enkele van onze verbindingen met het internet. We zoeken naar de oorzaak.

Het probleem lag bij een externe partij en lijkt opgelost. We blijven de situatie nauwkeurig in de gaten houden.

Sommige diensten zijn slecht of niet bereikbaar door een storing op een van onze storage systemen. We werken aan een oplossing.

Het storage systeem is weer stabiel en alle diensten zijn weer normaal bereikbaar.

Afgelopen nacht, 3 december, tussen 00:38 en 00:48 was tijdens voorbereidende werkzaamheden in het datacenter in Rotterdam een onderbreking in de stroomvoorziening. Beide stroom feeds (A+B) waren uitgevallen, als gevolg van een onvoorziene situatie tijdens uitbreidingswerkzaamheden.

Na dit incident ontvingen wij deze melding van het datacenter:

"Op de B-feed waren geplande uitbreidingswerkzaamheden en hierbij is gecontroleerd de stroomvoorziening overgenomen door de A-feed. De UPS (noodstroomvoorziening) van deze A-feed heeft echter door nog onbekende oorzaak de stroomvoorziening afgeschakeld. Aangezien de B-feed al uitgeschakeld was vanwege de genoemde uitbreidingswerkzaamheden is het datacentrum gedurende 10 minuten spanningsloos geweest. De stroomvoorziening is hersteld en de werkzaamheden zijn afgebroken."

Wij verwachten in de loop van de dag meer informatie.
.

Het datacenter zal deze werkzaamheden voorlopig uitstellen. De impact van de uitval bleek als datacenter zeer groot.

Klik hier om te downloaden.

Op dit moment ondervinden we onverstaanbare gesprekken in ons VoIP telefonie platform.

Het probleem bleek bij de leverancier te zijn, die het snel hadden opgelost.

Vanaf woensdagavond 18 november rond 23:00 tot donderdagochtend 07:00 zal 1 van de verbindingen tussen onze datacenters in Rotterdam en Capelle aan den IJssel gerepareerd worden. Tijdens het incident van 18 september is er een tijdelijk trace aangelegd. Deze zal nu vervangen worden door een definitieve. Er is geen impact op onze dienstverlening te verwachten.

De reparatie is succesvol uitgevoerd, er was geen impact op onze dienstverlening.

Sinds ongeveer 14:01 uur zijn diverse xDSL verbindingen uitgevallen. De oorzaak is nog niet bekend, maar er is een urgente ticket bij de leverancier aangemaakt.

Naar het zich nu laat aanzien zijn alle verbindingen wel beschikbaar, alleen is onze mogelijkheid om ze te controleren met een ping opdracht uitgeschakeld.

Op dit moment zijn er problemen ons telefonie platform, een aantal telefoon nummers geven aan dat het nummer niet werkt. We hebben dit probleem in onderzoek.

Ondertussen zijn de telefoon nummers weer gaan werken. We zoeken nog verder naar de oorzaak.

Een proces op een andere server bleek niet goed meer te reageren. Dit proces is herstart, alles is stabiel.

Onze beide verbindingen tussen Rotterdam en Capelle zijn uitgevallen, waardoor alle diensten onderbroken zijn.

Ondertussen is er een omleiding werkend gekregen, de diensten zijn weer beschikbaar.

Klik hier om te downloaden.

Op dit moment zijn er problemen in ons netwerk, alle diensten zijn onbereikbaar, we zoeken naar de oplossing.

In Rotterdam is er een grote glasvezel kabelbreuk, deze veroorzaakt onze problemen, het kan nog enige tijd duren voor deze hersteld is.

Ondertussen is er een omleiding werkend gekregen, de diensten zijn weer beschikbaar.

Er is op dit moment een verstoring bij onze toeleverancier van xDSL verbindingen waardoor een groot deel van deze verbindingen verbroken zijn.

Sinds ongeveer 07:45 lijkt de situatie weer stabiel al moet bij sommige verbindingen het modem even opnieuw gestart worden om de verbinding te herstellen.

De storing doet zich niet meer voor en lijkt daarmee opgelost.

In de vakantie periode is onze telefonische bereikbaarheid van maandag 20 juli tot en met vrijdag 21 augustus verkort. We zijn dan telefonisch bereikbaar van 09:00 tot 15:00 uur. Vanaf maandag 24 augustus zijn we weer telefonisch te bereiken van 09:00 tot 17:00 uur.

De vakantie periode is voorbij, we zijn weer telefonisch bereikbaar van 09:00 tot 17:00 uur.

De MySQL server op Aurum 01 lijkt het erg druk te hebben waardoor sommige queries op die server mogelijk langer duren of helemaal geen resultaat geven.

Het probleem doet zich niet meer voor.

Op dit moment is er een probleem met de telefonie, we zijn in onderzoek.

Het probleem lijkt verholpen door het herstarten van een van onze telefonie servers. We houden deze melding nog even open om zeker te zijn dat het ook daadwerkelijk opgelost is.

Jammer genoeg hebben we te maken met een storing die we nog niet onder controle krijgen. Met regelmaat werkt het, maar dan toch ineens kunnen er geen gesprekken opgebouwd worden. We zijn nog steeds aan het zoeken wat de oorzaak is, zodat we het kunnen oplossen.

Ondertussen is sinds 16:00 het telefonie platform stabiel. Ook begrijpen we op dit moment beter de oorzaak. Er is een software aanpassing nodig, die we nu testen op een apart platform. Zodat we het huidige platform nog kunnen laten draaien, nu die stabiel is.

De software aanpassing is uitgevoerd, het platform is stabiel gebleven. Voor nu sluiten we dit incident, maar blijven het telefonie platform goed in de gaten houden.

De software update heeft het probleem niet volledig verholpen. In de nacht van donderdag 2 op vrijdag 3 juli zullen we tussen 05:00 en 06:00 werkzaamheden uitvoeren, waardoor de telefonie op de server Argon 02 een of meerdere keren enkele minuten niet beschikbaar zal zijn.

De werkzaamheden zijn afgerond. We houden het systeem de komende tijd extra in de gaten.

Door een spontane herstart in de core router was er tussen ongeveer 16:33 en 16:41 geen verbinding met het Internet. De router is inmiddels weer op en de verwachting is dat alles spoedig weer normaal zal zijn. We onderzoeken nog wat de oorzaak was.

Alle verbindingen zijn weer online en de oorzaak blijkt een zeldzaam voorkomende bug in de kernel software van de router.

De Carbonium 01 is uitgevallen en wil niet direct meer starten. We zijn aan het onderzoeken wat het probleem is.

Ondertussen loopt de Carbonium 01 server weer, maar een aantal websites zijn nog heel traag. We zoeken verder naar het probleem en de oplossing.

Het probleem is opgelost, het bleek alleen over een aantal websites te gaan met een specifieke plugin. Er was een blokkade ontstaan, waardoor de plugin lang moest wachten. De blokkade is opgeheven, allee website zijn weer snel.

Het probleem is opgelost.

In de nacht van woensdag 25 op donderdag 26 maart a.s. zullen er tussen 02:00 en 06:00 uur werkzaamheden plaatsvinden aan het glasvezel netwerk op Rotterdam The Hague Airport. Daardoor zullen er meerdere korte onderbrekingen in de internet verbinding plaatsvinden.

De werkzaamheden zijn afgerond.

Na een software update op de webserver Carbonium 01 blijken diverse sites niet meer te werken. We zoeken naar de oplossing.

De oorzaak bleek in gewijzigde rechten van bepaalde mappen en bestanden te zitten. Het probleem is opgelost en alle websites op Carbonium 01 werken weer naar behoren.

Tijdens de kerstdagen en op vrijdag 27 december zijn wij gesloten en telefonisch niet bereikbaar. Op maandag 30 december zijn we wel bereikbaar en op dinsdag 31 december sluiten we om 15:00 uur. Vanaf 2 januari 2020 zijn we dan weer te bereiken.

Vanaf vandaag, 2 januari 2020, zijn we weer telefonisch bereikbaar tussen 9 en 17 uur.

Op een van de stroom subverdelers in onze colocatie is onverwacht om 18:26 uur de aardlekschakelaar uit gegaan. Daardoor viel in een vijftal racks de stroom op een van de voedingen in die racks weg. Ongeveer 2 minuten later is de stroomvoorziening hersteld.

We zoeken naar de oorzaak van het uit gaan van de aardlekschakelaar, maar verwachten geen vervolg incidenten.

Op dit moment is er een probleem met ons netwerk, niet alle diensten zijn beschikbaar, we zoeken naar de oplossing.

Door een probleem met een disk werd ons cluster zo traag dat diensten zoals e-mail niet meer wilde werken. De disk is verwijderd, het netwerk en diensten zijn weer stabiel.

We zien delays in round-trip tijden via de NL-ix. Dit platform gaan we tijdelijk uitschakelen, zodat routes over andere internet exchanges gaan lopen.

Ondertussen zijn onze verbindingen met het NL-ix platform uitgeschakeld. En we hebben ook een bevestiging van de NL-ix, die aangeven problemen te hebben.

Op dit moment ziet het NL-ix platform er stabiel uit. We wachten met inschakelen van dit platform op de afmelding van het incident bij de NL-ix.

Zojuist gaf NL-ix aan dat de veroorzaker gevonden is en het probleem verholpen. Onze verbindingen op het NL-ix platform zijn weer ingeschakeld.

Op dit moment is er een probleem met de interne message-broker, waardoor telefoon gesprekken niet op gang komen. We zoeken naar de oplossing.

Ondertussen werkt de telefonie weer. Alleen is de message-broker nog niet compleet actief. We werken verder aan de oplossing.

De message-broker is weer helemaal online. We gaan nog uitzoeken waarom deze message-broker was gestopt.

In de vakantie periode is onze telefonische bereikbaarheid van maandag 8 juli tot en met vrijdag 30 augustus verkort. We zijn dan telefonisch bereikbaar van 09:00 tot 15:00 uur. Vanaf maandag 2 september zijn we weer telefonisch te bereiken van 09:00 tot 17:00 uur.

Vanaf maandag zijn we weer bereikbaar van 09:00 tot 17:00 uur.

Vanwege een defect in een virtual sever, zijn een aantal diensten uitgevallen. We zijn bezig de diverse diensten weer op andere virtual servers op te starten.

De diverse diensten zijn weer gestart. Alleen is nog niet alle mail verwerkt.

Ondertussen zijn ook alle emails verwerkt.

Er is op dit moment een grote landelijke storing in de telefonie van KPN. Wij hebben daar op zich geen hinder van, maar veel gesprekken gaan natuurlijk naar nummers die bij KPN zijn ondergebracht, waardoor gesprekken toch niet tot stand komen.

De storing is opgelost.

Op dit moment ondervinden we problemen met uitgaande gesprekken in ons telefonie platform. We zoeken naar een oplossing.

Met een noodoplossing zijn de uitgaande gesprekken weer werkend gemaakt. We werken nu aan een definitieve oplossing.

Er is nu een definitieve oplossing. Alles werkt weer naar behoren.

Een deel van onze VoIP klanten kan niet naar buiten bellen door een storing bij de leverancier van onze uitgaande verbindingen. We zijn op zoek naar de reden van deze storing en oplossing.

Inmiddels is duidelijk dat inkomende gesprekken wel lukken, alleen uitgaande gesprekken werken niet. De leverancier werkt aan een oplossing.

Het probleem is even na negen uur door de leverancier verholpen.

We zijn de verbinding met het glasvezel netwerk op Rotterdam The Hague Airport kwijt. We hebben de leverancier gevraagd om meer informatie over deze verstoring.

De verbindingen zijn weer terug. We hebben nog geen melding over de oorzaak gehad.

Er is een storing geconstateerd in het xDSL netwerk. We hebben gemerkt dat er een korte onderbreking op xDSL verbindingen is opgetreden. De storing leek opgelost, maar we hebben gemerkt dat dit toch niet het geval bleek te zijn. We zijn nog aan het onderzoeken waar het probleem door is ontstaan. Er is nog geen verwachte oplostijd bekend.

Ondertussen zijn veel, zo niet alle, xDSL verbindingen weer online.

Duidelijk is dat alle verbinding weer terug zijn.

Sinds gisteren hebben we te maken met een overbelasting op onze DNS servers. Het betreft zeer grote hoeveelheden vreemde verzoeken. Daardoor zijn onze DNS servers traag in het antwoorden naar correcte verzoeken. Met onze firewall proberen we de juiste rules aan te maken om deze vreemde verzoeken te blokkeren.

Ondertussen is de load van de DNS servers flink omlaag. Het een en ander zou weer sneller moeten werken.

Onze DNS servers zijn weer stabiel. De vreemde verzoeken zijn nu verdwenen.

Deze ochtend ondervinden we problemen met de gesprekskwaliteit van de telefoon gesprekken in ons telefonie platform. Het is wisselend of een gesprek al dan niet verstaanbaar is. We hebben dit probleem in onderzoek.

Gisteren middag is het probleem verholpen, het bleek een overbelasting in de DNS servers.

Op dit moment ondervinden wij problemen in ons netwerk. We zijn aan het onderzoeken.

Ondertussen zijn er verbindingen hersteld, nog niet alles is terug.

Het probleem bleek een niet goed werkend routerings proces te zijn. Excuses voor het ongemak.

Op dit moment zit er in ons netwerk een vreemde vertraging en/of verlies in het verkeer. Alle diensten functioneren normaal, soms met wat vertraging. We hebben dit probleem in onderzoek genomen.

De oorzaak van de vertraging lijkt gevonden. Over de glasvezel verbindingen tussen ons datacenter in Capelle aan den IJssel en Rotterdam wordt gebruik gemaakt van meerdere kleuren lasers. Een van deze lasers lijkt de fouten te veroorzaken. Deze laser is nu uitgeschakeld. Morgen kunnen nog korte hikjes plaats vinden omdat we onderzoeken of de oorzaak de laser zelf is of de gebruikte patchkabels.

Ondertussen is de defecte fiber patch kabel vervangen. Er is geen verlies meer in het verkeer.

Tussen ongeveer 13:50 en 14:10 hadden we te maken met veel verkeer op ons netwerk. Gedurende die periode waren een aantal diensten slecht bereikbaar, zoals VoIP telefonie. De waarschijnlijke oorzaak was een virtuele machine die niet wilde stoppen. Na het uitschakelen hiervan was het verkeer weg. Waarna ons netwerk weer stabiliseerde.

Alles is weer normaal.

In het weekend van 9 en 10 maart vinden er werkzaamheden plaats aan ons netwerk. Hierdoor kunnen mogelijk enkele korte onderbrekingen in de verbinding met het internet plaats vinden.

Het onderhoud is succesvol afgerond.
.

Er worden vanmorgen reguliere controle en onderhoud werkzaamheden uitgevoerd aan de klimaat systemen in onze colocatie in Capelle aan den IJssel. Daardoor kan de temperatuur daar iets varieren.

Het onderhoud is afgerond.

Op dit moment zijn er bij ons bekende problemen met het verwerken van email, wij zoeken naar de oplossing.

Er bleef veel mails in de queues hangen, ondertussen hebben we alles geleverd, we lopen het nog even na.

Alle mail is afgeleverd, de queues zijn leeg. We zoeken nog naar de oorzaak om herhaling te voorkomen.

Er worden vanmorgen reguliere controle en onderhoud werkzaamheden uitgevoerd aan de klimaat systemen in onze colocatie in Capelle aan den IJssel. Daardoor kan de temperatuur daar iets varieren.

Het onderhoud is afgerond.

Onze verbinding naar het bedrijventerrein CapelleXS is verbroken. Mogelijk is een stroomonderbreking ter plekke de oorzaak, maar daar wij niemand kunnen bereiken die dat kan controleren kunnen we op dit moment geen verdere acties ondernemen. Morgenochtend zullen we verder zoeken naar de oorzaak.

De spanning is terug en daarmee zijn alle verbindingen weer op.