|
 |
|
 |
|
Storingen overzicht:
|
|
| 26-07-2010 onderhoud: mailbox server voor inkomende e-mail |
| Dinsdag avond vanaf 22:00 wordt de mailbox server verplaatst van standalone naar backend server. Dit houdt in dat er wat wijzigingen doorgevoerd moeten worden, wat ervoor zorgt dat er momenten zijn dat het ophalen van nieuwe e-mail niet mogelijk is. Er zal geen e-mail verloren gaan en inkomende e-mail wordt tijdelijk opgeslagen op de mails weepers. Na deze wijziging wordt ook de inkomende e-mail gedistribueerd (load balancen) over meerdere servers, wat de beschikbaarheid en capaciteit enorm zal vergroten. |
| |
| 05-07-2010 problemen server13 |
| Momenteel zijn er problemen met server13 (ipadres 95.211.48.44), werken hard aan een oplossing op het eerste gezicht ziet het er naar uit dat het een hardware storing is. |
| |
| 01-06-2010 BBU vervangen van raid kaart fileserver |
| Dinsdag avond gaan we na 23:00 de BBU vervangen van op de raid controller in de file server, deze actie zal rond de 10 minuten duren. Gedurende deze 10 minuten zal de storings placeholder te zien zijn voor de bezoekers. |
| |
| 21-03-2010 webserver cluster herstarten |
| Vannacht rond 00:30 tot 01:00 gaan we de bestanden op het web cluster controleren op fouten daar deze de laatste dagen instabiel is.
Gedurende deze tijd zullen de websites verwijzen naar een onderhoud webpagina (place holder). |
| |
| 01-03-2010 Uitfaseren server14 en server15 17-03-2009: update |
Deze 2 webservers gaan we uitfaseren de klanten op deze server worden verplaatst naar ons loadbalanced cluster. We hebben eerst de websites verhuisd zonder database en gaan nu de websites verhuizen met een mysql database. Eerst wordt de database gemigreerd en dan een dag later de content verplaatst naar ons load balanced cluster. De downtime is minimaal tot nihil via deze methode. Het gaat om de servers met de ipadressen 95.211.48.46 en 95.211.48.47. Een en ander vindt plaats in week 9 en week 10.
update: 17-03-2010 de websites op deze server zijn overgezet naar het local balanced cluster. Deze 2 servers zullen vrijdag worden uitgezet. |
| |
| 10-01-2010 server04.sylconia.nl problemen 13:45 update |
Momenteel zijn er problemen met Windows server04.sylconia.nl we werken hard aan een oplossing, de eerste signalen duiden op een hardware storing.
13:45 We hebben de koeler van de CPU vervangen en nu is de server weer beschikbaar. Met dank aan Leaseweb voor het leveren van de CPU cooler! |
| |
| 03-12-2009 stroomstoring datacentrum Leaseweb |
Door een stroomstoring in het datacentrum zijn alle server(s) uitgevallen, nadat de stroom weer beschikbaar was kwamen sommige server(s) helaas niet automatisch bij. We werken momenteel hard om deze weer terug online te krijgen. Meer lezen over de stroomstoring kan hier.
Update: om 07:00 zijn alle server(s) weer beschikbaar en moeten alle diensten weer beschikbaar zijn voor onze klanten. Wij gaan zelf nog bekijken hoe we een en ander kunnen verbeteren na een stroomstoring. |
| |
| 03-12-2009 LDAP corrupt na stroomstoring |
| Na de stroomstoring van vannacht is de master LDAP corrupt geraakt, we hebben een backup terug gezet van vannacht en deze gesynchroniseerd met de slave LDAP zodat beide weer de actuele gegevens bevatten. Je kon in de tussentijd problemen hebben met de DNS of email. |
| |
| 10-11-2009 ongeplande verlenging onderhoud |
| Vanmorgen liep het onderhoud door omstandigheden iets langer uit dan gepland, hierdoor was het cluster pas om 07:15 weer online. Excuses voor de eventuele ontstane overlast. |
| |
| 16-09-2009 probleem 2e uplink |
| Er is een probleem met de 2e uplink tussen ons en Leaseweb, Leaseweb gaat hier morgen verder naar kijken. Als tijdelijke oplossing is de 2e uplink uitgezet. Gevolg is wel dat enkele ip adressen onbereikbaar waren gedurende 30 minuten vanaf vandaag 17:00. |
| |
| 16-09-2009 onderhoud: 2e uplink internet ontsluiting |
| Vannacht 17 september 2009 gaat Leaseweb tussen 01:00 en 05:00 uitzoeken wat precies het probleem is waar we gisteren middag mee te maken kregen. Hierdoor kan het zijn dat dezelfde ipadressen wederom even onbereikbaar zijn maar met als doel het probleem permanent op te lossen. |
| |
| 26-08-2009 vanavond cluster down |
| Vanavond gaan we het cluster herstarten daar deze de laatste dagen instabiel is. Hierdoor zullen de websites tijdelijk niet beschikbaar zijn. |
| |
| 12-08-2009 certificaat foutmelding webmail |
| Momenteel krijgen klanten een foutmelding over het verlopen certificaat van webmail.sylconia.nl, een nieuw certificaat is aangevraagd en geinstalleerd. |
| |
| 29-07-2009 Netwerk dip van 4 minuten |
| We hebben net een netwerk onderbreking ondervonden van 4 minuten we zoeken nog uit wat de oorzaak is. |
| |
| 21-07-2009 trage verbinding |
| Door het overlijden van een bekend persoon en de massale media aandacht ondervinden wij af en toe wat performance problemen op ons webhosting cluster. Wij zijn druk aan het onderzoeken hoe we een en ander kunnen verbeteren en wat precies de oorzaak is. |
| |
| 23-06-2009 netwerk storing |
| Door een netwerk storing waren de server(s) met de ip adressen 62.212.83.0 15 minuten onbereikbaar. Onze excuses voor de eventueel ontstane overlast. |
| |
| 11-02-2009 loadbalancer problemen |
| vanmiddag ondervonden we van 14:10 tot 14:20 wat problemen met onze load balancers, waardoor sommige klanten timeouts kregen. Dit probleem moet nu opgelost zijn. |
| |
| 07-01-2009 netwerk storing AMS-IX |
| Door een storing bij de AMSI-IX is het netwerk momenteel instabiel. Meer details over deze storing kan je hier nalezen. |
| |
| 18-12-2008 Netwerk storing bij Leasweb |
| Helaas hebben we vanmorgen een paar dagen na de verhuizing een storing moeten verwerken bij onze netwerk leverancier waardoor sommige sites onbereikbaar waren. Meer details over deze storing kan je nalezen op de site van Leaseweb. |
| |
| 24-09-2008 DDOS bij Leaseweb |
| Door een DDos bij onze netwerk leverancier Leaseweb zijn onze servers moeilijk bereikbaar. Helaas kunnen wij hier weinig aan doen dan ervan uitgaan dat Leaseweb dit snel en accuraat op pakt. Meer informatie. |
| |
| 08-03-2008 .NU domein naam problemen bij .NU names |
| Momenteel zijn er voor de 4e keer in een jaar problemen met .NU domeinen. Bezoekers krijgen een place holder van .NU names te zien ipv het echte content. Dit ligt niet aan ons maar zeer waarschijnlijk aan de root DNS servers van .NU names. We hebben contact opgenomen met nunames.nu. |
| |
| 15-12-2007 Netwerk storing bij Leaseweb |
Momenteel ervaren we hoge packet loss naar het datacentrum waar de servers van Sylconia staan. De netwerk leverancier van Sylconia (Leaseweb) doet er alles aan om dit probleem zo snel mogelijk te verhelpen. Meer over deze storing kan je nalezen op de pagina van Leaseweb.
Update 13:30: het ziet er naar uit dat de core switch is vervangen er is geen packet loss meer. |
| |
| 20-11-2007 Storing netwerk provider |
Vanaf 13:15 zijn er netwerk problemen bij onze netwerk leverancier (Leaseweb BV). Uiteraard werken ze hard aan een oplossing zodat dit probleem snel opgelost wordt.
Update:14:15 Het netwerk probleem is verholpen er wordt nog gemeld wat de oorzaak was. |
| |
| 07-11-2007 Database problemen server02 |
| Sommige klanten melden na onze disk verwisseling van vannacht dat hun database content mist. Met name rond eind Oktober 2007. Als dit bij jou ook het geval is neem dan contact met ons op. We restoren dan de gehele database. |
| |
| 06-11-2007 vervangen disk server02 |
vanavond gaat server02 10 minuten down voor het vervangen van de stukke disk.
update: de disk is vervangen de machine is weer up and running. |
| |
| 27-10-2007 server02 onbereikbaar disk crash |
| Vanmorgen was server02.sylconia.nl onbereikbaar door een disk crash. Na het verwijderen van de stukke disk kwam de server weer op. We gaan nu een maintenance window inplannen om de kapotte disk te vervangen. |
| |
| 13-08-2007 certificaat foutmelding webmail |
| Momenteel krijgen klanten een foutmelding bij het openen van webmail. Dit komt doordat het certificaat vandaag verlopen is. We hebben vandaag een nieuwe aangevraagd bij Thawte het wachten is tot deze goedgekeurd is. Na het installeren van het nieuwe certificaat komt deze melding niet meer voor. De melding kan verder geen kwaad voor het functioneren van webmail. |
| |
| 13-07-2007 server01 problemen (blijft rebooten) |
Vandaag kregen we hardware problemen met server01 het systeem bleef rebooten. Sporadisch in de morgen maar continue in de middag. Het vermoeden bestaat dat de voeding stuk is. We hebben de disken overgezet naar een andere machine zodat deze server als nood oplossing weer bereikbaar is. Vanavond gaan we de originele server01 repareren en weer in gebruik nemen.
Update: 23:00 de voeding is vervangen de originele server is weer operationeel. Uiteraard houden we deze server goed in de gaten de komende dagen. |
| |
| 10-06-2007 Website en mailsweepers onbereikbaar |
| Vandaag hebben we een backend switch vervangen. Na het vervangen traden er problemen op met onze load balancers. Hierdoor was onze website en de smtp servers soms minuten onbereikbaar. Dit kwam doordat beide load balancers geen master wilden worden. |
| |
| 15-05-2007 dDos bij onze netwerk leverancier |
| Momenteel ondergaat onze netwerk leverancier een dDos. Daardoor kan het zijn dat onze servers slecht bereikbaar zijn. Uiteraard doen ze alles om dit zo snel mogelijk op te lossen. |
| |
| 30-04-2007 Server03 onbereikbaar |
| Vandaag is de server waar het control panel op wordt gehost gecrashed gisteren avond was deze ook al een keer onbereikbaar. We hebben nog een poging gedaan om hem weer online te krijgen maar uiteindelijk besloten om het control panel van Sylconia te rest |
| |
| 29-04-2007 Server03 onbereikbaar |
| Server03 was niet meer bereikbaar na een reboot via de apc is de server weer beschikbaar. |
| |
| 06-04-2007 Server04 onbereikbaar |
| Sinds 11:55 is onze server04 onbereikbaar doordat er zeer waarschijnlijk problemen zijn met het netwerk van onze netwerk leverancier. Reeds gemeld en ze werken zo snel mogelijk aan een oplossing. Het ipadres wat gebruikt wordt door server04 wordt ook erg |
| |
| 06-03-2007 Disk vervangen server02! |
| Vannacht gaan we na 23:30 een disk vervangen van server02. Door wat kleine problemen afgelopen nacht en verleden week hebben we besloten om preventief een raid disk te vervangen van deze server. De downtime zal maximaal 10 minuten zijn gedurende de disk |
| |
| 20-01-2007 Server01 onbereikbaar |
| Vanmorgen (08:30) waren er "vermoedelijk" koelings problemen met server01 waardoor deze niet meer reageerde. Nu was deze server nog niet aangesloten op een APC dus moesten we op locatie de server een boot geven. Daarna hebben we gelijk de server op een A |
| |
| 24-12-2006 Inlog problemen email |
| Vanmorgen waren er problemen bij het inloggen op de mail omgeving. Dit kwam doordat de backup nog liep met als gevolg dat de LDAP server in problemen kwam bij het afhandelen van de authorisatie verzoeken. We halen hieruit 2 actiepunten, onze monitoring a |
| |
| 11-12-2006 Momenteel problemen met de mailbox server |
|
Momenteel Maandagochtend (5:30) hebben we disk consistentie problemen, we hebben de server in onderhoud en doen onze uiterste best om deze zo snel mogelijk weer beschikbaar te krijgen.
Update: systeem draait weer er is nog wel een probleem met de disk |
| |
| 10-12-2006 Mailbox server down voor vervangen disk! |
| Na het bij plaatsen van het geheugen gisterennacht is er een disk stuk gegaan van de disk array. Deze disk willen we zo snel mogelijk vervangen dus gaat de mailbox server Zondagavond 15 minuten down voor het vervangen van een de stukke disk.
Update: sch |
| |
| 07-12-2006 .NU domein naam problemen bij .NU names |
| Momenteel zijn er voor de 3e keer dit jaar problemen met .NU domeinen. Bezoekers krijgen de place holder van .NU names te zien ipv het echte content. Dit ligt niet aan ons maar zeer waarschijnlijk aan de root DNS servers van .NU names. We hebben contact |
| |
| 15-09-2006 Problemen server02! |
| Vanmorgen waren er problemen met de raid disk array van server02, hierdoor was de server02 vastgelopen en kregen bezoekers timeouts. Na 2 reboots is de server02 weer up and running. We gaan nog een datum en tijd plannen om de stukke disk van de server02 |
| |
