Nieuws
Beveiligingsupdates op een aantal hardware nodes
Geplaatst door Michel [Support] aan 31-07-2019 09:32

Op een aantal hardware nodes (en onderliggende servers) worden de laatste beveiligingsupdates geinstalleerd.
Hierdoor kan uw server / website enkele minuten onbereikbaar zijn. Het betreft hier noodzakelijke updates.

Excuses voor het ongemak.


Verder lezen »

[update 3] Onderhoud hardware node
Geplaatst door Michel [Support] aan 24-07-2019 21:53

Aangezien één hardware node niet meer voldoet aan onze (strenge) eisen, gaan wij deze uitmigreren naar een nieuwe omgeving.
Dit zal voor nu downtime betekenen voor een kleine aantal servers, maar een betere stabiliteit en continuïteit in de toekomst.

Wij verwachten dat de downtime minimaal is, maar desalniettemin melden wij deze werkzaamheden toch even aan u.

Excuses voor het ongemak in deze.


Update 1: 5:50 het onderhoud is afgelopen en de servers zijn weer normaal opgestart en draaien weer naar behoren.

Update 2: er zal nogmaals onderhoud plaats vinden op een aantal hardware nodes, technici proberen de problemen tot een minimum te houden, maar er zal downtime zijn. Gepland onderhoud zal vandaag (25 juli) rond 22:00 plaats vinden.

Update 3: de werkzaamheden zijn inmddels afgerond en alles draait weer zoals het hoort (en wellicht iets vlotter als voorheen).


Verder lezen »

DDoS aanval op hardware node [updates]
Geplaatst door Michel [Support] aan 13-06-2019 08:42

Op dit moment ervaren op één van onze hardware node een DDoS aanval.
Hierdoor kunnen bepaalde servers en/of websites niet bereikbaar zijn.

Technici zijn hiermee bezig en zullen de nodige IP ranges derhalve dan ook blokkeren.
Daarna zal getracht worden om te kijken of de aanval op één (of meerdere) specifieke websites gericht zijn.

UPDATE I [13 juni]:
Technici zijn een paar uur bezig geweest op de verschillende servers op deze hardware node en eveneens op de hardware node zelf.
De DDoS aanval op deze hardware node (en onderliggende servers) kwamen uit een drietal landen. Deze landen zijn volledig geblokkeerd (Rusland, China en Iran).
Daarnaast zijn een aantal websites offline gezet die enorm gedateerde software c.q. programmatuur draaide. Hiervan waren een aantal flink gehackt.

Derhalve nogmaals uw aandacht voor het volgende; houdt uw website altijd bij (denk hierbij o.a. niet alleen aan Wordpress, maar ook aan plugins en thema's). Verander ook regelmatig uw wachtwoorden t.b.v. Plesk, FTP, email, Wordpress, etc.
Websites jaren lang laten versloffen is een garantie voor problemen en bij problemen plaatsen wij dergelijke websites gewoonweg offline, zodat de "goede" klanten (= die wel regelmatig updaten) hiervan niet het dupe worden.


UPDATE II [14 juni]:
Onze technici (in samenwerking met Plesk) hebben een hostingaccount gevonden welke meerdere keren per seconde een script deed aanroepen. Ook dit zorgde voor een (enorme) overlast op de hardware node / server. Wij hebben de persoon in kwestie dringend verzocht om dit aan te passen, anders zijn wij genoodzaakt om het account offline te zetten. Voor de zekerheid wordt de Plesk server gereboot nu, dus deze zal 1 á 2 minuten offline gaan (maximaal).


Verder lezen »

Storing hardware node
Geplaatst door Michel [Support] aan 09-06-2019 08:39

Op dit moment ondervinden wij een storing op het datacenter met één van onze hardware node.
Hierdoor zijn een aantal servers niet bereikbaar. Technici zijn inmiddels op locatie en gaan kijken wat er aan de hand is.

Zodra wij iets meer weten, dan melden wij dit uiteraard.

Excuses voor het ongemak.

Update [08:45]
De hardware node is weer terug en daarmee ook de bijbehorende servers (met websites). De reden wordt nog achterhaald.
Deze server heeft nieuwe hardware (die uitvoerig getest is), dus dat kan de oorzaak niet zijn. Naar alle waarschijnlijkheid een mogelijke DDoS aanval op bepaalde poorten.
In ieder geval wordt dit dus onderzocht. Mogelijk zullen bepaalde servers naar andere hardware nodes worden gemigreerd om de oorzaak te kunnen achterhalen.


Verder lezen »

Spoed onderhoud APC
Geplaatst door Michel [Support] aan 17-05-2019 09:35

Naar aanleiding van de stroomstoring enkele weken geleden zijn wij erachter gekomen dat één APC niet goed functioneert.
Derhalve wordt deze nu met spoed vervangen om verdere problemen te voorkomen.

Downtime zal minimaal zijn, daar het vervangende exemplaar al geinstalleerd is. Wij sluiten de servers die hierop aangesloten zijn tijdelijk (op een nette manier) af en vervolgens plaatsen wij de stroomkabels in de nieuwe APC.

Zodra de werkzaamheden afgerond zijn, dan melden wij dit hier. Excuses voor het ongemak.

Update 10:02: werkzaamheden zijn afgerond.


Verder lezen »

Storing datacenter Nedzone 28 april rond 22:30 (updates)
Geplaatst door Michel [Support] aan 28-04-2019 16:01

- Update 29 april toegevoegd
- Update 30 april toegevoegd

Gisterenavond was er een stroomstoring bij de netbeheerder. Hierdoor zaten alle servers gehost bij Nedzone zonder stroom.
Door een falende schakelaar ging de backup noodstroomvoorziening niet aan.

Als gevolg van de stroomstoring waren alle servers onbereikbaar. Nadat de stroomvoorziening hersteld was, kwamen de meeste servers zonder problemen terug.
Een beperkt aantal hadden problemen; hier zijn technici met man en macht bezig geweest om dit te herstellen. Inmiddels moeten alle servers weer gewoon functioneren.

Ook was Spamprotector hierdoor tijdelijk niet bereikbaar. De configuratie was hiervan beschadigd. Technici zijn tot in de middag bezig geweest om dit probleem zo snel mogelijk op te lossen, zodat iedereen (met Spamprotector filtering) weer emails kon ontvangen.
Op dit moment is het weer mogelijk om emails te ontvangen en worden oude emails ook weer afgeleverd. Gezien de hoeveelheid emails worden deze oude emails in batches verstuurd zodat het systeem niet overbelast raakt.

De ontwikkelaars controleren morgen (maandag 29 april) nogmaals beide servers op eventuele fouten in de configuratie.

Excuses voor het ontstane ongemak in deze.

Een stroomstoring kan vandaag de dag altijd gebeuren, echter hoort de noodstroomvoorziening dit op te pakken. Helaas werd er niet automatisch overgeschakeld. De installateurs zijn bezig met het onderzoeken van de oorzaak en zullen dit spoedig opgelost hebben.

Ook heeft Nedzone een persbericht eruit gedaan. Gemakshalve plaatsen wij de reactie van Nedzone hieronder.

Afgelopen avond is om 22:55 de stroom uitgevallen in een deel van Steenbergen. Zoals gebruikelijk is deze onderbreking opgevangen
door de UPS installatie en zijn onze generatoren opgestart. Helaas is er om nog onverklaarbare reden iets fout gegaan bij het
afschakelen van de trafo en het bijschakelen van de generatoren op de spanningsbar. Hierdoor hebben de generatoren de
spanning niet overgenomen en zijn de batterijen van de UPS installatie leeggelopen. Dit heeft als direct gevolg gehad dat de
apparatuur op Nedzone 2-1 is uitgevallen. Nedzone 2-2 heeft geen problemen gehad. 

In totaal heeft de zaal ongeveer een half uur zonder spanning gezeten, alleen duurde het enige tijd voordat de netwerkverbindingen
weer hersteld waren. Leveranciers van onze generatoren en electrotechnische installatie zijn vannacht ter plaatse geweest en
hebben de problemen onderzocht. 

Wij komen aankomende week bij u terug met meer informatie. 

Wij bieden onze excuses aan voor deze enorm vervelende onderbreking en het feit dat wij erg lastig bereikbaar waren. We gaan
deze procedures aankomende week ook herzien.



Update 29 april: nieuw bericht van Nedzone

Afgelopen zondag en vandaag is er door onze leverancier en onszelf onderzoek gedaan naar de exacte aanleiding van
de stroomstoring van afgelopen weekend. Inmiddels is de oorzaak gevonden en is vandaag succesvol een black-building
test uitgevoerd. 

Wij zullen morgen bij u terugkomen met een uitgebreide RFO met daarin de oorzaak en de punten die we gaan verbeteren
om herhaling te voorkomen.



Update 30 april: Nedzone RFO inzake stroomstoring

- U kan het desbetreffende .PDF bestand hier terug lezen: https://www.helpburo.eu/uploads/nedzone_stroomstoring.pdf


Verder lezen »