Edpnet network info

Outage: Internet service : East and West-Flanders region, all services impacted: Solved

Dear customers,

We have experienced an outage with the Internet and connected services in regions of East and West-Flanders.

Please find all details below:

Start:	2017-07-03 11:44
End:	2017-07-04 21:37
Duration:	1:09:53
Impacted services:	Internet/Telephony
Affected Areas:	91GEN: 050, 051, 052, 053, 054, 055, 056, 057, 058, 059, 09

Update 03/07/2017 – 12:46 – There is confirmation that there is a fiber cut. Manual rerouting has been done. Everything should be back to normal, but higher latency due to rerouting could be possible.

Update 04/07/2017 – 10:50 – The fiber has been fixed around 05:50, however, the values are below the working thresholds of our equipment. A team has been sent to investigate and the engineers have started works on the fiber. Meanwhile, our rerouting of traffic remains until everything is solved.

Update 04/Jul/2017 21:37 – The connection is restored.

We apologize for the inconveniences.

Best regards
The edpnet team

*All times are listed in CET, Central European Time

Belgium / outage / Update /

Outage: Power outage datacenter Sint-Niklaas – No impact : Closed

Issue closed.

Dear customers,

We are currently experiencing an outage at the datacenter in Sint-Niklaas. Power generator A-feed and B-feed successfully took the load. The power company is fixing the outage as we speak. Further updates will be released as soon as possible.

No impact for customers.

Please find all details below:

Start:	2017-06-27 16:24*
End:	2017-06-27 16:59*
Duration:	35min
Impacted services:	None
Affected Areas:	Colocation Sint-Niklaas

We apologize for the inconveniences.

Best regards
The edpnet team

*All times are listed in CET, Central European Time

Closed / Update /

Outage: No inbound calls possible for SIP trunks

Dear customers,

We are currently experiencing an outage with inbound SIP Trunk calls. The outage is currently under investigation by our NOC team. Further updates will be released as soon as possible.

Please find all details below:

Updates:
16:57 – The issue has been found. Our NOC team is resolving it.
16:59 – ETR is 20 minutes.
17:23 – Most customers are reachable again, the problem should be fully solved at 17:45

Start:	2015-09-08 16:37:00^*
End:	2015-09-08 17:45:00^*
Duration:	1h 8m
Impacted services:	Inbound calls for all SIP Trunk customers
Affected Areas:	N/A

We apologize for the inconveniences.

Best regards
The edpnet team

*All times are listed in CET, Central European Time

Closed / Update /

Info: Spam from “info@edpnet.net”

Dear customers,

We would like to inform you about a spamwave that identifies itself as info@edpnet.net aimed at both customers and non-customers. The source seems to be a botnet.

The mail contains the subject “Uw edpnet factuur 2015xxxxxx” and an attachment. We advice our customers to verify any open invoices via my.edpnet.be.

Please do not inform invoices in the .doc format. All of our invoices are sent using .pdf. We advice those that have opened the .doc file to scan their computer for malware.

Update: Our mailservers are running on a delay as the spam is being processed. It can take several hours for the processing time to normalize. No mail will be lost.

Update: Our mailservers have processed the last of the backlog and are returning to normal functionality.

If you have any questions left, please do not hesitate to contact us.

Best regards
The edpnet team

Issue / Solved / Update /

17 Februari 2014

Update 18/02/2014 – 14u00
Spamhaus reageert (nog) niet op onze tickets en mails, maar ze reageerde deze middag wel op Twitter. Wij hebben momenteel nog geen officiële bevestiging via email van Spamhaus dat we gedeblokkeerd zijn, maar het lijkt er op dat onze range is vrijgegeven. We zien online ook op http://www.spamhaus.org/sbl/latest/ dat we een GO hebben gekregen. Enkele van onze eerste testmails lijken te lukken, andere dan weer (nog) niet. Wij blijven verder testen en wij adviseren u om dat ook te doen. Het kan enkele uren duren vooraleer het internet volledig up to date is van het vrijgeven van onze IP range. Van zodra Spamhaus naar ons officieel communiceert, zullen wij onze blog terug een update geven.

Update 18/02/2014 – 10u30

1 spam listing/melding dient door Spamhaus nog bevestigd te worden. Na bevestiging zal Spamhaus (van zodra zij dat effectief ook willen doen) onze volledig IP range deblokkeren. Zoals reeds gezegd, blokkeert Spamhaus volledige IP ranges van providers in plaats van het specifieke range of IP-adres van de spammer zelf. Blokkering van een volledige IP range van een ISP is een zeer drastische maatregel, maar als een onafhankelijke organisatie kunnen zij zelf de regels en procedures bepalen. Hierdoor hebben zij vaak providers soms ongewild in een wurggreep. Desondanks hebben wij steeds een goede communicatie/verstandhouding met Spamhaus. Onze excuses voor de ongemakken.

Update 17/02/2014 – 16h47
12 individuele Spamhaus vermeldingen zijn geblokkeerd. 8 daarvan zijn bevestigd door Spamhaus. We wachten voor de laatste 4 vermeldingen om door Spamhaus erkend te worden waarna we hopen dat Spamhaus onze volledige reeks zal deblokkeren.

Beste klant

Spamhaus.org heeft onze IP ranges geblokkeerd omwille van 2 klanten die blijkbaar spam uitstuurden. Intussen heeft ons Network Operations Team beide klanten zelf geblokkeerd. Momenteel zal u problemen ondervinden in het versturen van emails naar personen die Spamhaus.org gebruiken als spamfilter.

Enige tijd geleden hadden we gecommuniceerd dat Spamhaus.org steeds drastische maatregelen neemt, nl. het blokkeren van volledige IP-ranges ipv de specifieke spammende IP-adressen.

Als ISP willen we trafiek niet filteren en laten we onze klanten met vast IP-adres toe om hun eigen mail servers te hebben. We kunnen proberen om op een pro-actieve manier trafiek te checken op mogelijk misbruik, en we hebben nze policy ivm trafiek-filtering reeds verscherpt omwille van gelijkaardige problemen in het verleden. Bovendien hebben we poort 25 gesloten voor onze klanten met dynamisch IP-adres om misbruik en spam te voorkomen. Edpnet implementeerde zelfs een Cisco Iron Port mail systeem om spam tot het minimum te herleiden.

Ons Network Operations Team is in contact met Spamhaus.org om onze IP-ranges zo snel als mogelijk ge-deblokkeerd te krijgen.

Closed / Issue / Update /

17 February 2014

Update 18/02/2014 – 13h45
While not responding to tickets or mails from our NOC team, Spamhaus did respond on one of our Tweets. We didn’t get an official confirmation via email from Spamhaus, but it seems that our range isn’t listed anymore. We can see that we had green light on http://www.spamhaus.org/sbl/latest/ We will do some testings and we advize you to do this as well. It can take a couple of hours before the entire internet is up to date of the deblocking of our range. From the moment that Spamhaus confirmed to us officially, we will update our blog again.

Update 18/02/2014 – 10h15

1 listing remains which needs to be acknowledged by Spamhaus. (After acknowledgement Spamhaus will deblock our IP range as soon as they are willing to do so). As said before, Spamhaus blocks entire IP ranges of ISP, instead of 1 specific IP address or range of the spammer. This is a drastic decision, but as an independant organisation, they set their own rules and procedures. And in this way they often have internet service providers in an unwanted stranglehold. Nevertheless we always have good communication with Spamhaus. We are very sorry for the inconveniences.

Update 17/02/2014 – 16h47
12 individual spamhaus listings are blocked. 8 are acknowledged by Spamhaus. We are waiting for the last 4 listings remaining. After we surely hope Spamhaus can deblock our entire IP range.

Dear customer,

Spamhaus.org listed our IP ranges, due to 2 customers who seems to be spammers. Meanwhile our NOC team took the necessary steps to block these spammers, but you are unable to send mails to people who use spamhaus.org as a filter to receive e-mail.

As we already communicated in the past, spamhaus.org always take extreme measurments by blocking entire IP ranges, instead of the one specific spamming IP address.

As an ISP we do not do any filtering of traffic and we do allow fixed IP users to have their own mail servers, but we try to pro-actively scan as much traffic as we can for possible abuse. We already redefined our policy regarding traffic filtering to prevent such issues, but it seems now that we need to protect ourselves and our customers even more.

We still believe that over the years we already took quite a lot of measurements to get the internet free from abuse and spam as we closed port 25 for all our dynamic IP users and we implemented a state of the art Cisco Iron Port mail system.
Nevertheless we still do not do any traffic filtering and we don’t want to.

We are in contact with Spamhaus.org in order to delist our IP-ranges as soon as possible.

Closed / Issue / Update /

8 January 2014 – Mail Exchange Issue

Maintenance to improve stability.

Update 13 – 21/01 17:03
We schedule a maintenance, tomorrow morning at 05:00, to improve the performance and stability of our mail servers. During the maintenance all mail service will be temporary unavailable. No mail will be lost.

Maintenance will start on 22/01 around 05:00 and will take about 30 minutes.

Update 12 – 20/01 10:30
After the works of this weekend it seems that we have found the origin of the slow responsiveness of the mail servers. By replacing the defect disk controller in our main storage server the speed of our mail servers increased drastically. Monday morning we had our first real stress test by you as customer (Monday morning is the most busy time frame in the week for our mail servers) and the response time of our mail service stayed normal. We keep on monitoring our mail system but we presume this issue finally is solved.

Update 11 – 18/01 10:29
Yesterday evening we found another problem with the storage systems, we completely replaced one of the storage systems, this device is now replicating data, and should be finished today. We also needed to replace a defective disk controller in another storage system, this night this controller started working as it should again. Due to the fact that the load is lower in the weekend and at night, everything should anyway work optimal. We need to wait until Monday to see if the problem rises again. We are very sorry for the lack of communication yesterday, we were working very hard, but had no updates.

Update 10 – 17/01 10:57

The overnight monitoring didn’t give the expected result. Therefore our technical team will perform another maintenance at 11h. We keep you up to date as soon as we have more feedback. For your information: meanwhile webmail is back online. Please clear your browser cache if you still arrive on the issues page when connecting to webmail.

Update 9 – 16/01 16:40
Together with our software supplier we are currently implementing a new possible solution. During the next hours and night we will monitor this new implementation to see if it gives the necessary speed gain. We keep you up to date as soon as we have more feedback.

Update 8 – 16/01 10:52
Meanwhile our technical team contacted our hardware supplier in order to find the possible cause and solution. We keep you up to date as soon as we have more feedback.

Update 7 – 15/01 20:15
Our technical team had to bring webmail off line in order to continue to search for a solution for our e-mail delays. We keep you up to date as soon as we have more feedback.

Update 6 – 15/01 17:04
Our technical team is working non-stop to solve the mail issue. There are several problems causing e-mail to slow down. Our technicians are excluding several possible issues one by one. Every time we get one step closer to a solution. As soon as we have more feedback we will keep you informed.

Update 5 – 15/01 11:03
The scheduled maintenance of this night did not completely resolve the issues, therefore we need to schedule another maintenance as soon as possible. Our mail systems will go completely offline at 12:00 for 20 to 25 minutes.

Update 4 – 14/01 14:39
The data has been rebuilt but our systems are still causing time-outs. Our network team will perform a maintenance tonight (Starting at 01:00) to resolve the issues. During this maintenance you will not be able to receive any e-mails. We expect to resume full service by tomorrow morning.

We can confirm that no data is or will be lost.

Update 3 – 13/01 13:13
We expect that the delay for receiving email messages will be solved within 48 Hrs. The delay is caused also due to the high load during working hours. Edpnet is doing everything to speed up ongoing processes

Update 2 – 09/01 10:30
Our data storage system experienced a big failure. No data is lost and everything kept on running. The system is currently rebuilding a lot of data and responds slow. You can experience time-out when retrieving your e-mail. Please try again after a few minutes if you have a time-out. Completely resolving this issue will take some days.

Update 1 – 14:43
The issues were temporary resolved but have returned, our network team is still looking in these issues. We thank you for your patience.

Due to a failure on our e-mail system we have to perform an unforeseen maintenance right now. You won’t lose any mails. Please be patient if your e-mail isn’t working at the moment.

Thank you for your understanding.

Edpnet apologizes for any inconveniences.

Closed / Issue / Update /

09 Januari 2014

Vanwege het falen van onze opslagsystemen worden mails momenteel vertraagd verzonden. Er is geen data verloren gegaan en de systemen draaien nog steeds.De vertraging wordt veroorzaakt door het heropbouwen van onze systemen. Het is mogelijk dat u ook tijdelijk een foutmelding krijgt, gelieve het dan enkele minuten later nogmaals te proberen.

Het volledig oplossen van deze storing kan tot enkele dagen in beslag nemen.

Update 9 – 20/01 16:00
Na werken van dit weekend lijkt het erop dat we de oorzaak van de vertraagde mails hebben gevonden. Door het vervangen van een defecte controller op onze hoofd opslagserver is de snelheid van het systeem drastisch verhoogd. Maandagochtend was de eerste stresstest van ons systeem door u (de klanten) aangezien een maandagochtend één van onze drukste dagen is voor onze mailserver. De responstijden blijven normaal. We blijven alles monitoren.

Update 8 – 18/01 10:29
Gisteravond hebben we nog een probleem gevonden met een opslag systeem, we hebben dit volledig vervangen, en dit toestel is ondertussen data aan het repliceren, dit zou vandaag afgerond moeten zijn. We hebben ook een defecte disk controller dienen te vervangen in een ander opslagsysteem, deze nacht is deze nieuwe controller opnieuw optimaal beginnen werken. Omdat in het weekend en ‘s nachts de load sowieso lager is, zou alles nu optimaal moeten werken. We dienen tot maandag te wachten of het probleem terug zou opduiken. Onze excuses voor de beperkte communicatie gisteren, we waren hard aan het werk, maar hadden geen updates.

Update 7 – 17/01 11:16
De monitoring van de laatste implementatie heeft afgelopen nacht bevestigd dat we nog niet het gewenste resultaat hebben. Daarom wordt nu, om 11u, nog een volgend onderhoud uitgevoerd. Van zodra wij hierover feedback hebben, wordt u op de hoogte gebracht. Intussen is webmail terug beschikbaar. Mocht u nog op de storingen-pagina terecht komen, gelieve dan even uw browser cache te verwijderen.

Update 6 – 16/01 16:40
In overleg met onze hardwareleverancier werd een mogelijke oplossing uitgewerkt. Deze wordt op dit moment geïmplementeerd. In de loop van de avond en de nacht wordt verder opgevolgd om te zien of dit de nodige snelheidswinst geeft zodat er geen vertragingen meer optreden.

Update 5 – 16/01 10:59
Intussen heeft ons technisch team contact met de hardware leverancier en zoeken ze samen naar de mogelijke oorzaak van het probleem. Wij houden u verder op de hoogte van zodra er feedback is.

Update 4 – 15/01 17:02
Ons tech team is nog steeds volop bezig, het is niet een welbepaald duidelijk probleem dat de vertraging in de mails veroorzaakt. Ze zoeken stap voor stap uit door te testen en de resultaten van de ingrepen te controleren. Telkens komen we een stap dichter bij de oplossing. Wij informeren u van zodra we meer nieuws hebben.

We willen nog even bevestigen dat er geen data is of zal verloren gaan.

Update 3 – 15/01 11:22
Het onderhoud van deze nacht heeft de problemen nog niet volledig verholpen, daarom dienen wij nogmaals een onderhoud in te plannen. Deze zal om 12:00 starten en er wordt geschat dat er gedurende een half uur geen mails zullen worden uitgestuurd.

Update 2 – 14/01 14:42
Onze systemen zijn momenteel terug opgebouwd maar er zijn nog blijvende problemen met het vertraagd ontvangen van berichten. Daarom plant ons netwerkteam deze nacht om 1 uur een onderhoud in. Gedurende dit onderhoud is het niet mogelijk om berichten te ontvangen. We verwachten dat alle systemen terug normaal draaien tegen de ochtend.

Update 1 – 13/01 13:22We verwachten dat de vertraging tijdens het ontvangen van berichten zal worden opgelost binnen de 48 uren. De vertraging wordt mede veroorzaakt door een te hoge belasting tijdens de werkuren. Edpnet doet er alles aan om dit proces te versnellen.

Edpnet excuseert zich voor het ongemak.

Maintenance / Update /

18 februari 2013

Er is een netwerk onderhoud gepland met een impact op heel Nederland.
Tijdens het onderhoud zullen alle edpnet diensten (DSL, VoIP, …) geïmpacteerd zijn.

Tijdspanne: 06:00 – 06:15
Downtime: ~15 minuten.

We raden u aan uw modem/router te herstarten na het onderhoud.

Edpnet verontschuldigt zich voor dit ongemak.

Update: Het netwerk onderhoud gepland in de nacht van 17 op 18 februari is tijdelijk uitgesteld.
Wij brengen u op de hoogte van zodra we een nieuwe planning kennen.

Issue / Solved / Update /

22 oktober 2012

Er zijn momenteel problemen met het verzenden van e-mails via onze relay omwille van een probleem met een spamlijst.

Edpnet tracht dit zo snel mogelijk op te lossen.

Update (23/10/2012):

Dear customers,

We have a huge mail issue since yesterday. For the second time spamhaus.org listed our non-spamming IP ranges. You are unable to send mails to people who use spamhaus.org as a filter to receive e-mail.

Up to one month ago we always had a good contact with spamhaus.org. They informed us (on IP basis) where we had our spammers/abusers and we took contact with them to solve the issue.
Since one month spamhaus.org decided to take extreme measurements towards edpnet. Blocking entire IP ranges for several times because of spammers in our network who we deactivated as soon as we were aware of it.

As an ISP we do not do any filtering of traffic and we do allow fixed IP users to have their own mail servers. It seems that this policy of unfiltered & open internet is no longer possible when such measurements are taken. It seems that we as edpnet will have to redefine our policy regarding traffic filtering to prevent such issues as we have now.

Until now we only reacted on complaints and we did not pro-actively scan all traffic for possible abuse.

We do believe that over the years we already took quite a lot of measurements to get the internet free from abuse and spam as we closed port 25 for all our dynamic IP users and we implemented a state of the art Cisco Iron Port mail system.
Nevertheless we still do not do any traffic filtering and we don’t want to.

Currently we have a huge issue and we do not get any response from spamhaus.org.
We do encourage all our customers to contact spamhaus.org.

You can help us by :

Ask your de-listing on : http://www.spamhaus.org/lookup/
Re-tweet our message using the button below:

Tweet to @spamhaus

Edpnet verontschuldigt zich voor dit ongemak.

Update (23/10/2012):

Het probleem lijkt opgelost, spamhaus heeft edpnet van de lijst verwijderd.

1 2