Felsökning pågår

En driftstörning hos vår ena internetleverantör påverkar åtkomst till Web01, Web02, Web03, Web04

Eftersom driftstörningen är hos vår internetleverantör så väntar vi på att de ska åtgärda problemet.

Vi uppdaterar så fort vi får mer information.

Status hos IP-Only:

https://www.ip-only.se/privat/driftstatus/

Uppdatering:

Problemet är nu åtgärdat.

Vi har ett brandväggsproblem som påverkar servrarna web01-web04. Troligen är det ett konfigurationsfel. Tekniker jobbar på problemet. Vi återkommer här när problemet är löst

UPPDATERING 2022-04-11 08:45:

Problemet skall nu vara åtgärdat

Planerat underhåll för Human

Vi kommer behöva starta om Human vilket kommer innebära driftstörning


Vid frågor är ni välkomna att kontakta oss via våra vanliga support kanaler

Mvh
Wopsa Web Services AB
+46 40 31 58 50
support@wopsa.se
www.wopsa.se

Vi upplever just nu problem med datakulturservrarna

Det är följande servrar:

Q
Human
Borg
Klingon
Vulcan

Vi har intermittenta problem i vårt nätverk. Något får hela nätet att frysa till under några minuter. Detta resulterar i att paket tappas och det går långsamt eller inte alls för alla anslutna enheter. Det finns inget mönster avseende tid när felet kan dyka upp. Felet är svårdiagnostiserat eftersom loggfunktioner inte hinner reagera på grund av att felet sker i paket -transporten.

Vi tror att felet uppträder pga en dålig switch i nätet eller en server med trasigt nätverkskort. Vi har ungefär 80 switchar som sammanbinder vårt nätverk och samtliga måste gås igenom. Vi har också stamswitchar som gått i 4 år utan omstart. Dessa måste startas om idag efter 23:59. Omstarten av stamswitcharna kommer resultera att man tappar anslutning mot internet i ungefär 5 minuter. Trafiken återhämtar sig själv och ni som kund behöver inte göra något.

Just nu har vi förbindelse problem till våra servar, så dessa kan ibland inte nås.

Vi håller på att arbeta med problemet.

Uppdaterar när mer information kommer.

Förbindelsen har varit stabil sedan 10:10 därför stänger vi detta ärende.

Planerat underhåll för Web03

Vi kommer behöva starta om Web03 vilket kommer innebära driftstörning


Vid frågor är ni välkommna att kontakta oss via våra vanliga support kanaler

Mvh
Wopsa Web Services AB
+46 40 31 58 50
support@wopsa.se
www.wopsa.se

Planerat underhåll för Web02 Web03 Web04

Vi kommer behöva starta om ovannämnda servrar vilket kommer innebära driftstörning


UPDATE: Servrarna är omstartade och uppe stabilt igen

Mvh
Wopsa Web Services AB
+4640315850
support@cygrids.com

Planterat underhåll som påverkar servrarna klingon och vulcan, servrarn kommer vara otilgängliga en kort stund.

Planterat underhåll som påverkar servrarna klingon och vulcan

Planerad omstart idag kl 13:00 på servern web01

Beräknad nertid 5-10 min

Update: Server uppe igen

Servern Borg ska startas om.

Planerad omstart idag kl 20:00 på servern human

Beräknad nertid 5min

Serverstatus / driftinformation nedan är felaktig och håller på att rättas till.

Servrarna som inte visar någon information är alltså INTE nere utan det är vårt kontroll script som visar fel.

En ny version av apache 2.4 håller på att installeras på denna server.

Viss driftstörning på hemsidor kan förekomma under denna tidpunkt.

Och nej, detta är inte ett 1:e aprilskämt.

En ny version av apache 2.4 håller på att installeras på denna server.

Viss driftstörning på hemsidor kan förekomma under denna tidpunkt.

Web23 fick startas om på grund av ett fel men kan inte startas fullt ut förrän mysql databaserna kontrollerats/reparerats.
Bör vara uppe inom kort igen (skrivet 13:50).

Vi uppgraderar/uppdaterar Web22 servern idag !

Det kan förekomma korta stop när servern bootas om alt. tjänsterna startar om.

Cloudlinux os update, easyapache4 ( Multiphp funktionerna i cpanel), Imunify360 skydd

Servern kommer att flyttas från externt datacenter till Cygrids primära datacenter

Komplett information om vad detta innebär kan man läsa på länken nedan

Flytt av server vulcan.datakultur.se

Servern kommer att flyttas från externt datacenter till Cygrids primära datacenter

Komplett information om vad detta innebär kan man läsa på länken nedan

Flytt av server human.datakultur.se

Migrering klart

Servern kommer att flyttas från externt datacenter till Cygrids primära datacenter

Komplett information om vad detta innebär kan man läsa på länken nedan

Flytt av server klingon.datakultur.se

Servern kommer att flyttas från externt datacenter till Cygrids primära datacenter

Komplett information om vad detta innebär kan man läsa på länken nedan

Flytt av server q.datakultur.se

Servern kommer att flyttas från externt datacenter till Cygrids primära datacenter

Komplett information om vad detta innebär kan man läsa på länken nedan

Flytta av server borg.datakultur.se

Uppdatering

Arbetet påbörjas 10:30 istället.

WEB06  har problem och tekniker jobbar på det

Inkoppling av en brandvägg orsakade driftstörning för alla wopsa webbservar.

Felsökning och åtgärd påbörjad och åtgärdades

Efter 10:30 fungera alla tjänster igen.

Minneskapsel i server larmar att den uppnått maxgränsen för fel.

Minneskapsel behöver bytas ut mot en ny, servern kommer att stängas ner en kort stund för att vi ska kunna byta minneskapseln i server.

Beräknad nertid 10-15min

Tekniker arbetar med störning på servern.

Server planeras vara uppe 10:00

Edit: Servern är nu uppe

SSL certifikatet på detta sysem har löpt ut, tekniker håller på att beställa nya ssl certifikat till servern och installea dessa.

Ny ssl certifikat installerad, problemet ska nu vara borta.

16.15 - 16.20 omstart av web04

På grund av fel i filsystemet och risk för haveri flyttas konton från Gorn till ny server.

Det görs under Torsdag och Fredag (13/7)

Kunder som använder externa egna namnservrar/DNS måste själv peka om de adresser som idag går till gorns ip adress eller hostnamn (gorn.datakultur.se).
De flesta flyttas till web03.wopsa.se, ip: 213.212.61.213 vilket ni kan se i kundarean/mina tjänster ... gå vidare till cpanel där så ser ni servernamn och IP.

Detta är också en bekräftelse på att e-postmeddelanden som skickats ut till kunder med extern DNS är riktigt och kommer från Wopsa.

Det är en störning i Malmö just nu som gör att man inte an nå alla servrar där inklusive Q och Gorn.

Tekniker jobbar på det.

Vi jobbar på detta.

servern är nere

Idag har vi en reboot day där vi startar om flera servrar.
I de flesta fall tar det runt 5  minuter och under den tiden är hemsidor och epost nere.

Detta görs på grund av uppdateringar av operativsystemet.

Tack för er förståelse!

Driftstopp/underhåll hos IIS.SE

https://www.iis.se/nyheter/planerat-driftuppehall-under-helgen/

Idag installerar vi applikations-, malware-, intrång- och brutefore skydd på Klingon servern.

Det skall normalt sätt inte bli någon nedtid eller störning utan barat säkrare server, hemsida, epost mm.
Men denna sida uppdateras löpande som vanligt om det är problem som påverkar flera.

Planerad driftstop för underhåll av server Vulcan

Planerad underhåll på server Klingon

Web23 har lite problem och kan inte nås.

Reboot pågår av servern just nu.

Reboot krävs efter uppdatering av systemet.

web23 startas om

Tekniker jobbar på det.

----------------------------

Klingon server startas om.

Alla servrar är uppe igen.

Tekniker har jobbat hela natten och fick precis upp Borg servern också som var envis.
Genomgång av systemet/servrarna görs under dagen för att säkerställa att allt är ok.

Vi beklagar nedtiden och tackar för ert tålamod.

/Wopsa Web Services

Uppdatering 13:00
Försök att återskapa datavolymerna misslyckades. Återställning från aktuell backup pågår nu.

Uppdatering 11:15
Tekniker jobbar fortfarande med felavhjälpning

Uppdatering 10:00
Tekniker är på plats.

Uppdatering 08:50
Felet är identifierat till en trasig disk. Tekniker är på väg.

Vi upplever just nu driftstörningar på vissa servrar. Felsökning pågår.

Konton som låg på web04 har flyttats till web02!

De är återställda från Januari månadsbackup och all e-post har synkroniserats, även februari.
E-post skickas ut med mer info under dagen till alla berörda som vi tackar för tålamodet!

Vid problem med e-post - login, hämta, skicka ...  vänlgen se till så ni följer dessa intällningarna som även finns i cpanel.

Tips
Epost lösenord bytar ni i cpanel
Prova webmailen med ert login eller för att läsa epost

Tack

Tisdag 19.00

Det återstår fortfarande en del sajter med mysql/DB fel på sina sidor.
Det jobbas på det 24/7 och det ändras manuellt i era config filer för era hemsidessystem, därför det tar tid.

Sync av mailen fortsätter fortlöpande.
Har någon problem att få nya mail så kontakta oss via sms 073-6993496 eller live chat alt. supportärende.

Tisdag 13:30 update

Allt flyttat och återställt 

Kvar: 

mysql password update för vissa användare (byta lösenord i cpanel vid mysql fel) och mail synk av mail mellan jan-feb pågår

Telefonsupport är belastad och svårt få svar !!!
Skicka supportärende, använd Live chat (men dröj kvar om inget svar direkt) se hjälpavsnitt i hjälpcenter (kunttjänmst fliken högst upp) etc.

Vi utför underhåll av en brandvägg i datacentret i Malmö under Tisdag eftermiddag (27/2)
Det är mest kunder som migrerats från datakultur som påverkas.

Korta stopp/störningar kan förekomma men dessa kommer att hållas till ett minimum.

Vänligen avvakta en kort stund att kontakta kundtjänst om er hemsida/e-post inte fungerar vid denna tiden.

Vi upplever just nu störningar på servern web04.wopsa.se. Felsökning och felavhjälpning pågår.

Vi utför underhåll av en brandvägg i datacentret i Malmö under eftermiddagen.
Korta störningar kan förekomma men dessa kommer att hållas till ett minimum.

16.30 idag uppgraderas web01 med mer minne.
Servern kommer vara nere i 15-30 minuter.

Vi beklagar störningarna som varit och tackar för ert tålamod!

Just nu har vi störningar på servern borg.datakultur.se. Problemet är identifierat och avhjälpning pågår.
Vi förväntar oss snart att normal drift ska vara återupptagen.

Vi har fått rapporter om hög belastning och långa svarstider på servern web01.
Tekniker undersöker problemet.

Vi har just nu en störning på servern klingon.datakultur.se.
Problemet är identifierat och vi jobbar på en lösning.

Uppdatering: Problemen ska vara lösta och driften har återgåt till normalläge.

Uppdatering: Probemen är identifierade och avhjälpning pågår.

Vi upplever just nu störningar på vissa av våra servrar. Felsökning pågår.

Vi upplever just nu hög belastning på servern web01.wopsa.se. Felsökning pågår.

Vi utför underhåll på gorn.datakultur.se. Under denna perioden kan det förekomma störningar och/eller långa svarstider.

Problemet berodde på för hög minnesbelastning och är nu löst.

Vi upplever just nu hög belastning på servern web01 som kan ge upphov till långa svarstider.
Tekniker jobbar med problemet.

Uppdatering 17.15

Trolig attack mot servern. Har lyckats filtrera det men ett fåtal konton kan ha fortsatta problem.

Uppdatering: Problemet är identifierat och vi arbetar på en lösning.

Vi upplever just nu störningar på servern web23. Tekniker undersöker problemet.

Vi kommer under onsdagsmorgonen att uföra underhåll på web24. Underhållet sker från kl 06 på morgonen.
Underhållet utförs för att servern web24 ska få tillgång till nya funktioner såsom tex. PHP 7. Servern kommer också att bli säkrare och stabilare då nya säkerhetsfunktioner kommer att aktiveras.
Vi jobbar aktivt för att det ska bli så lite störningar som möjligt och hoppas att du har överseende med detta.

Vi har just nu en störning på web01. Vi undersöker problemet.

Just nu utför vi kritiskt underhåll av servern borg.datakultur.se och vissa störningar kan förekomma. Vi ber om ursäkt för detta.

Omstart krävdes för att fixa uppdatering och webmail strul.

Uppdatering: Problemet berodde på hög trafik som orsakde fördröjningar. Problemet är nu löst.

Vi har fått indikationer på att vi har fördröjningar i nätverkstrafiken. Vi undersöker för nuvarande problemet problemet men just nu kan det uppstå fördröjningar.

13:55 - Normal drift återupptagen.
13:40 - Problemet är lokaliserat till en brandvägg. Driften är igång men mindre störningar kan förekomma.
13:20 - Tekniker på plats felsöker.
12:50 - Felsökning fortsätter, det verkar som om nätverksutrustning är skadad.
12:12 - Tekniker är på väg.
11:52 - Vi upplever just nu störningar på vissa av våra servrar. Felsökning pågår.

Vi jobbar på det!

Uppdatering 07:50
Problemet är löst och normal drift återupptagen

Uppdatering 07:30
Problemet är identifierat och felavhjälpning pågår

Vi har just nu störningar på server human.datakultur.se. Felsökning pågår.

Web02 konton flyttas till ny server Söndag-Måndag

ny snabbare och säkrare och med senaste cpanel, flera php versioner, ny mysql, nya funktioner!

OBS: 1  Mysql Fel ?  - Logga in till cpanel - Mysql databaser - längre ned finns mysql users - ange samma
lösen ni har idag eller ett nytt för en användare.
(finns i respektive scripts config fil, tex wordpress heter wp-config.php i sin mapp. ni kan såklart byta lösen också)

OBS: 2  Inga mail/Problem hämta mail ? - se till att ni använder mail.ER-DOMÄN.xxx som mailserver i ert mailprogram.
Ni har också er webbmail ER-DOMÄN.xxx/webmail

Nyare Mysql server har bättre krypterade lösenord.
Det är därför man måste lägga in det igen - servern kan inte översätta och läsa nuvarande lsenord.

Wopsa söker upp lösenord i kunders scripts/programs *config.php filer eller liknande med DB access och fixar detta för de flesta!
Har ni ändå problem och inte kan ändra det själv så kontakta support!

Web02 konton flyttas till ny server Söndag-Månd
ag

Web01 serverns ip är svartlistad i Spamhaus CBL list.

Vi håller på att åtgärda detta problem.
Server har fått en annan ipadress den kan skicka ut mail igenom.

Serverns ipadress ska vara borta från Spamhaus CBL nu.

Kontoflytt - vi bytar server för Web09
till en ny snabbare och säkrare och med senaste cpanel, flera php versioner, ny mysql, nya funktioner!

OBS: 1  Mysql Fel ?  - Logga in till cpanel - Mysql databaser - längre ned finns mysql users - ange samma
lösen ni har idag eller ett nytt för en användare.
(finns i respektive scripts config fil, tex wordpress heter wp-config.php i sin mapp. ni kan såklart byta lösen också)

OBS: 2  Inga mail/Problem hämta mail ? - se till att ni använder mail.ER-DOMÄN.xxx som mailserver i ert mailprogram.
Ni har också er webbmail ER-DOMÄN.xxx/webmail

Nyare Mysql server har bättre krypterade lösenord.
Det är därför man måste lägga in det igen - servern kan inte översätta och läsa nuvarande lsenord.

Wopsa söker upp lösenord i kunders scripts/programs *config.php filer eller liknande med DB access och fixar detta för de flesta!
Har ni ändå problem och inte kan ändra det själv så kontakta support!

-

Omstart web01 pågår 11.18-11.22

Vi har just nu störningar på servern web01.wopsa.se.
Felsökning pågår.

08:40 - Problemet är avhjälpt och vi har normal drift på våra tjänster.

07:30 - Problemet är identifierat och avhjälpning pågår.

06:50 - Vi har just nu störningar på vissa av våra servrar. Vi jobbar på problemet.

Web23 startas om på grund av kernel uppdatering.

Även lsapi php handler kommer installeras här ikväll som speedar upp php.

14.45 fixat.

Synflood attack blockerad (httpd ddos)

En del justeringar har gjorts som möjligen kan stoppa mindre attacker snabbare.

----------------------------------------------

Web23 problem just nu.

Web09 nere - rep. pågår

Det kan komma periodvisa störning på mottagandet av nya mail till konton på Web17

Vi håller på att arbeta med att resa mailkön på spammail.
Arbetat har på gått sedan morgonen och beräknas vara färdigt på eftermiddagen.

Web23 uppgraderad - Reboot pågår (5 min)

Web09 har epostproblem just nu!

Tekniker jobbar på det.

Web08 har problem och kan inte nås.
Jour tekniker skall undersöka.

Detta fixades i morse genom en ominstallation av apache/php då det fanns en konflikt men olika paket.

-------------------------------------------------------------------

Efter en cpanel uppdate inatt strular PHP på servern.

Vi jobbar på att lösa detta ....

Web23 startas om vilket tar ett litet tag.

07:55

--------------

Servern bootades inte om auto som vanligt efter systemkollen.
Ny tekniker startade upp den manuellt i morse.

Vi beklagar nedtiden!

Web09 kunder kommer börja flyttas över till en ny server inom kort.

00.15 - nu
--------------

Servern fick startas om, men kör en djup scan av filsystem då något är fel/korrupt.
Det kan ta ett tag tyvärr.

19:36
--------------

Servern är av okänd anledning nere.
Tekniker på väg.

Det har förekommit en del störningar på web09 sista tiden.
Eftersom det är en äldre cpanel och hårdvara kommer alla kunder flyttas inom en nära framtid till en ny server, cpanel och säkerhet mm.
Förhoppningsvis kan vi gör det i lugnt tempo.

12.21, server bootas om

T---
ekniker jobbar på det.

Ny lösning på mycket mysql strul är på G ...

Swedish

IP Only utför planerat arbete i sitt nät!

IP Only är Wopsas huvudleverantör av Internet till alla servrar.
Någon gång på natten den 12/5 kommer nätet vara nere i upp till 30 min.

English

Planned Work Notification

Initiated by: IP-Only - Wopsa Web Services largest ISP/Internet supplier.

On the night to 2017-05-12  IP-Only will perform upgrades that will affect Wopsa's services.

Sometime between 00.01 - 04.00.
Estimated downtime: up to 30 Minutes

Type of work: Software upgrade
Location: Göteborg, Malmö and Turku, Finland

Detta gäller bara de som har sin domän hos en annan registrar.
Det gäller inte Datakulturs gamla kunder!
Det gäller inte er som blivit kunder efter 2011!

Är er hemsida och mail nere ?
GAMLA NAMNSERVRAR STÄNGS NED UNDER 2017

Läs denna Hjälpcenter artikel - Klicka här

Server startades om manuellt och fungerar bra igen.


Server web09 har problem och man kan inte nå den för tillfället.
Tekniker tittar på det.

Hårdvara på Web16 kommer att uppdateras mellan 14:00 och 14:30

Serverns hårdvara kommer att uppdateras med fler processorkärnor och mer minne.

Beräknad arbetstid 30min, servern kommer att vara nerstängd under denna tidsperiod.

Uppgradering av Web16 servern.
Epostmeddelande till berörda kunder har skickats ut tidigare.

Web16 startas om!

OBS: 14.00 imorgon Fredagr kommer web16 uppgraderas med mer minne och fler cpu.

Info via mail kommer gå ut under dagen.

[Uppdatering 13:35]

Problem ågärdad alla maskiner på detta nät är nårbara igen.

Enligt leverantörens tekniker så var det ett problem med porten på telestation som var orsaken på nertiden.

[Updatering 12:30]

Teknikern är på väg ut till telestationen igen efter att ha konstaterat att utrustning och fiber till oss fungerar som det ska


[Felbeskrivning]

Vi har för närvarande driftstörning på en av våra nät där kunder med dedikerade servrar ligger.

Alla kunder som ligger på nätet 194.236.202.xxx påverks.

Webbhotell kunder är inte påverkade av detta problem.

Bakgrund

Leverantör skulle byta ut router idag så att bandbredds kapacitenten i detta nät kunde utökas.
Efter byte av router så visade det sig att man var tvungen att byta port i telestationen också.

Vid byte av port så visade det sig att den nya utrustningen inte fick någon länk.
Tekniker från leverantören håller på att undersöka problemet.

Tekniker jobbar på det!

IP Only har problem i vissa delar av Sverige och Danmark.
Deras tekniker jobbar på det och det bör vara fixat inom kort.

Detta kan orsaka nedtid för vissa kunder - upp och ned.

Mer info om problemet:
http://www.ip-only.se/blog/2016/11/28/network-disturbance-malmo-vageryd/

På natten kommer vår leveratör kommer att utföra underhållsarbeta på sina switchar under ovan nämnda tid
leverantören kommer också att starta om sina switchar och detta kommer att leda till en mindre driftsörning på natten.

Allt fixat!
Servern omstartad!

----

Det är problem med web15 opch tekniker är på väg för att undersöka det!

Web07 hade utvecklat ett hårdvarufel kl 06:00 och slutade svara på förfrågningar.
Vid undersökning kl 08:00 visade det sig att vrm modulen till cpu02 hade gått sönder.
Efter byte av modul kom servern igång igen. 08:30

Vår internetleverantör hade förbindelseproblem i Skåne pga fel i utrustning.
Detta påverkade kunder mellan 11:30 och 12:10 då inga av servrarna gick att nå under korta perioder.

Detta problem åtgärades av internetleverantören.

Vår huvudleverantör av fiber/internet har problem just nu och de jobbar på det!

Beklagar avbrottet!

14:30
En av våra internetleverantörer har en driftstörning just nu som kan påverka access till våra servrar

15:15 Uppdatering
Internetleverantören håller på att åtgärda problemet
(Omsvetsning av fiber)
Beräknas vara klar 18:00


16.00 allt fungerar OK igen

Wopsas dns server kommer att fysiskt utökas med mer minne, detta gör att vi måste ta ner namnservrarna en och en för att utöka minne i dessa.

Detta kan leda till störningar under en kort tid medan olika servrar stängs ner.

Det är rekomenderat att inte göra några ändringar på era domänpekningar medan arbetet pågår.

En felkonfiguration av våra registrar tjäster ledde till att wopsa.se domänen avaktiverades en kort stund, Detta åtgärdades men propageringen av återaktiveringen av domännamnet kan tyvärr ta upp till 2 timmar.

Under gårdagen så hade servern stablitetsproblem pga överbelastning.

Vid undersökning av servern så visade det sig att det var för förfrågningar till olika kontons xmlrpc.php som var orsaken.
xmlrpc.php används av wordpress installationer och äldre versioner av dessa filer har säkerhetshål som bot:ar försöker utnytja.

Vi stängde av de ip adresser som anropade dessa filer samt stängde av access till dessa filer på berörda konton.

Hej

Det har bitvis varit svårt för kunder att nå sina hemsidor mellan 16:30 och 17:00.
Detta problem hade med att göra med hårdvarubrandväggen som sitter innan servrarna i hallen.
Brandväggen felsöktes och problem åtgärdades 17:00

All access till sidor och mail ska fungera nu.

Diskproblem på Web03 orsakade nertid idag mellan 17:30 och 19:00
Problem har blivit åtgärdad.

Vissa av de kunder som har Hosted Exchange kan uppleva förseningar i mailleveransen till deras konton.

Vi håller på att åtgärda detta problem.

Problemet är nu åtgärdad.

Ett flertal av våra webbservar har fått trafik från bot:ar som försöker lägga in spam kommentarer genom anrop till xmlrpc.php
Vi har därför stängt av access för xmlrpc.php på berörda servrar.

Det är problem mellan Telia och IP Only (Internetleverantörer).
Kunder med Telia kan ha problem att nå sin hemsida och mail.

Det mesta skall vara löst inom kort (Enligt Telia och IP Only).
Har ni problem så prova igen om ett tag.

Det är inga problem hos Wopsa !!
Er hemsida och mail är OK.

Detta är fixat!

Vi har problem med en ddos attack just nu!
Kolla igen om en liten stund - vi jobbar på att filtrera bort den.