Päivitys- ja varmuuskopiointikatko tänä yönä

Tänä yönä (la 20.12.2008 klo 00:00-06:00 EET) KServer on luultavasti hetkellisesti pois verkosta suoritettavien ohjelmistopäivitys- ja varmuuskopiointitöiden takia. Näin varmistetaan tiedosto- ja tietokanta-arkistojen yhteneväisyys. Pyrin pitämään katkon mahdollisimman lyhyenä, ja toivon mukaan sitä ei tarvita lainkaan. Katko saattaa aiheuttaa ongelmia myös KServerin muille palveluille.

Pahoittelut häiriöstä.

KServer-Secondary offlinessä

Viime yönä johonkin aikaan KServer-Secondary -palvelin päätti jumiutua, ja se on toistaiseksi poissa linjoilta. Samaa vikaa on palvelimella esiintynyt ennenkin.

Secondary vastaa WWW- ja tietokantapalveluista KServer-verkossa, joten tällä hetkellä koko KServerin web-sivusto on tavoittamattomissa.

Koska joudun Mänttään menemään opiskelemaan, päästään ongelmaa tutkimaan vasta sieltä päästyäni eli noin kello 15. Järjestelmä ajetaan ylös noin kello 15.15 ja se saavuttanee täyden toimintavakauden noin kello 17.00. Tätä tiedotetta päivitetään tilanteen edistyessä. Mahdolliset tiedustelut voi lähettää osoitteeseen riku.eskelinen[ÄT]kserver.dy.fi, joka toimii normaalisti.

Pahoittelut häiriöstä.

Päivitys klo 16.08: Järjestelmä on nyt tuotu takaisin ylös ja sen tilaa tarkkaillaan. Tällä haavaa kaikki näyttäisi kuitenkin toimivan.

Päivitys 3.12. klo 0:25: Vika uusiutui jälleen eikä sen syitä saatu vieläkään selville, joten tilapäisratkaisuna Secondary käynnistää itsensä uudelleen automaattisesti joka neljäs tunti. Koitan huomenissa (ts. tänään) selvittää asiaa lisää.

Päivitys 3.12. klo 8:52: Noh, yritys hyvä, mutta eipä vaikuttanut toimivan tämäkään tapa. Yritetään sitten 15:n jälkeen tänään selvittää asiaa lisää.

Päivitys 3.12. klo 11:34: Voi muuten olla, että virtalähde on tuosta vasta yhdeksän vuotta vanhasta koneesta pettämässä. Voisin kotosalle päästyäni kokeilla toista virtalähdettä siihen. Sitä odotellessa lue vaikka Linux- ja IT-blogiani.

Päivitys 3.12. klo 15.35: Katsotaanpa, mitä nyt tapahtuu.

Yhteyskatkokset KServerillä

Johtuen KServerin laajakaistaoperaattorin Elisan ongelmista verkossaan, aiheutui kaksi katkosta:

Sunnuntai 9.11. 16-18 EET
Kaikki KServerin palvelimet olivat alhaalla kun yhteys Internetiin menetettiin. Vika korjautui itsestään ja kaikki palvelut toimivat sen jälkeen automaattisesti seuraavaan katkoon asti:

Maanantai 10.11. 20 - tiistai 11.11. klo 17 (arvio)
Samoin kaikki palvelimet ovat alhaalla kun Elisan yhteys katkesi toistamiseen. Heidän asiakaspalvelustaan kerrottiin, että vika kestää noin kello 17:aan asti. Kyseessä on "tuntematon vika", joka aiheuttaa sen, ettei A-Linkin RR24-modeemien NAT-verkot saa WAN-IP:tä Elisalta. Tällä hetkellä siis ei voi muuta kuin odottaa.

Pahoittelut häiriöistä.

Päivitys 17.47: Yhteys on nyt kunnossa, ja hetken kuluttua toiminee taas kaikki.

KServer-palvelimet uuteen kotiin

Siirrän vihdoin ja viimein KServer-järjestelmän loputkin komponentit uuteen kotiini Oriveden keskustaan. Tästä syystä KServerillä on käyttökatko alkaen lauantaina 11.10.2008 kello 22:00 ja päättyen sunnuntaina 12.10.2008 klo 05:00. Ajat ovat arvioita, ja katkos koskee kaikkia KServerin palveluja.

Samalla datayhteys toivottavasti vakaantuu Hirsilän peräkorven tasosta paremmaksi. Tässä samassa yhteydessä ZyXEL-modeemireititin vaihdetaan A-Linkin vastaavaan tuotteeseen, mutta sen ei pitäisi aiheuttaa käytön suhteen mitään muutoksia.

Huomattava plussa on kuitenkin yhteyden nopeutuminen 512/512kbps -yhteydestä 1024/512kbps-nopeuteen, eli tiedostojen palvelimelle siirto tapahtuu nopeammin.

Tätä tiedotetta päivitetään työn edistyessä kun uutta tietoa tulee saataville.

Käyttökatkos KServerillä

Tätä kirjoittaessa mikään KServerNetworkin palvelin ei ota pyyntöjä vastaan toistaiseksi tuntemattomasta syystä. Epäilen, että syynä olisi pitkittynyt sähkönsyöttöhäiriö yleisessä sähköverkossa jolloin KSN:n suojana olleesta UPS:ista on päässyt virta loppumaan ja tällöin verkkolaitteisto palvelimineen on sammunut.

Tietoturvan takia palvelimet eivät toivu tällaisesta automaattisesti, vaan minun täytyy käydä ajamassa ne takaisin ylös paikanpäällä. Tämän takia korjaus viivästyy jonkin verran. Vika saataneen korjattua kello 17:ään mennessä. Tätä blogipostausta päivitetään kun uutta tietoa tulee saataville.

Pahoittelut häiriöstä.

Briefly in English: Due to electricity outage KServerNetwork with its servers is currently offline. The issue is being investigated and should be over at 17 EEST (14 UTC). This post will be updated as soon as new information becomes available.

Riku Eskelinen
KServer System Administrator

Päivitys klo 18.17: Juuri niin oli käynyt kuin arvelin, ja järjestelmät on nyt ajettu takaisin ylös.
Update at 18.17: It was just like I though and now all the servers are back up and running.

KServerWWW tilapäisesti suljettuna

Johtuen KServerin käyttämän Joomla!-julkaisujärjestelmän tietoturva-aukosta, on KServerin WWW-palvelut tilapäisesti poissa käytössä. Pyrin korjaamaan tilanteen mahdollisimman pian mutta muiden kiireellisempien Joomla-järjestelmien päivitysten takia on oletettavaa, että KServerin verkkosivut saadaan takaisin verkkoon vasta tiistai-iltapäivästä.

Mitään dataa ei ole kadonnut eikä tietoja ole vaarantunut tässä tapahtumassa, ja paikkauksen jälkeen kaikki palvelut toimivat normaalisti. Pahoittelut häiriöstä.

Päivitys 26.8.@21:10: Kaikkien kiireiden takia menee ainakin huomiseen vielä, pahoittelut.
Päivitys 27.8.@00:08: Joomla! on nyt päivitetty ja kaikki järjestelmät toimivat normaalisti.

1337topilla kiintolevyrikko

KServerNetworkin kannettava, KServer-1337top, on toistaiseksi poissa käytöstä kiintolevyrikon takia. Tämän ei pitäisi haitata KServerin tavanomaista toimintaa, joskin kyseisellä koneella olleet meikäläisen asiakirjat ovat mennyttä.

Remember kids: kaikki koneet kannattaa varmuuskopioida.

Käyttökatkos 15:00-16:35

Johtuen Internet-yhteyden katkeamisesta kello 15:00 KServer tippui reiluksi puoleksitoista tunniksi pois Internetistä. Vika on nyt korjattu ja kaikki palvelut toimivat tavalliseen tapaansa.

Tekninen ongelma osalla KServeriä

KServerin palvelimella kserver-secondary on tällä hetkellä teknisiä ongelmia, joiden takia osa KServerin palveluista on tavoittamattomissa. Vikaa selvitetään ja se pyritään korjaamaan mahdollisimman pian, mutta todennäköisesti vika saadaan korjattua vasta alkuillasta.

Palvelimen toimintahäiriö estää seuraavien palvelujen käytön:

• Kaikki WWW-sivut
• Osa SSH-tunnuksista
• Osa tietokannoista
• Icecast

KServer-Primary ja KServer-Slowpoke toimivat normaalisti. Pahoittelut häiriöstä.

Päivitys klo 13:22: Ongelma korjattu käynnistämällä palvelin uudelleen. Kaikki toiminnot ovat taas käytettävissä.

Yhteysongelmia 11:00 alkaen

Johtuen ongelmista KServerin Internet-palveluntarjoajan yhteydenjakelussa KServer on ollut ajoittain tavoittamattomissa kello 11:stä alkaen. Pahoittelut häiriöstä.

Päivitys 12.07: Vaikuttaa siltä, että vika ei enää uusiudu, ja kaikki järjestelmät toimivat tavalliseen tapaansa.

HTTPS-palvelimen sertifikaatti päivitetty

Koska Debianin ja sen sukulaisten, kuten KServerin käyttämän Ubuntun, sertifikaatinluontialgoritmistä löydettiin haavoittuvuus, jouduttiin KServerin SSL-sertifikaatti uusimaan.

Edellisen tapaan tämä on itseallekirjoitettu, ja selain luultavasti varoittaa tuntemattomasta sertifikaatista. Ohessa sertifikaatin sormenjäljet SHA1:nä ja MD5:na, tarkista ennen sertifikaatin hyväksymistä (sen voi hyväksyä pysyvästi), että siinä on samat sormenjäljet:

• SHA1
  66:1F:C4:EA:6C:79:B2:
  94:0D:04:E1:57:70:EA:
  F0:C1:42:75:CD:6D
• MD5
  29:E1:6E:77:5E:7F:DB:
  23:EF:2B:DA:A0:D8:BA:
  92:F0

Linux-blogin esikatselu pois käytöstä

Tällä hetkellä KServerin etusivulla oleva Riku Eskelisen Linux- ja IT-weblog -esikatselu on poissa käytöstä teknisen ongelman takia. Pahoittelut häiriöstä.