ontwikkelBLOG.nl » Xen

PC ruil, nieuwe laptop en Neo vervangen

Maikel Gommans — Fri, 29 Feb 2008 17:56:02 +0000

Neo, de server die thuis als bestandsserver en dnsserver dient, is op dit moment een Pentium III 500 Mhz met 512MB RAM. Neo draait op Ubuntu 7.04 Feisty Fawn en gebruikt Xen als virtualisatieplatform. De virtuele servers Alectrona en Artemis draaien op Neo. Alectrona neemt de bestandsserver en de interne recursive dns voor zijn rekening en Artemis de 3e authorative nameserver. Dit systeem draait nu al ruim 3 jaar en is meerdere keren uitgebreid. Nu het einde van Ubuntu 7.04 inzicht komt en gewoon upgraden naar Ubuntu 7.10 vrijwel onmogelijk is gebleken (hierover later meer) ben ik mogelijkheden gaan zoeken om Neo te vervangen door een krachtigere machine, waar dan ook genoeg ruimte is om test VDS-en aan te kunnen maken.

Nu waren mijn ouders toch al van plan een nieuwe laptop voor hunzelf aan te schaffen. Zo heb ik bedacht dat ik hun, nog vrijwel nieuwe, PC (AMD Athlon X2 4000+, 1.5 GB RAM) en TFT-scherm (dan heb ik weer dual screen ) over kan nemen. Mijn huidige PC (Intel Pentium D 2.6 Ghz, 1 GB RAM) kan dan gaan dienen als nieuwe Neo. Mijn ouders konden zich ook wel vinden in dat plan. Ik heb voor hun een nieuwe laptop uitgezocht bij Dell. Een Intel Pentium Dual-Core T2130, met 2 GB RAM en 160 GB Harddisk, met Windows Vista Home Premium. De service bij Dell was verassend goed, binnen een week werd de nieuwe laptop thuisbezorgd. Mijn “nieuwe” PC heb ik uitgerust met Ubuntu 7.10 Gutsy Gibbon en draait uitstekend. Over de Dual screen opstelling later meer. In de nieuwe Neo heb ik wel de CPU cooler vervangen omdat hij eigenlijk een beetje te warm was en als hij 24 uur per dag gaat draaien is het wel zo prettig dat hij lekker koel is. Op de nieuwe Neo heb ik gekozen voor Ubuntu 6.06 LTS Dapper Drake met de binary versie van Xen 3.0.4. De virtuele servers Alectrona en Artemis zijn beiden uitgerust met CentOS linux 5.1, omdat wat nieuwe versies wel handig zijn. Alectrona verzorgt de interne recursive DNS en de bestandsserver. Ook heb ik nu een intern TLD opgezet “.wng”. Alle PC’s en interne diensten zijn nu te bereiken onder hostname.wng. Artemis neemt nogsteeds de 3e authorative DNS opzich en houdt ook de dataverkeer statistieken van de Cisco SB101 router bij.

Inmiddels is Neo naar de inloopkast verplaatst omdat de nieuwe toch wel erg veel lawaai maakt in de woonkamer .

Virtuele servers op Neo: Alectrona en Exodus

Maikel Gommans — Sun, 02 Sep 2007 19:33:07 +0000

Na de succesvolle realisatie van Atlas heb ik besloten om mijn thuisserver Neo ook in twee virtuele servers te gaan verdelen: Alectrona en Exodus. Dit is handiger omdat ik dan de diensten voor binnen het thuisnetwerk en die voor de buitenwereld gescheiden kan houden. Alectrona is de interne fileserver en caching dns server voor het netwerk. Exodus doet de secundaire DNS.

Ik wou eigenlijk eerst Neo op CentOS gaan draaien. Maar CentOS 5 bleek erg slecht te werken op de wat verouderde hardware (Pentium 3 500 Mhz, 512 MB ram). Daarom heb ik besloten verder te gaan met Ubuntu 7.04 Feisty Fawn.
Ubuntu 7.04 werkt als een trein en Xen was snel vanuit de repository’s geinstalleerd. Beide virtuele servers (Alectrona en Exodus) zijn uitgerust met Ubuntu 7.04 Feisty Fawn.

Stroomuitval te Easynet DC Schiphol-rijk: Atlas, Asclepius, Athena, Atropos en nog een paar duizend servers offline

Maikel Gommans — Sat, 04 Aug 2007 17:56:08 +0000

Gisteren was ik om kwart voor drie ‘smiddags bij Albert Heijn toen ik een SMSje kreeg. Als ik een SMSje krijg betekend dat vaak niet veel goeds. Dus ik ging kijken: “NOC: De service HTTP op atlas.maikelg.net is down.”, hmm, Atlas is de VDS host server waar Asclepius, Athena en Atropos op draait, dus dat betekend dat die ook offline zijn. Hiervan zou ik echter geen smsjes moeten krijgen, omdat dat wordt onderdrukt als Atlas al offline is.
Omdat het ook een valse melding kan zijn bel ik vanuit de AH Thijs, hij neemt echter niet op. Dan m’n oom maar proberen. Die nam wel op en heb ik terwijl ik met m’n vader terug liep naar de auto door verschillende sites heen geloodst om te kijken of Atlas echt offline was, en daarmee de virtuele servers ook. Dat was ook zo.

Thuis aangekomen heb ik direct mijn PC aangezet en ben ik snel verschillende systemen afgegaan om te kijken wat er aan de hand is. Het was mij al snel duidelijk dat niet allleen heel Atlas met de virtuele servers offline was, maar ook de servers van mijn provider, die in hetzelfde datacentrum staan (niet specifiek in hetzelfde rack). Terwijl ik via mijn thuis fileserver Neo irc opstartte belde ik de Technische Dienst van mijn provider op. Die vertelde mij dat er een stroomstoring was en dat half Easynet plat lag. Nou, daar kan je het dan mee doen .
Na 2 en half uur was de stroom toevoer hersteld en zouden de servers allemaal weer online moeten zijn. Mijn server was een half uur later nogsteeds niet online. Even later kreeg ik een bericht van de technische dienst dat mijn server gewoon draaide. Toen een medewerker van mijn provider ging kijken bleek dat networking niet vanzelf was gestart, nadat dit handmatig was gedaan kon ik mijn server weer bereiken .

Verder ging alles gewoon goed alleen op Asclepius wou Plesk niet meteen starten, maar dat ging later ook weer zonder er wat aan te doen .

Op dit moment is het nog niet bekend waarom de stroom is weggevallen.

Ik hoop dit niet vaker mee te maken, maarjah, shit happens….

Update 06-08-2007: Vandaag is bekend geworden dat de stroomuitval door menselijk falen is veroorzaakt: http://www.ispam.nl/archives/992/menselijke-fout-oorzaak-van-stroomstoring-in-het-easynet-datacentrum/

De realisatie van Atlas, het vervolg

Maikel Gommans — Fri, 13 Jul 2007 19:31:26 +0000

Zoals ik in voorgaande posts heb verteld ben ik bezig met het opzetten van een nieuwe server die al mijn websites ed mag gaan hosten. Ik heb uitgelegd dat ik dit wil gaan doen door de server in meerdere virtuele servers te verdelen dmv Xen. Het is een poosje geleden dat ik hierover heb geschreven, maar ik heb het zo druk gehad met het realiseren van Atlas dat ik helemaal niet aan scrijven toen ben gekomen. Die achterstand probeer ik nu in te halen.

Inmiddels heb ik alle hardware binnen en heb ik Atlas gebouwd en volledig geinstalleerd.

Hardware

Chieftec 1U case UNC-110S-W
Intel Core 2 Duo E4300 1.8 Ghz
Supermicro PDSMi+ server motherboard
Supermicro SNK-P0016 heatsink
4x Corsair 1024MB DDR2 128MX64
2x WesternDigital Caviar SE16 320GB (Software RAID 1)

Ik had eerst de verkeerde koeler besteld, ook was m’n eerste motherboard, de Intel S3000AHV niet leverbaar. Ik heb toen eerst een Asus P5B-V geprobeerd, maar daar bleek m’n koeler niet op te passen. Nu heb ik uiteindelijk de Supermicro PDSMi+ genomen, een erg leuk moederbordje.

Software op Atlas

De software die ik heb gebruikt op Atlas:

Ubuntu 6.06 LTS
Xen 3.0.4
Apache 2.2.4
PHP 5.2.3
MRTG met eigen scripts

Ubuntu als OS, Xen als virtualisatiesoftware. MRTG gebruik ik om het dataverkeer verbruik van de virtuele servers bij te houden .

De virtuele servers

Asclepius
40 GB harddisk
512 MB RAM
CentOS Linux 5.0
SWsoft Plesk 8.2
Voor de normale websites. Mijn keuze is op Plesk gevallen omdat ik dat een heel uitgebreid en net controlepaneel vind. CentOS is een stabiele distributie en een goede combinatie met Plesk, mede heb ik voor CentOS gekozen omdat Plesk de software uit de repositorys van het OS haalt en CentOS 5 gewoon op dit moment het beste bij de tijd daar mee is. PHP 5 heb ik zelf gecompileerd.

Athena
40 GB harddisk
768 MB ram
Gentoo Linux
Voor Ontwikkelzone, OntwikkelBLOG, de website waar het dataverkeer verbruik op staat, database en website van Anna en experimenten ed: De keuze voor Gentoo omdat je het gewoon lekker naar je eigen hand kan zetten. Je kan helemaal zelf opgeven met welke opties je pakketten gecompileert moeten worden ( Portage ), en dat is voor een server die toch meer gericht is op de development wel zo leuk.

Atropos
5 GB harddisk
256 MB ram
Ubuntu Linux 6.06 LTS
Voor Anna (de bot zelf), m’n IRC server en m’n bouncer. Ik heb voor Ubuntu 6.06 gekozen omdat dat het besturingssysteem is wat ik het meeste gebruik en debian based vind ik nog altijd het prettigste werken. Deze IRC servers zijn toch niet zonder risico en daarom lekker gescheiden van de rest op deze virtuele server.

Met deze virtuele servers is er nog genoeg ruimte over voor test virtuele servers, dus met atlas kan ik weer een hele poos voort.

De plaatsing van Atlas vind aanstaande woensdag (18-07-07) plaats. Ik ga Atlas plaatsen in het Easynet datacentrum te Amsterdam Schiphol-rijk. Atlas zal daar met de rest van de wereld in verbinding staan via het Euroaccess netwerk.

Traffic manager af

Maikel Gommans — Thu, 07 Jun 2007 21:23:21 +0000

Om het dataverkeer wat door de virtuele servers wordt verzet te kunnen meten, heb ik een systeem gemaakt.
Dit systeem is nu af en die zet de data ook in mooie grafiekjes.

Het was niet zo heel lastig om hier een systeem voor te maken. Xen maakt voor elke virtuele server een vif aan. Vervolgens kan je met dit commando bruikbare data verkrijgen om in bijv. php te verwerken:

1
shell# cat /proc/net/dev | grep vif-vm1 | tr -s " "

Binnenkort zal ik wat screenshots plaatsen, als het systeem draait op Atlas.

Nieuwe Aphrodite

Maikel Gommans — Sun, 27 May 2007 21:35:17 +0000

Vandaag heb ik een oude pc van de buurman gekregen. Een Pentium III 450 Mhz, 128 MB ram, 2 GB harddisk. Niet zo heel lang geleden is een van mij testservers aphrodite overleden, dus ik was wel blij met deze nieuwe testserver. Ik heb er 64 mb ram bij geplaatst en de harddisk vervangen door een Seagate 10 GB harddisk. Ook heb ik de cd-rom drive vervangen (die was kapot). Ik heb er CentOS 4.4 opgezet. Ik wil op deze nieuwe aphrodite gaan testen met virtualisatie dmv Xen. Ik ben vanplan om morgen Xen 3.1 op deze server te installeren.

Het leed dat het maken van een Debian image heet

Maikel Gommans — Mon, 07 May 2007 19:14:22 +0000

Ik ben voor Atlas standaard images aan het maken. Die voor CentOS 4.4 heb ik gemakkelijk zelf kunnen maken adhv http://www.x-tend.be/~raskas/blog/howtos/centos-base-image/ .

Voor Gentoo 2006.1, Slackware 11 en CentOS 5.0 heb ik de images van Jailtime.org gebruikt. Die voldoen prima

Maar voor Debian…..
Ik ben nou al een hele tijd bezig om image’s te maken dmv debootstrap. Maar sinds de release van Etch werkt debootstrap voor geen meter meer. De images hebben allemaal vage gebreken. Ik ben niet de enige die dat probleem heeft.
Iemand kon me de oplossing aanreiken voor het probleem dat baseconfig “terminate”:

1
mount -t devpts -o gid=5,mode=620 none /dev/pts

in de chroot uitvoeren.

Maar dan nog blijven er allemaal vage problemen over, en booten doet de image al helemaal niet…
Ik heb uiteindelijk maar weer de Sarge image van jailtime erbij gepakt. Die had geen device files. Maar /dev/MAKEDEV loste dat op .
Toen had ik iniedergeval al een redelijk werkende Sarge image…
De Etch image heb ik gemaakt door de Sarge image te apt-get dist-upgraden naar Etch. Dit is natuurlijk niet helemaal geweldig, maar beter iets dan niets….

Met dit gezeik heb ik al helemaal zin gekregen Debian er op Atlas in z’n geheel uit te gooien

Idee: Zelf virtuele servers hosten

Maikel Gommans — Mon, 07 May 2007 18:43:21 +0000

Op dit moment heb ik een vds bij JRonline, namelijk: Acropolis. Dit is een vds met 4 GB harddisk, 512 MB ram, 50 GB traffic, 2 IP’s, Debian 3.1 Sarge en een DirectAdmin licentie.

Dit wordt echter een beetje te klein voor mij, zeker met al die experimenten en fotos. Daarnaast moet ik toch oppassen wat ik op Acropolis allemaal uitvoer. Alles draait er namelijk op: Websites, Experimenten, Anna, M’n IRC server, Foto’s….
Met sommige websites en experimenten loop ik tegen de beperkingen aan die DirectAdmin me oplegt, en sommige dingen zou ik zowizo liever apart draaien, bijv. omdat het veiliger is (IRC server en Anna).

Nu ben ik me erin gaan verdiepen hoe het met de kosten zit met een compleet eigen server. Na een poos offertes aanvragen en een hoop rekenwerk ben ik tot de conclusie gekomen dat een eigen colocated server al snel goedkoper is, en zoveel meer mogelijkheden bied .

De colocation provider en de configuratie van de server staat al redelijk vast:

De colocation provider: Technotop Internet Diensten
De configuratie van de server:
Chieftec 1U case UNC-110S-W
Intel Core 2 Duo E4300 1.8 Ghz
Intel S3000AHV server moederbord
4x Corsair 1024MB DDR2 128MX64
2x WesternDigital Caviar SE16 320GB (Software RAID 1)

Op die server (die Atlas zal gaan heten) zal ik dan gebruik maken van Ubuntu 6.06 LTS met Xen 3.1.0 als virtualisatiesoftware.
Hier heb ik inmiddels al meerdere testjes mee gedaan en dat werkt hartstikke goed.
De keuze voor Ubuntu 6.06 LTS is omdat ik vind dat Debian teveel achterblijft met ouwe meuk, en daarnaast is de LTS versie ondersteund tot 2011. Wat natuurlijk wel erg fijn is met een server in een datacenter.

Op die server wil ik dan de volgende virtuele servers voor mezelf draaien:

Asclepius
50 GB harddisk
768 MB RAM
CentOS 4.4
DirectAdmin
Voor de normale websites: De keuze voor CentOS omdat dat beter werkt met DirectAdmin. Ik heb zowel DirectAdmin servers met CentOS als met Debian opgezet. En op CentOS bezorgt het updaten van versies je gewoon veel minder hoofdpijn .

Athena
50 GB harddisk
1024 MB RAM
Gentoo 2006.1
Voor Ontwikkelzone, OntwikkelBLOG, database en website van Anna en experimenten ed: De keuze voor Gentoo omdat je het gewoon lekker naar je eigen hand kan zetten. Je kan helemaal zelf opgeven met welke opties je pakketten gecompileert moeten worden ( Portage ), en dat is voor een server die toch meer gericht is op de development wel zo leuk.

Atropos
5 GB harddisk
256 MB RAM
CentOS 4.4 of Debian 4.0 Etch (daar ben ik nog niet helemaal uit )
Voor Anna (de bot zelf), IRC-server, en m’n bouncer: Lekker gescheiden van de rest. Dit soort dingen zijn toch niet zonder risico. De keuze voor het OS: tjah, CentOS vind ik ook wel fijn, ik zit er aan te denken om Debian er in z’n geheel uittegooien op Atlas (lees eerder genoemde reden). CentOS heeft langere ondersteuning, maar voor deze VDS is dat niet zo heel noodzakelijk. Ik denk er nog even over na….

Er is dan ook nog meer dan genoeg ruimte over om kleine test vds-jes te kunnen aanmaken

Ik ben bezig die installatie uitgebreid te testen. Dat doe ik nu nog op Apollo, maar ik wil binnenkort de hardware gaan bestellen. Ik ben ook bezig met een Traffic manager die het dataverkeer van die vds-en moet gaan meten en het netjes in grafiekjes weer moet geven.

Voordat dat dit helemaal uitgevoerd is zal ik waarschijnlijk heel wat blogjes verder zijn…..