Nederlandse Computer Measurement Chapter van start

De Nederlandse Computer Measurement Chapter gaat starten, als onderdeel van de Internationale Computer Measurement Group.

NL CMG wordt een onafhankelijke groep van deskundigen en belangstellenden op het gebied van computer prestaties. Dat omvat prestaties, als in: hoe snel presteert mijn website voor verschillende groepen gebruikers, en capaciteit, als in: hoeveel computers moet ik in mijn serverpark zetten, en hoeveel diskruimte heb ik volgend jaar nodig.

De groep omvat 'gebruikers' die direct belanghebbende zijn als het gaat om kosten en prestaties. Dan zijn er consultants, die gebruikers helpen met het inrichten van kostenbewaking en prestatiebewaking, er zijn leveranciers van hardware, software en andere oplossingen. Tenslotte nodigen we ook wetenschappers uit om hun inzichten met ons te delen.

De groep zit nu in een 'pre-launch' fase. In deze fase willen we scherpstellen wat de focus moet zijn van deze groep. Vrijwilligers zijn ook welkom voor allerhande activiteiten.

Het streven is om in het voorjaar van 2010 een eerste bijeenkomst te houden.

Vertel ons wat U nodig heeft om hier meerwaarde aan te ontlenen door de commentaar mogelijkheid van deze blog te gebruiken.

Schrijf U in voor de nieuwsbrief door een mailtje te sturen naar nlcmg@getresponse.com en ontvang direct een aantal waardevolle tips, links en presentaties.

Power tools for logfile crunching

If you want to know what’s cooking on the net, you will at times have to process a lot of measurements. Examples are logs of webservers, and measurements of network activity. You need this ‘network business intelligence’ in order to figure out what the users are doing, where the capacity is going, where the delays are, and where the ‘funny’stuff’ is .

I used to do that processing with Excel, or had serious data warehouse and business intelligence solutions built. Excel brings a lot of convenience, but maxes out at some point. Custom development with big warehouses is not always a viable solution.

Enter R.

Here is a tool that is open source, runs on Windows and Linux, is extendible and has lots of packages built around it. Link to project page (updated).

Basically it is a command line cruncher of tables. It takes only a few seconds on a laptop to read in half a million records. You’ll be able to generate all kinds of statistics and graphics, and it will even output to PDF and Excel. You will also be able to document all your manipulation and replay it when the data is updated. For example, you can do a pivot table based on the result of another pivot table and have that redone automatically.

So, R is really a great take-away from the CMG conference (link) I went to recently.

R rocks. Don’t leave home without it.

NL CMG gaat starten

De Nederlandse Computer Measurement Chapter gaat starten, als onderdeel van de Internationale Computer Measurement Group.