Zo voorkom je scriptiestress

Begin gelijk, wacht er niet mee. Dat is het beste advies dat ik afstudeerders mee kan geven wanneer ze net beginnen. Schrijf die scriptie vanaf dag één, punt! Neem maar van me aan dat als je het niet doet, de kans groot is dat je vele slapeloze nachten aan elkaar mag gaan knopen met koffie en oppeppers om magertjes wat woorden uit te kunnen spugen op het digitale papier. En wie weet ben je al te laat? Ben je stappen vergeten? Stress zeg ik je. Stress!

NoSQL-databases

Inleiding

Als we het over databases hebben dan verwijst men vrijwel altijd naar relationele databases. Voor het relationele model in 1970 bedacht werd waren er andere vormen van elektronische databases.

Relationele databases zijn de standaard geworden omdat bij dit model de opbouw en organisatie los staan van de manier van opslag: gegevens worden op een gestandaardiseerde manier opgeslagen buiten de applicatie die de gegevens gebruikt. Dit maakt de databases meer toekomst bestendig omdat de manier waarop de data gebruikt wordt kan veranderen dan waar de data in eerste instantie voor opgeslagen is.

Toch is het relationele model niet overal geschikt voor. Wanneer men met grote hoeveelheden data werkt of gegevens serveert onder hoge druk merkt men al snel op dat relationele databases hier niet in uitblinken, tenzij fors geïnvesteerd wordt in de onderliggende hardware. Maar hardware die 2x zo snel is in theorie schaalt niet 2x zo snel mee in praktijk. De performance van het systeem is niet lineair evenredig met de snelheid van de onderdelen.

In sommige gevallen is een relationele database gewoonweg niet nodig, bijvoorbeeld omdat informatie helemaal geen relatie met iets heeft en dus maar op één manier opgeslagen wordt. Of als er geen complexe queries op de data uitgevoerd hoeven te worden. In weer andere gevallen biedt een relationele database niet genoeg functionaliteit, bijvoorbeeld bij het leggen van een groot aantal verbanden tussen punten.

NoSQL-databases zijn ontwikkeld om in te springen waar SQL niet praktisch is. NoSQL is ten eerste een verwijzing naar SQL, een door IBM ontwikkelde taal voor het werken met gegevens binnen een relationele database. Voorbeelden van database software die zwaar op SQL leunen zijn o.a. MySQL – de meest gebruikte web database -, Microsoft SQL Server, Oracle Database en PostgreSQL.

De No in NoSQL verwijst niet naar geen zoals velen denken maar naar not only. Hiermee wordt bedoeld dat relationele databases niet overal voor geschikt zijn. Er is daardoor ook geen complete definitie van NoSQL-databases omdat er veel verschillende gebieden zijn waar verschillende NoSQL oplossingen uit voortgekomen zijn. Er is echter wel één eigenschap die NoSQL-databases verenigt: ze verschillen op een of meer punten van traditionele relationele databases.

Verder lezen

[Update] Hoogtekaart in kleur

Een “kleine” update. Na wat fine tuning en een zeer passende methode om kleuren weer te geven in plaats van grijswaarden is hier het volgende resultaat behaald met de hoogtedata van Rotterdam:

Hoogtekaart Rotterdam in kleur

Download hier de kaart op volledige resolutie [22528x9728@72MB]: Hoogtekaart Rotterdam in kleur

— Update van 19-03-14 —

Na wat rondvragen heb ik een voor de hoogte betere verdeling van kleurwaarden gevonden. Enig nadeel is dat deze verdeling ervoor zorgt dat minieme verschillen in hoogte (in termen van kleiner dan halve meters) nu vaak niet meer zichtbaar is. Waar voorheen gewerkt werd met een formule om de RGB waarden aan de hand van de hoogte te berekenen, heb ik deze render laten uitvoeren met een zogenaamde Look Up Table voor de kleurreferenties welke overeenkomt met die van het AHN. Laat maar weten wat jullie er van denken.

Hoogtekaart Rotterdam in Kleur

Download hier de kaart op volledige resolutie [22528x9728@48MB]: Hoogtekaart Rotterdam in kleur volgens AHN

[Update] RD coördinaten omzetten naar WGS84 coördinaten

Het volgende stuk code hieronder leek me wel handig te delen, deels omdat ik het vast nog wel vaker nodig ga hebben maar ook omdat anderen er misschien ook wel baat bij hebben uiteraard. De code is geschreven in python maar elke gangbare programmeertaal zal zich er wel voor lenen om iets vergelijkbaars ervan te maken.

Verder lezen

De jeugd van tegenwoordig

Een oudere man komt binnen met trolley en al. Hij kijkt verward om zich heen maar nergens is ruimte om nog te gaan zitten. Ik bied hem mijn plek aan en wordt bedankt door de conducteur die net aan komt lopen. Als sneer naar de rest van het gepeupel roept de oude man nog iets over “de jeugd van tegenwoordig”. Vlak daarna staat ook mijn vriendin haar plaats af aan een oudere dame, die haar bedankt en zegt dat ze dat zo lief vindt.

Verder lezen

Van algoritme naar afbeelding [Gigapica]

Kaart Rotterdam Hoogtedata klein

Voor de minor die ik volg moest nog maar een stukje voltooid worden om deze af te ronden, namelijk het werken met Hadoop MapReduce om een grote hoeveelheid data (ongeveer 77 miljoen gemeten punten aan hoogtedata) om te zetten naar een betekenisvolle visualisatie.

Zie hierboven het resultaat (statisch, non Google Maps style). Om het resultaat op de juiste resolutie te zien klik je op bovenstaande afbeelding of volg je deze link: Giga Rotterdam. Let wel, de afbeelding is enorm dus laden kan even duren! Mocht het openen in de browser niet lukken, probeer dan de afbeelding te downloaden [rechtermuisknop op link => opslaan als]

Wallpaper

Een lui lijf en een warm bedde zijn goede vrienden

Wat is het toch een lekker weer de afgelopen weken, gemiddeld zo’n 25 graden Celsius. Je zou het bijna een absurditeit noemen. Het is mooi geen typisch Nederlands weer; sterker nog, ik waan me soms wel op vakantie in een Zuid-Europees land als Spanje of Griekenland.

De vruchten van die warmte: luiheid, volslagen nutteloos niks doen tot het tijdstip aanbreekt dat het te laat is en ik mijn ogen weer sluit. In zoverre heb ik deze vakantie al wat gedaan van ‘t onderstaande to-do lijstje:

  • Genieten van het weer
  • Server omzetten naar Ubuntu
  • Data op server uitzoeken en opschonen
  • Veel fietsen
  • Administratiesysteem verder uitwerken
  • Android applicatie maken voor administratiesysteem
  • Hadoop onder de knie krijgen
  • Email opruimen

Zoals je ziet, het lijstje is redelijk lang en er is ook nog maar weinig van gedaan. Ik ga vast als een zeur klinken, maar was het gewoon maar eens een paar dagen iets Nederlandser weer, dan krijg ik tenminste nog iets gedaan.

2013-06-25 20.41.53

Suikerbom

Een blogpost. Juist. Daar hakkel ik al een tijdje tegenaan, aangezien ik geen idee heb wat ik op een blog zou moeten zetten. Nu heb ik de opdracht gekregen (of het advies, ‘t is maar hoe je het bekijkt) om iets neer te zetten over ons bak-probeersel van gisteravond. Bak-’probeersel’? Ja, probeersel. Bij elkaar geraapt zootje, zo zou je het ook kunnen noemen.

De tv staat de laatste tijd nogal vaak op 24Kitchen, ook al kijk ik normaal gesproken helemaal niet naar kookprogramma’s.Maar goed, 24Kitchen zendt erg vaak Rudolph’s Bakery uit. Je weet wel, Rudolph, die gast die altijd bij Carlo en Irene in de studio stond te koken. Mocht je hem missen, kijk dan vooral 24Kitchen, want daar is hij volop te zien. Rudolph maakt vaak erg lekkere dingen in deze bakery, en dus zijn we op basis van zijn dingetjes iets gaan proberen. Dus zijn we iets met een soort cake gaan maken. Dunne, platte cake zoals je het ook in slagroomtaart hebt. Bleek heel simpel te zijn. Boter, ei, suiker bloem, maar dan heel luchtig, en bakken maar.

Verder lezen

Een nieuwe ervaring

Vandaag was, op zijn zachtst gezegd, bijzonder. Nog nooit eerder heb ik zo veel “kippen” bij elkaar gezien die elkaars ogen uitsteken om een graantje mee te pikken, zogezegd dan. Vandaag, was ik voor het eerst in de Primark.

De Primark is zeker goedkoop, maar komt wel met een behoorlijk psychisch prijskaartje. Chaos, bendes kleding en hordes mensen die elkaar het liefst zouden verdringen om als eerste aan de beurt te zijn om hun net uit de stapels gerukte kleding zo snel mogelijk te passen, weg te gooien, het opnieuw te proberen en bij de kassa af te laten rekenen.

Ik heb het al niet zo op mensen, dat is niks nieuws, maar zo’n hoeveelheid mensen per vierkante meter ben ik nog niet eerder tegen gekomen. Vandaar een hele nieuwe ervaring met een winkel die ik samen met mijn vriendin niet meer tijdens lunchtijd zal gaan bezoeken.

Cheerio