Deze opname is gebaseerd op 1 miljard passages van taxi-gebruikers in New York.
Twee astronomen van de Universiteit van Groningen (Nederland) hebben een virtuele bibliotheek gemaakt die visualisaties kan genereren op basis van honderden miljoenen datapunten. Aanvankelijk werd de software gemaakt om een enorme hoeveelheid Gaia-missiegegevens te verwerken. Maar het kan ook sjablonen in andere grote gegevensbestanden weergeven. Het is open source en gratis te gebruiken.
De software heette Vaex - "visualisatie en studie van grote tabulaire datasets". Het kan een visualisatie van miljarden gegevenspunten maken in slechts één seconde en gedraagt zich als Google maps. Maar Google Maps gebruikt snelle en krachtige servers voor het werk, en Vaex kost een laptop. De kracht van de Vaex is gebaseerd op verschillende slimme methoden. Het maakt gebruik van een intelligent algoritme dat alle beschikbare rekenkracht maximaliseert. Daarna telt het alleen de benodigde gegevens van de harde schijf en stuurt het naar het hoofdgeheugen van de computer. Bovendien slaat het werkgeheugen geen onnodige kopieën van gegevens op.
De kracht van de Vaex werd live gedemonstreerd op verschillende conferenties. Gebruikte een dataset van 1 miljard records met betrekking tot taxi's in New York. Het bleek dat je kunt zien welke reizen grote winsten opleveren en waar taxi's op elk moment van de dag te verwachten zijn. Dit suggereert dat Vaex buiten de astronomie zou moeten worden gebruikt.
