På Strata-konferensen i London 2012 talade författaren och teknikhistorikern George Dyson om hur mänskligheten kom till dagens värld av höghastighets- och big data-funktionalitet och vart han ser saker gå. Dyson började med sin egen idé om varför big data finns. Kostnaden för att kasta bort något, sa Dyson, började överskrida maskinkostnaderna för att hålla det. Och så föddes big data.
När han granskade några av de andra stegen som ledde till dagens komplexa datalagring och datahanteringsteknologier undersökte Dyson några primitiva beräkningsplaner och idéer om teknik från århundraden tidigare, till exempel att skriva av den tyska matematikern och filosofen GW Leibniz 1679 på en binär dator, Charles Babbages "skillnadsmotor" och arbete utfört av Alfred Smee i mitten av 1800-talet som i förväg övervägde en typ av maskin som skulle fungera som en modern sökmotor. (Läs mer om det tidigaste arbetet inom datorprogrammering i The Pioneers of Computer Programming.)
Från dessa idéer, som var djupt före sin tid, fortsatte Dyson att nämna Hollerith-kort och annan teknik som började implementera faktiskt några av de idéer som tidigare varit begränsade av bristen på tillgänglighet av konstruerad hårdvara. Med ett stort fokus på Alan Turing banbrytande arbete med datainmatning och -utmatning, hänvisar Dyson också till John von Neuman och Manhattan-projektet som ett samarbete som krävde hantering av mycket data på specifika sätt.
Dessutom beskriver Dyson några av de principer som andra forskare från 1900-talet använde för att uppnå så mycket, även med mycket begränsade mängder minne. Däremot kallade Dyson det moderna datorsystemet "ineffektivt" genom att data hanteras på ett linjärt sätt, med en specifik adress för varje databitar. Med hänvisning till Von Neumans filosofi om procedurell kodning och andra idéer om teknisk framsteg krävde Dyson en renovering av hur utvecklare använder data och ett steg mot principer som tredimensionell datoranvändning, pulsfrekvenskodning och övervägandet av analoga tekniker som fungerar mycket som den mänskliga hjärnan.
Den här videon ger en rik historia av datalagring och datahantering. Genom att göra det fungerar det också som en kraftfull åtal mot en "fantasikris" som kan hålla tillbaka flödet av framtida teknisk innovation.
