Ihmiset ymmärtävät usein väärin, mitä tarkoittaa olla "datalähtöinen" päätöksenteossa. Pelkkä hintakaavioiden, indikaattoreiden tai muiden datapisteiden sisällyttäminen prosessiin ei takaa dataan perustuvaa huippuosaamista; se vain luo illuusion analyyttisestä kurinalaisuudesta. Todellinen haaste on erottaa toisistaan aidosti dataan perustuvat päätökset niistä, jotka käyttävät dataa vain huonosti suunniteltujen strategioiden ikkunakoristeena (esim. parametrien päihittäminen tarpeeksi kauan, kunnes ne korreloivat tulosmuuttujan kanssa). Tie aitoon datavetoiseen kaupankäyntiin edellyttää yksinkertaisuuden, loogisen perustan ja tiukkaa itseskeptisyyttä. Tämä alkaa kehittämällä uskottava idea, jonka tarkoituksena on hyödyntää jotakin tunnistettavaa etua, sitten testaamalla, miten tämä suhde todella toimii todellisissa olosuhteissa, ja mittaamalla, mitä tiedot paljastavat hypoteesistasi. Ratkaiseva askel on yrittää väärentää konseptisi mahdollisimman tiukasti ja testata sen kestävyyttä kaikista mahdollisista näkökulmista, koska jos et alista ideoitasi tämän tason tarkastelulle, markkinat tekevät sen väistämättä puolestasi.