Человечество научилось собирать, обрабатывать и использовать в науке, бизнесе и повседневной жизни огромные массивы данных. Но что делать с данными, которых у нас нет? Допустимо ли игнорировать то, чего мы не замечаем?Британский статистик Дэвид Хэнд считает, что это по меньшей мере недальновидно, а порой крайне опасно. В своей книге он выделяет 15 влияющих на наши решения и действия видов данных, которые остаются в тени. Например, речь идет об учете сигналов бедствия, которые могли бы подать жители бедных районов, если бы у них были смартфоны, о результатах медицинского исследования, которые намеренно утаили или случайно исказили, или о данных, ставших темными из-за плохого набора критериев для включения в выборку. Хэнд также рассказывает о том, какие меры могут сгладить эффект темных данных и как их можно обратить себе на пользу.«Темные данные скрыты от нас, и этот факт означает, что мы рискуем недооценить опасность, сделать неправильный вывод и принять неверное решение. Иначе говоря, наше неведение становится причиной ошибок».Книга будет интересна широкому кругу читателей, интересующихся дата-сайенс, программированием и статистикой.«Темные данные ведут себя аналогично темной материи: мы не видим их, они не обнаруживаются, но все же способны оказывать существенное влияние на наши выводы, решения и действия. И, как я покажу на дальнейших примерах, если не осознать саму вероятность существования чего-то неизвестного, то последствия такой слепоты могут быть катастрофическими и даже фатальными».«Хотя иметь много данных полезно, большие данные, то есть объем, — это еще далеко не все. И то, чего вы не знаете, те данные, которых у вас нет, могут быть важнее для понимания происходящего, чем те, которыми вы располагаете».
CHelovechestvo nauchilos sobirat, obrabatyvat i ispolzovat v nauke, biznese i povsednevnoy zhizni ogromnye massivy dannykh. No chto delat s dannymi, kotorykh u nas net? Dopustimo li ignorirovat to, chego my ne zamechaem?Britanskiy statistik Devid KHend schitaet, chto eto po menshey mere nedalnovidno, a poroy krayne opasno. V svoey knige on vydelyaet 15 vliyayushchikh na nashi resheniya i deystviya vidov dannykh, kotorye ostayutsya v teni. Naprimer, rech idet ob uchete signalov bedstviya, kotorye mogli by podat zhiteli bednykh rayonov, esli by u nikh byli smartfony, o rezultatakh meditsinskogo issledovaniya, kotorye namerenno utaili ili sluchayno iskazili, ili o dannykh, stavshikh temnymi iz-za plokhogo nabora kriteriev dlya vklyucheniya v vyborku. KHend takzhe rasskazyvaet o tom, kakie mery mogut sgladit effekt temnykh dannykh i kak ikh mozhno obratit sebe na polzu.Temnye dannye skryty ot nas, i etot fakt oznachaet, chto my riskuem nedootsenit opasnost, sdelat nepravilnyy vyvod i prinyat nevernoe reshenie. Inache govorya, nashe nevedenie stanovitsya prichinoy oshibok.Kniga budet interesna shirokomu krugu chitateley, interesuyushchikhsya data-sayens, programmirovaniem i statistikoy.Temnye dannye vedut sebya analogichno temnoy materii: my ne vidim ikh, oni ne obnaruzhivayutsya, no vse zhe sposobny okazyvat sushchestvennoe vliyanie na nashi vyvody, resheniya i deystviya. I, kak ya pokazhu na dalneyshikh primerakh, esli ne osoznat samu veroyatnost sushchestvovaniya chego-to neizvestnogo, to posledstviya takoy slepoty mogut byt katastroficheskimi i dazhe fatalnymi.KHotya imet mnogo dannykh polezno, bolshie dannye, to est obem, eto eshche daleko ne vse. I to, chego vy ne znaete, te dannye, kotorykh u vas net, mogut byt vazhnee dlya ponimaniya proiskhodyashchego, chem te, kotorymi vy raspolagaete.
