Преглед в рандомизирани контролирани експерименти от Ейми Гало
За да вземаме интелигентни решения по време на работа, са ни необходими данни. Откъде идват тези данни и как ги анализираме, зависи от много фактори, като например какво се опитваме да направим с резултатите, колко точни се нуждаем от резултатите и колко бюджет разполагаме. Съществува набор от експерименти, които мениджърите могат да направят от бързи и неформални, до пилотни проучвания, полеви експерименти и лабораторни изследвания. Един от по-структурираните експерименти е рандомизиран контролиран експеримент.
За да разбера по-добре какво представлява рандомизиран контролиран експеримент и как компаниите го използват, разговарях с Том Редман, автор на Driven by Data: Печалба от вашия най-важен бизнес актив. Той също така съветва организациите относно качеството на данните и програмите за данни.
Какво е рандомизиран контролиран експеримент?
Когато хората чуят термина, през повечето време се сещат за клинични изпитвания, при които една група получава лечение, а друга - плацебо, но фармацевтичните компании и медицинските учени не са единствените, които използват този тип експерименти. Всички видове компании могат да извършват тези експерименти и не е задължително те да са скъпи или да отнемат много време; те трябва само да бъдат „контролирани“ и да включват елемент на „рандомизиране“.
Нека започнем с думата експеримент. „Експериментът е планирана дейност, чиято цел е да научи нещо за света“, обяснява Редман. Дайте пример с двегодишни деца, които непрекъснато експериментират: „Те си мислят:„ Ако изкрещя, мама ще избяга. „Те събират данни за света и въпреки че той не се контролира, те го правят умишлено“.
Ето още един пример, свързан с бизнеса. Да предположим, че се занимавате с бизнес за сондиране на нефтени кладенци и имате нова бита, която се управлява от програма за изкуствен интелект, която регулира налягането и скоростта, с които бита се върти. Искате да знаете как този нов, по-скъп бит се сравнява с този, който използвате в момента, затова провеждате експеримент, сравняващ съществуващия ви бит с новия. Изберете 30 отвора и пробийте 15 от тях със стария бит и 15 с новия. Това е вашият експеримент и вашата променлива на интерес може да бъде колко ефективно сте пробили сондажа.
Имайте предвид, че броят на кладенците тук е доста малък в сравнение с експеримент, например, където показвате на 1000 потенциални клиенти нова маркетингова кампания. Колкото по-голям е размерът на извадката, толкова по-вероятно е да постигнете статистически значими резултати. Но трябва да сте реалисти и по отношение на цената на вашия експеримент и тъй като струването на милиони долари за пробиване на петролен кладенец, вероятно ще проведете този експеримент на по-малко кладенци.
В експеримент променливата, която представлява интерес, се нарича негова зависима променлива(имайте предвид, че можете да имате множество зависими променливи, но за улеснение тук ще се позова на зависима променлива). Но има и много независими променливи - фактори, за които подозирате, че оказват влияние върху зависимата ви променлива. „Обикновено в експеримент се опитвате да научите нещо за една или най-много някои независими променливи, но много други фактори могат да попречат“, казва Редман. Искате да знаете коя тренировка е по-добра, но други фактори, като например размера на дупката, нейната дълбочина и това, което копаете, също ще повлияят на това колко ефективно е дупката и ще усложнят оценката на новата тренировка. По подобен начин в клинично изпитване има много други фактори, като възрастта на пациентите, общото здравословно състояние, режимите на упражняване и кръвното налягане, които могат да затруднят установяването дали резултатите от експеримента всъщност могат да се отдадат на лекарството а не някакъв друг фактор.
Тук идва думата „контролиран“. Този термин може да обърка, защото статистиците го използват, за да опишат повече от една концепция. Както се шегува Редман, „Нека статистиците замъгляват една напълно проста концепция!“ Първото значение е "да се изолира въздействието на една (или някои) променливи", обяснява Редман. "Контролиран" в този смисъл означава въвеждане на ограничения, така че някои променливи да не влияят на резултата от експеримента Ви. Така че в клинично изпитване за наркотици може да се притеснявате, че диетата на участниците ще повлияе дали лекарството е ефективно. Вие "контролирате" това, като поставяте всички пациенти на една и съща диета по време на експеримента. По същия начин, при вашия сондажен експеримент, може да искате да се уверите, че отчитате „очакваната твърдост на скалата“, така че да можете да създадете 15 двойки кладенци въз основа на това колко трудно очаквате да бъдат пробити. Това би контролирало очакваната твърдост. Можете също така да се уверите, че използвате сондажни съоръжения и оборудване, за да контролирате въздействието, което тези фактори могат да окажат върху вашия експеримент.