"El problema no són les dades, és com ignorem les parts avorrides d'ella." Per què un model amb una precisió de predicció del 99% inundaria la teva bústia de correu amb falses alarmes i convertiria el teu bonic dia en un malson? És confús? Benvinguts a la Un prejudici que fa que tant els humans com les màquines equivoquin les probabilitats quan oblidem el context en què existeixen les dades. Base Rate Fallacy What Is the Base Rate Fallacy? Què és la fal·làcia de la taxa de base? Anem a fer una ullada ràpida a què és realment la fallació del tipus de base. El és la probabilitat total d'un esdeveniment que es produeixi- A partir de les noves evidències, el Això succeeix quan aquestes probabilitats subjacents són ignorades, i només ens centrem en les noves proves. base rate Abans base rate fallacy Let the Math Speak Let the Math Speak Imagineu-vos una situació en què una malaltia afecta Vostè, sent un geni, desenvolupa una prova que és : 1 in 1000 99% accurate 
 
 
 Si algú té la malaltia, el test és positiu el 99% del temps (veritable positiu). Si algú no té la malaltia, el test és negatiu el 99% del temps (veritable negatiu). Ara, suposem que algú prova Quina és la probabilitat que realment tinguin la malaltia? positive Contràriament a la intuïció, és Aquí està el per què: not 99% Per a 1.000 persones: 
 
 
 1 persona realment té la malaltia → el test probablement la captura → 1 veritable positiu 999 persones no tenen la malaltia → 1% d'elles prova positiu → ~10 falsos positius Entre els que van provar positiu: 
 
 
 Total de positives = 1 (true) + 10 (false) = 11 Probabilitat de tenir realment la malaltia = 1 / 11 ≈ 9% Malgrat un test que és "99% precís", la seva probabilitat de ser malalt és només Perquè la malaltia és molt rara. 9% Això  is the  -I ignorar-la condueix a una malinterpretació massiva. 1-in-1000 Taxa de base Why Humans Fall for This Per què els humans cauen per això Això no és només un problema matemàtic, és un problema . brain problem psicòlegs i Hem descobert que quan avaluem la probabilitat, subconscientment substituïm preguntes difícils per preguntes més fàcils. Daniel Kahneman Amos Tversky “Quant de bé coincideix aquesta situació amb el meu estereotip mental?” Per tant, quan un test és 99% precís, el nostre cervell diu: “Sona com un partit!” ... i assumim que el resultat ha de ser cert. Aquest curtmetratge s’anomena , i ens fa ignorar l'avorrida taxa de base estadística. representativeness heuristic The Engineer–Lawyer Conundrum L'enginyer advocat Conundrum Aquest efecte s’ha demostrat a través de . Engineer–Lawyer problem Els participants van ser informats: 
 
 
 Hi ha 70 advocats i 30 enginyers en una habitació. Jack és introvertit, gaudeix de trencaclosques matemàtics i li agrada l'electrònica. Llavors es va preguntar: "Quina és la probabilitat que Jack sigui un enginyer?" Even though the base rate suggests a  La majoria de la gent va dir Perquè el Jack La descripció se sent representativa, de manera que la relació 70/30 s'ignora -tot i que és un predictor més poderós. 30% chance 80–90% Sòcia How This Fails in the Real World Com funciona això en el món real **Prediccions d'IA: Creeu un model que marca els productes defectuosos amb una precisió del 95%. De fet, la majoria de les alertes són falsos positius.Les operacions poden anar a la manera de pànic - sobre res. 0.1% **Planificació de la cadena de subministrament \ Un sistema de retard d'alerta precoç marca els riscos del venedor. Si els enviaments es retarden, la majoria de les advertències seran falses, fins i tot si el sistema és tècnicament “exacte”. 1 in 500 I passa a través d’una àmplia gamma de dominis: detecció de fraus, proves mèdiques, alertes de amenaces, seguiment d’anomalies –la llista continua. The Solution: Bayes to the Rescue La solució: Bayes al rescat De manera matemàtica, Ajuda a contrarestar la fal·làcia del tipus de base. Actualitza les nostres creences combinant els tipus de base amb noves proves: Bayes’ Theorem P(A)B=P(B)P(B)A / P(A) On és: 
 
 
 
 
 P(A) B: Probabilitat de tenir la malaltia donat un test positiu P(B) A: Probabilitat de test positiu si té la malaltia P(A): Taxa de base (probabilitat prèvia) P(B): Probabilitat total de test positiu (true + false positives) El teorema de Bayes ens obliga a equilibrar-nos amb Alguna cosa que la intuïció humana tendeix a saltar. El que sabem El que veiem Final Thoughts Pensaments finals Vivim en un món impulsat per les prediccions, des de la IA a la salut fins a la logística, però els números, no importa com siguin sofisticats, no signifiquen res sense el dret. . context I de vegades, la visió més poderosa es troba en l'avorrida probabilitat de baixa clau que vam ser massa ràpids per ignorar.

Read My Stories

Aquest àudio és produït a l'idioma original de la història!

La fal·làcia de la taxa de base: per què el teu model més intel·ligent encara s'equivoca

About Author

COMENTARIS

Etiquetes penjant

AQUEST ARTICLE VA SER PRESENTAT A

Related Stories

Startups of The Year: Meet the Cybersecurity Industry

Generar líders de qualitat ASAP: HackerNoon's Content-Relevant Niche Ads FTW

Meet Filestack: HackerNoon Company of the Week

TON Game ‘BANANA’ Hits 1M Users In 72 Hours

Startups of The Year: Meet the Cybersecurity Industry

Generar líders de qualitat ASAP: HackerNoon's Content-Relevant Niche Ads FTW

Meet Filestack: HackerNoon Company of the Week

TON Game ‘BANANA’ Hits 1M Users In 72 Hours

Light-Mode

Classic

Newspaper

Dark-Mode

Neon Noir

Minty

HN StartUps