Outliers: เมื่อวิทยาศาสตร์ข้อมูลพบกับเรื่องราวความสำเร็จ
วิทยาศาสตร์ข้อมูลได้พลิกโฉมกระบวนทัศน์เดิมๆ: ค่าผิดปกติไม่ใช่ "ข้อผิดพลาดที่ต้องกำจัด" อีกต่อไป แต่เป็นข้อมูลอันมีค่าที่ต้องทำความเข้าใจ ค่าผิดปกติเพียงค่าเดียวสามารถบิดเบือนแบบจำลองการถดถอยเชิงเส้นได้อย่างสิ้นเชิง โดยเปลี่ยนความชันจาก 2 เป็น 10 แต่การกำจัดค่าผิดปกตินั้นอาจหมายถึงการสูญเสียสัญญาณที่สำคัญที่สุดในชุดข้อมูล การเรียนรู้ของเครื่องได้นำเครื่องมือที่ซับซ้อนมาใช้: Isolation Forest แยกแยะค่าผิดปกติโดยการสร้างต้นไม้ตัดสินใจแบบสุ่ม Local Outlier Factor วิเคราะห์ความหนาแน่นเฉพาะที่ และ Autoencoders จะสร้างข้อมูลปกติขึ้นใหม่และทำเครื่องหมายสิ่งที่ไม่สามารถทำซ้ำได้ ค่าผิดปกติมีทั้งค่าผิดปกติทั่วไป (อุณหภูมิ -10°C ในเขตร้อน) ค่าผิดปกติตามบริบท (การใช้จ่าย 1,000 ยูโรในย่านยากจน) และค่าผิดปกติแบบรวม (จุดสูงสุดของการรับส่งข้อมูลเครือข่ายที่ซิงโครไนซ์กันซึ่งบ่งชี้ถึงการโจมตี) เช่นเดียวกับ Gladwell: "กฎ 10,000 ชั่วโมง" ยังคงเป็นที่ถกเถียงกัน — Paul McCartney กล่าวไว้ว่า "วงดนตรีหลายวงทำงาน 10,000 ชั่วโมงในฮัมบูร์กโดยไม่ประสบความสำเร็จ ทฤษฎีนี้ไม่ได้พิสูจน์ความถูกต้อง" ความสำเร็จทางคณิตศาสตร์ของเอเชียไม่ได้เกิดจากพันธุกรรม แต่เกิดจากวัฒนธรรม: ระบบตัวเลขที่เข้าใจง่ายกว่าของจีน การเพาะปลูกข้าวต้องได้รับการพัฒนาอย่างต่อเนื่อง เทียบกับการขยายอาณาเขตของภาคเกษตรกรรมตะวันตก การประยุกต์ใช้จริง: ธนาคารในสหราชอาณาจักรฟื้นตัวจากความสูญเสียที่อาจเกิดขึ้นได้ 18% ผ่านการตรวจจับความผิดปกติแบบเรียลไทม์ การผลิตตรวจพบข้อบกพร่องในระดับจุลภาคที่การตรวจสอบโดยมนุษย์อาจมองข้าม การดูแลสุขภาพยืนยันข้อมูลการทดลองทางคลินิกด้วยความไวต่อการตรวจจับความผิดปกติมากกว่า 85% บทเรียนสุดท้าย: เมื่อวิทยาศาสตร์ข้อมูลเปลี่ยนจากการกำจัดค่าผิดปกติไปสู่การทำความเข้าใจค่าผิดปกติ เราต้องมองอาชีพที่ไม่ธรรมดาว่าไม่ใช่ความผิดปกติที่ต้องแก้ไข แต่เป็นเส้นทางที่มีค่าที่ต้องศึกษา