ใครโกหก?

เราบินมาสี่ชั่วโมงแล้ว แต่มาตรวัดก๊าซทั้งสองยังอ่านว่า “เต็ม” ฉันไม่จำเป็นต้องมีใบอนุญาตของนักบินเพื่อที่จะรู้ว่ามันไม่ถูกต้อง หรือไม่ก็ไม่ต้องรู้สึกถึงอะดรีนาลีนในเหงือกที่พุ่งพล่านเมื่อนึกถึงเครื่องยนต์ที่สปัตเตอร์ไปสู่ความตายอันเงียบสงบที่น่าขนลุก ใบพัดกังหันลมสั่นไหวขณะที่เรากรีดร้องว่า “เมย์เดย์ เมย์เดย์” และ “วางลงตรงนั้น” เหมือนในหนัง หวังว่าจะรวมถึงส่วนที่ฮีโร่ก้าวออกไปอย่างมั่นใจในขณะที่ซากศพถูกจุดไฟด้วยลูกไฟ เหตุการณ์ซ้ำซากในชีวิตที่แสนจะเบิกบานจนไม่สามารถแม้แต่จะเหลียวหลังกลับมาได้ ที่การสังหาร

“อืม มันไม่ถูกต้อง” ฉันพูดกับเจอร์รี่ นักบินตัวจริง “ใช่” เขาพูด “เข็มจะติดอยู่ที่กระจก” เขาสะบัดแก้ว เข็มไม่ขยับ “ดังนั้น… เรามีน้ำมันเพียงพอหรือไม่” “ใช่ เราเหลือเวลาอีกชั่วโมง ฉันติดถังน้ำมันก่อนที่เราจะจากไป”

“การเกาะติด” หมายความว่า ขันไม้ลงจากปีกเข้าไปในถังแก๊ส โดยพิจารณาจากระดับความชื้นที่เกิดขึ้น บางครั้งเทคโนโลยีที่ง่ายที่สุดก็ดีที่สุด แท่งไม้ไม่ทำให้แบตเตอรี่หมดหรือทำให้คุณรอสี่สิบเจ็ดนาทีสำหรับการอัปเดตความปลอดภัย

เชื่อใจ แต่ยืนยัน”

—โรนัลด์ เรแกน ท่องสุภาษิตบทกวีรัสเซีย: Доверяй, но проверяй

มันยังไม่ดีพอที่จะมีแค่ “สองอย่าง” หากทั้งสองสิ่งพึ่งพาไฟฟ้าและไฟฟ้าดับ คุณจะสูญเสียทั้งสองอย่าง มีเกจวัดแก๊สสองอัน ทั้งสองล้มเหลวด้วยเหตุผลเดียวกัน มันจะต้องมีการใช้งานที่แตกต่างกันเช่นกัน เช่น แท่งไม้กับมาตรวัด ตัวอย่างเช่น มีเข็มทิศลูกแม่เหล็กแบบปกติที่ลอยอยู่ในของเหลวที่จะทำงานแม้ว่าแหล่งพลังงานอื่นจะล้มเหลว แต่อ่านได้ยากเนื่องจากมันกระเด้งไปมาจากการสั่นสะเทือน ดังนั้นจึงเป็นการดีที่จะมีอีกอันหนึ่งที่หมดแรงดูด—ความต่างของแรงดันอากาศระหว่าง ด้านนอกและด้านในของห้องโดยสาร—ซึ่งมั่นคงแม้ในขณะที่คุณกำลังพลิกเครื่องบินในความปั่นป่วน

เจอร์รี่เคยพูดว่า: “ใครโกหก?” โดยปกติเครื่องมือของคุณถูกต้อง แต่บางครั้งเครื่องมือหนึ่งกำลังโกหก บางทีระบบดูดอาจไม่ทำงาน ดังนั้นคุณจึงตรวจสอบแป้นหมุนแบบดูดซ้ำด้วยแป้นหมุนแบบไฟฟ้า คุณติดถังในกรณีที่เกจก๊าซอยู่

บทเรียนเดียวกันนี้ใช้กับข้อมูลและเมตริกในชีวิตประจำวันของเรา คุณคิดว่าคุณเข้าใจความหมายของตัวเลขแต่ละตัว และโดยปกติคุณคิดถูก แต่บางครั้งน้ำมันหมดและไม่รู้ตัว ฉันเคยเห็นสิ่งนี้เกิดขึ้นด้วยเหตุผลหลายประการ: สเปรดชีตมีจุดบกพร่องเล็กน้อยในสูตร รหัส JavasScript ของการวิเคราะห์ถูกทิ้งไว้โดยไม่ได้ตั้งใจในหน้าเดียว อีเมลแบบสำรวจไม่ถูกส่งไปยังลูกค้าทั้งหมดในกลุ่ม การสืบค้นฐานข้อมูลได้/ไม่ได้กรองสิ่งที่สำคัญ สคริปต์อัปเดตทุกคืนไม่ได้ทำงานมาเป็นเวลาสามเดือนแล้ว

วิธีที่ดีในการตรวจสอบข้อมูลที่ไม่ถูกต้องคือการจำลองวิธีแดชบอร์ดบนเครื่องบินเพื่อรับข้อมูลเดียวกันในสองวิธีที่แตกต่างกัน รายได้จากระบบการเรียกเก็บเงินของคุณเทียบกับกระแสเงินสดจากใบแจ้งยอดจากธนาคารของคุณ (เมื่อฉันพบว่าผู้ประมวลผลบัตรเครดิตของเราทำให้การรับเงินสดล่าช้า) จำนวนลูกค้าที่ใช้งานจาก Stripe และจากพอร์ทัลผู้ใช้ของคุณ (เพราะบางครั้งการยกเลิกในระบบหนึ่งไม่สามารถยกเลิกในอีกระบบหนึ่งได้) ปริมาณการใช้เว็บจาก Google Analytics แต่ยังรวมถึงระบบการวิเคราะห์อื่น หรือบันทึกการใช้เว็บดิบของคุณ (หากคุณใช้เครื่องมือวิเคราะห์เว็บห้าเครื่องมือ ทั้งหมดจะให้ตัวเลขที่แตกต่างกัน อาจ เป็นเพราะความแตกต่างในคำจำกัดความของสิ่งต่างๆ เช่น “การเข้าชม” และ “เซสชัน” แต่นั่นคือทั้งหมดหรือไม่)

นอกจากความหวาดระแวงแล้ว ฉันยังพบข้อดีอีกอย่างในการคำนวณข้อมูลเดียวกันสองครั้ง นั่นคือ ความเข้าใจที่ดีขึ้นเกี่ยวกับพลังเบื้องหลังข้อมูลนั้น และด้วยเหตุนี้จึงวิเคราะห์ได้ดีขึ้นว่าบริษัทดำเนินการอย่างไรและตลาดมีการเปลี่ยนแปลงอย่างไร พิจารณาการเข้าชมเว็บ มีการวิเคราะห์ที่บอกคุณว่าการรับส่งข้อมูลเกิดขึ้นที่ใด (ไม่สมบูรณ์ โดยเฉพาะอย่างยิ่งกับเบราว์เซอร์ล่าสุดและส่วนขยายที่จงใจปิดบังหรือบล็อกข้อมูล) ข้อมูลเกี่ยวกับการคลิกผ่านโฆษณาของคุณ บันทึกเว็บเซิร์ฟเวอร์ดิบของคุณเอง และข้อมูลอุตสาหกรรมในวงกว้าง (เช่น Google Trends on การเปลี่ยนแปลงปริมาณการค้นหาสำหรับคำหลักของคุณ) พวกเขาทั้งหมดบอกเล่าเรื่องราวที่แตกต่างกัน ไม่มีภาพเต็ม ล้วนแต่ลำเอียง แต่เมื่อนำมารวมกัน รูปภาพของคุณเกี่ยวกับโลกจะสมบูรณ์ยิ่งขึ้น และความเอนเอียงอาจถูกยกเลิกโดยค่าเฉลี่ยหรือโดยให้ความสนใจเฉพาะแนวโน้มที่ชัดเจนและสม่ำเสมอที่สุดเท่านั้น หากแหล่งข้อมูลที่แตกต่างกันสี่แหล่งยอมรับว่ามีแนวโน้มกำลังเกิดขึ้น มันก็กำลังเกิดขึ้นอย่างแน่นอน

หากตัวชี้วัดมีความสำคัญมากพอที่จะดูได้ทุกวัน และดำเนินการหากพฤติกรรมเบี่ยงเบนไปจากความคาดหวัง การตรวจสอบซ้ำก็เป็นสิ่งสำคัญ ทั้งเพื่อความถูกต้องและเพื่อความสมบูรณ์ของความเข้าใจ

หากแดชบอร์ดของคุณไม่ซ้ำซ้อน คุณจะไม่มีทางรู้เลย… ใครโกหก?