دانش ترکیبی برای تصمیم‌های عصر هوش مصنوعیتماس و مشاوره: ۰۹۱۲۰۴۳۸۸۷۴

خلاصه کتاب «سیگنال و نویز» اثر نیت سیلور؛ هنر و علم پیش‌بینی در عصر داده

معرفی و خلاصه کتاب سیگنال و نویز اثر نیت سیلور

ما در عصری زندگی می‌کنیم که هر روز بیش از تمام تاریخِ پیش از قرن بیستم داده تولید می‌کند. منطقی به نظر می‌رسد که با این همه داده، پیش‌بینی‌هایمان بسیار دقیق‌تر شده باشد. اما اقتصاددانان هنوز رکودها را پیش‌بینی نمی‌کنند، کارشناسان سیاسی کمی بهتر از شیر یا خط عمل می‌کنند و بحران‌های مالی همه را غافلگیر می‌کند. نیت سیلور می‌گوید مشکل کمبود داده نیست؛ مشکل این است که نویز را به جای سیگنال می‌گیریم.

سیلور کارش را با ساختن مدلی برای پیش‌بینی عملکرد بازیکنان بیسبال آغاز کرد، مدتی از راه پوکر زندگی گذراند و سپس با پیش‌بینی دقیق نتیجهٔ انتخابات آمریکا مشهور شد. «سیگنال و نویز» حاصل گفت‌وگوی او با ده‌ها پیش‌بینی‌گر در حوزه‌های گوناگون است؛ از هواشناسان و زلزله‌شناسان تا قماربازان حرفه‌ای و تحلیلگران اطلاعاتی. کتاب نه دربارهٔ فرمول، که دربارهٔ طرز فکر است، و برای هر کسی که با داده تصمیم می‌گیرد پادزهری در برابر اعتمادبه‌نفس کاذب است.

شناسنامه کتاب

  • عنوان اصلی: The Signal and the Noise
  • نویسنده: نیت سیلور
  • سال انتشار: ۲۰۱۲
  • حوزه: هوش مصنوعی و داده
  • زمان مطالعهٔ این خلاصه: حدود ۱۰ دقیقه
  • سطح: مقدماتی تا متوسط
  • خوانایی: ★★★★☆
  • کاربردی‌بودن: ★★★★☆
  • عمق ایده‌ها: ★★★★☆

ایدهٔ اصلی کتاب در یک جمله

پیش‌بینی خوب از دادهٔ بیشتر یا مدل پیچیده‌تر نمی‌آید؛ از فکرکردن احتمالاتی، به‌روزکردن پیوستهٔ باورها و فروتنی دربارهٔ آنچه نمی‌دانیم می‌آید.

انفجار اطلاعات و توهم دانستن

سیلور کتاب را با اختراع چاپ آغاز می‌کند. دسترسی ناگهانی به انبوه متن، در بلندمدت به انقلاب علمی انجامید، اما در کوتاه‌مدت دو قرن آشوب و جنگ فرقه‌ای به بار آورد، چون مردم بیش از توان پردازششان اطلاعات داشتند و هر کس آنچه را می‌خواست در آن می‌یافت. او وضعیت امروز را مشابه می‌بیند.

وقتی حجم داده با سرعتی بیش از توان ما برای فهم آن رشد کند، تعداد فرضیه‌های قابل آزمون سرسام‌آور می‌شود و بیشتر رابطه‌هایی که می‌یابیم تصادفی‌اند. داده به‌خودی‌خود حرف نمی‌زند؛ ما به جای آن حرف می‌زنیم و سوگیری‌های خود را در دهانش می‌گذاریم. به همین دلیل سیلور میان «سیگنال»، یعنی حقیقتی که دنبالش هستیم، و «نویز»، یعنی هر آنچه ما را از آن منحرف می‌کند، تمایز می‌گذارد و می‌گوید نسبت نویز به سیگنال در حال افزایش است.

بحران مالی: شکست فاجعه‌بار پیش‌بینی

نخستین مطالعهٔ موردی بحران مالی ۲۰۰۸ است. مؤسسه‌های رتبه‌بندی به اوراق بهاداری که بر پایهٔ وام‌های مسکن پرریسک ساخته شده بودند بالاترین رتبه را دادند و احتمال نکول را بسیار ناچیز برآورد کردند. در عمل نرخ نکول ده‌ها و گاه صدها برابر آن بود.

خطای اصلی به گفتهٔ سیلور یک فرض بود: اینکه نکول وام‌ها از هم مستقل‌اند. مدل‌ها بر داده‌های دوره‌ای ساخته شده بودند که قیمت مسکن در سراسر کشور هرگز هم‌زمان سقوط نکرده بود؛ پس وضعیتی که همهٔ وام‌ها با هم خراب شوند در داده نبود. او اینجا تمایز مهمی می‌گذارد میان ریسک، که می‌توان احتمالش را حساب کرد، و نااطمینانی، که نمی‌توان. خطرناک‌ترین خطا این است که نااطمینانی را به شکل ریسکِ دقیقاً محاسبه‌شده بسته‌بندی کنیم. دقت ظاهری اعداد، جای درستی را گرفته بود.

نکتهٔ طلایی

هر وقت مدلی به شما عددی بسیار دقیق می‌دهد، بپرسید: این مدل بر چه دوره‌ای ساخته شده و چه وضعیتی هرگز در داده‌هایش نبوده است؟

روباه و خارپشت در تلویزیون

سیلور سراغ کارشناسان سیاسی می‌رود و از پژوهش بلندمدت فیلیپ تتلاک کمک می‌گیرد. تتلاک هزاران پیش‌بینی کارشناسان را طی سال‌ها دنبال کرد و دریافت که عملکردشان چندان بهتر از حدس تصادفی نیست. اما یک تفاوت مهم میان دو گروه دید. خارپشت‌ها یک ایدهٔ بزرگ دارند و همه‌چیز را با آن توضیح می‌دهند؛ قاطع، منسجم و برای تلویزیون جذاب‌اند. روباه‌ها چیزهای کوچک بسیاری می‌دانند، از منابع گوناگون می‌آموزند، با پیچیدگی کنار می‌آیند و زود می‌پذیرند که اشتباه کرده‌اند.

روباه‌ها به‌طور معناداری بهتر پیش‌بینی می‌کنند. تلخی ماجرا اینجاست که هرچه کارشناسی بیشتر در رسانه دیده می‌شد، پیش‌بینی‌هایش بدتر بود. ما به قطعیت پاداش می‌دهیم، نه به دقت. سیلور شیوهٔ کار خودش را روباه‌وار توصیف می‌کند: نظرسنجی‌های بسیار را ترکیب می‌کند، نتیجه را به شکل احتمال بیان می‌کند و با هر دادهٔ تازه آن را به‌روز می‌کند.

وقتی آمار و چشم تجربه کنار هم می‌نشینند

در فصل بیسبال، سیلور به دوگانه‌ای می‌پردازد که سال‌ها این ورزش را دوپاره کرده بود: تحلیلگران آماری در برابر استعدادیاب‌هایی که با چشم خود بازیکن را می‌سنجند. مدل او در آغاز از بسیاری از کارشناسان بهتر عمل کرد، اما در پیش‌بینی آیندهٔ بازیکنان جوان، فهرست استعدادیاب‌ها کمی دقیق‌تر بود.

نتیجه‌ای که می‌گیرد برای هر سازمان داده‌محوری آموزنده است: استعدادیاب‌ها اطلاعاتی داشتند که در آمار نبود؛ اخلاق کاری، سلامت، انگیزه. بهترین باشگاه‌ها آن‌هایی شدند که هر دو را ترکیب کردند. اطلاعات کیفی هم اطلاعات است، و مسئله این نیست که انسان بهتر است یا مدل، بلکه این است که چگونه مشاهدهٔ انسانی را منظم و با سوگیری کمتر وارد تحلیل کنیم.

هواشناسی: داستان موفقیتی که نمی‌بینیم

هواشناسان موضوع شوخی‌های بسیارند، اما سیلور آن‌ها را قهرمانان کتاب می‌داند. جوّ سیستمی آشوبناک است که خطای کوچک در داده‌های اولیه به‌سرعت در آن بزرگ می‌شود. با این حال، دقت پیش‌بینی مسیر توفان‌ها طی چند دهه چند برابر شده است.

راز این موفقیت سه چیز است. نخست، هواشناسان فیزیک پدیده را می‌فهمند و فقط به الگوهای آماری تکیه نمی‌کنند. دوم، هر روز پیش‌بینی می‌کنند و فردا بازخورد می‌گیرند. سوم و مهم‌تر، به زبان احتمال حرف می‌زنند و «کالیبره» هستند: وقتی می‌گویند احتمال بارش چهل درصد است، در بلندمدت واقعاً در چهل درصد چنین روزهایی باران می‌بارد. این معیاری است که هر پیش‌بینی‌گری باید خود را با آن بسنجد. سیلور نشان می‌دهد که برخی رسانه‌های تجاری عمداً احتمال بارش را بیشتر اعلام می‌کنند، چون مخاطب بارانِ پیش‌بینی‌نشده را نمی‌بخشد؛ نمونه‌ای از اینکه انگیزه چگونه دقت را خراب می‌کند.

زلزله، اقتصاد و خطر بیش‌برازش

زلزله‌شناسان می‌توانند بگویند در یک منطقه به‌طور میانگین هر چند سال زلزله‌ای با بزرگی معین رخ می‌دهد، اما نمی‌توانند زمان و مکان دقیق آن را بگویند. تلاش‌ها برای یافتن الگوی دقیق در داده‌های لرزه‌ای بارها به مدل‌هایی انجامیده که گذشته را بی‌نقص توضیح می‌دادند و آینده را نه.

این همان «بیش‌برازش» است: مدلی آن‌قدر انعطاف‌پذیر که نویز را هم مثل سیگنال یاد می‌گیرد. مدلی که داده‌های گذشته را بیش از حد خوب توضیح می‌دهد، باید مشکوک باشد. سیلور همین درس را در اقتصاد دنبال می‌کند. پیش‌بینی‌های رشد اقتصادی معمولاً به شکل یک عدد اعلام می‌شوند، در حالی که خطای تاریخی‌شان بسیار بزرگ است. او می‌گوید پیش‌بینی بدون بازهٔ عدم قطعیت، نیمی از اطلاعات را پنهان می‌کند و تصمیم‌گیر را به خطا می‌اندازد. اقتصاد سیستمی است که مدام تغییر می‌کند و به پیش‌بینی‌های خودش هم واکنش نشان می‌دهد.

نکتهٔ طلایی

از هر پیش‌بینی دو چیز بخواهید: بازهٔ عدم قطعیت، و سابقهٔ دقت پیش‌بینی‌های قبلیِ همان منبع.

قضیهٔ بیز: دستور زبان به‌روزکردن باور

قلب نظری کتاب معرفی شیوهٔ فکر بیزی است. ایده ساده است: با یک برآورد اولیه از احتمال آغاز کنید، سپس با هر شاهد تازه آن را به اندازهٔ قوت همان شاهد جابه‌جا کنید. سیلور با مثال آزمایش پزشکی نشان می‌دهد که چرا این کار مهم است. اگر بیماری‌ای نادر باشد، حتی نتیجهٔ مثبتِ یک آزمایش نسبتاً دقیق هم بیشتر وقت‌ها هشدار اشتباه است، چون شمار افراد سالم بسیار بیشتر است.

این شیوه سه فضیلت دارد. ما را وادار می‌کند باور اولیهٔ خود را آشکار و قابل نقد کنیم. جلوی واکنش افراطی به یک خبر تازه را می‌گیرد. و مهم‌تر از همه، اشتباه‌بودن را به بخشی عادی از فرایند تبدیل می‌کند، نه شکستی شخصی. هدف درست‌بودن از همان آغاز نیست؛ هدف این است که با هر گام کمتر اشتباه باشیم.

درس‌هایی از پوکر، شطرنج و بازار

سیلور از دوران پوکربازی خود می‌گوید تا تفاوت فرایند و نتیجه را نشان دهد. در کوتاه‌مدت شانس نقش بزرگی دارد؛ بازیکن خوب ممکن است ماه‌ها ببازد و بازیکن بد ببرد. کسی که کیفیت تصمیم را فقط با نتیجه بسنجد، درس‌های غلط می‌گیرد. او همچنین یادآوری می‌کند که سود اصلی از حضور بازیکنان ضعیف می‌آمد و وقتی آن‌ها رفتند، بازی برای همه سخت شد؛ برتری همیشه نسبت به رقیب سنجیده می‌شود.

در فصل شطرنج، داستان رویارویی قهرمان جهان با رایانه را نقل می‌کند و نشان می‌دهد که یک حرکت عجیب ماشین، که حاصل خطای نرم‌افزاری بود، در ذهن انسان به نشانهٔ هوشی ژرف تعبیر شد. ما در نویز هم دنبال معنا می‌گردیم. دربارهٔ بازارها نیز موضعی میانه دارد: شکست‌دادن بازار دشوار است، اما حباب‌ها نشان می‌دهند قیمت‌ها همیشه خردمندانه نیستند.

اقلیم و ناشناخته‌های ناشناخته

دو فصل پایانی به پرسش‌های بزرگ می‌پردازد. دربارهٔ تغییر اقلیم، سیلور میان فهم فیزیکی اثر گلخانه‌ای، که محکم است، و پیش‌بینی دقیق دما در دهه‌های آینده، که عدم قطعیت بیشتری دارد، تمایز می‌گذارد و می‌گوید بیان صادقانهٔ این عدم قطعیت اعتماد عمومی را بیشتر می‌کند نه کمتر.

دربارهٔ حمله‌های غافلگیرانه، او نشان می‌دهد که پیش از هر فاجعه نشانه‌ها وجود داشته‌اند، اما در دریایی از نویز گم بوده‌اند و مهم‌تر، در چارچوب ذهنی تحلیلگران نمی‌گنجیده‌اند. ما ناآشنا را با نامحتمل اشتباه می‌گیریم. درس او این است که باید آگاهانه برای سناریوهایی که هرگز ندیده‌ایم جا باز کنیم.

ایده‌های کلیدی کتاب در یک نگاه

  1. دادهٔ بیشتر، نویز بیشتر هم می‌آورد. حجم داده جای فهم را نمی‌گیرد.
  2. احتمالاتی فکر کنید. پیش‌بینی بدون بازهٔ عدم قطعیت ناقص است.
  3. روباه باشید، نه خارپشت: چند منبع، چند مدل، و آمادگی برای تغییر نظر.
  4. کالیبره‌بودن معیار است: هفتاد درصدهای شما باید هفتاد درصد مواقع رخ دهد.
  5. از بیش‌برازش بترسید. توضیح بی‌نقص گذشته نشانهٔ خوبی نیست.
  6. باور را بیزی به‌روز کنید: برآورد اولیه، شاهد تازه، اصلاح.
  7. فرایند را از نتیجه جدا کنید و ناآشنا را نامحتمل نپندارید.

از کتاب تا عمل: همین هفته چه کنیم؟

برای اینکه پیش‌بینی‌گر بهتری شوید، لازم نیست آماردان باشید. این عادت‌ها را بسازید:

  • پیش‌بینی‌های کاری خود را به شکل درصد بنویسید، مثلاً «هفتاد درصد احتمال دارد این پروژه تا پایان ماه تمام شود»، و آن‌ها را ثبت کنید.
  • هر سه ماه دفتر پیش‌بینی‌ها را مرور کنید و ببینید چقدر کالیبره بوده‌اید.
  • در هر گزارش تحلیلی، کنار برآورد اصلی، بازهٔ خوش‌بینانه و بدبینانه را هم بیاورید.
  • هر مدل را روی داده‌هایی بیازمایید که در ساختش به کار نرفته است و به مدل‌های ساده‌تر فرصت رقابت بدهید.
  • پیش از تصمیم مهم بپرسید: چه شاهدی نظر مرا عوض می‌کند؟ و وقتی آن شاهد رسید، واقعاً نظرتان را عوض کنید.

نقد و محدودیت‌ها

کتاب پرحجم است و همهٔ فصل‌ها به یک اندازه قوی نیستند؛ برخی مثل هواشناسی و پوکر درخشان‌اند و برخی طولانی و پراکنده. خواننده‌ای که با ورزش‌های آمریکایی آشنا نیست ممکن است در فصل بیسبال حوصله‌اش سر برود.

از نظر محتوایی، فصل تغییر اقلیم نقد برخی اقلیم‌شناسان را برانگیخت که معتقد بودند سیلور عدم قطعیت مدل‌ها را بیش از اندازه برجسته کرده است. آماردانان نیز گفته‌اند معرفی او از رویکرد بیزی ساده‌شده است و اختلاف آن با روش‌های کلاسیک را پررنگ‌تر از واقع نشان می‌دهد. و البته پیش‌بینی‌های انتخاباتی خود سیلور در سال‌های بعد نشان داد که مخاطبان با مفهوم احتمال هنوز کنار نیامده‌اند و هر احتمالی کمتر از صد را وعدهٔ قطعی یا خطای فاحش می‌خوانند؛ نکته‌ای که خود تأییدی بر پیام کتاب است.

این کتاب برای چه کسانی است؟

اگر این‌طور هستید، بخوانید

  • تحلیلگر، دانشمند داده یا پژوهشگری هستید که مدل می‌سازد یا از مدل استفاده می‌کند.
  • مدیرید و تصمیم‌هایتان بر پیش‌بینی فروش، بازار یا ریسک تکیه دارد.
  • به روزنامه‌نگاری داده و تحلیل سیاسی و اقتصادی علاقه دارید.
  • می‌خواهید طرز فکر آماری را بدون فرمول یاد بگیرید.

شاید انتخاب اول شما نباشد اگر…

  • کتاب درسی آمار یا یادگیری ماشین می‌خواهید.
  • حوصلهٔ مثال‌های طولانی از ورزش و قمار را ندارید.
  • دنبال متنی کوتاه و فشرده هستید.

پرسش‌هایی برای تأمل

  • آخرین پیش‌بینی مهم من چقدر دقیق بود و آیا اصلاً آن را ثبت کرده بودم؟
  • در حوزهٔ من بازخورد چقدر سریع می‌رسد و آیا از آن یاد می‌گیرم؟
  • کدام فرض مدل‌های ما هرگز در شرایط سخت آزموده نشده است؟
  • کدام سناریو را فقط چون ناآشناست، نامحتمل فرض کرده‌ایم؟

سخن پایانی

«سیگنال و نویز» بیش از هر چیز درسی در فروتنی است. سیلور نشان می‌دهد که بهترین پیش‌بینی‌گران کسانی نیستند که بیشترین داده یا پیچیده‌ترین مدل را دارند؛ کسانی‌اند که مرز دانسته‌های خود را می‌شناسند و آن را صادقانه بیان می‌کنند.

در روزگاری که الگوریتم‌های یادگیری ماشین بیش از پیش در تصمیم‌ها دخالت دارند، این کتاب یادآوری می‌کند که هیچ مدلی از پرسش‌هایی که سازنده‌اش نپرسیده، هوشمندتر نیست.

می‌خواهید این ایده‌ها را در کار خودتان پیاده کنید؟

در بینش جدید، دانش چند حوزه را کنار هم می‌گذاریم تا به یک مسئلهٔ واقعی پاسخ دهیم. اگر این کتاب پرسشی در ذهن شما روشن کرده است، می‌توانیم دربارهٔ آن گفت‌وگو کنیم.

این نوشته خلاصه و برداشت تحلیلی تیم بینش جدید از کتاب است و جای مطالعهٔ خود اثر را نمی‌گیرد.

دیدگاه‌ها

دیدگاهتان را بنویسید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *