Dvir Aran Profile picture
24 Jul, 19 tweets, 4 min read
אז בעקבות הציוץ של @Nadav_Eyal ביום שישי ״זכיתי״ לחטוף את עוצמות הסחל׳ה של הטוויטר הישראלי. כיף. באמת מבאס שאנשים מרשים לעצמם להתבטא בצורה כזו ומשתמשים בתיבת תהודה עצמית כדי להוריד את רמת השיח לרמות תחתית. זה לא משהו שלא ידעתי, רק שזה באמת שונה שזה מכוון אליך.
אין לי עניין מיוחד לתת במה לגועל הזה, ולכן לא אשתף. אבל האמת שאני מרגיש שזה קצת מגיע לי כי כנראה בשבוע האחרון גם אני קצת התדרדרתי לרמת שיח לא מכבדת, ואני מבטיח לעשות מאמץ להימנע מזה להבא.
בואו נתמקד בעיקר. אולי הדבר המרכזי ביותר שצריך לעשות במחקר הוא להגדיר בצורה נכונה את קבוצת הביקורת. לשום ממצא אין ערך בלי השוואה נכונה לקבוצת ביקורת. כשמסתכלים על 235 סוגי ההטיות שהגדיר יואנידיס מגלים שרבות מהן קשורות לבעיה הזו של חוסר התאמה בין קבוצת ההתערבות ולקבוצת הביקורת.
זה נושא כל כך מרכזי, ואנשים נופלים להטיות כאלו פעם אחר פעם, שחבל לי ששיטות מחקר הוא לא נושא חובה בקוריקולום המדעי וההנדסי. אגב, מי שבעניין, יואנידיס (לפני שהלך לאיבוד) כתב כמה מאמרים מרתקים על נושאים אלו. pubmed.ncbi.nlm.nih.gov/20400265/
journals.plos.org/plosmedicine/a…
רוב המגיבים (חלקם בצורה מכובדת וחלקם קצת פחות) העלו את הטענה שקבוצת הביקורת לנתב״ג היא האוכלוסיה שנבדקה באותו היום. הטיעון נובע מזה שכולם נבדקים בנתב״ג ולכן קבוצת הביקורת היא נבדקים בישראל. אבל זו כמובן הטיית בחירה קלאסית.
האנשים שעברו בנתב״ג לא בחרו להבדק, לעומת הנבדקים בישראל שכן בחרו. הנבדקים בישראל מועשרים בסימפטומטים ובנחשפים למאומת, ולכן אין שום הגיון בלהשתמש בקבוצה זו כקבוצת ביקורת. היחס בין המאומתים לנבדקים לא מייצג את התחלואה בישראל אלא רק את התחלואה מתוך קבוצת הנדבקים.
אז מי כן קבוצת הביקורת שלנו? כדי להשוות את רמת התחלואה של חוזרי חו״ל אנו צריכים להשוות לרמת התחלואה בישראל. הדבר הטוב ביותר היה אם היו לנו תוצאות של בדיקות סקר אקראיות, אבל אין לנו. הדבר הקרוב ביותר שיש לנו הוא מספר המאומתים היומי חלקי מספר התושבים בישראל.
אבל זה בעייתי, ורבים העלו את הטענה (גם אם לא לגמרי הבינו מה הם אומרים). זהו חסם תחתון על אחוז החולים החדשים ביום. ישנם רבים שחלו אבל כלל לא נבדקו (או יבדקו בהמשך) - תחלואה סמויה. כמובן שהתייחסתי לזה בציוצים שלי, אבל זה לא הפריע למגיבים. השאלה, מהי רמת התחלואה הסמויה כיום בישראל?
אמנם מכחישי הקורונה למיניהם טענו תמיד לתלואה סמויה עצומה, אבל זה כבר הופרך פעמים רבות (במכפלות שהוצעו כבר מזמן כל המדינה חלתה 3 פעמים). אנחנו יודעים מהגלים הקודמים שהתחלואה הסמויה בישראל היתה בסדר גודל של 30-50%, כלומר על כל שני מאומתים, מקסימום אחד פוספס.
נראה שעכשיו יש יותר תחלואה סמויה, וניתן לנסות לאמוד זאת בעזרת היחס בין מאושפזים למאומתים. אבל זה קשה עכשיו בגלל שרוב האוכלוסיה מחוסנת, והסיכוי להתאשפז נמוך. דרך לאמוד זאת היא להסתכל על לא מחוסנים מבוגרים.
באנליזה שביצעתי לפני מספר ימים ההערכה היא שיש תחלואה סמויה אצל לא מחוסנים של בערך 100% (על כל מאומת, יש מאומת מפוספס). כאמור, כתבתי את זה בציוצים שלי שתתכן תחלואה סמויה בפקטור של 2, וזה יגרום להערכה של פי 50 להיות חצי מכך.
טיעון נוסף שהועלה היה כי צריך לא להסתכל על מאומתים חדשים אלא על חולים פעילים. לפי הטיעון הזה, אין 1000 מאומתים חדשים אלא 10000 חולים פעילים ולכן מספר זה צריך להיות במונה. זוהי הטיית דגימה, שמוטה על ידי שימוש בדגימה עם החזרה (הטיה מאוד פופולרית).
יש הרבה דרכים להסביר את השגיאה פה, ונבחר אחת (שאני בטוח שלא תספק את הצייצן, אבל במגבלות הפורמט זה מה יש). נניח שביום א׳ דגמנו את כל האוכלוסיה ויחס המאומתים שלנו כולל את כל החולים הפעילים. ביום ב׳ נבצע דגימה נוספת, האם נכלול את אלו שאימתנו ביום הקודם? ברור שלא.
אנחנו משווים את נתב״ג לאנשים שלא יודעים שהם מאומתים. זוהי קבוצת הביקורת שלנו כדי למדוד מה הסיכוי של מישהו שהולך להבדק ולא יודע אם זו קורונה. אגב, מאומתים נמצאים בבידוד, ואוי לנו אם הם לא. הם ״כבר מיצו״ את ה-R שלהם.
היו עוד שלל טיעונים שלא ראויים להתייחסות, אבל אני אתייחס לטיעון שלא הועלה, ויש לו תפקיד מרכזי. מהו גודל האוכלוסיה במכנה? בציוץ ההדגמה שלי השתמשתי ב9 מליון, אבל זו הערכת יתר. גודל האוכלוסיה האפקטיבי הוא קטן יותר כי כרגע ההתפשטות עוד לא הגיעה למגזרים הערבי והחרדי.
בנוסף סביר שיש הבדלים בהתפלגות הגילאים והמדדים הסוציואקונומיים בין חוזרי חו״ל לכלל ישראל, וזה עלול לייצר הטיות נוספות (חלקן כאלו שיעלו את הפער, וחלקן יקטינו).
אם זה לא היה ציוץ בטוויטר אלא מאמר מדעי היינו עושים מאמץ להעריך במדויק את כל הערכים הללו, אבל זה כן ציוץ, והמטרה שלו היתה להבהיר את חוסר ההגיון בהשוואת אחוז המאומתים בנתב״ג לעומת אחוז המאומתים בבדיקות בישראל.
אחרי שאמרנו את כל זה, אם לוחצים אותי לקיר להעריך, מאומת מנתב״ג הוא ככל הנראה בעל סיכוי של סדר גודל של פי 20 להיות מאומת מאשר אדם זהה לו שלא חזר מחו״ל. זו ההערכה עם שגיאה די גדולה, אבל היא נראית לי סבירה בהינתן כל המידע שבפנינו.
ושנזכה כולנו להשתפר ביכולת שלנו לנהל שיח גם אם אנחנו לא מסכימים, וגם אם אנחנו חושבים שהצד השני מטומטם.

שבוע טוב.

• • •

Missing some Tweet in this thread? You can try to force a refresh
 

Keep Current with Dvir Aran

Dvir Aran Profile picture

Stay in touch and get notified when new unrolls are available from this author!

Read all threads

This Thread may be Removed Anytime!

PDF

Twitter may remove this content at anytime! Save it as PDF for later use!

Try unrolling a thread yourself!

how to unroll video
  1. Follow @ThreadReaderApp to mention us!

  2. From a Twitter thread mention us with a keyword "unroll"
@threadreaderapp unroll

Practice here first or read more on our help page!

More from @dvir_a

27 Jul
Vaccine impact in Israel: changing trends. Analysis thread with @AArgoetti.
From about a month and a half ago we are experiencing a new “Delta” burst. Cases are accumulating, and more and more severe patients are in the hospitals.
You’ve probably seen reports from Israel on low vaccine effectiveness in this wave. Is it because of Delta? Waning immunity? We think the reason is mostly that we got the denominator wrong.
See this graph. Until mid-July, the number (normalized to group size) of severe cases in the 65+ group was more or less similar between vaccined and unvaccined. This seemed troubling. But in the last 10 days trends have changed, Image
Read 8 tweets
21 Jul
Waning immunity, take 2. More data from MoH. The plot speaks for itself. X-axis is the week of vaccination, y-axis is the relative risk for infection in last two weeks. Data suggests that early vaxxed risk for infection is doubled compared to late vaccinated. With @geller_mic.
What can explain this trend except waning?
Maybe early vaxxed are more aware of COVID-19 and get tested at higher rates. This can be tested by the MoH.
Read 4 tweets
21 Jul
Are we seeing immunity waning in Israel? The MoH shared some raw data, and together with @geller_mic we tried to get a qualitative answer to this question. TL;DR – it seems that there is immunity waning, increasing risk of infection of early vaccinated by ~80%. ==>
Several remarks before we start:
1. This is a qualitative analysis. We don’t have data on individuals, only very limited information shared by the MoH.
2. We are talking about immunity waning, not vaccine effectiveness. Delta may affect VE, but data here is independent of that
3. The analysis below is on the risk of infection, not severe disease. I wrote about VE of severe disease in a different thread.
4. This is twitter science, take it as it is. There are many assumptions and caveats to this analysis.
Read 17 tweets
20 Jul
האם יש דעיכה בחיסוניות? משרד הבריאות פרסם קצת מידע גולמי אתמול ויחד עם @geller_mic ניסינו לקבל הערכה איכותית לשאלה הזו. אמל״ק – יש, אבל זה לא כזה דרמטי (כרגע).
שתי הערות מקדמיות: 1. זו אנליזה איכותית. אין לנו נתונים על אנשים, רק המידע החלקי שמתפרסם ע״י משרד הבריאות. מתישהו כללית, מכבי ומשהב״ר יפרסמו את האנליזות שלהם. עד אז זה מה יש.
2. אנחנו מדברים פה על הדעיכה של החיסוניות, לא על היעילות מול דלתא.
3. זה ציוץ בטוויטר, לא מאמר מדעי...
אז אחרי שהבהרנו את זה, בואו נצלול למידע שהתפרסם. עד סוף ינואר 1.8 מליון איש קיבלו את המנה השניה. בנתונים אפשר לראות מה קרה לקבוצה זו של מתחסנים מוקדמים בשבועות האחרונים – כמה אימותים וכמה חולים קשה, מחולק לשתי קבוצות גיל.
Read 11 tweets
19 Jul
בואו נדבר שוב על נתב״ג. למה אני חושב שזה מקור כל הצרה?

אז קודם כל נתונים, מתחילת יולי (עד ה-17 לחודש) היו 9,169 מאומתים, מתוכם 922 הגיעו מחו״ל. תעשו את החשבון לבד. אם ה-R שלנו הוא 1.3, בלי מאומתי נתב״ג אנחנו ב-1.17, בערך חצי מהדרך להקטנת ההתפשטות.
אבל זה רק חישוב נאיבי. אין לי את המספרים המדויקים, אבל בהנחה שנכנסים 20,000 איש ביום לישראל, כ-0.25% מהחוזרים נושאים את הנגיף. באותה תקופה, הסיכוי היומי להדבק בכלל האוכלוסיה ~0.005%. זה יחס של פי 50.
כלומר, הסיכוי של חוזר מנתב״ג להיות חולה ולהדביק אחרים הוא פי 50 (!!!) מאשר אדם אקראי. גם אם יש תת-אבחון בישראל, זה מקסימום פקטור של 2, לא מתקרב ל-50.
Read 6 tweets
18 Jul
Finally, some data from Israel on vaccine effectiveness. Before we start, a couple of comments: 1. Almost all new infections in Israel are with the delta variant. 2. We don’t believe confirmed cases count since there are complicated incentives for testings.
The data that we look at is new severe hospitalizations by age group and vaccination status. Let's look at the numbers:

Since the start of July, there were 117 severe cases. Of them, 79 in ages 60+, 28 in ages 40-60 and 10 below 40.
> In the 40-60 group (blue), 8 of the 28 were vaccinated (29%). About 85% of this group is vaccinated, so this translated to ~90% effectiveness. More or less what we expect. Great. (below 40, there are 10 unvaccinated severe patients)
Read 9 tweets

Did Thread Reader help you today?

Support us! We are indie developers!


This site is made by just two indie developers on a laptop doing marketing, support and development! Read more about the story.

Become a Premium Member ($3/month or $30/year) and get exclusive features!

Become Premium

Too expensive? Make a small donation by buying us coffee ($5) or help with server cost ($10)

Donate via Paypal Become our Patreon

Thank you for your support!

Follow Us on Twitter!

:(