بسم الله الرحمن الرحيم Clinical Epidemiology

Slides:



Advertisements
Similar presentations
DiseaseNo disease 60 people with disease 40 people without disease Total population = 100.
Advertisements

Validity and Reliability of Analytical Tests. Analytical Tests include both: Screening Tests Diagnostic Tests.
Chapter 4 Pattern Recognition Concepts: Introduction & ROC Analysis.
TESTING A TEST Ian McDowell Department of Epidemiology & Community Medicine November, 2004.
What Happens to the Performance of a Diagnostic Test when the Disease Prevalence and the Cut-Point Change? Pathological scores Healthy scores Healthy population.
Azita Kheiltash Social Medicine Specialist Tehran University of Medical Sciences Diagnostic Tests Evaluation.
GerstmanChapter 41 Epidemiology Kept Simple Chapter 4 Screening for Disease.
Epidemiology in Medicine Sandra Rodriguez Internal Medicine TTUHSC.
Statistical Fridays J C Horrow, MD, MSSTAT
Baye’s Rule and Medical Screening Tests. Baye’s Rule Baye’s Rule is used in medicine and epidemiology to calculate the probability that an individual.
Lucila Ohno-Machado An introduction to calibration and discrimination methods HST951 Medical Decision Support Harvard Medical School Massachusetts Institute.
Interpreting Diagnostic Tests
BASIC STATISTICS: AN OXYMORON? (With a little EPI thrown in…) URVASHI VAID MD, MS AUG 2012.
Medical decision making. 2 Predictive values 57-years old, Weight loss, Numbness, Mild fewer What is the probability of low back cancer? Base on demographic.
Basic statistics 11/09/13.
Diagnostic Testing Ethan Cowan, MD, MS Department of Emergency Medicine Jacobi Medical Center Department of Epidemiology and Population Health Albert Einstein.
Division of Population Health Sciences Royal College of Surgeons in Ireland Coláiste Ríoga na Máinleá in Éirinn Indices of Performances of CPRs Nicola.
Sensitivity Sensitivity answers the following question: If a person has a disease, how often will the test be positive (true positive rate)? i.e.: if the.
Screening and Diagnostic Testing Sue Lindsay, Ph.D., MSW, MPH Division of Epidemiology and Biostatistics Institute for Public Health San Diego State University.
Think Health. Act Now!. CITY OF MILWAUKEE HEALTH DEPARTMENT. Content in this presentation may not be duplicated, copied, or reproduced.
BIOE 301 Lecture Thirteen. Review of Lecture 12 The burden of cancer Contrasts between developed/developing world How does cancer develop? Cell transformation.
MEASURES OF TEST ACCURACY AND ASSOCIATIONS DR ODIFE, U.B SR, EDM DIVISION.
Appraising A Diagnostic Test
Likelihood 2005/5/22. Likelihood  probability I am likelihood I am probability.
TESTING A TEST Ian McDowell Department of Epidemiology & Community Medicine January 2008.
Prediction statistics Prediction generally True and false, positives and negatives Quality of a prediction Usefulness of a prediction Prediction goes Bayesian.
Positive Predictive Value and Negative Predictive Value
1 Wrap up SCREENING TESTS. 2 Screening test The basic tool of a screening program easy to use, rapid and inexpensive. 1.2.
Predictive values prevalence CK and acute myocardial infarction –sensitivity 70% –specificity 80% –prevalence - 40% –prevalence - 20% –PPV and NPV.
Diagnostic Tests Studies 87/3/2 “How to read a paper” workshop Kamran Yazdani, MD MPH.
Diagnostic Test Characteristics: What does this result mean
Evidence based medicine Diagnostic tests Ross Lawrenson.
Laboratory Medicine: Basic QC Concepts M. Desmond Burke, MD.
Diagnosis Examination(MMSE) in detecting dementia among elderly patients living in the community. Excel.
ROC curve estimation. Index Introduction to ROC ROC curve Area under ROC curve Visualization using ROC curve.
Timothy Wiemken, PhD MPH Assistant Professor Division of Infectious Diseases Diagnostic Tests.
Diagnostic Likelihood Ratio Presented by Juan Wang.
Biostatistics Board Review Parul Chaudhri, DO Family Medicine Faculty Development Fellow, UPMC St Margaret March 5, 2016.
Sensitivity, Specificity, and Receiver- Operator Characteristic Curves 10/10/2013.
Critical Appraisal Course for Emergency Medicine Trainees Module 5 Evaluation of a Diagnostic Test.
TUTORIAL: SCREENING. PERFORMANCE OBJECTIVES Compute and interpret Sensitivity Specificity Predictive value positive Predictive value negative False positive.
Accuracy, sensitivity and specificity analysis
Screening for Disease: Part One
Diagnostic studies Adrian Boyle.
Performance of a diagnostic test Tunisia, 31 Oct 2014
Evidence-Based Medicine
Class session 7 Screening, validity, reliability
Evaluating Results of Learning
Measuring Success in Prediction
کاربرد آمار در آزمایشگاه
Machine Learning Week 10.
How do we judge efficacy of a screening test?
Evaluation of the Guidelines for Management of Pancreatic Branch-Duct Intraductal Papillary Mucinous Neoplasm  Raymond S. Tang, Benjamin Weinberg, David.
Diagnosis II Dr. Brent E. Faught, Ph.D. Assistant Professor
Accuracy, sensitivity and specificity analysis
Is a Positive Developmental-Behavioral Screening Score Sufficient to Justify Referral? A Review of Evidence and Theory  R. Christopher Sheldrick, PhD,
دكتر محسن ميرزائي MD , MPH
The receiver operating characteristic (ROC) curve
Millie D. Long, Bruce E. Sands 
Refining Probability Test Informations Vahid Ashoorion MD. ,MSc,
THALASSEMIA MINOR DIAGNOSTICS BY A COMPUTATIONAL METHOD
کارگاه تکميلی کشوری تربيت مربی آموزش طب مبتنی بر شواهد
Figure 1. Table for calculating the accuracy of a diagnostic test.
Patricia Butterfield & Naomi Chaytor October 18th, 2017
Diagnostics outside the laboratory
Evaluating Models Part 1
Predicting arterial blood gas and lactate from central venous blood analysis in critically ill patients: a multicentre, prospective, diagnostic accuracy.
Positive predictive value of screening tests
A Systematic Review and Meta-analysis of D-dimer as a Rule-out Test for Suspected Acute Aortic Dissection  Stephen E. Asha, MBBS, MMed (Clin Epi), James.
Evidence Based Diagnosis
Presentation transcript:

بسم الله الرحمن الرحيم Clinical Epidemiology Evaluation of Diagnostic Tests/Tools Shahid Beheshti University of Medical Sciences, 2014 By: Hatami H. MD. MPH

محدوديت‌هاي تشخيصي در طبّ نياكان تشخيص‌هاي باليني و اپيدميولوژيك به عنوان دقيق‌ترين حربه‌هاي تشخيصي توجّه به رنگ، بو، طعم ادرار به منظور تاييد تشخيص‌هاي باليني

محدوديت‌هاي تشخيصي در طبّ نياكان محمّد زكرياي رازي موفق به افتراق باليني آبله از سرخك مي‌شود ابن سينا اين شبهه را مطرح مي‌كند كه ممكن است دراكونكوليازيس، نوعي بيماري عروقي به اسم “رَگِ مدينه‌اي” = دراكونكولوس مديننسيس) (عِِرقُ‌المَدينَه) نباشد! بلكه موجود زنده‌اي باشد كه در زير پوست انسان حركت مي‌كند

محدوديت‌هاي تشخيصي در طبّ نياكان درمان‌پذيري هاري تا قبل از ظهور Hydrophobia ؟؟ محدوديت دامنة تعداد و كارايي ابزارهاي تشخيصي در آن زمان

در داستان چوپان دروغگو، چرا آن يك باري كه چوپان راست مي‌گفت كسي باور نكرد 1 ـ حساسيت پايين؟ 2 ـ ويژگي پايين؟ 3 ـ ارزش اخباري مثبت پايين؟ 4 ـ ارزش اخباري منفي پايين؟

3 ـ ارزش اخباري مثبت پايين؟ 4 ـ ارزش اخباري منفي پايين؟ وقتي معاونين پشتيباني، عليرغم دارا بودن موجودي، بر خالي بودن حساب، اصرار مي‌ورزند بيشتر يادآور كداميك از حالات زير است؟ 1 ـ حساسيت پايين؟ 2 ـ ويژگي پايين؟ 3 ـ ارزش اخباري مثبت پايين؟ 4 ـ ارزش اخباري منفي پايين؟

3 ـ ارزش اخباري مثبت بالا؟ 4 ـ ارزش اخباري منفي بالا؟ وقتي استاد باتجربه‌اي از هر يكصد بيماري كه مورد مصاحبه و معاينه قرار مي‌دهد بيماري 80 نفر آنان را به درستي تشخيص مي‌دهد و حذاقت خود را ظاهر مي‌سازد نشان‌دهنده كداميك از حالات زير است؟ 1 ـ حساسيت بالا؟ 2 ـ ويژگي بالا؟ 3 ـ ارزش اخباري مثبت بالا؟ 4 ـ ارزش اخباري منفي بالا؟

كداميك از موارد زير، نشان دهنده وسواس زياد است؟ 1 ـ حساسيت بالا؟ 2 ـ ويژگي بالا؟

1 ـ حساسيت بالا؟ 2 ـ ويژگي بالا؟ وقتي مي‌گوييم: دقت در امور جزئي، كليد كشف حقايق بزرگ است يادآور كداميك از حالات زير است؟ 1 ـ حساسيت بالا؟ 2 ـ ويژگي بالا؟

تنوع آزمون‌هاي تشخيصي در طب نوين نياز به ارزيابي قابليت اعتماد يا اعتبار (Validity) و صحت يا درستي (Accuracy) آزمون‌ها قابليت اعتماد يا اعتبار يك آزمون، بيان كننده توانايي آن در تشخيص و جدا كردن موارد بيمار از غيربيمار است قابليت اعتماد داراي دو جزء حساسيت (Sensitivity) و ويژگي (Specificity) است قابليت اعتماد صحت آزمون به درجه نزديك بودن مقدار اندازه‌گيري شده به مقدار واقعي و يا درجه انطباق نتايج با واقعيت، اطلاق مي‌شود صحت آزمون

Evaluation of Diagnostic Tests بيماران افراد سالم True Positives (= A) , False Negatives (= C) False Positives (= B) True Negatives, (= D) Sensitivity Specificity Positive Predictive Value (PPV) Negative Predictive Value (NPV)

Evaluation of Diagnostic Tests True Positives (= A) , False Negatives (= C) False Positives (= B) True Negatives, (= D) بيماران تست مثبت بيماران تست منفي افراد سالم تست مثبت افراد سالم تست منفي

Case-Control Golden standard Evaluation of Diagnostic Tools كشت مثبت اسمير مثبت آزمون مولكولي مثبت تست اختصاصي مثبت . . .

SENSITIVITY =A / (A+C)*100= 95% بيماران تست منفي = 5 (منفي‌هاي كاذب) C = 5 افراد بيمار = 100 نفر بيماران تست مثبت = 95 Cases (A+C)=100 حساسيت، عبارت است از: ميزان مثبت بودن آزمون در افراد واقعا بيمار

Evaluation of Widal Test in Sina Hospital Kermanshah University حساسيت، عبارت است از: ميزان مثبت بودن آزمون در افراد واقعا بيمار

Specificity = D/(D+B)*100= 95% افراد سالم تست مثبت = 5 (False positive) افراد سالم = 100 نفر Controls (B+D)=100 B = 5 ويژگي، عبارت است از: ميزان منفي بودن آزمون در افراد غير بيمار

threshold سالم بيمار 1.0 1.7 FN True Negative (TN) FP Positive (TP) 3.0

حساسيت، عبارت است از: ميزان مثبت بودن آزمون در افراد واقعا بيمار Sensitivity = 50/50 = 100% Specificity = 50/50 = 100% آستانه بيماران تست مثبت = 50 افراد سالم تست منفي = 50 بيماران تست منفي = 0 افراد سالم تست مثبت = 0 سالم بيمار TN TP Specificity = 50/50 = 100% Sensitivity = 50/50 = 100% حساسيت، عبارت است از: ميزان مثبت بودن آزمون در افراد واقعا بيمار ويژگي، عبارت است از: ميزان منفي بودن آزمون در افراد غير بيمار

حساسيت، عبارت است از: ميزان مثبت بودن آزمون در افراد واقعا بيمار threshold nl D Sensitivity = 50/50 = 1 Specificity = 40/50 = 0.8 “nl” 40 40 “D” 10 60 50 50 50 بيمار سالم TN TP FP 1.0 1.4 3.0 حساسيت، عبارت است از: ميزان مثبت بودن آزمون در افراد واقعا بيمار

ويژگي، عبارت است از: ميزان منفي بودن آزمون در افراد غير بيمار threshold nl D Sensitivity = 30/50 = .6 Specificity = 1 “nl” 50 20 70 “D” 30 30 50 50 سالم بيمار TN TP FN 1.0 2.0 3.0 ويژگي، عبارت است از: ميزان منفي بودن آزمون در افراد غير بيمار

مفاهيم عملي حساسيت و ويژگي حساسيت پايين آزمايش يعني تعدادي از افراد بيمار ناديده گرفته شده و سالم در نظر گرفته مي‌شوند ويژگي پايين يعني تعداد زيادي از افراد سالم جزو بيماران طبقه بندي مي‌شوند

ارزش اخباري مثبت PPV = مثبت‌هاي واقعي كل آزمون‌هاي مثبت

ارزش اخباري منفي NPV = منفي‌هاي واقعي كل آزمون‌هاي منفي

ارزش اخباري Predictive Value ارزش اخباري، بازتاب توان تشخيصي آزمون است دقت ارزش اخباري به عواملي نظير حساسيت، ويژگي و شيوع بيماري بستگي دارد شامل ارزش اخباري مثبت و منفي مي‌باشد.

Predictive Value The probability of the presence or absence of disease given the test result PPV is the probability of disease in a patient with a positive test result NPV is the probability of not having disease when the test result is negative. Determined by sensitivity and specificity of the test prevalence of disease in the population being tested

Predictive Value of a test PPV = (True positive) / (True + False positives) Example : Low Prevalence Disease of 1 per 100 Test efficacy: Sensitivity: 100%, Specificity: 99% (1 false positive in 100) Test 1000 patients True positives: 1 per 100 (1% Prevalence) False positives: 1 per 100 (99% Test Specificity) PPV: 1 true positive / 2 total positives = 50%

Test 1000 People for Influenza 180 820 True Influenza No Influenza Test Result A=80 B=100 C=20 D=800 P كل مثبت‌ها N كل منفي‌ها Total 100 900 PPV=80/180= 44% NPV=800/820= 98% مثبت‌هاي واقعي كل آزمون‌هاي مثبت منفي‌هاي واقعي كل آزمون‌هاي منفي

Hypothetical Influenza Test Performance Prevalence = 1 in 5 Sensitivity = 95% Specificity = 96% PPV = 85.6% NPV = 96% Prevalence = 1 in 100 Sensitivity = 95% Specificity = 96% PPV = 19.2% NPV = 99.9% Which test is best? Know the test performance characteristics and the epidemiology of the disease

Evaluation of Widal Test in Sina Hospital Kermanshah University

Performance Characteristics Test Sensitivity Specificity Directigen Flu A 91% (A) 95%(A) Flu A & B 86%(A) 81%(B) 91%(A) 99.5%(B) Flu OIA 62-88% (A/B) 52%-80%(A/B) Flu OIA A/B 62%-88%(A/B) NOW Flu A & B 78%-82%(A) 58-71%(B) 92-94%(A) 97%(B)

Performance Characteristics Test Sensitivity Specificity QuickVue Influenza 73-81% (A/B) 95%(A) QuickVue Influenza A&B 72-77%(A) 73-82% (B) 91%(A) 99.5%(B) SAS Influenza A & Influenza B 76%(A) 91%(B) 98%(A) 100%(B) Xpect Flu A & B 92%(A) 98%(B) 100%(A) ZstatFlu 58-65% (A/B) 98-100%(A/B)

نسبت احتمال يا درستنمايي مثبت Likelihood Ratio+ نسبت پاسخ‌هاي مثبت واقعي نسبت مثبت‌هاي كاذب LR+ =

نسبت احتمال يا درستنمايي منفي Likelihood Ratio- نسبت پاسخ‌هاي منفي كاذب نسبت منفي‌هاي واقعي LR- =

نسبت احتمال يا درستنمايي مثبت Likelihood Ratio+ نسبت مثبت‌هاي واقعي در بيماران، تقسيم بر نسبت مثبت‌هاي كاذب در افراد غيربيمار برخلاف ارزش اخباري، تحت تاثير شيوع بيماري مربوطه قرار نمي‌گيرد هرچه از عدد يك بيشتر باشد دليل بر مناسب بودن آن آزمايش است صورت اين كسر را حساسيت آزمون،‌ تشكيل مي‌هد.

نسبت احتمال يا درستنمايي منفي Likelihood Ratio- نسبت منفي‌هاي كاذب در بيماران تقسيم بر نسبت منفي‌هاي واقعي در افراد غيربيمار هرچه به صفر، نزديك‌تر باشد دليل بر مناسب بودن آزمايش است مخرج اين كسر را ويژگي آزمون، تشكيل مي‌دهد. در مجموع، هرچه درستنمايي مثبت يك آزمايش، بيشتر و درستنمايي منفي آن كمتر باشد دليل بر مناسب بودن آن آزمايش است.

نسبت احتمال يا درستنمايي Likelihood Ratio در مجموع، هرچه درستنمايي مثبت يك آزمايش، بيشتر و درستنمايي منفي آن كمتر باشد دليل بر مناسب بودن آن آزمايش است

EPI results TESTING CLINICAL