कार्यक्रमाच्या यशासाठी परिणामांचे निरीक्षण करणे

CDC फ्रेमवर्कचा वापर करून मूल्यमापनाचे नियोजन करा, मूरच्या सात-स्तरीय मॉडेलद्वारे परिणाम निवडा, आम्ही शिफारस केलेली माहिती गोळा करा आणि तुमचा ECHO कार्यक्रम सुधारण्यासाठी तुम्ही शिकलेल्या गोष्टींचा वापर करा.

जर तुम्ही आधी मूल्यमापन केले नसेल तर ते आव्हानात्मक वाटू शकते, पण तसे असण्याची गरज नाही. कार्यक्रम नियोजनाचा नियमित भाग मानल्यास, ते काय कार्य करत आहे हे सांगते, निधी देणाऱ्यांना तुमच्या कार्यक्रमामुळे होणारा फरक दाखवते आणि तुमचे सहभागी ज्या लोकांची सेवा करतात त्यांच्यासाठी अधिक काम करण्यास तुम्हाला मदत करते. ही मार्गदर्शिका मूल्यमापन नियोजनाच्या पायऱ्या, परिणाम निवडण्यासाठी सात-स्तरीय मॉडेल, प्रत्येक ECHO समाविष्ट कार्यक्रमाने गोळा करावा असा आम्ही शिफारस करतो तो डेटा आणि तुम्ही गोळा केलेल्या माहितीवरून शिकत राहण्याचे मार्ग सांगते.

हा लेख “मॉनिटरिंग आउटकम्स फॉर प्रोग्राम सक्सेस” या सत्रावरून आधारित आहे, जे ECHO Institute च्या आभासी पार्टनर लाँच ट्रेनिंग मधील त्यांच्या संशोधन आणि मूल्यमापन टीमने सादर केले होते.

मूल्यमापन का करावे?

तुमच्या ECHO कार्यक्रमाचे मूल्यमापन करण्याची तीन मुख्य कारणे आहेत:

  • कार्यक्रमात सुधारणा. सतत होणारी सुधारणा हे विचारते की काय योग्य प्रकारे चालले आहे आणि कशावर लक्ष देण्याची गरज आहे. उदाहरणार्थ, जर तुम्ही ठरवलेल्या शिकणाऱ्यांपर्यंत पोहोचू शकत नसाल, तर तुमचा डेटा तुम्हाला कुठे बदल करायचा हे दाखवू शकतो: नवीन प्रदेश, नवीन व्यवसाय किंवा नवीन प्रचार माध्यमे.
  • परिणाम आणि आवश्यक घटक. तुमचा कार्यक्रम तुम्हाला अपेक्षित असलेल्या परिणामांकडे जात आहे का? ECHO Model मधील कोणते भाग प्रभाव पाडतात: डायडॅक्टिक सादरीकरणे, केस सादरीकरणे, की समवयस्कांमधील चर्चा? आणि जेव्हा ECHO हे एका मोठ्या उपक्रमाचा एक भाग असते, तेव्हा ते काय योगदान देते?
  • निधी आणि शाश्वतता. मूल्यमापन हे निधी मिळवण्यासाठी अत्यंत महत्त्वाचे आहे. कार्यक्रम प्रभावीपणे कार्य करत असल्याचा पुरावा नसल्यास पाठिंबा किंवा निधी मिळवणे अथवा त्याचे नूतनीकरण करणे जवळपास अशक्य आहे.

मूल्यमापन ही १० आवश्यक सार्वजनिक आरोग्य सेवांपैकी एक आहे, त्यामुळे सुरुवातीपासूनच त्याचा समावेश केल्याने तुमचा कार्यक्रम ज्या प्रणालींना बळकट करण्याचे उद्दिष्ट ठेवतो, त्यांच्याच बरोबरीने उभा राहतो.

नियोजन चक्राचे अनुसरण करा

आम्ही CDC चे सार्वजनिक आरोग्यातील कार्यक्रम मूल्यमापनाची चौकट वापरतो. हे २० वर्षांहून अधिक काळापासून वापरले जात आहे आणि २०२४ मध्ये अद्ययावत केले गेले आहे. हे सोपे आणि पुनरावृत्ती होणारे आहे, आणि प्रत्येक पायरी महत्त्वाची आहे. या लेखाचा उर्वरित भाग या सहा पायऱ्यांचे अनुसरण करतो.

सार्वजनिक आरोग्यातील कार्यक्रम मूल्यांकनासाठीचे CDC फ्रेमवर्क (CDC, 2024).
सार्वजनिक आरोग्यातील कार्यक्रम मूल्यांकनासाठीचे CDC फ्रेमवर्क (CDC, 2024).
  1. संदर्भ तपासा. कार्यक्रमाची पार्श्वभूमी, त्यात कोणाचे हितसंबंध आहेत आणि तो मूल्यमापनासाठी तयार आहे का हे समजून घ्या.
  2. कार्यक्रमाचे वर्णन करा. तुम्ही काय गुंतवणूक करता, काय करता, कोणापर्यंत पोहोचता आणि काय बदलले पाहिजे हे स्पष्ट करा.
  3. मूल्यमापनाचे प्रश्न आणि रचनेवर लक्ष केंद्रित करा. तुम्हाला काय माहित असणे आवश्यक आहे आणि त्याची रचना किती काटेकोर असली पाहिजे हे ठरवा.
  4. विश्वसनीय पुरावे गोळा करा. तुमच्या प्रश्नांना आणि क्षमतेला साजेशा पद्धतींचा वापर करून डेटा गोळा करा.
  5. निष्कर्ष काढा आणि त्याचे समर्थन करा. स्पष्ट मानकांद्वारे निकालांचे विश्लेषण आणि अर्थनिर्वचन करा.
  6. निष्कर्षानुसार कृती करा. तुम्ही जे शिकता ते सामायिक करा आणि कार्यक्रमात सुधारणा करण्यासाठी त्याचा वापर करा.

या चक्राच्या केंद्रस्थानी अशी मानके आहेत जी प्रत्येक मूल्यमापनाने पूर्ण केली पाहिजेत: सुसंगतता आणि उपयुक्तता, काटेकोरपणा, स्वातंत्र्य आणि वस्तुनिष्ठता, पारदर्शकता आणि नैतिकता. याच्या भोवती तीन पद्धती आहेत ज्या प्रत्येक पायरीवर लागू होतात: सहकार्याने सहभागी होणे, समानता वाढवणे आणि प्राप्त माहितीवरून शिकणे व तिचा वापर करणे.

समानता आणि सांस्कृतिक नम्रता

मूल्यमापन ही एक तटस्थ क्रिया नाही, विशेषतः जेव्हा तुम्ही अपुऱ्या संसाधनांचा सामना करणाऱ्या किंवा आघात अनुभवलेल्या समुदायांसोबत काम करता. संशोधनाच्या वातावरणात आपण स्वतःला वस्तुनिष्ठ मानतो, परंतु मूल्यमापन आणि संशोधन या सामाजिक प्रक्रिया आहेत, ज्या इतर कोणत्याही गोष्टींप्रमाणेच पूर्वग्रहांना बळी पडू शकतात. तुम्ही कोणाला सहभागी करून घेता, कोणते प्रश्न विचारता, काय मोजता आणि निकाल कसे सादर करता हे सर्व पर्याय आहेत आणि यापैकी कोणताही तटस्थ नाही.

या प्रक्रियेच्या प्रत्येक टप्प्यावर संस्कृती, वंश, वांशिक पार्श्वभूमी, सत्ता, आघात आणि लोकांचा आवाज या गोष्टींचा विचार करा: भागधारकांचा सहभाग, कार्यक्रमाची रचना, मूल्यमापनाचे प्रश्न, मानके, डेटा संकलन आणि विश्लेषण, अहवाल सादर करणे आणि मूल्यमापन सल्लागारांची निवड. ही संसाधने एक चांगला पाया आहेत:

पायरी १: संदर्भाचे मूल्यमापन करा

संदर्भाचे मूल्यमापन करणे ही या चक्रातील पहिली पायरी आहे, तरीही टीम बहुदा त्यांच्या भागधारकांना सर्वात शेवटी सहभागी करून घेतात. त्यांना सुरुवातीलाच सहभागी करून घ्या. कोणते परिणाम महत्त्वाचे आहेत आणि कशाचे मोजमाप करणे शक्य आहे याबद्दल अगदी सहभागींकडेही उपयुक्त दृष्टिकोन असतो, आणि तुम्ही वापरू शकाल अशा डेटाबद्दल त्यांना माहिती असू शकते.

संदर्भाच्या चार घटकांकडे पहा:

  • मूल्यमापनासाठीची तयारी. मूल्यमापन-योग्यतेचे मूल्यांकन हे विचारते की कार्यक्रम मूल्यमापन करण्यासाठी अजिबात तयार आहे का.
  • लोक. हितधारकांचे मॅपिंग करा: कार्यक्रमाचा कोणावर परिणाम होतो, यावर कोणाचा प्रभाव आहे, आणि निकाल कोणाला जाणून घ्यायचे आहेत.
  • स्थान. कार्यक्रमाचे वातावरण आणि वैशिष्ट्यांची नोंद करा.
  • मूल्यमापन क्षमता. तुमच्या टीमच्या मूल्यमापन क्षमतेचे मूल्यांकन करा आणि मूल्यमापनकर्ता म्हणून तुमच्या स्वतःच्या तयारीवर प्रामाणिकपणे विचार करा.

ECHO कार्यक्रमाच्या भागधारकांमध्ये साधारणपणे यांचा समावेश होतो:

  • निधीदाते
  • तुमच्या संस्थेतील नेतृत्व
  • भागीदार संस्था
  • कार्यक्रम कर्मचारी
  • हब टीम आणि सादरीकरणकर्ते
  • ECHO सहभागी
  • व्यावसायिक गट
  • “ग्राहक” गट: तुमचे सहभागी ज्यांची सेवा करतात ते रुग्ण, विद्यार्थी किंवा समुदाय सदस्य

पायरी २: कार्यक्रमाचे वर्णन करा

तुम्ही काय करत आहात याबद्दल स्पष्ट रहा. लॉजिक मॉडेल तुमच्या प्रोग्रामचे "तर्कशास्त्र" मांडते: तुम्ही काय गुंतवणूक करता, काय करता, कोणापर्यंत पोहोचता आणि परिणामी काय बदल होतात. यावर काम करणे हा भागधारकांना सहभागी करून घेण्याचा एक उत्तम मार्ग आहे. एक साधा प्रोग्राम देखील वेगवेगळ्या दृष्टीकोनातून वेगळा दिसतो, आणि ते फरक लवकर समोर आणणे उत्पादक ठरते. प्रोग्राम जसजसा वाढेल तसतसा वेळोवेळी या मॉडेलकडे परत या.

ECHO लॉजिक मॉडेल टेम्पलेट. संपादन करण्यायोग्य आवृत्ती PERL मध्ये उपलब्ध आहे.
ECHO लॉजिक मॉडेल टेम्पलेट. संपादन करण्यायोग्य आवृत्ती PERL मध्ये उपलब्ध आहे.

हे टेंप्लेट मुद्दाम व्यापक ठेवले आहे. ते तुमच्या प्रोग्रामसाठी विशिष्ट बनवा, विशेषतः जर तुम्ही बाह्य भागधारकांशी संवाद साधण्यासाठी वापरणार असाल. याचे पाच स्तंभ खालीलप्रमाणे आहेत:

  • इनपुट्स: तुम्ही काय गुंतवणूक करता. निधी, हब टीम, सहभागी आणि भागीदार, तसेच सर्वोत्तम सराव, मार्गदर्शक तत्त्वे किंवा अभ्यासक्रम ज्यावर हा प्रोग्राम आधारित आहे.
  • अ‍ॅक्टिव्हिटीज: तुम्ही काय करता. भरती, नियमित मोफत व्हर्च्युअल सत्रे, संक्षिप्त उपदेशात्मक सादरीकरणे, केस सादरीकरणे आणि शिफारसी, समवयस्क आणि तज्ञांमधील सुलभ दुतर्फा शिक्षण, आणि मागणीनुसार रेकॉर्डिंग्ज आणि संसाधने. जर इतर हस्तक्षेप तुमच्या ECHO शी जोडलेले असतील, तर ते समाविष्ट करा जेणेकरून संदर्भ स्पष्ट होईल.
  • आउटपुट्स: तुम्ही कोणापर्यंत पोहोचता. आयोजित केलेली सत्रे, एकमेव सहभागी, सहभागींची वैशिष्ट्ये, उपस्थिती दर आणि समाधान.
  • अल्पकालीन परिणाम: शिकणे आणि कृती. वाढलेले ज्ञान, कौशल्ये, आत्मविश्वास आणि आत्म-कार्यक्षमता; पुराव्यावर आधारित पद्धतींचा सुधारित वापर; व्यावसायिक एकटेपणा कमी होणे आणि नोकरीतील समाधान सुधारणे.
  • दीर्घकालीन परिणाम: बदल. रुग्ण किंवा विद्यार्थी यांसारख्या अंतिम लाभार्थ्यांसाठी सुधारित परिणाम, पुराव्यावर आधारित पद्धतींना पाठिंबा देणाऱ्या संस्था आणि प्रणालींमध्ये सुधारणा, चांगले लोकसंख्या मापदंड आणि कर्मचाऱ्यांचे सुधारित टिकून राहणे.

उदाहरण: पेरीनेटल आरोग्य सुधारणे ECHO

इम्प्रूव्हिंग पेरिनेटल हेल्थ ECHO साठीचे लॉजिक मॉडेल.
इम्प्रूव्हिंग पेरिनेटल हेल्थ ECHO साठीचे लॉजिक मॉडेल.

या प्रोग्रामचे मॉडेल ज्या सर्वोत्तम सरावांचा प्रचार करते (AIM रुग्ण सुरक्षितता बंडल) त्यांना इनपुट म्हणून नामांकित करते, आणि ते पाहावयास मिळणारा विशिष्ट सराव बदल—पदार्थांचा वापर करणाऱ्या गरोदर आणि बाळंतपणानंतरच्या लोकांबद्दल कमी कलंक आणि कमी कलंकित भाषा—याला ते पाहू इच्छित असलेल्या रुग्ण आणि समुदाय परिणामांशी जोडते. ही विशिष्टताच परिणामांना मोजण्यायोग्य बनवते.

मूरच्या सात-स्तरीय मॉडेलसह परिणाम निवडा

परिणाम निश्चित करणे हा बहुधा सर्वात कठीण भाग असतो. अधिक अर्थपूर्ण निकालांपर्यंत पोहोचण्यासाठी आणि "स्माइल शीट्स" च्या पलीकडे जाण्यासाठी, आम्ही सतत वैद्यकीय शिक्षण साठी विकसित केलेल्या मूरच्या विस्तारित परिणाम फ्रेमवर्कचा वापर करतो. हा मनोरा खालून वर तयार होतो: प्रत्येक स्तर त्याच्या खालील स्तरांवर अवलंबून असतो.

मूरचे सात-स्तरीय परिणाम मॉडेल, ECHO कार्यक्रमांसाठी अनुकूलित (Moore et al., 2009).
मूरचे सात-स्तरीय परिणाम मॉडेल, ECHO कार्यक्रमांसाठी अनुकूलित (Moore et al., 2009).
स्तरहे काय मोजतेडेटा स्रोत
1. सहभागसहभागींची संख्या आणि लोकसंख्याशास्त्र, उपस्थिती दर, सादर केलेल्या केसेस, पाहिलेले रेकॉर्डिंगनोंदणी फॉर्म, उपस्थितीचे रेकॉर्ड, केस सादरीकरणाचे रेकॉर्ड, iECHO
2. समाधानसत्रांचे स्वरूप आणि सामग्रीबद्दल सहभागींच्या अपेक्षा पूर्ण झाल्या की नाहीपोल प्रश्न, सत्रोत्तर सर्वेक्षणे
3. शिकणे (माहित आहे, कसे करायचे ते माहित आहे)कार्यक्रमाद्वारे सहभागींनी काय शिकावे अशी अपेक्षा होती, ते काय आणि कसे करायचे हे ते सांगू शकतात काज्ञान चाचण्या (वस्तुनिष्ठ); स्वतः नोंदवलेली ज्ञानातील वाढ (आत्मनिष्ठ)
4. क्षमता (कसे करायचे ते दाखवणे)कार्यक्रमाची काय अपेक्षा होती ते शैक्षणिक वातावरणात कसे करायचे हे सहभागी दाखवू शकतात काशैक्षणिक वातावरणातील निरीक्षण (वस्तुनिष्ठ); स्वतः नोंदवलेली क्षमता, आत्मविश्वास किंवा स्व-कार्यक्षमता (आत्मनिष्ठ)
5. कामगिरी (करणे)सहभागी त्यांच्या स्वतःच्या सरावात कार्यक्रमाची जी अपेक्षा होती ते करतात कावास्तविक वातावरणातील निरीक्षण, वैद्यकीय किंवा शैक्षणिक नोंदी, प्रशासकीय डेटा (वस्तुनिष्ठ); स्वतः नोंदवलेला सराव बदल किंवा बदलण्याचा उद्देश (आत्मनिष्ठ)
6. अंतिम लाभार्थी परिणामसहभागींच्या सराव बदलांमुळे रुग्ण, विद्यार्थी किंवा इतर अंतिम लाभार्थ्यांचे परिणाम सुधारतात कावैद्यकीय किंवा शैक्षणिक नोंदी, प्रशासकीय डेटा, केसचे पुन्हा सादरीकरण (वस्तुनिष्ठ); स्वतः नोंदवलेल्या सुधारणा (आत्मनिष्ठ)
7. लोकसंख्येवरील परिणामसहभागींच्या सराव बदलांमुळे लोकांमध्ये, धोरणांमध्ये किंवा प्रणालींमध्ये बदल होतात काप्रशासकीय डेटा (वस्तुनिष्ठ); स्वतः नोंदवलेले बदल, केस स्टडीज (आत्मनिष्ठ)

बहुतेक ECHO कार्यक्रम स्तर 1 ते 4 लक्षित करतात आणि सहभागींना त्यांचे ज्ञान आणि क्षमतेतील स्वतःच्या बदलांचे मूल्यमापन करण्यास सांगून आत्मनिष्ठ उपायांवर अवलंबून असतात. स्तर 5, कामगिरी, येथे ECHO वास्तविक जगात प्रवेश करतो आणि तो संपूर्ण मॉडेलचा मुख्य आधार आहे: जर सहभागी ते करत असलेल्या गोष्टींमध्ये बदल करत नसतील, तर अंतिम-लाभार्थी किंवा लोकसंख्येच्या परिणामांचा कोणताही मार्ग उरत नाही.

  • तुमचा कार्यक्रम प्रस्थापित असल्यास, सरावातील बदल मोजण्याचा प्रयत्न करा. पायरी 4 मधील पद्धती मदत करतील.
  • तुमचा कार्यक्रम नवीन असल्यास, तुमचा अभ्यासक्रम तुम्हाला पाहू इच्छित असलेल्या सराव बदलांवर कसा प्रभाव पाडेल याचा आता विचार करा आणि सत्रांना त्या बदलांशी जोडा.

पायरी 3: मूल्यमापन रचनेवर लक्ष केंद्रित करा

भागधारक जोडलेले असल्याने आणि लॉजिक मॉडेल हातात असताना, रचना किती कठोर असावी ते ठरवा. कार्यक्रम परिपक्व झाल्यावर रचना सामान्यतः अधिक प्रगत होतात, किंवा तुमच्याकडे आधीपासूनच मूल्यमापनाचा अनुभव असल्यास किंवा टीममध्ये समर्पित मूल्यमापनकर्ता असल्यास लवकर होतात.

तुमचा कार्यक्रम कोणत्या टप्प्यावर आहेयोग्य आराखडा
नवीन कार्यक्रम, किंवा मूल्यमापनाचा कमी अनुभव असलेली टीमवर्णनात्मक: कोणी भाग घेतला आणि त्यांनी काय नोंदवले याबद्दलचा क्रॉस-सेक्शनल किंवा निरीक्षणात्मक डेटा
स्थापित कार्यक्रम, नियमित देखरेखीबाबत सोयीस्करदोन किंवा अधिक डेटा पॉइंट्स: पूर्व आणि पश्चात मापन, पाठपुरावा सर्वेक्षणे किंवा दीर्घकालीन ट्रॅकिंग
अतिरिक्त निधी, मूल्यमापक किंवा संशोधन भागीदार असलेला स्थापित कार्यक्रमतुलना गट: ECHO शिवाय काय झाले असते हे दाखवण्यासाठी रँडमायझेशन किंवा प्रोपेन्सिटी-स्कोर पद्धती

टप्पा ४: विश्वासार्ह पुरावे गोळा करा

एकदा आराखडा तयार झाल्यावर, डेटा गोळा करा. या ECHO Institute ने विकसित केलेल्या मानक पद्धती आहेत. लिंक केलेले टेम्पलेट्स जसे आहेत तसे वापरा किंवा ते तुमच्या कार्यक्रमानुसार जुळवून घ्या.

पद्धतयाद्वारे काय नोंदवले जातेकधी
नोंदणी अर्ज (Zoom किंवा iECHO)सहभागी व्यक्तीची भूमिका, संस्था, ठिकाण, लिंग आणि इतर वैशिष्ट्येपहिले सत्र
कार्यक्रम नोंदी (iECHO)उपस्थिती, सत्रांची संख्या, प्रकरणांची संख्याप्रत्येक सत्र
सत्रादरम्यानचे पोल प्रश्न (Zoom)माहिती वापरण्याचा उद्देश आणि तसे करण्यातील अडथळेप्रत्येक सत्र
सत्रानंतरचे सर्वेक्षण (iECHO किंवा REDCap)समाधान आणि ज्ञानप्रत्येक सत्र
पाठपुरावा सर्वेक्षण (iECHO किंवा REDCap)सरावातील बदल आणि पोहोचलेले लोकवार्षिक
हब टीमचे स्व-चिंतनECHO मॉडेलशी निष्ठेची स्थिती; आतापर्यंतच्या डेटावर चिंतनत्रैमासिक
पाठपुरावा केस सादरीकरण सर्वेक्षणशिफारशींची उपयुक्तता; अंतिम लाभार्थी आणि प्रणालींचे परिणाम; प्रभावित झालेले लोककेस सादरीकरणाच्या एक ते दोन महिन्यांनंतर
मिनी-फोकस गटसहभागाचे फायदे आणि अडथळे; पद्धती आणि प्रणालींमधील बदलवार्षिक

लांब सर्वेक्षणे टाळा. तुमचे लॉजिक मॉडेल तुम्हाला कार्यक्रमाच्या प्रत्येक टप्प्यावर काय विचारायचे हे प्राधान्य देण्यास मदत करते.

कमी परिचित पद्धतींवर काही टिपा:

  • हब टीमचे स्व-चिंतन तुमची टीम ECHO च्या सर्वोत्तम पद्धतींचे पालन करत आहे की नाही हे विचारते. अहवालाची वाट पाहण्याऐवजी तुमच्याकडे आधीपासून असलेल्या डेटाचे पुनरावलोकन करण्यासाठी वेळ काढा. अनेक टीम्स त्यांच्या डॅशबोर्डचा एकत्र आढावा घेण्यासाठी नियमितपणे भेटतात.
  • पाठपुरावा केस सादरीकरण सर्वेक्षण सादरकर्त्याला त्यांच्या केसनंतर एक किंवा दोन महिन्यांनी पाठवले जाते, जेणेकरून शिफारसी उपयुक्त होत्या की नाही आणि रुग्ण, विद्यार्थी किंवा प्रणालीमध्ये काय बदल झाला हे जाणून घेता येईल.
  • मिनी-फोकस गट असे फायदे, अडथळे आणि सराव व प्रणालींमधील बदल समोर आणतात जे सर्वेक्षणातून सुटू शकतात.

शिफारस केलेला डेटा

किमान, आम्ही शिफारस करतो की प्रत्येक कार्यक्रमाने प्रत्येक सत्रानंतर समाधान, ज्ञान आणि सुसंगतता मोजावी. खालील प्रश्न अभिप्राय सर्वेक्षण टेम्पलेट्समधून आले आहेत, जे iECHO मध्ये समाविष्ट आहेत (पहा सत्र अभिप्राय सर्वेक्षण आयोजित करणे) आणि ते PERL मध्ये देखील उपलब्ध आहेत.

निर्देशांकप्रश्नप्रतिसाद पर्याय
समाधानतुमच्या सहकाऱ्याला या सत्राची [किंवा अभ्यासक्रमाची] शिफारस करण्याची तुमची किती शक्यता आहे?1 (अजिबात शक्यता नाही) ते 10 (अत्यंत शक्यता आहे)
ज्ञानसत्राच्या पूर्वी विषयातील तुमच्या ज्ञानाची (किंवा कौशल्याची) पातळी ठरवा. सत्राच्या नंतर विषयातील तुमच्या ज्ञानाची (किंवा कौशल्याची) पातळी ठरवा.अजिबात नाही, थोडेसे, मध्यम, खूप किंवा अत्यंत ज्ञानी
सुसंगतता (प्राधान्य दिलेले)तुम्ही या सत्रात शिकलेल्या गोष्टींचा तुमच्या कामात वापर कराल का?नक्कीच नाही, बहुदा नाही, शक्यतो, बहुदा होय, नक्कीच होय, लागू नाही
सुसंगतता (पर्यायी)हे सत्र [किंवा अभ्यासक्रम] तुमच्या सध्याच्या कामाशी किती सुसंगत आहे?अजिबात नाही, थोडेसे, मध्यम, खूप किंवा अत्यंत सुसंगत

सरावातील बदलाचे मापन

एका प्रश्नाने सुरुवात करा: ECHO मुळे सहभागींनी काय वेगळे करावे असे तुम्हाला वाटते? याचे आधी व्यापक स्वरूपात उत्तर द्या, नंतर उत्तराचे विशिष्ट भागांमध्ये विभाजन करा. "प्राथमिक काळजीमध्ये ओपिओइड वापर विकार व्यवस्थापित करणे" हे एक ध्येय आहे; "ब्युप्रेनॉर्फिन लिहून देणे" आणि "प्रमाणित साधनाद्वारे प्रत्येक नवीन रुग्णाची तपासणी करणे" या अशा पद्धती आहेत ज्यांचे तुम्ही मोजमाप करू शकता.

जर याचे उत्तर देणे खूप घाईचे वाटत असेल, तर ते ठीक आहे. कार्यक्रम वेगवेगळ्या टप्प्यांवर असतात आणि तुम्हाला हवा असलेला सराव बदल परिभाषित करणे हा कार्यक्रम नियोजनाचा भाग आहे. ते चांगल्या प्रकारे करणे ही मूल्यांकनाच्या दिशेने केलेली प्रगती आहे. सराव-बदल डेटा गोळा करण्याच्या मार्गांमध्ये खालील गोष्टींचा समावेश आहे:

  • सर्वेक्षणे, आणि लक्ष केंद्रित गट किंवा मुलाखती
  • इलेक्ट्रॉनिक आरोग्य नोंदी
  • गुणवत्ता सुधारणा मेट्रिक्स

संशोधन नीतिमत्ता. तुमच्या संस्थेच्या इन्स्टिट्यूशनल रिव्ह्यू बोर्ड (IRB) किंवा त्याच्या समतुल्य घटकाविषयी जाणून घ्या. तुम्ही गोळा केलेला डेटा क्वचितच संवेदनशील असतो, परंतु तुम्ही तो लोकांकडून गोळा करत आहात आणि त्यात वैयक्तिक ओळख समाविष्ट असते. गुणवत्ता सुधारणेसाठी IRB पुनरावलोकनाची आवश्यकता नसू शकते, परंतु IRB आणि प्रकाशन आवश्यकता बदलतात, त्यामुळे तुमच्या संस्थेच्या मार्गदर्शक तत्त्वांचे पालन करा आणि मदतीसाठी तज्ञ शोधा.

टप्पा ५: निष्कर्ष काढा आणि त्यांना समर्थन द्या

विश्लेषण, मग ते गुणात्मक असो वा संख्यात्मक, ते समोरील प्रश्न आणि तुमच्याकडे असलेल्या डेटाद्वारे चालते. तुम्ही आधीच निर्धारित केलेल्या मानकांनुसार परिणामांचा अर्थ लावा:

  • परिणाम. तुम्ही स्वतःसाठी ठेवलेला निकष पूर्ण केला का, जसे की कार्यक्रमापूर्वीच्या तुलनेत कार्यक्रमानंतर ज्ञानात झालेली लक्षणीय वाढ?
  • मूल्ये. ती स्पष्टपणे सांगा. तुमच्या कार्यक्रमाचे ध्येय लक्षात घेता कोणते निष्कर्ष सकारात्मक किंवा नकारात्मक मानले जातात?
  • भागधारक. हे निष्कर्ष त्यांच्या अनुभवाचे आणि अपेक्षांचे प्रतिबिंब दर्शवतात का? नसल्यास, का नाही?

शिफारसी तुमच्या निष्कर्षांशी सुसंगत असाव्यात आणि तुमच्या शोधांच्या मर्यादा लक्षात घेता योग्य असाव्यात. वेगवेगळ्या संदर्भात तुमच्या कार्यक्रमाचा तोच प्रभाव पडेल का? पुढे जाऊन यश किंवा अपयशासाठी काय महत्त्वाचे ठरेल ते सांगा.

टप्पा ६: शिकण्यासाठी डेटाचा वापर करा

केवळ निधी देणाऱ्यांना अहवाल देणे सोपे आहे. तुमच्या कार्यक्रम टीमला अधिक वेळा डेटा उपलब्ध करून दिल्यास तो अधिक उपयुक्त ठरतो. प्रत्येक प्रेक्षक किंवा घटकासाठी, मजकूर, स्वरूप आणि वारंवारता ठरवा:

  • लक्ष्यित गट. निधी देणारे, नेतृत्व, हब टीम, सहभागी, भागीदार संस्था, समुदाय.
  • मजकूर. निर्णय घेण्यासाठी किंवा कार्यक्रमाचे मूल्य समजून घेण्यासाठी प्रत्येक घटकाला काय माहित असणे आवश्यक आहे.
  • स्वरूप. डॅशबोर्ड, लेखी अहवाल, टीम मीटिंगमधील स्लाइड, सत्रातील टीप.
  • वारंवारता. टीमच्या पुनरावलोकनासाठी त्रैमासिक, निधी देणाऱ्यासाठी वार्षिक, किंवा डेटाचा सतत वापर चालू ठेवेल अशी कोणतीही वारंवारता.

तुम्ही जे शिकलात ते सहभागी, त्यांच्या संस्था आणि तुम्ही सेवा देत असलेल्या समुदायांसोबत शेअर करून ही प्रक्रिया पूर्ण करा. त्यांनी तुम्हाला डेटा दिला आहे; त्या डेटाने काय बदल घडवून आणला हे त्यांना दाखवा.

iECHO मधील डॅशबोर्ड

iECHO Analytics Center तुमच्या हब टीमला एकत्र पुनरावलोकन करण्यासाठी तयार व्ह्यूज प्रदान करते: उपस्थिती, सहभागींची माहिती आणि सत्र अभिप्राय. Overview डॅशबोर्ड सह सुरुवात करा, त्यानंतर Participants आणि Forms डॅशबोर्डची सखोल माहिती घ्या. नियमित टीम मीटिंगच्या अजेंडामध्ये यांपैकी एकाचा समावेश करणे हा तुमच्या डेटावरून शिकण्याची सवय लावणारा सर्वात सोपा मार्ग आहे.

मूल्यमापनावर आधारित: ECHO संशोधन

मूल्यमापन आणि संशोधन यामध्ये कोणतीही स्पष्ट रेषा नसते. ते समान साधने वापरतात आणि अनेकदा समान प्रश्न विचारतात; संशोधनामध्ये सहसा अधिक गुंतागुंत आणि काटेकोरपणा असतो. ECHO वरील ९०० हून अधिक पीअर-रिव्ह्यू केलेल्या प्रकाशनांची यादी ECHO प्रकाशने डॅशबोर्ड वर उपलब्ध आहे आणि Moore च्या स्तरांवरील त्यांचे वितरण बहुतांश कार्यक्रम काय मोजतात हे दर्शवते.

Moore चा स्तरपीअर-रिव्ह्यू केलेली प्रकाशने (एप्रिल २०२६)
1. सहभाग668
2. समाधान453
3. शिकणे480
4. क्षमता360
5. कामगिरी280
6. अंतिम-लाभार्थी परिणाम110
7. लोकसंख्या स्तर परिणाम16

साहित्यातील रुग्ण परिणाम

संशोधन वस्तुनिष्ठ निकषांच्या दिशेने जोर देते: क्लेम्स डेटा, इलेक्ट्रॉनिक हेल्थ रेकॉर्ड्स, चार्ट रिव्ह्यू, रुग्ण सर्वेक्षणे आणि इतर कार्यक्रमात्मक किंवा प्रशासकीय डेटा संच. आतापर्यंतचे बहुतेक रुग्ण-परिणाम अभ्यास हेपेटायटिस सी, मधुमेह, एचआयव्ही आणि वेदना व्यवस्थापनाशी संबंधित आहेत. त्यांनी वापरलेली परिणाम मापे तुमचा स्वतःचा कार्यक्रम कशाचा मागोवा घेऊ शकतो हे सुचवू शकतात.

विषयपरिणाम मापे
हेपेटायटिस सी विषाणू (HCV)सस्टेन्ड व्हायरस रिस्पॉन्स; HCV चाचणी; उपचारांच्या टप्प्यावर असलेले रुग्ण; तीव्र HCV संसर्गासाठी उपचार मिळणे
एंडोक्रिनोलॉजी (अंतःस्रावशास्त्र)रुग्णांनी नोंदवलेली आरोग्य सेवेतील पोहोच आणि पुराव्यावर आधारित काळजी मिळणे; HbA1c आणि डोळे व पायांची तपासणी यासारख्या इतर सर्वोत्तम पद्धती
एचआयव्ही (HIV)एचआयव्ही चाचणी केलेले लोक; अँटीरेट्रोव्हायरल थेरपी दिलेल्या व्यक्ती; व्हायरल लोड सप्रेशन; माता-कडून-मुलामध्ये होणाऱ्या प्रसारास प्रतिबंध
कर्करोग (कॅन्सर)तपासणी (स्क्रीनिंग), निदान आणि उपचार झालेल्या रुग्णांची संख्या; एचपीव्ही लसीकरण सुरू करणे आणि पूर्ण करणे
वेदना व्यवस्थापनओपिओइड प्रिस्क्रिप्शन्स आणि मॉर्फिन मिग्रॅ समतुल्य; ओपिओइड आणि बेंझोडायझेपीन एकत्र लिहून देणे; नॉन-ओपिओइड औषधे सुरू केलेले रुग्ण; नॉन-ओपिओइड औषधे किंवा इतर वेदना व्यवस्थापन उपचार मिळणे
दीर्घकालीन काळजीस्किल्ड नर्सिंग सुविधांमध्ये डिस्चार्ज दिल्यानंतर रुग्णालयात पुन्हा दाखल होणे आणि इतर मानके; नर्सिंग होममधील रहिवाशांच्या काळजीच्या गुणवत्तेची मानके; वृद्ध मानसिक आरोग्य रुग्णांमधील आपत्कालीन विभागाचा खर्च
व्यसन आणि ओपिओइड वापर विकारओपिओइड वापर विकाराच्या उपचारासाठी ब्युप्रेनॉर्फिन मिळणे; ब्युप्रेनॉर्फिन प्रिस्क्रिप्शनचा कालावधी
मानसिक आणि वर्तणूक आरोग्यरुग्णांनी नोंदवलेले DSM-5 क्रॉस-कटिंग लक्षण उपाय; रुग्णांनी नोंदवलेले WHO अपंगत्व मूल्यांकन वेळापत्रक

संशोधनाच्या संधी

तुम्हाला मूल्यांकनाकडून संशोधनाकडे जायचे असल्यास, काही गोष्टी मदत करतात:

  • तुमच्या मूल्यांकनाच्या पायावर अधिक कार्य करा. सखोल संशोधन अशा संरचनांवर अवलंबून असते ज्या आधीपासूनच विश्वासार्हपणे डेटा गोळा करतात.
  • भागीदारी निर्माण करा. बहुतांश ECHO संशोधनामध्ये एकापेक्षा जास्त घटक सामील असतात: हब्स एकत्र काम करणे, किंवा विषय तज्ज्ञ असलेल्या संशोधकासोबत काम करणारा हब. समान प्रश्नांवर काम करणारे कार्यक्रम शोधण्यासाठी ECHO सहयोग हे एक चांगले ठिकाण आहे. तुम्हाला हे एकट्याने शोधण्याची गरज नाही.
  • संशोधन निधीचा शोध घ्या. सखोल डिझाइनसाठी सहसा प्रोग्राम बजेटच्या पलीकडे समर्थनाची आवश्यकता असते.
  • पुरावा आधारातील उणिवांना प्राधान्य द्या. शेकडो अभ्यास असूनही, अंतिम लाभार्थींचे परिणाम, यादृच्छिक नियंत्रित चाचण्या, शिक्षण ECHOs, कमी आणि मध्यम उत्पन्न असलेल्या देशांमधील कार्यक्रम आणि ECHO मॉडेलच्या आवश्यक घटकांवर खूप कमी माहिती उपलब्ध आहे. ही उणीव भरून काढल्याने तुम्हाला निधी आणि प्रकाशन मिळण्याची शक्यता वाढते.

संदर्भ आणि संसाधने

तुमच्या कार्यक्रमाचे मूल्यमापन करण्याबद्दल काही प्रश्न आहेत? ECHO Institute च्या संशोधन आणि मूल्यांकन टीमशी संपर्क साधा: jljones8@salud.unm.edu.