ओवर-द-काउंटर डेटा
ओवर-द-काउंटर डेटा (ओटीसीडी) एक डिज़ाइन दृष्टिकोण है जिसका उपयोग डेटा प्रणाली, विशेष रूप से शैक्षिक प्रौद्योगिकी डेटा सिस्टम में किया जाता है, ताकि बेहतर रिपोर्टिंग डेटा द्वारा उपयोगकर्ताओं के डेटा विश्लेषण की सटीकता को बढ़ाया जा सके।[1] दृष्टिकोण में मानकों का पालन करना शामिल है जो पांच घटकों द्वारा व्यवस्थित हैं: लेबल, पूरक दस्तावेज़ीकरण, सहायता प्रणाली, पैकेज/प्रदर्शन और सामग्री।[2]
ओटीसीडी उन विभिन्न तरीकों से प्रेरित था, जिनसे ओवर-द-काउंटर दवा इसकी सामग्री का उपयोग करने वालों को सहायता करती है।[3] जिस तरह ओवर-द-काउंटर दवा के लिए कोई लेबलिंग, दस्तावेज़ीकरण या अन्य समर्थन शामिल नहीं होना लापरवाही होगी, जिससे लोगों को इसकी सामग्री को सुरक्षित रूप से उपयोग करने में मदद मिलेगी, उसी तरह डेटा सिस्टम के लिए शिक्षकों को आवश्यक समर्थन प्रदान किए बिना डेटा प्रदर्शित करना लापरवाही माना जाएगा। यह सुनिश्चित करने के लिए कि जब शिक्षक छात्रों की ज़रूरतों का इलाज करने के लिए डेटा का उपयोग करते हैं तो इसका सही ढंग से उपयोग किया जाता है।
पृष्ठभूमि
ओवर-द-काउंटर दवा अपनी सामग्री का उपयोग करने वालों को समर्थन देने के विभिन्न तरीकों से प्रेरित होकर, ओटीसीडी 2010 में बनाया गया था और इसे शिक्षा डेटा सिस्टम के सुधार के लिए लागू किया गया था।[4] उस तरीके पर विचार करें जिसमें खाद्य एवं औषधि प्रशासन (एफडीए) को ओवर-द-काउंटर दवा के साथ इसके उपयोग में सुधार के लिए पाठ्य मार्गदर्शन की आवश्यकता होती है, अन्यथा ऐसा करना लापरवाही माना जाता है।[5] इस तरह के मार्गदर्शन के साथ, मरीज़ भलाई में सुधार के लक्ष्य के साथ ओवर-द-काउंटर दवा ले सकते हैं, जबकि दवा का उपयोग कैसे करना है यह समझाने के लिए कोई डॉक्टर मौजूद नहीं है। दवाओं के लेबल न होने या खराब होने के कारण कई त्रुटियां और त्रासदी हुई हैं, क्योंकि लोगों के पास यह जानने का कोई तरीका नहीं बचा है कि सामग्री का बुद्धिमानी से उपयोग कैसे किया जाए।[6] लेबलिंग परंपराएं गैर-दवा उत्पादों पर भी बेहतर समझ में तब्दील हो सकती हैं।[7][8] इस प्रकार, जिस तरह से ओवर-द-काउंटर दवा के उचित उपयोग को एक संपूर्ण लेबल और अतिरिक्त दस्तावेज़ीकरण के साथ संप्रेषित किया जाता है, उसी तरह छात्र के प्रदर्शन का विश्लेषण करने के लिए उपयोग की जाने वाली डेटा प्रणाली में उपयोगकर्ताओं को इसमें शामिल डेटा को बेहतर ढंग से समझने में मदद करने के लिए घटक शामिल हो सकते हैं।[9] डेटा संचार करते समय ओटीसीडी दृष्टिकोण (यानी, ओटीसीडी मानकों का पालन) का उपयोग करने में अनुसंधान-आधारित सिफारिशों का पालन करना शामिल है, जिससे शिक्षकों की समझ, विश्लेषण और प्रदर्शित किए जा रहे डेटा के उपयोग में सुधार होने की संभावना है।[10]
OTCD Component | Appearance in Over-the-Counter Medication | Appearance in Data Systems & Their Reports |
---|---|---|
Label | The container label provides the name and info to questions like, "How many should I take?" and "What are the possible side effects?", etc. | The report has a clear and concise title, and included in the footer or side are annotations that provide info most relevant and important to the report. |
Supplemental Documentation | Not all the info a user needs to know can fit on the label, so a folded-up piece of paper is enclosed within the package to offer further explanation. | Similarly, explanatory info can accompany each report via links to a reference sheet and reference guide specific to each report. |
Help System | Users want an online help system to explore and discuss specific questions (50 million people use WebMD every year[11]). | An online help system can offer comprehensive lessons on using the system and on data analysis (specific to the data). |
Package/Display | How the product is displayed and packaged helps communicate by clearly identifying the most important info, such as purpose and use. | How data is organized and displayed, such as layout that encourages correct analyses for each particular report, helps to avoid confusion. |
Content | The ingredients of the product are vital; they have to be effective, user-appropriate, and not expired. | The contents of each report and the report suite as a whole are effective, audience-appropriate and not expired. |
फिर भी, विश्लेषण में सहायता के लिए डेटा सिस्टम के भीतर लेबलिंग और उपकरण असामान्य हैं, भले ही अधिकांश शिक्षक अकेले डेटा का विश्लेषण करते हैं।[12] अनिवार्य रूप से, डेटा सिस्टम और रिपोर्ट आमतौर पर शिक्षकों के लिए "ओवर-द-काउंटर" प्रारूप में डेटा प्रस्तुत नहीं करते हैं, जिसका छात्रों के इलाज के लिए डेटा का उपयोग करने का प्राथमिक विकल्प इस प्रकार एक अचिह्नित या मामूली रूप से चिह्नित कंटेनर से दवा लेने से तुलना की जाती है। जिस तरह ओवर-द-काउंटर दवा के लिए कोई लेबलिंग, दस्तावेज़ीकरण या अन्य समर्थन शामिल नहीं होना लापरवाही होगी, जिससे लोगों को इसकी सामग्री को सुरक्षित रूप से उपयोग करने में मदद मिलेगी, उसी तरह डेटा सिस्टम और रिपोर्ट के लिए सर्वश्रेष्ठ को आवश्यक समर्थन प्रदान किए बिना शिक्षकों के लिए डेटा प्रदर्शित करना लापरवाही है। सुनिश्चित करें कि डेटा का उचित उपयोग किया जाए और इस प्रकार छात्रों पर वांछनीय प्रभाव पड़े।[13] ओटीसीडी मानकों (नीचे) द्वारा संक्षेपित सिफारिशें शिक्षा और एडटेक में अनुसंधान के साथ-साथ कई अन्य क्षेत्रों (जैसे, व्यवहारिक अर्थशास्त्र, डिज़ाइन , व्यवसाय विश्लेषण, प्रौद्योगिकी, और अधिक) में अनुसंधान पर आधारित हैं। ओटीसीडी दृष्टिकोण का उद्देश्य शिक्षकों के पेशेवर विकास या डेटा उपयोग में सुधार करने वाले अन्य हस्तक्षेपों को प्रतिस्थापित करना नहीं है, बल्कि यह एक अतिरिक्त समाधान है जिसमें शिक्षकों को अधिक समय, पैसा या तनाव खर्च नहीं करना पड़ता है।[13]
महत्व
शिक्षकों ने छात्रों की जरूरतों के बारे में जानकारी देने के लिए डेटा के उपयोग के महत्व को व्यापक रूप से स्वीकार किया है।[14][15] यह एक अच्छी बात है, क्योंकि शोध प्रभावी डेटा उपयोग के लाभों के बारे में बताता है।[16][17][18][19] दुर्भाग्य से, शिक्षकों का व्यापक डेटा उपयोग हमेशा अच्छी बात नहीं है। एक महत्वपूर्ण हिस्सा - और कुछ शोध का दावा है कि डेटा का विश्लेषण और उपयोग करने वाले अधिकांश शिक्षक गलत तरीके से ऐसा कर रहे हैं।[18][20][21][22][23][24] उदाहरण के लिए, मजबूत डेटा उपयोग के लिए जाने जाने वाले जिलों में किए गए दो अमेरिकी शिक्षा विभाग के अध्ययनों में, शिक्षकों ने बुनियादी सांख्यिकीय अवधारणाओं से जुड़े डेटा अनुमान लगाते समय केवल 48% सटीकता हासिल की।[12][25] इस प्रकार शिक्षक निर्णय लेने के लिए डेटा का उपयोग कर रहे हैं, लेकिन वे हमेशा उस डेटा को नहीं समझते हैं जिसका वे उपयोग कर रहे हैं। चूँकि उनके डेटा-गलत जानकारी वाले निर्णय छात्रों पर प्रभाव डालते हैं, ऐसे निर्णय प्रभावित करने के लिए होते हैं, यह एक महत्वपूर्ण समस्या है। एडटेक उत्पाद जो शिक्षकों को ओवर-द-काउंटर प्रारूप में डेटा प्रस्तुत करते हैं - केवल "डेटा दिखाने" के विपरीत और शिक्षकों को विश्लेषण में सहायता के लिए संसाधनों को खोदने की आवश्यकता होती है - शिक्षकों के डेटा उपयोग को बेहतर बनाने में सक्रिय भूमिका निभाते हैं।
ओवर-द-काउंटर डेटा अध्ययन
हालाँकि पिछले कुछ वर्षों में कई अध्ययनों ने ऐसे साक्ष्य प्रस्तुत किए हैं जिन पर ओटीसीडी मानक आधारित हैं, 2013 में एक मात्रात्मक अध्ययन विशेष रूप से डेटा विश्लेषण सटीकता पर ओटीसीडी के प्रत्यक्ष प्रभाव पर केंद्रित था (केवल यह निर्धारित करने के विपरीत कि शिक्षक कौन से एडटेक पहलुओं को पसंद करते हैं)। छह अलग-अलग कैलिफ़ोर्निया स्कूल जिलों के नौ स्कूलों में विभिन्न पृष्ठभूमि के 211 शिक्षकों ने शिक्षकों के डेटा विश्लेषण सटीकता अध्ययन पर ओवर-द-काउंटर डेटा के प्रभाव में भाग लिया।[13]अध्ययन का आधार विश्लेषण सटीकता पर सटीक प्रभाव निर्धारित करना था जब डेटा सिस्टम रिपोर्टिंग वातावरण ने डेटा को "ओवर-द-काउंटर" बना दिया, जिससे शिक्षकों को लेबलिंग और पूरक के रूप में उपयोगकर्ताओं के लिए ओवर-द-काउंटर दवा जैसे एम्बेडेड समर्थन प्रदान किया गया। दस्तावेज़ीकरण. मुख्य निष्कर्ष महत्वपूर्ण थे और शिक्षकों, शैक्षिक प्रौद्योगिकी और/या डेटा सिस्टम विक्रेताओं और शिक्षकों को डेटा संप्रेषित करने में शामिल किसी भी अन्य व्यक्ति के लिए निहितार्थ रखते थे:[26]
प्राथमिक शोध प्रश्नों से संबंधित
- जब अध्ययन प्रतिभागियों द्वारा देखी गई शिक्षा डेटा रिपोर्ट पर एक पादलेख मौजूद था, तो प्रदर्शित डेटा का शिक्षकों का विश्लेषण 307% अधिक सटीक था। जब प्रतिभागियों ने विशेष रूप से पाद लेख (73% बार) का उपयोग करने का संकेत दिया, तो उनका डेटा विश्लेषण 336% अधिक सटीक था।
- जब अध्ययन प्रतिभागियों द्वारा देखी गई डेटा रिपोर्ट के साथ एक संदर्भ पत्रक (निम्नलिखित templates) दिया गया, तो शिक्षकों द्वारा प्रदर्शित डेटा का विश्लेषण 205% अधिक सटीक था। जब प्रतिभागियों ने विशेष रूप से शीट का उपयोग करने का संकेत दिया (समय का 50%), तो उनका डेटा विश्लेषण 300% अधिक सटीक था।
- जब एक संदर्भ मार्गदर्शिका (templates के अनुसार) अध्ययन प्रतिभागियों द्वारा देखी गई डेटा रिपोर्ट के साथ थी, तो प्रदर्शित डेटा का शिक्षकों का विश्लेषण 273% अधिक सटीक था। जब प्रतिभागियों ने विशेष रूप से गाइड (52%) का उपयोग करने का संकेत दिया, तो उनका डेटा विश्लेषण 436% अधिक सटीक था।
- कुल मिलाकर, जब कोई ओटीसीडी समर्थन अध्ययन प्रतिभागियों द्वारा देखी गई डेटा रिपोर्ट के साथ आया, तो प्रदर्शित डेटा का शिक्षकों का विश्लेषण 264% अधिक सटीक था। जब प्रतिभागियों ने विशेष रूप से समर्थन का उपयोग करने का संकेत दिया (समय का 58%), तो उनका डेटा विश्लेषण 355% अधिक सटीक था।
- जिन अध्ययन प्रतिभागियों को कोई समर्थन नहीं मिला, उनमें से 87% ने संकेत दिया कि यदि समर्थन उपलब्ध होता तो उन्होंने समर्थन का उपयोग किया होता - जैसे फ़ुटर, संदर्भ पत्रक, या संदर्भ गाइड।
- जिन प्रतिभागियों को कोई समर्थन नहीं मिला, उनकी औसत डेटा विश्लेषण सटीकता 11% थी (अर्थात, विभिन्न डेटा विश्लेषण प्रश्नों का उत्तर देते समय 11% का स्कोर सही था, जैसे कि देखे गए डेटा के अनुसार, कौन सा क्षेत्र साइट की ताकत की सबसे अधिक संभावना है, कौन सा क्षेत्र सबसे अधिक संभावना है) साइट की कमज़ोरी, किन विद्यार्थियों ने परीक्षा में प्रवीण अंक नहीं प्राप्त किया, और किन क्षेत्रों के कारण विद्यार्थियों ने परीक्षा में प्रवीण अंक नहीं प्राप्त किए)।
माध्यमिक अनुसंधान प्रश्नों से संबंधित
- शिक्षकों की स्कूल साइट जनसांख्यिकी (माध्यमिक स्वतंत्र चर: स्कूल स्तर का प्रकार, स्कूल स्तर, शैक्षणिक प्रदर्शन, ईएल जनसंख्या, सामाजिक आर्थिक रूप से वंचित आबादी और विकलांग छात्रों की आबादी) का डेटा विश्लेषण सटीकता या समर्थन उपयोग पर कोई महत्वपूर्ण प्रभाव नहीं पड़ा।
- शिक्षक जनसांख्यिकी (माध्यमिक स्वतंत्र चर: अनुभवी स्थिति, वर्तमान पेशेवर भूमिका, स्वयं की डेटा विश्लेषण दक्षता की धारणा, डेटा विश्लेषण पेशेवर विकास का समय, और स्नातक स्तर के शैक्षिक माप पाठ्यक्रमों की संख्या) का डेटा विश्लेषण सटीकता या समर्थन उपयोग पर कोई महत्वपूर्ण प्रभाव नहीं पड़ा।
- प्रत्येक समर्थन के फ़्रेमिंग/प्रारूप में मामूली बदलाव (मुख्य रूप से लंबाई और रंग उपयोग के संदर्भ में) का डेटा विश्लेषण सटीकता या समर्थन उपयोग पर कोई महत्वपूर्ण प्रभाव नहीं पड़ा।
ओवर-द-काउंटर डेटा (ओटीसीडी) मानक
ओटीसीडी मानकों में डेटा विश्लेषण समर्थन को सीधे रिपोर्टिंग परिवेश में एम्बेड करना और डिज़ाइन से संबंधित सर्वोत्तम प्रथाओं का पालन करना शामिल है।[27] ओटीसीडी मानकों को शिक्षकों को डेटा संचारित करने वाले किसी भी व्यक्ति द्वारा उपयोग करने और उन उपकरणों में प्रतिबिंबित करने के लिए डिज़ाइन किया गया था जिनके माध्यम से डेटा संचारित किया जाता है (उदाहरण के लिए, डेटा रिपोर्ट, डेटा सिस्टम, या डेटा घटक के साथ अन्य एडटेक उत्पाद)। उनका उद्देश्य प्रदान किए जा रहे डेटा की इष्टतम शिक्षक ("उपयोगकर्ता") समझ, विश्लेषण और उपयोग को बढ़ावा देना है।
ओटीसीडी का उल्लेख
संगठनों और प्रकाशनों में ओटीसीडी के उल्लेखों में शामिल हैं:
- कैलिफ़ोर्निया काउंसिल ऑन टीचर एजुकेशन (सीसीटीई) (2013 सम्मेलन कार्यक्रम में सम्मेलन पोस्टर प्रस्तुति 18) और "ओवर-द-काउंटर डेटा के साथ शिक्षकों के डेटा विश्लेषण त्रुटियों का निवारण" लेख, पृष्ठ 14 -21 में CCNews: कैलिफ़ोर्निया काउंसिल ऑन टीचर एजुकेशन का न्यूज़लैटर, 24(4)
- कैलिफ़ोर्निया एजुकेशनल रिसर्च एसोसिएशन (CERA) (OTCD घटकों को समझाने वाली प्रस्तुति; gse.uci.edu/docs/CERA-2011-Program2.pdf प्रस्तुति सम्मेलन कार्यक्रम के पृष्ठ 27 पर वर्णित है)
- क्लासरूम 2.0 लर्निंग 2.0 (ओटीसीडी सम्मेलन प्रस्तुति के लिए लिंक पर क्लिक करें)
- कनेक्ट 2013: कनाडा का शिक्षण और प्रौद्योगिकी सम्मेलन (ओटीसीडी प्रस्तुति उल्लेख देखने के लिए मंगलवार टैब/लिंक पर क्लिक करें)
- कनेक्टेड एजुकेटर्स (कनेक्टेड एजुकेटर्स कम्युनिटी डायरेक्टरी)
- कनेक्टेड एजुकेटर्स (सामूहिक ट्विटर सूची)
- EdSurge (लेख); इसके अलावा, Bio; न्यूज़लेटर #114 (17 अप्रैल, 2013), न्यूज़लेटर #115 (24 अप्रैल, 2013), और न्यूज़लेटर #116 (1 मई, 2013) ओटीसीडी अध्ययन से संदर्भित और लिंक किए गए हैं; और न्यूज़लैटर #121 (जून 5, 2013) संदर्भित ओटीसीडी लेख
- communication-feedback-effectively EdTech Women (लेख)
- Edukwest (लेख)
- K-12 ऑनलाइन (सम्मेलन प्रस्तुति)
- लर्निंग फॉरवर्ड (पूर्व में राष्ट्रीय कर्मचारी विकास परिषद) (प्रस्तुति G09 तक स्क्रॉल करें और स्लाइड 30 और 35 देखें)
- राष्ट्रीय शिक्षा सांख्यिकी केंद्र (एनसीईएस) STATS-DC में ग्रीष्मकालीन फोरम (उल्लेख तब किया गया जब पृष्ठ 49 पर वर्णित प्रस्तुति प्रस्तुत की गई थी)
- सार्वजनिक शिक्षा के लिए नेटवर्क (जब तक आप लागुना बीच, सीए पर पिन क्लिक करने में सक्षम नहीं हो जाते, तब तक दक्षिणी सीए में मित्र और सहयोगी पृष्ठ #/बबल पर क्लिक करें)
- स्टार्टअप अमेरिका पार्टनरशिप (विशेष रुप से प्रदर्शित)
- टीचर टेक (लेख)
- प्रशासनिक नेतृत्व के लिए प्रौद्योगिकी सूचना केंद्र (TICAL) (लिंक पर क्लिक करें) प्रेजेंटेशन देखने के लिए स्कूल लीडरशिप समिट सत्र विवरण से जुड़ी वेबसाइट/यूआरएल जिसमें ओटीसीडी पर चर्चा की गई है)
संदर्भ
- ↑ Rankin, J. G. (2013, June 3). Featured article: What data reporting systems can learn from medicine labeling. EdSurge. Retrieved from https://www.edsurge.com/n/2013-06-03-opinion-what-data-reporting-systems-can-learn-from-medicine-labeling
- ↑ Rankin, J. (2013, October 24). Remedying educators’ data analysis errors with over-the-counter data. California Council on Teacher Education (CCTE) Conference. Poster presentation conducted from Kona Kai Resort, San Diego, CA.
- ↑ Rankin, J. G. (2013, May 2). Over-the-counter data is the next frontier for data in edtech. Edukwest. Retrieved from http://www.edukwest.com/over-the-counter-data-is-the-next-frontier-for-data-in-edtech/
- ↑ Rankin, J. (2011, December 1). Data analysis doesn’t have to be so hard. Ninetieth Annual California Educational Research Association (CERA) Conference Presentation conducted from Disney Convention Center, Anaheim, CA.
- ↑ DeWalt, D. A. (2010). Ensuring safe and effective use of medication and health care: perfecting the dismount. The Journal of the American Medical Association (JAMA), 304(23), 2641-2642. doi: 10.1001/jama.2010.1844
- ↑ Brown-Brumfield, D., & DeLeon, A. (2010). Adherence to a medication safety protocol: Current practice for labeling medications and solutions on the sterile field. Association of Operating Room Nurses. AORN Journal, 91(5), 610-610-7. doi:10.1016/j.aorn.2010.03.002
- ↑ Hampton, T. (2007). Groups urge warning label for medical devices containing toxic chemical. The Journal of the American Medical Association (JAMA), 298 (11), 1267. doi: 10.1001/jama.298.11.1267
- ↑ Qin, Y., Wu, M., Pan, X., Xiang, Q., Huang, J., Gu, Z., & ... Zhou, M. (2011, February 25). Reactions of Chinese adults to warning labels on cigarette packages: a survey in Jiangsu Province. BMC Public Health, 11(133). doi: 10.1186/1471-2458-11-133
- ↑ Rankin, J. G. (2013, October 25). Pushing edtech’s responsibility to communicate feedback effectively. Edtech Women. Retrieved from http://edtechwomen.com/blog/2013/10/25/pushing-edtechs-responsibility-to-communicate-feedback-effectively
- ↑ Rankin, J. (2013, May 7). Over-the-counter data: Improved analysis accuracy. Connect 2013: Canada’s Learning & Technology Conference. Presentation conducted from Scotiabank Convention Centre, Niagara Falls, Ontario, Canada.
- ↑ Kronstadt, J., Moiduddin, A., & Sellheim, W. (March, 2009). Consumer use of computerized applications to address health and health care needs: Prepared for U.S. Department of Health and Human Services, Office of the Secretary, Assistant Secretary for Planning and Evaluation. Bethesda, MD: NORC at the University of Chicago.
- ↑ 12.0 12.1 U.S. Department of Education Office of Planning, Evaluation and Policy Development (2009). Implementing data-informed decision making in schools: Teacher access, supports and use. United States Department of Education (ERIC Document Reproduction Service No. ED504191)
- ↑ 13.0 13.1 13.2 Rankin, J. G. (2013). Over-the-counter data’s impact on educators’ data analysis accuracy. ProQuest Dissertations and Theses, 3575082. Retrieved from http://pqdtopen.proquest.com/doc/1459258514.html?FMT=ABS
- ↑ Van der Meij, H. (2008). Designing for user cognition and affect in a manual. Should there be special support for the latter? Learning & Instruction, 18(1), 18-29.
- ↑ Hattie, J. (2010). Visibly learning from reports: The validity of score reports. Online Educational Research Journal. Retrieved from http://www.oerj.org/View?action=viewPaper&paper=6
- ↑ Wohlstetter, P., Datnow, A., & Park, V. (2008). Creating a system for data-driven decision-making: Applying the principal-agent framework. School Effectiveness and School Improvement, 19(3), 239–259.
- ↑ Lewis, D., Madison-Harris, R., Muoneke, A., & Times, C. (2010). Using data to guide instruction and improve student learning. SEDL Letter, 22(2), 10–12.
- ↑ 18.0 18.1 SAS Institute. (2013). Best practices in information management, reporting and analytics for education. Retrieved from https://fs24.formsite.com/edweek/form15/secure_index.html
- ↑ Stansbury, M. (2013, July). Nine templates to help educators leverage school data: New industry collaborative says using data effectively can help close education gaps. eSchool News. Retrieved from http://www.eschoolnews.com/2013/01/07/nine-templates-to-help-educators-leverage-school-data/?ast=104&astc=9990
- ↑ Data Quality Campaign (2009). The next step: Using longitudinal data systems to improve student success. Retrieved from http://www.dataqualitycampaign.org/find-resources/the-next-step/
- ↑ Wayman, J. C., Cho, V., & Shaw, S. M. (2009, December). First-year results from an efficacy study of the Acuity data system. Paper presented at the Twenty-fourth Annual Texas Assessment Conference, Austin, TX.
- ↑ Underwood, J. S., Zapata-Rivera, D., & VanWinkle, W. (2010). An evidence-centered approach to using assessment data for policymakers (ETS Research Rep. No. RR-10-03). Princeton, NJ: ETS.
- ↑ Wayman, J. C., Snodgrass Rangel, V. W., Jimerson, J. B., & Cho, V. (2010). Improving data use in NISD: Becoming a data-informed district. Austin, TX: The University of Texas at Austin.
- ↑ VanWinkle, W., Vezzu, M., & Zapata-Rivera, D. (2011). Question-based reports for policymakers (ETS Research Memorandum No. RM-11-16). Princeton, NJ: ETS.
- ↑ U.S. Department of Education Office of Planning, Evaluation and Policy Development (2011). Teachers' ability to use data to inform instruction: Challenges and supports. United States Department of Education (ERIC Document Reproduction Service No. ED516494)
- ↑ Hansen, L., & Johnson, M. (2013, July 24) Data-Informed Decision Making: It Takes a City. Learning Forward (formerly National Staff Development Council) 2013 Summer Conference. Presentation conducted from Minneapolis Hilton, Minneapolis, MN
- ↑ Rankin, J. (2013, March 28). How data systems & reports can either fight or propagate the data analysis error epidemic. 2013 Technology Information Center for Administrative Leadership (TICAL) School Leadership Summit. Retrieved from http://admin20.org/forum/topics/how-data-systems-reports-can-either-fight-or-propagate-the-data