This article briefly describes how t

This article briefly describes how to structure a program evaluation to embrace the ROAR factor. ROAR stands for return on allocated resources, which implies that we need to measure ALL the allocated resources, not just direct out-of-pocket costs, and ALL the returns, not just reductions in medical costs or similar objective outcomes. The ROAR Factor also means focusing programs on what makes people feel great, what makes them want to roar, and measuring how well we are doing in helping people feel great.

In the September 2015 issue of this journal, I suggested that we move beyond ROI (return on investment) and embrace a new paradigm, the ROAR Factor, in evaluating health promotion programs. (1) ROAR stands for return on allocated resources, which implies that we need to measure ALL the allocated resources, not just direct out-of-pocket costs, and also ALL the returns, not just reductions in medical costs or other objective outcomes. The ROAR Factor also means focusing our programs on what makes people feel great, what makes them want to roar, and measuring how well we are doing in helping people feel great.

This article briefly describes features unique to incorporate in an evaluation that embraces the ROAR Factor. There are some differences in the overall approach, study structure, how data are analyzed, and how results are reported and applied, but the biggest differences are in what is measured and how it is measured. Each of these elements is briefly reviewed, with more emphasis on the what and how measurement elements.

These comments represent a combination of practical recommendations and philosophical musings about what might become reality in the future. Please bear with me.

Overall Approach
The overall approach needs to be a combination of quantitative and qualitative analyses. Quantitative analyses will focus on the traditional, more objective measurement of outcomes, including participation, health status, medical costs, productivity, etc. Qualitative analyses will be the human texture behind the numbers, including why people did and did not participate in programs, why they were and were not satisfied, why they were or were not successful in changing a behavior, and how the program made them feel.

Goals and Purpose
The evaluation should have two primary goals. First, the evaluation should provide an objective measurement of the effectiveness of the program in engaging people in
programs, improving health outcomes, controlling medical costs, and contributing to other organization-level goals that have been set, in terms of both absolute outcomes and cost effectiveness. Implicit in this planning is a thorough review of organization priorities and how the program is expected to contribute to those priorities.

Second, the evaluation should produce information that can be used to make the program more effective in achieving its stated goals, especially how to get better and better at helping people feel great. We need to accept the reality that helping people feel great is a very high bar that may never be reached for all members of any given population, but will be approached only by relentlessly striving to achieve that goal.

Results (Thai) 1:

Briefly บทความนี้อธิบายถึงวิธีการจัดโครงสร้างการประเมินโปรแกรมการโอบกอดตัวเสียงคำราม ถึงเสียงคำรามส่งคืนทรัพยากรที่ปันส่วน ซึ่งหมายความว่า เราต้องการวัดทรัพยากรที่ปันส่วนทั้งหมด ไม่ใช่แค่ตรงค่าใช้ จ่าย out-of-pocket และทั้งหมดส่งกลับ ไม่เพียงลดค่าใช้จ่ายทางการแพทย์หรือผลคล้ายวัตถุประสงค์ ตัวเสียงคำรามหมายถึง เน้นโปรแกรมอะไรที่ทำให้คนที่รู้สึกดี สิ่งที่ทำให้พวกเขาต้องการร้อง และวัดอย่างไรดีเราทำในการช่วยให้คนรู้สึกดีใน 2015 กันยายนออกสมุด ผมแนะนำให้ เราย้ายเกินร้อย (ผลตอบแทนจากการลงทุน) และโอบกอดกระบวนทัศน์ใหม่ ปัจจัยเสียงคำราม ในการประเมินโปรแกรมการส่งเสริมสุขภาพ (1) ถึงเสียงคำรามส่งคืนทรัพยากรที่ปันส่วน ซึ่งหมายความว่า เราต้องการวัดทรัพยากรที่ปันส่วนทั้งหมด ไม่ใช่แค่ตรงค่าใช้ จ่าย out-of-pocket และยังทั้งหมดกลับ ไม่เพียงลดค่าใช้จ่ายทางการแพทย์ หรือผลอื่น ๆ วัตถุประสงค์ ตัวเสียงคำรามหมายถึง เน้นไปที่โปรแกรมของเราทำให้คนที่รู้สึกดี สิ่งที่ทำให้พวกเขาต้องการร้อง และวัดอย่างไรดีเราทำในการช่วยให้คนรู้สึกดีBriefly บทความนี้อธิบายถึงคุณลักษณะเฉพาะที่จะรวมในการประเมินที่นำปัจจัยเสียงคำราม มีความแตกต่างในแนวทางโดยรวม การศึกษาโครงสร้าง วิธีเป็นวิเคราะห์ข้อมูล และ วิธีมีรายงานผล และใช้ แต่ความแตกต่างที่ใหญ่ที่สุดมีอะไรในการวัดและวิธีวัด แต่ละองค์ประกอบเหล่านี้เป็น briefly ทาน มีความสำคัญในสิ่ง และวิธีการประเมินองค์ประกอบข้อคิดเห็นเหล่านี้แสดงคำแนะนำการปฏิบัติและ musings ปรัชญาเกี่ยวกับอะไรอาจกลายเป็นจริงได้ในอนาคต กรุณาหมีพวิธีการโดยรวมวิธีการทั้งหมดจำเป็นต้อง เป็นทั้งเชิงปริมาณและคุณภาพวิเคราะห์ วิเคราะห์เชิงปริมาณจะมุ่งเน้นในการประเมินแบบดั้งเดิม เพิ่มเติมวัตถุประสงค์ของผล รวมทั้งมีส่วนร่วม สถานะสุขภาพ ทุนแพทย์ ผลผลิต เป็นต้น วิเคราะห์คุณภาพจะเนื้อมนุษย์อยู่เบื้องหลังหมายเลข รวมถึงเหตุผลที่คนไม่ได้ และไม่ได้มีส่วนร่วมในโปรแกรม ทำไมพวกเขาได้ และไม่ satisfied ทำไมพวกเขาได้ หรือไม่ประสบความสำเร็จในการเปลี่ยนแปลงลักษณะการทำงาน และการโปรแกรมที่ทำให้พวกเขารู้สึกเป้าหมายและวัตถุประสงค์การประเมินควรมีเป้าหมายหลักที่สอง ครั้งแรก การประเมินควรให้วัดประสิทธิภาพของโปรแกรมในเสน่ห์คนมีวัตถุประสงค์โปรแกรม การปรับปรุงผลลัพธ์ของสุขภาพ การควบคุมต้นทุนทางการแพทย์ และสนับสนุนอื่น ๆ เป้าหมายระดับองค์กรที่ ตั้ง ในผลทั้งแบบเต็ม และต้นทุนประสิทธิผล นัยนี้วางแผนการตรวจสอบอย่างละเอียดระดับความสำคัญขององค์กรและวิธีโปรแกรมคาดว่าจะมีส่วนสำคัญที่สอง การประเมินผลควรให้ข้อมูลที่สามารถใช้เพื่อให้โปรแกรมมีประสิทธิภาพในการบรรลุเป้าหมายระบุไว้ โดยเฉพาะอย่างยิ่งวิธีการรับที่ดี และช่วยให้คนรู้สึกดีขึ้น เราต้องยอมรับความเป็นจริงช่วยให้คนที่รู้สึกดีว่าบาร์สูงมากที่อาจไม่สามารถเข้าถึงสำหรับสมาชิกทั้งหมดของประชากรที่กำหนดใด ๆ แต่จะประดับเฉพาะ โดยคืบมุ่งมั่นเพื่อให้บรรลุเป้าหมายที่

Results (Thai) 2:

บรีบทความนี้ชั้น y ที่อธิบายถึงวิธีการจัดโครงสร้างการประเมินผลโครงการที่จะโอบกอดปัจจัยเสียงคำราม เสียงคำรามย่อมาจากผลตอบแทนจากการจัดสรรทรัพยากรซึ่งหมายถึงว่าเราต้องวัดทั้งหมดจัดสรรทรัพยากรที่ไม่เพียง แต่ตรงค่าใช้จ่ายออกจากกระเป๋าและผลตอบแทนทั้งหมดที่ไม่เพียง แต่การลดลงของค่าใช้จ่ายทางการแพทย์หรือผลวัตถุประสงค์ที่คล้ายกัน ปัจจัยเสียงคำรามยังหมายถึงการมุ่งเน้นไปที่โปรแกรมในสิ่งที่ทำให้คนรู้สึกดีสิ่งที่ทำให้พวกเขาต้องการที่จะแผดเสียง, และการวัดวิธีที่ดีที่เราจะทำในการช่วยให้ผู้คนรู้สึกดี. ในกันยายน 2015 ปัญหาของวารสารนี้ผมแนะนำว่าเราย้ายเกินกว่าผลตอบแทนการลงทุน (ผลตอบแทนการลงทุน) และโอบกอดกระบวนทัศน์ใหม่ที่แผดเสียงปัจจัยในการประเมินโปรแกรมการส่งเสริมสุขภาพ (1) เสียงคำรามย่อมาจากผลตอบแทนจากการจัดสรรทรัพยากรซึ่งหมายถึงว่าเราต้องวัดทั้งหมดจัดสรรทรัพยากรที่ไม่เพียง แต่ตรงค่าใช้จ่ายออกจากกระเป๋าและยัง ALL ผลตอบแทนที่ไม่เพียง แต่การลดลงของค่าใช้จ่ายทางการแพทย์หรือผลวัตถุประสงค์อื่น ๆ ปัจจัยเสียงคำรามยังหมายถึงการมุ่งเน้นไปที่โปรแกรมของเราในสิ่งที่ทำให้คนรู้สึกดีกับสิ่งที่ทำให้พวกเขาต้องการที่จะแผดเสียง, และการวัดวิธีที่ดีที่เราจะทำในการช่วยให้ผู้คนรู้สึกดี. บรีบทความนี้ชั้น y ที่อธิบายถึงคุณสมบัติที่เป็นเอกลักษณ์ที่จะรวมในการประเมินผลที่รวบรวมเสียงคำรามที่ ปัจจัย. มีความแตกต่างบางอย่างในวิธีการโดยรวมโครงสร้างมีการศึกษาวิธีการวิเคราะห์ข้อมูลและวิธีการที่จะมีการรายงานผลและนำไปใช้ แต่ความแตกต่างที่ใหญ่ที่สุดอยู่ในสิ่งที่จะวัดและวิธีการที่จะวัด แต่ละองค์ประกอบเหล่านี้เป็นบรีชั้นปีตรวจสอบที่มีความสำคัญมากขึ้นในสิ่งที่และวิธีการวัดองค์ประกอบ. ความคิดเห็นเหล่านี้เป็นตัวแทนของการรวมกันของคำแนะนำในทางปฏิบัติและ musings ปรัชญาเกี่ยวกับสิ่งที่อาจจะกลายเป็นความจริงในอนาคต โปรดอดทนกับฉัน. โดยรวมวิธีการวิธีการโดยรวมจะต้องมีการรวมกันของการวิเคราะห์เชิงปริมาณและเชิงคุณภาพ การวิเคราะห์เชิงปริมาณจะมุ่งเน้นไปที่แบบดั้งเดิมวัดเพิ่มเติมวัตถุประสงค์ของผลรวมทั้งการมีส่วนร่วมของสถานะสุขภาพค่ารักษาพยาบาล, การผลิต, ฯลฯ การวิเคราะห์เชิงคุณภาพจะเป็นเนื้อมนุษย์ที่อยู่เบื้องหลังตัวเลขรวมทั้งเหตุผลที่คนไม่และไม่ได้มีส่วนร่วมในโปรแกรมทำไม และพวกเขาก็ไม่ได้เอ็ดสาย satis ทำไมพวกเขาหรือไม่ประสบความสำเร็จในการเปลี่ยนแปลงพฤติกรรมและวิธีการที่โปรแกรมทำให้พวกเขารู้สึก. เป้าหมายและวัตถุประสงค์การประเมินผลควรจะมีสองเป้าหมายหลัก ครั้งแรกที่การประเมินผลควรมีการวัดวัตถุประสงค์ของประสิทธิผลของโปรแกรมในการมีส่วนร่วมของคนที่อยู่ในโปรแกรมการปรับปรุงผลลการควบคุมค่าใช้จ่ายทางการแพทย์และเอื้อต่อเป้าหมายระดับองค์กรอื่น ๆ ที่ได้รับการตั้งค่าในแง่ของผลที่แน่นอนและค่าใช้จ่าย ประสิทธิผล. โดยปริยายในการวางแผนนี้เป็นความคิดเห็นอย่างละเอียดของการจัดลำดับความสำคัญขององค์กรและวิธีการที่โปรแกรมที่คาดว่าจะนำไปสู่การจัดลำดับความสำคัญเหล่านั้น. ประการที่สองการประเมินผลควรผลิตข้อมูลที่สามารถนำมาใช้เพื่อทำให้โปรแกรมมีประสิทธิภาพมากขึ้นในการบรรลุเป้าหมายที่กำหนดไว้โดยเฉพาะอย่างยิ่งว่าจะได้รับ ที่ดีกว่าและดีกว่าที่ช่วยให้ผู้คนรู้สึกดีมาก เราจำเป็นต้องยอมรับความเป็นจริงว่าคนที่ช่วยให้ความรู้สึกที่ดีเป็นแถบสูงมากที่ไม่อาจเข้าถึงได้สำหรับสมาชิกทั้งหมดของประชากรใดก็ตาม แต่จะได้รับการทาบทามโดยเฉพาะอย่างไม่ลดละมุ่งมั่นที่จะบรรลุเป้าหมายที่

Results (Thai) 3:

บทความนี้อธิบายวิธีการflบรีและโครงสร้างโปรแกรมการประเมินผลที่จะโอบกอดด้านเสียงคำราม แผดเสียงหมายถึงผลตอบแทนการจัดสรรทรัพยากร ซึ่งหมายถึงว่าเราต้องวัดทั้งหมดที่จัดสรรทรัพยากร ไม่ใช่แค่ตรงออกจากค่าใช้จ่ายในกระเป๋า และผลตอบแทนทั้งหมด ไม่ใช่แค่การลดลงของค่าใช้จ่ายทางการแพทย์หรือผลลัพธ์ วัตถุประสงค์ที่คล้ายกันปัจจัยเสียงยังหมายถึงเน้นโปรแกรมที่ทำให้คนเรารู้สึกดี อะไรที่ทำให้พวกเขาต้องคำราม และวัดวิธีที่ดีที่เราทำในการช่วยให้ผู้คนรู้สึกดี

ในกันยายน 2558 ประเด็นของบันทึกนี้ ผมแนะนำว่าให้เราย้ายเกิน ROI ( ผลตอบแทนการลงทุน ) และยอมรับกระบวนทัศน์ใหม่ , ปัจจัย เสียงคำรามในการประเมินโครงการส่งเสริมสุขภาพ( 1 ) คำรามหมายถึงผลตอบแทนจัดสรรทรัพยากร ซึ่งหมายถึงว่าเราต้องวัดทั้งหมดที่จัดสรรทรัพยากร ไม่ใช่แค่ตรงออกจากค่าใช้จ่ายในกระเป๋า และยังส่งกลับทั้งหมด ไม่ใช่แค่การลดลงของค่าใช้จ่ายทางการแพทย์หรือผลลัพธ์ วัตถุประสงค์อื่น ๆ ปัจจัยเสียงยังหมายถึงเน้นโปรแกรมของเราในสิ่งที่ทำให้คนรู้สึกดี อะไรที่ทำให้พวกเขาต้องคำรามและวัดวิธีที่ดีที่เราทำในการช่วยให้ผู้คนรู้สึกดี

บทความนี้บรีfl Y อธิบายคุณลักษณะเฉพาะรวมในการประเมินที่รวบรวมปัจจัยเสียงคำราม มีความแตกต่างบางอย่างในแนวทางโดยรวมโครงสร้างการศึกษา วิธีการวิเคราะห์ข้อมูล และรายงานผลเป็นอย่างไรและใช้ แต่ความแตกต่างที่ใหญ่ที่สุดคือในสิ่งที่วัดและวิธีการวัด .แต่ละองค์ประกอบเหล่านี้คือ บรีfl Y ดู กับเน้นที่สิ่งที่และวิธีการวัดองค์ประกอบ

ความคิดเห็นเหล่านี้เป็นตัวแทนของการรวมกันของข้อเสนอแนะในทางปฏิบัติและปรัชญา Musings เกี่ยวกับสิ่งที่อาจจะกลายเป็นจริงได้ในอนาคต โปรดอดทนกับฉัน


โดยรวมแนวทางความต้องการวิธีการรวมจะต้องมีการรวมกันของการวิเคราะห์เชิงปริมาณและเชิงคุณภาพ .การวิเคราะห์เชิงปริมาณ จะมุ่งเน้นไปที่แบบดั้งเดิมมากขึ้นวัตถุประสงค์การวัดผล รวมทั้งการมีส่วนร่วม , ภาวะสุขภาพ , ค่าใช้จ่ายทางการแพทย์ , การผลิต , ฯลฯ วิเคราะห์เชิงคุณภาพจะเป็นมนุษย์เนื้อหลังตัวเลข รวมทั้งเหตุผลที่คนไม่ได้ และไม่ได้เข้าร่วมในโปรแกรม , ทำไมพวกเขาและไม่พอจึงเอ็ด ทำไมมันถูก หรือไม่ที่ประสบความสำเร็จในการเปลี่ยนพฤติกรรม