Skip to main content

Table 2 Summary of the quality appraisal of included studies by reviewer

From: A systematic review and synthesis of theories of change of school-based interventions integrating health and academic education as a novel means of preventing violence and substance use among students

Intervention name

Clarity

Plausibility and feasibility

Testability

Ownership

Generalisability

Overall score (%)

Constructs defined

Clear pathways from inputs to outcomes

Theory logical (pathways logical)

Empirical evidence in support of theory

Evidence of empirical testing of the theory

Theory developed by practitioners

Theory developed by community members

Theory presented as general

Theory describes its application to different contexts

Authors prevent evidence of a theory’s generalisability

CB

TT

CB

TT

CB

TT

CB

TT

CB

TT

CB

TT

CB

TT

CB

TT

CB

TT

CB

TT

 

4Rs

Aber 2011

N

N

N

Y

Y

Y

Y

Y

Y

Y

Y

Y

N

N

Y

N

Y

N

N

N

55

Brown 2010

Y

N

Y

N

Y

Y

Y

Y

Y

Y

Y

N

N

N

Y

N

Y

N

N

N

55

Flay 2009

Y

Y

Y

Y

Y

Y

N

N

Y

Y

Y

N

N

N

Y

Y

N

N

N

N

55

Jones 2008

Y

Y

N

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

Y

Y

N

Y

N

Y

70

Jones 2010

N

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

Y

Y

Y

N

Y

N

70

Jones 2011

N

Y

N

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

Y

Y

Y

N

N

N

60

Sung 2015

N

Y

N

N

N

Y

Y

N

Y

N

Y

N

N

N

Y

N

Y

N

N

N

35

Bullying Literature Project Couch 2015

N

N

N

N

N

N

Y

Y

Y

Y

N

N

N

N

Y

Y

N

N

N

N

30

Wang 2015

Y

Y

Y

Y

Y

Y

Y

N

Y

Y

N

N

N

N

Y

N

N

N

N

N

50

Wang 2017

Y

Y

Y

Y

Y

Y

Y

N

N

Y

N

N

N

N

N

Y

N

N

N

N

50

DRACON Malm 2007

N

Y

N

Y

Y

Y

N

N

N

Y

Y

Y

Y

N

Y

N

Y

N

Y

N

55

English classes (no name)

Holcomb 1993

N

Y

N

Y

N

Y

N

N

N

Y

Y

N

N

N

N

Y

Y

N

N

N

35

Hashish and Marijuana

Zoller, 1981

N

Y

N

Y

N

Y

N

N

Y

N

N

N

N

N

N

Y

N

N

N

N

25

I-LST

Bechtel 2006

N

N

N

N

Y

N

Y

N

Y

N

N

N

N

N

Y

Y

N

N

N

N

25

KAT

Segrott 2015

N

N

N

Y

N

Y

N

Y

Y

Y

N

N

N

N

Y

Y

N

N

N

N

35

Learning to Read in a Healing Classroom

Torrente 2015

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

N

Y

Y

Y

Y

90

Aber 2017

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

N

Y

Y

Y

Y

90

LIFT

DeGarmo 2009

Y

N

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

N

Y

Y

N

N

Y

N

60

Eddy 2000

N

N

N

Y

Y

Y

Y

N

Y

N

N

N

N

N

N

Y

N

Y

N

N

35

Eddy 2015

N

Y

Y

N

Y

Y

Y

Y

Y

Y

N

N

N

N

Y

Y

Y

N

N

N

55

Reid 1999

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

Y

Y

N

N

N

N

65

Reid 2002

N

N

N

Y

N

Y

Y

N

Y

Y

Y

N

N

N

Y

Y

Y

N

N

N

45

Peaceful Panels

Wales 2013

N

N

N

Y

N

N

N

N

N

N

Y

N

N

N

Y

N

N

N

N

N

15

Positive Action

Beets 2008

N

Y

N

Y

Y

Y

N

N

N

Y

N

N

N

N

Y

N

N

N

N

N

30

Beets 2009

N

N

N

N

N

N

Y

N

Y

N

N

N

N

N

Y

Y

N

N

N

N

20

Flay 2009

N

Y

N

Y

Y

Y

Y

Y

Y

Y

N

N

N

N

Y

Y

N

Y

N

Y

60

Flay 2010

N

Y

Y

Y

Y

Y

Y

N

Y

Y

Y

N

N

N

Y

Y

Y

N

N

N

60

Lewis 2012

N

Y

N

Y

N

Y

N

N

Y

N

N

N

N

N

N

Y

N

N

N

N

25

Malloy 2014

N

N

N

N

N

Y

N

N

Y

Y

N

N

N

N

Y

Y

N

N

N

N

25

Malloy 2015

N

N

N

N

N

Y

N

N

Y

Y

N

N

N

N

Y

Y

N

N

N

N

25

PATHS

Crean 2013

N

Y

N

Y

Y

Y

Y

N

Y

Y

N

N

N

N

Y

Y

N

N

N

N

45

Flay 2009

Y

Y

N

N

N

N

Y

Y

Y

N

N

N

N

N

Y

Y

N

N

N

N

35

Greenberg 2006

Y

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

N

N

Y

Y

N

N

Y

N

60

Kusché 2012

N

Y

Y

N

Y

Y

Y

N

Y

N

N

N

N

N

Y

Y

N

N

Y

N

45

Raising Healthy Children

Brown 2005

N

Y

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

N

Y

Y

Y

N

N

N

60

Catalano 2003

Y

N

Y

N

Y

N

Y

N

Y

Y

N

N

N

N

Y

Y

N

N

N

N

40

Roots of Empathy

Cain 2008

N

Y

N

Y

Y

Y

Y

N

N

N

Y

N

N

N

Y

Y

N

N

N

N

40

Gordon 2003

N

Y

N

N

N

Y

Y

N

Y

Y

Y

N

N

N

Y

Y

N

N

N

Y

45

Hanson 2008

N

N

Y

N

Y

Y

Y

N

Y

Y

Y

N

N

N

Y

Y

N

N

Y

N

50

Second Step

Espelage 2013

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

N

N

N

N

N

60

Espelage 2015a

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

N

N

N

N

N

60

Espelage 2015b

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

N

N

N

N

N

60

Farrell 2015

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

N

N

N

N

N

60

Low 2016

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

N

N

N

N

N

60

Steps to Respect

Brown 2011

Y

Y

Y

N

Y

N

Y

Y

Y

Y

N

N

N

N

Y

Y

N

N

Y

N

55

Frey 2009

N

Y

Y

Y

Y

Y

Y

Y

Y

Y

N

N

N

N

Y

Y

N

N

N

N

55

The Gatehouse Project

Bond 2008

N

N

N

Y

Y

Y

N

N

Y

Y

N

N

N

N

Y

Y

N

N

N

N

35

Patton 2000

N

Y

N

Y

Y

Y

Y

N

Y

N

N

Y

N

Y

Y

Y

Y

N

Y

N

60

Patton 2003

N

N

N

N

N

N

Y

N

Y

N

N

N

N

N

Y

Y

N

N

N

N

20

Youth Matters Jenson 2007

N

Y

N

Y

Y

Y

N

N

Y

Y

N

N

N

N

Y

Y

N

N

N

N

40