Enhancing external validity in existing STEM evaluations

提高现有 STEM 评估的外部有效性

基本信息

  • 批准号:
    1335843
  • 负责人:
  • 金额:
    $ 79.62万
  • 依托单位:
  • 依托单位国家:
    美国
  • 项目类别:
    Standard Grant
  • 财政年份:
    2013
  • 资助国家:
    美国
  • 起止时间:
    2013-10-01 至 2017-09-30
  • 项目状态:
    已结题

项目摘要

In light of increasing accountability pressures, the PI proposes to develop, describe and test statistical methods for reducing external validity bias in random assignment evaluations of STEM programs carried out in a non-representative samples of sites. A series of simulations will be conducted using real-world information to test the conditions under which different statistical methods can reduce the external validity bias.The methodological approach examines real world data from four kinds of studies: regression with interactions; Bayesian additive regression trees (BART); inverse probablility of selection weighting (IPSW); and Subclassification.The use of real world data in the proposed simulation studies will test the efficacy of each in reducing such bias. Four products will result from the work that will be highly useful to STEM evaluators and researchers: (1) a better understanding of the types of schools and districts that participate in impact evaluation; (2) analysis methods that researchers can use to improve the external validity of existing evaluations; (3) guidance on types of data to collect in future evaluations; and a data set and framework researchers can use to conduct simulation studies to investigate other methodological questions.
鉴于问责压力的增加,PI建议开发,描述和测试统计方法,以减少在非代表性样本中进行的STEM项目随机分配评估中的外部有效性偏差。 本研究将利用真实世界的数据进行一系列的模拟实验,以检验不同统计方法在何种条件下可以减少外部效度偏差,方法学方法主要考察了来自四种研究的真实的真实世界数据:交互作用回归、贝叶斯加性回归树(BART)、选择加权逆概率(IPSW)、贝叶斯加性回归树(BART)、贝叶斯加性回归树(BART)和贝叶斯加性回归树(IPSW)。在所提出的模拟研究中使用真实的世界数据将测试每一个在减少这种偏差方面的功效。这项工作将产生四个对STEM评估人员和研究人员非常有用的产品:(1)更好地了解参与影响评估的学校和地区的类型;(2)研究人员可以用来提高现有评估的外部有效性的分析方法;(3)关于未来评估中收集的数据类型的指导;(4)关于评估的数据类型的指导。以及一个数据集和框架,研究人员可以用来进行模拟研究,以调查其他方法学问题。

项目成果

期刊论文数量(0)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

Elizabeth Stuart其他文献

Who Are We Missing? A Principled Approach to Characterizing the Underrepresented Population
我们缺少谁?
  • DOI:
    10.48550/arxiv.2401.14512
  • 发表时间:
    2024
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Harsh Parikh;Rachael Ross;Elizabeth Stuart;Kara E. Rudolph
  • 通讯作者:
    Kara E. Rudolph
Understanding recent market trends of the US ESCO industry
  • DOI:
    10.1007/s12053-018-9633-9
  • 发表时间:
    2018-03-01
  • 期刊:
  • 影响因子:
    4.000
  • 作者:
    Elizabeth Stuart;Juan Pablo Carvallo;Peter H. Larsen;Charles A. Goldman;Donald Gilligan
  • 通讯作者:
    Donald Gilligan
I Don't Want Someone Like You Taking Care of My Child: Identifying Strategies to Address Discrimination Toward Physicians by Patients and Families
  • DOI:
    10.1016/j.acap.2015.04.020
  • 发表时间:
    2015-07-01
  • 期刊:
  • 影响因子:
  • 作者:
    Emily E. Whitgob;Alyssa Bogetz;Elizabeth Stuart;Rebecca Blankenburg
  • 通讯作者:
    Rebecca Blankenburg
5. Paving the Way to Practice-Based Learning and Improvement: Students' Experiences with a Competency-Based Sub-Internship Curriculum
  • DOI:
    10.1016/j.acap.2009.05.011
  • 发表时间:
    2009-07-01
  • 期刊:
  • 影响因子:
  • 作者:
    Michele Long;Elizabeth Stuart
  • 通讯作者:
    Elizabeth Stuart
W160 - Application of Causal Forest Model to Examine Treatment Effect Heterogeneity in Substance Use Disorder Psychosocial Treatments
W160 - 因果森林模型在物质使用障碍心理社会治疗中检查治疗效果异质性的应用
  • DOI:
    10.1016/j.drugalcdep.2024.112102
  • 发表时间:
    2025-02-01
  • 期刊:
  • 影响因子:
    3.600
  • 作者:
    Ryoko Susukida;Masoumeh Amin-Esmaeili;Elena Badillo-Goicoechea;Trang Nguyen;Elizabeth Stuart;Michael Rosenblum;Kelly Dunn;Ramin Mojtabai;Ramin Mojtabai
  • 通讯作者:
    Ramin Mojtabai

Elizabeth Stuart的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('Elizabeth Stuart', 18)}}的其他基金

Genetic and Immunological Analysis of Gas Vesicles in Halobacterium Halobium
盐杆菌气体囊泡的遗传和免疫学分析
  • 批准号:
    9221144
  • 财政年份:
    1993
  • 资助金额:
    $ 79.62万
  • 项目类别:
    Continuing Grant

相似国自然基金

考虑外源变量的空间copula插值模型的开发及其在降雨和地下水水质插值上的验证
  • 批准号:
    41101020
  • 批准年份:
    2011
  • 资助金额:
    28.0 万元
  • 项目类别:
    青年科学基金项目

相似海外基金

Approaches toward External Validity of Randomized Controlled Trials in the Social Sciences
社会科学中随机对照试验的外部有效性方法
  • 批准号:
    2318659
  • 财政年份:
    2023
  • 资助金额:
    $ 79.62万
  • 项目类别:
    Standard Grant
External Review Letters in Promotion and Tenure Decision Making: Validity and Fairness
晋升和任期决策中的外部审查信:有效性和公平性
  • 批准号:
    2100034
  • 财政年份:
    2021
  • 资助金额:
    $ 79.62万
  • 项目类别:
    Continuing Grant
DEVELOPING EVIDENCE-BASED CLINICAL TOOLS FOR MANAGING MILD HEARING LOSS IN CHILDREN
开发循证临床工具来治疗儿童轻度听力损失
  • 批准号:
    10216215
  • 财政年份:
    2020
  • 资助金额:
    $ 79.62万
  • 项目类别:
DEVELOPING EVIDENCE-BASED CLINICAL TOOLS FOR MANAGING MILD HEARING LOSS IN CHILDREN
开发循证临床工具来治疗儿童轻度听力损失
  • 批准号:
    10438665
  • 财政年份:
    2020
  • 资助金额:
    $ 79.62万
  • 项目类别:
DEVELOPING EVIDENCE-BASED CLINICAL TOOLS FOR MANAGING MILD HEARING LOSS IN CHILDREN
开发循证临床工具来治疗儿童轻度听力损失
  • 批准号:
    10645078
  • 财政年份:
    2020
  • 资助金额:
    $ 79.62万
  • 项目类别:
DEVELOPING EVIDENCE-BASED CLINICAL TOOLS FOR MANAGING MILD HEARING LOSS IN CHILDREN
开发循证临床工具来治疗儿童轻度听力损失
  • 批准号:
    10044253
  • 财政年份:
    2020
  • 资助金额:
    $ 79.62万
  • 项目类别:
External validity in economic experiments: can students be used to approximate the behavior of farmers?
经济实验中的外部效度:可以用学生来模拟农民的行为吗?
  • 批准号:
    388911356
  • 财政年份:
    2018
  • 资助金额:
    $ 79.62万
  • 项目类别:
    Research Grants
Improving external validity of stated choice experiments
提高规定选择实验的外部有效性
  • 批准号:
    DP180103718
  • 财政年份:
    2018
  • 资助金额:
    $ 79.62万
  • 项目类别:
    Discovery Projects
The Internal Validity of External Validity: Using Experiments to Validate Three Approaches to Extrapolating Causal Inferences Beyond the Cutoff in Regression Discontinuity
外部有效性的内部有效性:使用实验验证三种方法来推断超出回归不连续性截止值的因果推论
  • 批准号:
    1544301
  • 财政年份:
    2015
  • 资助金额:
    $ 79.62万
  • 项目类别:
    Standard Grant
The External Validity of the Sociological Laboratory Experiment
社会学实验室实验的外部效度
  • 批准号:
    278874322
  • 财政年份:
    2015
  • 资助金额:
    $ 79.62万
  • 项目类别:
    Research Grants
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了