Inclusivity Bugs in Online Courseware: A Field Study
Inclusivity Bugs in Online Courseware: A Field Study
复制标题
在线课件中的包容性错误：实地研究
DOI：
10.1145/3501385.3543973
复制
发表时间：
2022
期刊：
影响因子：
--
通讯作者：
Burnett, Margaret
中科院分区：
文献类型：
--
作者：
Chatterjee, Amreeta;Letaw, Lara;Garcia, Rosalinda;Reddy, Doshna Umma;Choudhuri, Rudrajit;Kumar, Sabyatha Sathish;Morreale, Patricia;Sarma, Anita;Burnett, Margaret
动机：尽管异步在线计算机科学课程使更多不同的人群能够接受计算机科学高等教育，但研究表明，在线计算机科学教育远非包容性，女性和其他未被充分代表的群体继续面临包容性差距。更糟糕的是，CS-ed的多样性/包容性研究在很大程度上忽视了在线课件——充斥在线学习平台的网页和课程材料——它们构成了异步在线CS-ed唯一的课程交付机制。目的：为了研究CS-ed的包容性，我们对在线CS教师进行了为期三个阶段的实地研究，并提出了三个研究问题：(1)在线CS-ed课件是否存在包容性缺陷、如何存在以及在哪里存在包容性缺陷；(2)自动化工具能否检测到；(3)在线计算机科学教师将如何利用这种工具。方法：在研究的第一阶段，我们帮助在线CS教师在两门在线CS课程中使用GenderMag（一种包容性设计方法）来发现他们自己的课件的包容性缺陷。在第二阶段，我们使用了GenderMag自动包容性检测器（AID）工具的一个变体来自动定位此类课件包容性错误的“垂直切片”，并评估了该工具的准确性。在第三阶段，我们调查了在线CS教师如何使用该工具在他们自己的课件中发现包容性错误。结果：9门在线CS课程的在线课件中存在6类共29个包容性漏洞；表明该工具在发现此类错误方面达到了75%的准确率；并揭示了一个工具如何帮助在线计算机科学教师发现对他们自己的课件的假设，使其更具包容性的新见解。启示：作为第一个调查在线计算机课件中认知和性别包容性错误的存在和类型以及自动化工具是否可以发现它们的研究，我们的研究结果揭示了如何使在线计算机教育成为一个更具包容性的虚拟环境的新可能性。
Motivation: Although asynchronous online CS courses have enabled more diverse populations to access CS higher education, research shows that online CS-ed is far from inclusive, with women and other underrepresented groups continuing to face inclusion gaps. Worse, diversity/inclusion research in CS-ed has largely overlooked the online courseware—the web pages and course materials that populate the online learning platforms—that constitute asynchronous online CS-ed’s only mechanism of course delivery.Objective: To investigate this aspect of CS-ed’s inclusivity, we conducted a three-phase field study with online CS faculty, with three research questions: (1) whether, how, and where online CS-ed’s courseware has inclusivity bugs; (2) whether an automated tool can detect them; and (3) how online CS faculty would make use of such a tool.Method: In the study’s first phase, we facilitated online CS faculty members’ use of GenderMag (an inclusive design method) on two online CS courses to find their own courseware’s inclusivity bugs. In the second phase, we used a variant of the GenderMag Automated Inclusivity Detector (AID) tool to automatically locate a “vertical slice” of such courseware inclusivity bugs, and evaluated the tool’s accuracy. In the third phase, we investigated how online CS faculty used the tool to find inclusivity bugs in their own courseware.Results: The results revealed 29 inclusivity bugs spanning 6 categories in the online courseware of 9 online CS courses; showed that the tool achieved an accuracy of 75% at finding such bugs; and revealed new insights into how a tool could help online CS faculty uncover assumptions about their own courseware to make it more inclusive.Implications: As the first study to investigate the presence and types of cognitive- and gender-inclusivity bugs in online CS courseware and whether an automated tool can find them, our results reveal new possibilities for how to make online CS education a more inclusive virtual environment for gender-diverse students.
登录
查看更多内容
在线课程中的偏见：来自现场实验的证据
影响因子：
2.2
作者：
Rachel B. Baker;T. Dee;Brent J. Evans;J. John
通讯作者：
J. John
使用代码分析的移动应用程序可用性评估框架
DOI：
--
发表时间：
2018
期刊：
International Conference on Evaluation & Assessment in Software Engineering
影响因子：
--
作者：
Neeraj Mathur;Sai Anirudh Karre;Y. R. Reddy
通讯作者：
Y. R. Reddy
USEFul：通过自动评估使网站可用性主流化的框架
DOI：
--
发表时间：
2012
期刊：
影响因子：
--
作者：
A. Dingli;J. Mifsud
通讯作者：
J. Mifsud
DOI：
10.1145/3408877.3432396
发表时间：
2021-03
期刊：
Proceedings of the 52nd ACM Technical Symposium on Computer Science Education
影响因子：
--
作者：
Brianna Dym;Namita Pasupuleti;Cole Rockwood;Casey Fiesler
通讯作者：
Brianna Dym;Namita Pasupuleti;Cole Rockwood;Casey Fiesler
入门编程中的性别差异：慕课和本地课程的比较
DOI：
10.1145/3328778.3366852
发表时间：
2020
期刊：
Proceedings of the 51st ACM Technical Symposium on Computer Science Education
影响因子：
--
作者：
Rodrigo Duran;Lassi Haaranen;Arto Hellas
通讯作者：
Arto Hellas