Software engineering collaboratories (SEClabs) and collaboratories as a service (CaaS)
Software engineering collaboratories (SEClabs) and collaboratories as a service (CaaS)
复制标题
软件工程合作实验室 (SEClabs) 和合作实验室即服务 (CaaS)
DOI：
10.1145/3236024.3264839
复制
发表时间：
2018
期刊：
影响因子：
--
通讯作者：
Dyer, Robert
中科院分区：
文献类型：
--
作者：
Sherman, Elena;Dyer, Robert
新的研究思路需要强有力的评估。现代软件工程研究评估通常需要一套基准程序。开源软件库为研究人员提供了一个很好的机会，可以在他们的评估中找到这样的程序。已经开发了许多工具/技术来帮助自动化管理开放源码软件。还鼓励研究人员提供他们的研究成果，这样其他研究人员就可以很容易地复制结果。我们认为，这两个趋势(即，为研究评估策划开放源码软件和提供研究成果)推动了对软件工程师协作室(SECLabs)的需求。我们设想研究社区聚集在一起创建SECLab实例，在这些实例中，研究成果可以向其他研究人员公开。然后，社区可以审查这些构件，并将它们作为服务提供，从而将协作室转变为合作实验室即服务(CAAS)。如果我们的愿景实现，研究的速度和透明度将大幅提高。
Novel research ideas require strong evaluations. Modern software engineering research evaluation typically requires a set of benchmark programs. Open source software repositories have provided a great opportunity for researchers to find such programs for use in their evaluations. Many tools/techniques have been developed to help automate the curation of open source software. There has also been encouragement for researchers to provide their research artifacts so that other researchers can easily reproduce the results. We argue that these two trends (i.e., curating open source software for research evaluation and the providing of research artifacts) drive the need for Software Engineer Collaboratories (SEClabs). We envision research communities coming together to create SEClab instances, where research artifacts can be made publicly available to other researchers. The community can then vet such artifacts and make them available as a service, thus turning the collaboratory into a Collaboratory as a Service (CaaS). If our vision is realized, the speed and transparency of research will drastically increase.
迈向自动化基准管理系统
DOI：
--
发表时间：
2016
期刊：
SOAP@PLDI
影响因子：
--
作者：
Lisa Nguyen Quang Do;Michael Eichberg;E. Bodden
通讯作者：
E. Bodden
SPECjvm98 Java 基准测试的分配行为研究
DOI：
--
发表时间：
1999
期刊：
European Conference on Object-Oriented Programming
影响因子：
--
作者：
Sylvia Dieckmann;Urs Hölzle
通讯作者：
Urs Hölzle
Hermes：评估和创建有效的测试语料库
DOI：
10.1145/3088515.3088523
发表时间：
2017
期刊：
Proceedings of the 6th ACM SIGPLAN International Workshop on State Of the Art in Program Analysis
影响因子：
--
作者：
Michael Reif;Michael Eichberg;Ben Hermann;M. Mezini
通讯作者：
M. Mezini