EM Analysis

Back to Equivalent Mutants Benchmark

Min EQ-Case 2.2:

ROR: Mut_0

Min EQ-Case 3.1:

UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7

Bubble EQ-Case 3.1:

AOR: Mut_0, Mut_1
ROR: Mut_0

Bubble EQ-Case 3.2:

UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5

Profit EQ-Case 2.2:

ABS: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11
AOR: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4

Profit EQ-Case 2.3:

ROR: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4

Profit EQ-Case 3.1:

UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20, Mut_21, Mut_22, Mut_23

Mid EQ-Case 2.3:

ROR: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4

Mid EQ-Case 3.1:

UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13

Prime EQ-Case 2.2:

ABS: Mut_0, Mut_1, Mut_2
ROR: Mut_0, Mut_1

Prime EQ-Case 3.1:

AOR: Mut_0, Mut_1
UOI: Mut_0, Mut_1

Triangle EQ-Case 2.2:

ABS: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8
ROR: Mut_0, Mut_1, Mut_2, Mut_3

Triangle EQ-Case 3.1:

ROR: Mut_0, Mut_1, Mut_2
UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11

Triangle EQ-Case 3.2:

UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11

Insert EQ-Case 2.2:

ABS: Mut_0, Mut_1

Insert EQ-Case 3.1:

ROR: Mut_0
UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7

Insert EQ-Case 3.2:

UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7

Day EQ-Case 2.2:

ABS: Mut_0, Mut_1
ROR: Mut_0, Mut_1, Mut_2, Mut_3

Day EQ-Case 3.1:

UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7

Calendar EQ-Case 2.2:

ABS: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10,
ROR: Mut_0, Mut_1, Mut_2, Mut_3

Calendar EQ-Case 3.1:

UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15

Carsimulator EQ-Case 2.2:

ABS: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4
AOR: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6
ROR: Mut_0

Carsimulator EQ-Case 2.3:

ROR: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6

Carsimulator EQ-Case 3.1:

UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20, Mut_21, Mut_22, Mut_23

Tcas EQ-Case 1.2:

ROR: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19
UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20, Mut_21, Mut_22, Mut_23

Tcas EQ-Case 2.2:

ABS: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20, Mut_21, Mut_22, Mut_23, Mut_24, Mut_25

Tcas EQ-Case 3.1:

ROR: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19

Defroster EQ-Case 1.2:

ROR: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20, Mut_21, Mut_22, Mut_23, Mut_24, Mut_25, Mut_26, Mut_27, Mut_28, Mut_29
UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20, Mut_21, Mut_22, Mut_23

Defroster EQ-Case 2.2:

ABS: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5
AOR: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13
ROR: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20

Defroster EQ-Case 3.1:

UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20, Mut_21, Mut_22, Mut_23, Mut_24, Mut_25, Mut_26, Mut_27, Mut_28, Mut_29, Mut_30, Mut_31, Mut_32, Mut_33, Mut_34, Mut_35, Mut_36, Mut_37, Mut_38, Mut_39, Mut_40, Mut_41, Mut_42, Mut_43, Mut_44, Mut_45, Mut_46, Mut_47

Schedule EQ-Case 2.2:

ABS: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20, Mut_21, Mut_22, Mut_23, Mut_24, Mut_25
ROR: Mut_0, Mut_1

Schedule EQ-Case 3.1:

UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19

Hashmap EQ-Case 2.2:

ABS: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19
ROR: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6
UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19

Hashmap EQ-Case 3.1:

UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19

Replace EQ-Case 2.2:

ABS: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20, Mut_21, Mut_22, Mut_23, Mut_24, Mut_25, Mut_26, Mut_27, Mut_28, Mut_29, Mut_30, Mut_31, Mut_32, Mut_33, Mut_34, Mut_35, Mut_36, Mut_37, Mut_38, Mut_39, Mut_40, Mut_41, Mut_42, Mut_43, Mut_44, Mut_45, Mut_46, Mut_47, Mut_48, Mut_49, Mut_50, Mut_51, Mut_52, Mut_53, Mut_54, Mut_55, Mut_56, Mut_57, Mut_58, Mut_59, Mut_60, Mut_61, Mut_62, Mut_63, Mut_64, Mut_65, Mut_66, Mut_67, Mut_68, Mut_69, Mut_70, Mut_71, Mut_72, Mut_73, Mut_74, Mut_75, Mut_76, Mut_77, Mut_78, Mut_79, Mut_80, Mut_81, Mut_82, Mut_83, Mut_84, Mut_85, Mut_86, Mut_87, Mut_88, Mut_89, Mut_90, Mut_91, Mut_92, Mut_93, Mut_94, Mut_95, Mut_96, Mut_97, Mut_98, Mut_99, Mut_100, Mut_101, Mut_102, Mut_103, Mut_104, Mut_105, Mut_106, Mut_107, Mut_108, Mut_109, Mut_110, Mut_111, Mut_112, Mut_113, Mut_114, Mut_115, Mut_116, Mut_117, Mut_118, Mut_119, Mut_120, Mut_121, Mut_122, Mut_123, Mut_124, Mut_125, Mut_126, Mut_127, Mut_128, Mut_129, Mut_130
ROR: Mut_0, Mut_1, Mut_2, Mut_3

Replace EQ-Case 3.1:

LCR: Mut_0, Mut_1
UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20, Mut_21, Mut_22, Mut_23, Mut_24, Mut_25, Mut_26, Mut_27, Mut_28, Mut_29, Mut_30, Mut_31, Mut_32, Mut_33, Mut_34, Mut_35, Mut_36, Mut_37, Mut_38, Mut_39, Mut_40, Mut_41, Mut_42, Mut_43, Mut_44, Mut_45, Mut_46, Mut_47, Mut_48, Mut_49, Mut_50, Mut_51, Mut_52, Mut_53, Mut_54, Mut_55, Mut_56, Mut_57, Mut_58, Mut_59, Mut_60, Mut_61, Mut_62, Mut_63, Mut_64, Mut_65, Mut_66, Mut_67, Mut_68, Mut_69, Mut_70, Mut_71, Mut_72, Mut_73, Mut_74, Mut_75, Mut_76, Mut_77

Space EQ-Case 2.2:

ABS: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20, Mut_21, Mut_22, Mut_23, Mut_24, Mut_25, Mut_26, Mut_27, Mut_28, Mut_29, Mut_30, Mut_31, Mut_32, Mut_33, Mut_34, Mut_35, Mut_36, Mut_37, Mut_38, Mut_39
ROR: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20, Mut_21, Mut_22, Mut_23, Mut_24, Mut_25, Mut_26, Mut_27, Mut_28, Mut_29, Mut_30, Mut_31

Space EQ-Case 2.3:

ROR: Mut_0

Space EQ-Case 3.1:

UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13

Flex EQ-Case 2.2:

ABS: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20, Mut_21, Mut_22, Mut_23
ROR: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15

Make EQ-Case 2.2:

ABS: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20
ROR: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10

Make EQ-Case 3.1:

UOI: Mut_0, Mut_1, Mut_2, Mut_3, Mut_4, Mut_5, Mut_6, Mut_7, Mut_8, Mut_9, Mut_10, Mut_11, Mut_12, Mut_13, Mut_14, Mut_15, Mut_16, Mut_17, Mut_18, Mut_19, Mut_20, Mut_21, Mut_22, Mut_23, Mut_24, Mut_25, Mut_26, Mut_27

Paper

A preprint version of the paper can be download from here.

@inproceedings{YaoHJ14,
 author = {Yao, Xiangjuan and Harman, Mark and Jia, Yue},
 title = {A Study of Equivalent and Stubborn Mutation Operators Using Human Analysis of Equivalence},
 booktitle = {Proceedings of the 36th International Conference on Software Engineering},
 series = {ICSE 2014},
 year = {2014},
 isbn = {978-1-4503-2756-5},
 location = {Hyderabad, India},
 pages = {919--930},
 numpages = {12},
 url = {http://doi.acm.org/10.1145/2568225.2568265},
 doi = {10.1145/2568225.2568265},
 publisher = {ACM},
 keywords = {Equivalent Mutant, Mutation Testing, Stubborn Mutant},
}

Contact

yue.jia@ucl.ac.uk

2012-2013 © Xiangjuan Yao, Mark Harman and Yue Jia