BioASQ Participants Area

Task 11b: Test Results of Phase A

* The "-" replace the scores of systems that didn't submit the corresponding annotations. *
The test results are presented in separate tables for each type of annotation. They are sorted based on the scores of MAP. The "System Description" of each system is used.
The evaluation measures that are used are presented here .

Test batch 1

Documents

System	Mean precision	Recall	F-Measure	MAP	GMAP
ES and reranking	0.1493	0.3736	0.1641	0.0995	0.0056
ES and reranking 2	0.2129	0.1951	0.1674	0.1074	0.0007
New minimize func	0.1333	0.3472	0.1455	0.0871	0.0043
OWLMan-phaseB-V1	-	-	-	-	-
UR-IW-2	0.2290	0.3529	0.2369	0.3058	0.0046
Fleming-3	0.1600	0.5764	0.2062	0.4254	0.0570
Fleming-4	0.1600	0.5764	0.2062	0.4257	0.0577
bioinfo-0	0.3052	0.6100	0.3381	0.5053	0.1014
bioinfo-1	0.3085	0.6004	0.3365	0.5057	0.0920
bioinfo-2	0.2471	0.6144	0.2837	0.5132	0.1235
bioinfo-3	0.2712	0.6220	0.3075	0.5075	0.1134
dmiip1	0.2347	0.6248	0.2622	0.5001	0.1234
dmiip2	0.2400	0.6201	0.2633	0.5222	0.1253
dmiip3	0.2547	0.6559	0.2801	0.5576	0.1520
dmiip4	0.2387	0.5952	0.2596	0.4940	0.0809
dmiip5	0.2587	0.6469	0.2823	0.5577	0.1350
UR-IW-3	0.1901	0.2966	0.2068	0.2410	0.0028
Fleming-2	0.1600	0.5800	0.2079	0.4109	0.0402
UR-IW-5	0.1913	0.2492	0.1943	0.1962	0.0011
Fleming-1	0.1587	0.5796	0.2072	0.4103	0.0403
MindLab QA Reloaded	0.2362	0.4677	0.2513	0.2247	0.0166
UR-IW-4	0.1967	0.2676	0.2001	0.2012	0.0015
Deep ML methods for	0.2067	0.5695	0.2299	0.2400	0.0299
MindLab QA System	0.2820	0.3369	0.2692	0.2631	0.0039
MindLab QA System ++	0.2820	0.3369	0.2692	0.2631	0.0039
MindLab Red Lions++	0.2389	0.4002	0.2341	0.1974	0.0087
bioinfo-4	0.2516	0.6035	0.2840	0.4894	0.0939
A&Q	0.1427	0.4814	0.1733	0.2931	0.0115
IRIS_4	0.0013	0.0019	0.0016	0.0004	0.0000
A&Q4	0.2147	0.6097	0.2440	0.5122	0.1473
A&Q2	0.1747	0.5378	0.2069	0.3995	0.0465
A&Q3	0.2147	0.6097	0.2440	0.5122	0.1473
A&Q5	0.2107	0.6026	0.2396	0.5084	0.1296

Snippets

System	Mean precision	Recall	F-Measure	MAP	GMAP
ES and reranking	0.0884	0.0899	0.0561	0.0730	0.0002
ES and reranking 2	0.0884	0.0899	0.0561	0.0730	0.0002
New minimize func	0.0884	0.0899	0.0561	0.0730	0.0002
OWLMan-phaseB-V1	-	-	-	-	-
UR-IW-2	0.1138	0.0680	0.0706	0.0973	0.0004
Fleming-3	-	-	-	-	-
Fleming-4	-	-	-	-	-
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
bioinfo-3	-	-	-	-	-
dmiip1	0.2227	0.4227	0.2220	0.5149	0.0549
dmiip2	0.2443	0.4418	0.2384	0.5260	0.0686
dmiip3	0.2434	0.4668	0.2424	0.5531	0.0768
dmiip4	0.2381	0.4461	0.2381	0.5252	0.0566
dmiip5	0.2384	0.4401	0.2338	0.5352	0.0673
UR-IW-3	-	-	-	-	-
Fleming-2	-	-	-	-	-
UR-IW-5	-	-	-	-	-
Fleming-1	-	-	-	-	-
MindLab QA Reloaded	0.1688	0.2049	0.1362	0.1906	0.0093
UR-IW-4	-	-	-	-	-
Deep ML methods for	0.1694	0.1642	0.1266	0.1978	0.0027
MindLab QA System	0.1714	0.1373	0.1214	0.1702	0.0012
MindLab QA System ++	0.1714	0.1373	0.1214	0.1702	0.0012
MindLab Red Lions++	0.1690	0.1943	0.1295	0.1791	0.0054
bioinfo-4	-	-	-	-	-
A&Q	-	-	-	-	-
IRIS_4	-	-	-	-	-
A&Q4	-	-	-	-	-
A&Q2	-	-	-	-	-
A&Q3	-	-	-	-	-
A&Q5	-	-	-	-	-

Concepts

System	Mean precision	Recall	F-Measure	MAP	GMAP
ES and reranking	-	-	-	-	-
ES and reranking 2	-	-	-	-	-
New minimize func	-	-	-	-	-
OWLMan-phaseB-V1	-	-	-	-	-
UR-IW-2	-	-	-	-	-
Fleming-3	-	-	-	-	-
Fleming-4	-	-	-	-	-
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
bioinfo-3	-	-	-	-	-
dmiip1	-	-	-	-	-
dmiip2	-	-	-	-	-
dmiip3	-	-	-	-	-
dmiip4	-	-	-	-	-
dmiip5	-	-	-	-	-
UR-IW-3	-	-	-	-	-
Fleming-2	-	-	-	-	-
UR-IW-5	-	-	-	-	-
Fleming-1	-	-	-	-	-
MindLab QA Reloaded	-	-	-	-	-
UR-IW-4	-	-	-	-	-
Deep ML methods for	-	-	-	-	-
MindLab QA System	-	-	-	-	-
MindLab QA System ++	-	-	-	-	-
MindLab Red Lions++	-	-	-	-	-
bioinfo-4	-	-	-	-	-
A&Q	-	-	-	-	-
IRIS_4	-	-	-	-	-
A&Q4	-	-	-	-	-
A&Q2	-	-	-	-	-
A&Q3	-	-	-	-	-
A&Q5	-	-	-	-	-

RDF Triples

System	Mean precision	Recall	F-Measure	MAP	GMAP
ES and reranking	-	-	-	-	-
ES and reranking 2	-	-	-	-	-
New minimize func	-	-	-	-	-
OWLMan-phaseB-V1	-	-	-	-	-
UR-IW-2	-	-	-	-	-
Fleming-3	-	-	-	-	-
Fleming-4	-	-	-	-	-
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
bioinfo-3	-	-	-	-	-
dmiip1	-	-	-	-	-
dmiip2	-	-	-	-	-
dmiip3	-	-	-	-	-
dmiip4	-	-	-	-	-
dmiip5	-	-	-	-	-
UR-IW-3	-	-	-	-	-
Fleming-2	-	-	-	-	-
UR-IW-5	-	-	-	-	-
Fleming-1	-	-	-	-	-
MindLab QA Reloaded	-	-	-	-	-
UR-IW-4	-	-	-	-	-
Deep ML methods for	-	-	-	-	-
MindLab QA System	-	-	-	-	-
MindLab QA System ++	-	-	-	-	-
MindLab Red Lions++	-	-	-	-	-
bioinfo-4	-	-	-	-	-
A&Q	-	-	-	-	-
IRIS_4	-	-	-	-	-
A&Q4	-	-	-	-	-
A&Q2	-	-	-	-	-
A&Q3	-	-	-	-	-
A&Q5	-	-	-	-	-

Test batch 2

Documents

System	Mean precision	Recall	F-Measure	MAP	GMAP
OWLMan-phaseB-V1	-	-	-	-	-
ES and reranking	0.1773	0.2830	0.1603	0.1055	0.0056
ES and reranking 2	0.2356	0.2150	0.1772	0.1252	0.0036
New minimize func	0.1853	0.2944	0.1638	0.1355	0.0062
New minimize func 2	0.2213	0.1253	0.1212	0.1020	0.0009
UR-IW-3	0.2370	0.3019	0.2108	0.2364	0.0092
Milvus	0.1933	0.2019	0.1548	0.2263	0.0037
Fleming-4	0.1853	0.4685	0.2043	0.3361	0.0382
Fleming-3	0.1947	0.4610	0.2072	0.3700	0.0412
A&Q	0.1987	0.4428	0.2079	0.3494	0.0255
A&Q2	0.1747	0.3728	0.1761	0.2339	0.0111
A&Q3	0.2493	0.5148	0.2509	0.4541	0.0931
A&Q4	0.1720	0.4213	0.1849	0.3565	0.0151
A&Q5	0.2547	0.5163	0.2536	0.4581	0.1142
MindLab QA Reloaded	0.2539	0.2579	0.1838	0.1841	0.0065
Deep ML methods for	0.2318	0.2642	0.1766	0.1940	0.0055
IRIS_4	0.1640	0.3796	0.1703	0.2653	0.0262
dmiip1	0.3000	0.5441	0.2916	0.4878	0.1269
dmiip2	0.3120	0.5518	0.3010	0.4957	0.1297
dmiip3	0.2933	0.5378	0.2867	0.4939	0.1265
dmiip4	0.3053	0.5468	0.2968	0.4969	0.1278
dmiip5	0.2973	0.5435	0.2899	0.4812	0.1088
bioinfo-0	0.2841	0.4993	0.2913	0.4244	0.0858
bioinfo-1	0.3014	0.5137	0.3054	0.4533	0.0926
bioinfo-2	0.2493	0.5198	0.2587	0.4092	0.0861
bioinfo-3	0.2413	0.5064	0.2484	0.4042	0.0949
Fleming-2	0.1747	0.4142	0.1882	0.2959	0.0266
UR-IW-4	0.2185	0.3169	0.1880	0.2448	0.0124
bioinfo-4	0.2640	0.5324	0.2704	0.4582	0.0985
MindLab QA System	0.2283	0.2835	0.1876	0.1661	0.0063
MindLab QA System ++	0.1750	0.2766	0.1575	0.1363	0.0047
MindLab Red Lions++	0.2271	0.3308	0.1926	0.1948	0.0076
Fleming-1	0.1773	0.4603	0.2008	0.3409	0.0246

Snippets

System	Mean precision	Recall	F-Measure	MAP	GMAP
OWLMan-phaseB-V1	-	-	-	-	-
ES and reranking	0.1366	0.0821	0.0820	0.1181	0.0004
ES and reranking 2	0.1366	0.0821	0.0820	0.1181	0.0004
New minimize func	0.1366	0.0821	0.0820	0.1181	0.0004
New minimize func 2	0.1366	0.0821	0.0820	0.1181	0.0004
UR-IW-3	0.1142	0.0925	0.0838	0.0864	0.0009
Milvus	0.1366	0.0821	0.0820	0.1181	0.0004
Fleming-4	-	-	-	-	-
Fleming-3	-	-	-	-	-
A&Q	-	-	-	-	-
A&Q2	-	-	-	-	-
A&Q3	-	-	-	-	-
A&Q4	-	-	-	-	-
A&Q5	-	-	-	-	-
MindLab QA Reloaded	0.2138	0.1334	0.1210	0.1484	0.0025
Deep ML methods for	0.2092	0.1456	0.1297	0.1580	0.0036
IRIS_4	-	-	-	-	-
dmiip1	0.2806	0.4178	0.2647	0.5168	0.0797
dmiip2	0.2960	0.4366	0.2801	0.5168	0.0793
dmiip3	0.2842	0.4175	0.2666	0.5267	0.0791
dmiip4	0.2828	0.4244	0.2694	0.5251	0.0774
dmiip5	0.2766	0.4190	0.2622	0.5111	0.0693
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
bioinfo-3	-	-	-	-	-
Fleming-2	-	-	-	-	-
UR-IW-4	-	-	-	-	-
bioinfo-4	-	-	-	-	-
MindLab QA System	0.1998	0.1444	0.1365	0.1437	0.0019
MindLab QA System ++	0.1781	0.1580	0.1253	0.1472	0.0037
MindLab Red Lions++	0.1747	0.1513	0.1208	0.1433	0.0024
Fleming-1	-	-	-	-	-

Concepts

System	Mean precision	Recall	F-Measure	MAP	GMAP
OWLMan-phaseB-V1	-	-	-	-	-
ES and reranking	-	-	-	-	-
ES and reranking 2	-	-	-	-	-
New minimize func	-	-	-	-	-
New minimize func 2	-	-	-	-	-
UR-IW-3	-	-	-	-	-
Milvus	-	-	-	-	-
Fleming-4	-	-	-	-	-
Fleming-3	-	-	-	-	-
A&Q	-	-	-	-	-
A&Q2	-	-	-	-	-
A&Q3	-	-	-	-	-
A&Q4	-	-	-	-	-
A&Q5	-	-	-	-	-
MindLab QA Reloaded	-	-	-	-	-
Deep ML methods for	-	-	-	-	-
IRIS_4	-	-	-	-	-
dmiip1	-	-	-	-	-
dmiip2	-	-	-	-	-
dmiip3	-	-	-	-	-
dmiip4	-	-	-	-	-
dmiip5	-	-	-	-	-
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
bioinfo-3	-	-	-	-	-
Fleming-2	-	-	-	-	-
UR-IW-4	-	-	-	-	-
bioinfo-4	-	-	-	-	-
MindLab QA System	-	-	-	-	-
MindLab QA System ++	-	-	-	-	-
MindLab Red Lions++	-	-	-	-	-
Fleming-1	-	-	-	-	-

RDF Triples

System	Mean precision	Recall	F-Measure	MAP	GMAP
OWLMan-phaseB-V1	-	-	-	-	-
ES and reranking	-	-	-	-	-
ES and reranking 2	-	-	-	-	-
New minimize func	-	-	-	-	-
New minimize func 2	-	-	-	-	-
UR-IW-3	-	-	-	-	-
Milvus	-	-	-	-	-
Fleming-4	-	-	-	-	-
Fleming-3	-	-	-	-	-
A&Q	-	-	-	-	-
A&Q2	-	-	-	-	-
A&Q3	-	-	-	-	-
A&Q4	-	-	-	-	-
A&Q5	-	-	-	-	-
MindLab QA Reloaded	-	-	-	-	-
Deep ML methods for	-	-	-	-	-
IRIS_4	-	-	-	-	-
dmiip1	-	-	-	-	-
dmiip2	-	-	-	-	-
dmiip3	-	-	-	-	-
dmiip4	-	-	-	-	-
dmiip5	-	-	-	-	-
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
bioinfo-3	-	-	-	-	-
Fleming-2	-	-	-	-	-
UR-IW-4	-	-	-	-	-
bioinfo-4	-	-	-	-	-
MindLab QA System	-	-	-	-	-
MindLab QA System ++	-	-	-	-	-
MindLab Red Lions++	-	-	-	-	-
Fleming-1	-	-	-	-	-

Test batch 3

Documents

System	Mean precision	Recall	F-Measure	MAP	GMAP
UR-IW-3	0.1862	0.3104	0.1906	0.2169	0.0031
UR-IW-2	0.1753	0.2390	0.1649	0.2162	0.0019
Fleming-4	0.1668	0.3949	0.1747	0.2811	0.0211
Fleming-2	0.1956	0.3879	0.1932	0.3000	0.0176
Fleming-1	0.1956	0.3884	0.1955	0.3219	0.0182
bioinfo-0	0.2823	0.4794	0.2808	0.3568	0.0646
bioinfo-1	0.2852	0.4833	0.2836	0.3614	0.0597
bioinfo-2	0.2865	0.4890	0.2833	0.3883	0.0621
bioinfo-3	0.2211	0.4730	0.2218	0.3582	0.0457
dmiip5	0.2944	0.5290	0.2734	0.4542	0.0894
A&Q	0.2144	0.4502	0.2120	0.3603	0.0439
A&Q2	0.2289	0.4574	0.2236	0.3775	0.0525
A&Q3	0.2222	0.4538	0.2171	0.3657	0.0499
A&Q4	0.2344	0.4665	0.2294	0.3802	0.0579
UR-IW-5	0.1552	0.1788	0.1378	0.1595	0.0006
A&Q5	0.1689	0.4040	0.1741	0.3247	0.0158
UR-IW-4	0.1563	0.1893	0.1428	0.1655	0.0008
ES and reranking	0.1503	0.2293	0.1316	0.0955	0.0024
ES and reranking 2	0.2047	0.1793	0.1504	0.1140	0.0017
New minimize func	0.1500	0.2292	0.1331	0.0851	0.0030
New minimize func 2	0.1575	0.0788	0.0804	0.0518	0.0003
IRIS_4	0.1405	0.2412	0.1382	0.1595	0.0026
IRIS_5	0.1072	0.1547	0.0994	0.1182	0.0009
bioinfo-4	0.2433	0.4958	0.2383	0.3976	0.0716
dmiip1	0.2711	0.5068	0.2548	0.4334	0.0765
dmiip2	0.2789	0.5156	0.2626	0.4419	0.0786
dmiip3	0.2822	0.5246	0.2676	0.4265	0.0832
dmiip4	0.2933	0.5269	0.2747	0.4430	0.0876
Fleming-3	0.1690	0.4168	0.1810	0.2798	0.0230
Fleming-5	0.1868	0.4123	0.1929	0.3072	0.0243
OWLMan-phaseB-V1	-	-	-	-	-
Deep ML methods for	0.2035	0.2664	0.1724	0.1424	0.0044
MindLab QA System	0.1600	0.2100	0.1440	0.1312	0.0025
MindLab QA Reloaded	0.1701	0.2358	0.1450	0.1148	0.0028
MindLab Red Lions++	0.2171	0.2307	0.1754	0.1589	0.0032

Snippets

System	Mean precision	Recall	F-Measure	MAP	GMAP
UR-IW-3	-	-	-	-	-
UR-IW-2	-	-	-	-	-
Fleming-4	-	-	-	-	-
Fleming-2	-	-	-	-	-
Fleming-1	-	-	-	-	-
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
bioinfo-3	-	-	-	-	-
dmiip5	0.2547	0.4139	0.2323	0.4802	0.0714
A&Q	-	-	-	-	-
A&Q2	-	-	-	-	-
A&Q3	-	-	-	-	-
A&Q4	-	-	-	-	-
UR-IW-5	-	-	-	-	-
A&Q5	-	-	-	-	-
UR-IW-4	-	-	-	-	-
ES and reranking	0.1011	0.0546	0.0603	0.0744	0.0002
ES and reranking 2	0.1011	0.0546	0.0603	0.0744	0.0002
New minimize func	0.1011	0.0546	0.0603	0.0744	0.0002
New minimize func 2	0.1011	0.0546	0.0603	0.0744	0.0002
IRIS_4	-	-	-	-	-
IRIS_5	-	-	-	-	-
bioinfo-4	-	-	-	-	-
dmiip1	0.2532	0.4303	0.2361	0.4960	0.0716
dmiip2	0.2512	0.4244	0.2305	0.4683	0.0648
dmiip3	0.2507	0.4203	0.2309	0.4645	0.0658
dmiip4	0.2579	0.4230	0.2361	0.4584	0.0677
Fleming-3	-	-	-	-	-
Fleming-5	-	-	-	-	-
OWLMan-phaseB-V1	-	-	-	-	-
Deep ML methods for	0.2081	0.1587	0.1417	0.1529	0.0023
MindLab QA System	0.1915	0.1421	0.1388	0.1816	0.0022
MindLab QA Reloaded	0.1983	0.1587	0.1383	0.1529	0.0023
MindLab Red Lions++	0.2039	0.1350	0.1378	0.1732	0.0016

Concepts

System	Mean precision	Recall	F-Measure	MAP	GMAP
UR-IW-3	-	-	-	-	-
UR-IW-2	-	-	-	-	-
Fleming-4	-	-	-	-	-
Fleming-2	-	-	-	-	-
Fleming-1	-	-	-	-	-
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
bioinfo-3	-	-	-	-	-
dmiip5	-	-	-	-	-
A&Q	-	-	-	-	-
A&Q2	-	-	-	-	-
A&Q3	-	-	-	-	-
A&Q4	-	-	-	-	-
UR-IW-5	-	-	-	-	-
A&Q5	-	-	-	-	-
UR-IW-4	-	-	-	-	-
ES and reranking	-	-	-	-	-
ES and reranking 2	-	-	-	-	-
New minimize func	-	-	-	-	-
New minimize func 2	-	-	-	-	-
IRIS_4	-	-	-	-	-
IRIS_5	-	-	-	-	-
bioinfo-4	-	-	-	-	-
dmiip1	-	-	-	-	-
dmiip2	-	-	-	-	-
dmiip3	-	-	-	-	-
dmiip4	-	-	-	-	-
Fleming-3	-	-	-	-	-
Fleming-5	-	-	-	-	-
OWLMan-phaseB-V1	-	-	-	-	-
Deep ML methods for	-	-	-	-	-
MindLab QA System	-	-	-	-	-
MindLab QA Reloaded	-	-	-	-	-
MindLab Red Lions++	-	-	-	-	-

RDF Triples

System	Mean precision	Recall	F-Measure	MAP	GMAP
UR-IW-3	-	-	-	-	-
UR-IW-2	-	-	-	-	-
Fleming-4	-	-	-	-	-
Fleming-2	-	-	-	-	-
Fleming-1	-	-	-	-	-
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
bioinfo-3	-	-	-	-	-
dmiip5	-	-	-	-	-
A&Q	-	-	-	-	-
A&Q2	-	-	-	-	-
A&Q3	-	-	-	-	-
A&Q4	-	-	-	-	-
UR-IW-5	-	-	-	-	-
A&Q5	-	-	-	-	-
UR-IW-4	-	-	-	-	-
ES and reranking	-	-	-	-	-
ES and reranking 2	-	-	-	-	-
New minimize func	-	-	-	-	-
New minimize func 2	-	-	-	-	-
IRIS_4	-	-	-	-	-
IRIS_5	-	-	-	-	-
bioinfo-4	-	-	-	-	-
dmiip1	-	-	-	-	-
dmiip2	-	-	-	-	-
dmiip3	-	-	-	-	-
dmiip4	-	-	-	-	-
Fleming-3	-	-	-	-	-
Fleming-5	-	-	-	-	-
OWLMan-phaseB-V1	-	-	-	-	-
Deep ML methods for	-	-	-	-	-
MindLab QA System	-	-	-	-	-
MindLab QA Reloaded	-	-	-	-	-
MindLab Red Lions++	-	-	-	-	-

Test batch 4

Documents

System	Mean precision	Recall	F-Measure	MAP	GMAP
Fleming-5	0.1767	0.3574	0.1754	0.2939	0.0087
Fleming-4	0.1800	0.3566	0.1772	0.2932	0.0087
Fleming-3	0.1967	0.3604	0.1869	0.3037	0.0121
ES and reranking	0.1795	0.2344	0.1505	0.1145	0.0047
ES and reranking 2	0.2179	0.1697	0.1488	0.1047	0.0022
Fleming-1	0.1822	0.3429	0.1752	0.2458	0.0115
New minimize func	0.1800	0.2243	0.1477	0.1092	0.0045
New minimize func 2	0.1944	0.0971	0.1013	0.0774	0.0004
UR-IW-5	0.1430	0.1322	0.1181	0.1099	0.0008
UR-IW-4	0.1541	0.1643	0.1298	0.1266	0.0012
UR-IW-3	0.1689	0.2068	0.1452	0.1561	0.0027
UR-IW-2	0.1602	0.1986	0.1432	0.1677	0.0028
IRIS_5	0.1890	0.3027	0.1719	0.2200	0.0084
IRIS_4	0.1584	0.2334	0.1453	0.1647	0.0032
bioinfo-0	0.3327	0.4323	0.3066	0.3751	0.0595
bioinfo-1	0.3196	0.4283	0.2996	0.3700	0.0541
bioinfo-2	0.3076	0.4021	0.2845	0.3663	0.0412
Fleming-2	0.1767	0.3574	0.1754	0.2957	0.0087
dmiip5	0.3600	0.5100	0.3116	0.4981	0.1197
dmiip1	0.3267	0.4721	0.2886	0.4472	0.1009
dmiip2	0.3067	0.4481	0.2760	0.4305	0.0793
dmiip3	0.3133	0.4714	0.2821	0.4468	0.1007
dmiip4	0.3122	0.4597	0.2803	0.4406	0.0891
bioinfo-3	0.2589	0.4051	0.2379	0.3797	0.0370
bioinfo-4	0.2700	0.4178	0.2457	0.3892	0.0478
Deep ML methods for	0.1874	0.2270	0.1543	0.1632	0.0034
MindLab QA Reloaded	0.2110	0.2305	0.1692	0.1690	0.0045

Snippets

System	Mean precision	Recall	F-Measure	MAP	GMAP
Fleming-5	-	-	-	-	-
Fleming-4	-	-	-	-	-
Fleming-3	-	-	-	-	-
ES and reranking	0.1033	0.0574	0.0574	0.0778	0.0003
ES and reranking 2	0.1033	0.0574	0.0574	0.0778	0.0003
Fleming-1	-	-	-	-	-
New minimize func	0.1033	0.0574	0.0574	0.0778	0.0003
New minimize func 2	0.1033	0.0574	0.0574	0.0778	0.0003
UR-IW-5	-	-	-	-	-
UR-IW-4	-	-	-	-	-
UR-IW-3	-	-	-	-	-
UR-IW-2	-	-	-	-	-
IRIS_5	-	-	-	-	-
IRIS_4	-	-	-	-	-
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
Fleming-2	-	-	-	-	-
dmiip5	0.3235	0.3866	0.2747	0.5219	0.0707
dmiip1	0.2867	0.3442	0.2373	0.4274	0.0451
dmiip2	0.2743	0.3502	0.2401	0.4417	0.0377
dmiip3	0.2701	0.3376	0.2310	0.4354	0.0476
dmiip4	0.2685	0.3456	0.2356	0.4518	0.0387
bioinfo-3	-	-	-	-	-
bioinfo-4	-	-	-	-	-
Deep ML methods for	0.1879	0.1520	0.1364	0.1461	0.0036
MindLab QA Reloaded	0.1911	0.1469	0.1363	0.1437	0.0030

Concepts

System	Mean precision	Recall	F-Measure	MAP	GMAP
Fleming-5	-	-	-	-	-
Fleming-4	-	-	-	-	-
Fleming-3	-	-	-	-	-
ES and reranking	-	-	-	-	-
ES and reranking 2	-	-	-	-	-
Fleming-1	-	-	-	-	-
New minimize func	-	-	-	-	-
New minimize func 2	-	-	-	-	-
UR-IW-5	-	-	-	-	-
UR-IW-4	-	-	-	-	-
UR-IW-3	-	-	-	-	-
UR-IW-2	-	-	-	-	-
IRIS_5	-	-	-	-	-
IRIS_4	-	-	-	-	-
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
Fleming-2	-	-	-	-	-
dmiip5	-	-	-	-	-
dmiip1	-	-	-	-	-
dmiip2	-	-	-	-	-
dmiip3	-	-	-	-	-
dmiip4	-	-	-	-	-
bioinfo-3	-	-	-	-	-
bioinfo-4	-	-	-	-	-
Deep ML methods for	-	-	-	-	-
MindLab QA Reloaded	-	-	-	-	-

RDF Triples

System	Mean precision	Recall	F-Measure	MAP	GMAP
Fleming-5	-	-	-	-	-
Fleming-4	-	-	-	-	-
Fleming-3	-	-	-	-	-
ES and reranking	-	-	-	-	-
ES and reranking 2	-	-	-	-	-
Fleming-1	-	-	-	-	-
New minimize func	-	-	-	-	-
New minimize func 2	-	-	-	-	-
UR-IW-5	-	-	-	-	-
UR-IW-4	-	-	-	-	-
UR-IW-3	-	-	-	-	-
UR-IW-2	-	-	-	-	-
IRIS_5	-	-	-	-	-
IRIS_4	-	-	-	-	-
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
Fleming-2	-	-	-	-	-
dmiip5	-	-	-	-	-
dmiip1	-	-	-	-	-
dmiip2	-	-	-	-	-
dmiip3	-	-	-	-	-
dmiip4	-	-	-	-	-
bioinfo-3	-	-	-	-	-
bioinfo-4	-	-	-	-	-
Deep ML methods for	-	-	-	-	-
MindLab QA Reloaded	-	-	-	-	-

Test batch 5

Documents

System	Mean precision	Recall	F-Measure	MAP	GMAP
first batch	0.1800	0.1055	0.1184	0.1015	0.0046
IR1	0.1506	0.0769	0.0883	0.1130	0.0025
mibi_rag_snippet	0.2774	0.1325	0.1535	0.1952	0.0036
mibi_rag_abstract	0.2774	0.1325	0.1535	0.1952	0.0036
2	0.2960	0.1143	0.1497	0.1767	0.0068
UR-IW-5	0.3855	0.1639	0.1944	0.2651	0.0173
UR-IW-4	0.3065	0.1236	0.1583	0.2361	0.0018
UR-IW-2	0.4154	0.1822	0.2265	0.3174	0.0212
UR-IW-3	0.3933	0.1762	0.2149	0.2847	0.0210
UR-IW-1	0.5067	0.2620	0.2997	0.3729	0.0607
bioinfo-0	0.4346	0.2952	0.3069	0.3637	0.1164
bioinfo-1	0.4603	0.3172	0.3288	0.4014	0.1495
bioinfo-2	0.4737	0.3354	0.3443	0.4142	0.1907
bioinfo-3	0.4221	0.3039	0.3032	0.3955	0.1259
bioinfo-4	0.4333	0.3180	0.3140	0.4063	0.1690
Fleming-1	0.3775	0.2718	0.2551	0.3026	0.0670
qa	0.0569	0.0185	0.0197	0.0225	0.0000
Gatech competition	0.1661	0.1023	0.1119	0.0908	0.0011
GTBioASQsys2	0.1533	0.0969	0.1050	0.0903	0.0006
GTBioASQsys3	0.2103	0.1128	0.1261	0.1129	0.0014
dmiip2024	0.4859	0.3434	0.3334	0.4833	0.2328
dmiip2024_1	0.5071	0.3481	0.3487	0.4906	0.2728
dmiip2024_2	0.4965	0.3437	0.3412	0.4828	0.2948
dmiip2024_4	0.5094	0.3433	0.3450	0.4965	0.3042
dmiip2024_3	0.5094	0.3432	0.3453	0.5051	0.2753
IRIS_1	0.3635	0.2537	0.2502	0.3016	0.0545
IRIS_2	0.3365	0.2493	0.2330	0.2806	0.0642
IRIS_4	0.3718	0.2642	0.2541	0.3241	0.0979
simple truncation	0.2165	0.1122	0.1320	0.1221	0.0083
IRIS_5	0.3388	0.2589	0.2389	0.2829	0.0491
IRIS_3	0.3635	0.2633	0.2516	0.3217	0.0705
HU-WBI-1	0.3565	0.2104	0.2330	0.2965	0.0536
4	0.3266	0.1398	0.1806	0.2400	0.0189
ashley2	0.3294	0.1893	0.2121	0.2697	0.0318
ashley3	0.2894	0.1653	0.1827	0.2390	0.0199
3	0.3439	0.0919	0.1333	0.1553	0.0086
CPS	0.3564	0.0878	0.1177	0.1150	0.0037
Fleming-2	0.3730	0.2630	0.2525	0.2836	0.0401
Fleming-3	0.3615	0.2584	0.2457	0.2701	0.0509
Fleming-4	0.3775	0.2718	0.2551	0.3026	0.0670

Snippets

System	Mean precision	Recall	F-Measure	MAP	GMAP
first batch	0.0647	0.0002	0.0003	0.0276	0.0003
IR1	-	-	-	-	-
mibi_rag_snippet	0.1047	0.0278	0.0399	0.0923	0.0004
mibi_rag_abstract	0.1047	0.0278	0.0399	0.0923	0.0004
2	-	-	-	-	-
UR-IW-5	0.3303	0.1002	0.1355	0.2413	0.0102
UR-IW-4	0.4059	0.1435	0.1923	0.3007	0.0199
UR-IW-2	0.3987	0.2348	0.2673	0.2771	0.0187
UR-IW-3	0.3400	0.1101	0.1490	0.2488	0.0146
UR-IW-1	0.4265	0.1765	0.2233	0.3295	0.0376
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
bioinfo-3	-	-	-	-	-
bioinfo-4	-	-	-	-	-
Fleming-1	0.0018	0.0014	0.0016	0.0002	0.0000
qa	-	-	-	-	-
Gatech competition	0.1154	0.0353	0.0496	0.0515	0.0005
GTBioASQsys2	0.0883	0.0136	0.0218	0.0231	0.0001
GTBioASQsys3	0.1536	0.0259	0.0407	0.0453	0.0003
dmiip2024	0.4527	0.2613	0.2721	0.5010	0.1391
dmiip2024_1	0.4421	0.2560	0.2730	0.4884	0.1280
dmiip2024_2	0.4491	0.2507	0.2696	0.5131	0.1678
dmiip2024_4	0.4479	0.2528	0.2651	0.5027	0.1807
dmiip2024_3	0.4491	0.2594	0.2711	0.5110	0.1620
IRIS_1	-	-	-	-	-
IRIS_2	-	-	-	-	-
IRIS_4	-	-	-	-	-
simple truncation	-	-	-	-	-
IRIS_5	-	-	-	-	-
IRIS_3	-	-	-	-	-
HU-WBI-1	-	-	-	-	-
4	-	-	-	-	-
ashley2	-	-	-	-	-
ashley3	-	-	-	-	-
3	-	-	-	-	-
CPS	-	-	-	-	-
Fleming-2	0.0021	0.0007	0.0011	0.0005	0.0000
Fleming-3	0.2549	0.0939	0.1220	0.1954	0.0106
Fleming-4	0.0018	0.0014	0.0016	0.0002	0.0000

Concepts

System	Mean precision	Recall	F-Measure	MAP	GMAP
first batch	-	-	-	-	-
IR1	-	-	-	-	-
mibi_rag_snippet	-	-	-	-	-
mibi_rag_abstract	-	-	-	-	-
2	-	-	-	-	-
UR-IW-5	-	-	-	-	-
UR-IW-4	-	-	-	-	-
UR-IW-2	-	-	-	-	-
UR-IW-3	-	-	-	-	-
UR-IW-1	-	-	-	-	-
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
bioinfo-3	-	-	-	-	-
bioinfo-4	-	-	-	-	-
Fleming-1	-	-	-	-	-
qa	-	-	-	-	-
Gatech competition	-	-	-	-	-
GTBioASQsys2	-	-	-	-	-
GTBioASQsys3	-	-	-	-	-
dmiip2024	-	-	-	-	-
dmiip2024_1	-	-	-	-	-
dmiip2024_2	-	-	-	-	-
dmiip2024_4	-	-	-	-	-
dmiip2024_3	-	-	-	-	-
IRIS_1	-	-	-	-	-
IRIS_2	-	-	-	-	-
IRIS_4	-	-	-	-	-
simple truncation	-	-	-	-	-
IRIS_5	-	-	-	-	-
IRIS_3	-	-	-	-	-
HU-WBI-1	-	-	-	-	-
4	-	-	-	-	-
ashley2	-	-	-	-	-
ashley3	-	-	-	-	-
3	-	-	-	-	-
CPS	-	-	-	-	-
Fleming-2	-	-	-	-	-
Fleming-3	-	-	-	-	-
Fleming-4	-	-	-	-	-

RDF Triples

System	Mean precision	Recall	F-Measure	MAP	GMAP
first batch	-	-	-	-	-
IR1	-	-	-	-	-
mibi_rag_snippet	-	-	-	-	-
mibi_rag_abstract	-	-	-	-	-
2	-	-	-	-	-
UR-IW-5	-	-	-	-	-
UR-IW-4	-	-	-	-	-
UR-IW-2	-	-	-	-	-
UR-IW-3	-	-	-	-	-
UR-IW-1	-	-	-	-	-
bioinfo-0	-	-	-	-	-
bioinfo-1	-	-	-	-	-
bioinfo-2	-	-	-	-	-
bioinfo-3	-	-	-	-	-
bioinfo-4	-	-	-	-	-
Fleming-1	-	-	-	-	-
qa	-	-	-	-	-
Gatech competition	-	-	-	-	-
GTBioASQsys2	-	-	-	-	-
GTBioASQsys3	-	-	-	-	-
dmiip2024	-	-	-	-	-
dmiip2024_1	-	-	-	-	-
dmiip2024_2	-	-	-	-	-
dmiip2024_4	-	-	-	-	-
dmiip2024_3	-	-	-	-	-
IRIS_1	-	-	-	-	-
IRIS_2	-	-	-	-	-
IRIS_4	-	-	-	-	-
simple truncation	-	-	-	-	-
IRIS_5	-	-	-	-	-
IRIS_3	-	-	-	-	-
HU-WBI-1	-	-	-	-	-
4	-	-	-	-	-
ashley2	-	-	-	-	-
ashley3	-	-	-	-	-
3	-	-	-	-	-
CPS	-	-	-	-	-
Fleming-2	-	-	-	-	-
Fleming-3	-	-	-	-	-
Fleming-4	-	-	-	-	-