Data re-generated with domains with internal/external requests adjusted

report/datasets.non-failed.classification.domain-scope.coverage.sorted.tsv

@@ -1,45 +1,45 @@
 Dataset	Domains	Same domain	Subdomain	Superdomain	Same primary	Internal	Mixed	External
-alexa.2014-09-01.random.10000-http	8216	0.043816942551119765	0.016066212268743916	0	0.06450827653359299	0.06450827653359299	0.8999513145082765	0.03554040895813048
-alexa.2014-09-01.random.10000-http-www	8493	0.0565171317555634	0	0.006593665371482397	0.06758507005769457	0.06758507005769457	0.8864947603909102	0.045920169551395267
-alexa.2014-09-01.random.10000-https	1135	0.027312775330396475	0.009691629955947136	0	0.04052863436123348	0.04052863436123348	0.9295154185022027	0.029955947136563875
-alexa.2014-09-01.random.10000-https-www	1224	0.05065359477124183	0	0.0016339869281045752	0.06045751633986928	0.06045751633986928	0.9142156862745098	0.025326797385620915
-alexa.2014-09-01.top.10000-http	8545	0.014862492685781159	0.01427735517846694	0	0.03382094792276185	0.03393797542422469	0.9297834991222937	0.03627852545348157
-alexa.2014-09-01.top.10000-http-www	8682	0.021769177608845888	0	0.002994701681640175	0.03616678184750058	0.03616678184750058	0.9162635337479843	0.04756968440451509
-alexa.2014-09-01.top.10000-https	2507	0.02473075388911049	0.012365376944555246	0	0.04268049461507778	0.04268049461507778	0.9262066214599122	0.031112883925009972
-alexa.2014-09-01.top.10000-https-www	2957	0.02705444707473791	0	0.0033818058843422386	0.04633074061548867	0.04633074061548867	0.9235711870138654	0.030098072370645924
-alexa.2014-09-01.top.dk.10000-http	2263	0.02695536897923111	0.01855943437914273	0	0.04993371630578878	0.04993371630578878	0.9204595669465311	0.029606716747680072
-alexa.2014-09-01.top.dk.10000-http-www	2310	0.04199134199134199	0	0.004329004329004329	0.05064935064935065	0.05064935064935065	0.9116883116883118	0.03766233766233766
-alexa.2014-09-01.top.dk.10000-https	339	0.032448377581120944	0.011799410029498525	0	0.05309734513274336	0.05309734513274336	0.9203539823008849	0.02654867256637168
-alexa.2014-09-01.top.dk.10000-https-www	441	0.05442176870748299	0	0.0022675736961451248	0.06802721088435375	0.06802721088435375	0.9047619047619048	0.027210884353741496
-alexa.2014-09-01.top.se.10000-http	2797	0.023954236682159458	0.01144082946013586	0	0.03789774758670004	0.03789774758670004	0.9252770825884876	0.0368251698248123
-alexa.2014-09-01.top.se.10000-http-www	2895	0.030397236614853194	0	0.0037996545768566492	0.03730569948186528	0.03730569948186528	0.9174438687392056	0.045250431778929186
-alexa.2014-09-01.top.se.10000-https	438	0.0228310502283105	0.00684931506849315	0	0.03424657534246575	0.03424657534246575	0.9429223744292237	0.0228310502283105
-alexa.2014-09-01.top.se.10000-https-www	650	0.023076923076923078	0	0.0015384615384615385	0.027692307692307693	0.027692307692307693	0.9538461538461539	0.018461538461538463
-com.2014-08-29.random.10000-http	7775	0.11459807073954983	0.019807073954983923	0	0.13787781350482314	0.13787781350482314	0.6410289389067525	0.22109324758842444
-com.2014-08-29.random.10000-http-www	7811	0.12648828575086415	0	0.008577646908206376	0.138778645499936	0.138778645499936	0.6334656254000768	0.2277557290999872
-com.2014-08-29.random.10000-https	50	0.1	0.02	0	0.12	0.12	0.84	0.04
-com.2014-08-29.random.10000-https-www	55	0.18181818181818182	0	0.01818181818181818	0.2	0.2	0.8	0
-dk.2014-07-23.random.10000-http	7180	0.2682451253481894	0.023119777158774373	0	0.2976323119777159	0.2976323119777159	0.4077994428969359	0.2945682451253482
-dk.2014-07-23.random.10000-http-www	7378	0.2618595825426945	0	0.0279208457576579	0.2934399566278124	0.2934399566278124	0.4117647058823529	0.29479533748983466
+alexa.2014-09-01.random.10000-http	8216	0.04432951606944958	0.01625415589213151	0	0.06526289865780076	0.06526289865780076	0.8987809383080901	0.0359561630341091
+alexa.2014-09-01.random.10000-http-www	8493	0.05714966067388975	0	0.0066674604119538045	0.06834146922252649	0.06834146922252649	0.8852244314799381	0.04643409929753542
+alexa.2014-09-01.random.10000-https	1135	0.027728085867620753	0.009838998211091235	0	0.04114490161001789	0.04114490161001789	0.9284436493738819	0.03041144901610018
+alexa.2014-09-01.random.10000-https-www	1224	0.051112943116240726	0	0.0016488046166529267	0.06100577081615829	0.06100577081615829	0.9134377576257213	0.025556471558120363
+alexa.2014-09-01.top.10000-http	8545	0.015001181195369714	0.014410583510512638	0	0.03413654618473896	0.03425466572171037	0.929128277817151	0.03661705646113867
+alexa.2014-09-01.top.10000-http-www	8682	0.021969080553295363	0	0.0030222015575961875	0.036498895734046265	0.036498895734046265	0.9154945949087527	0.04800650935720097
+alexa.2014-09-01.top.10000-https	2507	0.025040387722132473	0.012520193861066236	0	0.04321486268174475	0.04321486268174475	0.9252827140549272	0.03150242326332795
+alexa.2014-09-01.top.10000-https-www	2957	0.02722940776038121	0	0.0034036759700476512	0.046630360789652825	0.046630360789652825	0.9230769230769231	0.0302927161334241
+alexa.2014-09-01.top.dk.10000-http	2263	0.02712316585148955	0.018674966651845263	0	0.05024455313472655	0.05024455313472655	0.9199644286349489	0.029791018230324588
+alexa.2014-09-01.top.dk.10000-http-www	2310	0.04219225750326229	0	0.004349717268377556	0.0508916920400174	0.0508916920400174	0.9112657677250978	0.03784254023488473
+alexa.2014-09-01.top.dk.10000-https	339	0.03293413173652695	0.011976047904191617	0	0.05389221556886228	0.05389221556886228	0.9191616766467066	0.02694610778443114
+alexa.2014-09-01.top.dk.10000-https-www	441	0.05504587155963303	0	0.0022935779816513763	0.06880733944954129	0.06880733944954129	0.9036697247706422	0.027522935779816515
+alexa.2014-09-01.top.se.10000-http	2797	0.024014336917562724	0.011469534050179211	0	0.03799283154121864	0.03799283154121864	0.925089605734767	0.036917562724014336
+alexa.2014-09-01.top.se.10000-http-www	2895	0.030481468652580532	0	0.0038101835815725666	0.03740907516453065	0.03740907516453065	0.917215102182196	0.04537582265327329
+alexa.2014-09-01.top.se.10000-https	438	0.02288329519450801	0.006864988558352402	0	0.034324942791762014	0.034324942791762014	0.9427917620137299	0.02288329519450801
+alexa.2014-09-01.top.se.10000-https-www	650	0.023148148148148147	0	0.0015432098765432098	0.027777777777777776	0.027777777777777776	0.9537037037037037	0.018518518518518517
+com.2014-08-29.random.10000-http	7775	0.12215519605154922	0.02111324376199616	0	0.1469701124211681	0.1469701124211681	0.6173567315601864	0.23567315601864547
+com.2014-08-29.random.10000-http-www	7811	0.13488054607508532	0	0.009146757679180887	0.1479863481228669	0.1479863481228669	0.6091467576791809	0.2428668941979522
+com.2014-08-29.random.10000-https	50	0.10638297872340426	0.02127659574468085	0	0.1276595744680851	0.1276595744680851	0.8297872340425533	0.0425531914893617
+com.2014-08-29.random.10000-https-www	55	0.18518518518518517	0	0.018518518518518517	0.2037037037037037	0.2037037037037037	0.7962962962962963	0
+dk.2014-07-23.random.10000-http	7180	0.2847848587904776	0.024545320124205235	0	0.31598403075558185	0.31598403075558185	0.3712849327221647	0.3127310365222534
+dk.2014-07-23.random.10000-http-www	7378	0.2784664168348227	0	0.029691553761891035	0.31204958201210725	0.31204958201210725	0.37445949841452875	0.31349091957336406
 dk.2014-07-23.random.10000-https	23	0.2608695652173913	0.043478260869565216	0	0.30434782608695654	0.30434782608695654	0.6521739130434783	0.043478260869565216
-dk.2014-07-23.random.10000-https-www	32	0.25	0	0	0.25	0.25	0.71875	0.03125
-net.2014-08-29.random.10000-http	7270	0.10453920220082531	0.021045392022008252	0	0.12764786795048144	0.12764786795048144	0.6228335625859698	0.24951856946354883
-net.2014-08-29.random.10000-http-www	7378	0.11832474925454052	0	0.00623475196530225	0.12618595825426945	0.12618595825426945	0.6158850637029005	0.25792897804283005
+dk.2014-07-23.random.10000-https-www	32	0.26666666666666666	0	0	0.26666666666666666	0.26666666666666666	0.7000000000000001	0.03333333333333333
+net.2014-08-29.random.10000-http	7270	0.11368735976065819	0.022887060583395662	0	0.13881824981301422	0.13881824981301422	0.5898279730740464	0.2713537771129394
+net.2014-08-29.random.10000-http-www	7378	0.12895125553914327	0	0.006794682422451994	0.13751846381093058	0.13751846381093058	0.5813884785819794	0.2810930576070901
 net.2014-08-29.random.10000-https	26	0.23076923076923078	0.07692307692307693	0	0.38461538461538464	0.38461538461538464	0.6153846153846154	0
-net.2014-08-29.random.10000-https-www	28	0.21428571428571427	0	0	0.21428571428571427	0.21428571428571427	0.75	0.03571428571428571
+net.2014-08-29.random.10000-https-www	28	0.23076923076923078	0	0	0.23076923076923078	0.23076923076923078	0.7307692307692307	0.038461538461538464
 reach50.2014w35.se-http	43	0	0	0	0	0	0.9534883720930233	0.046511627906976744
 reach50.2014w35.se-http-www	42	0	0	0	0	0	0.9285714285714286	0.07142857142857142
 reach50.2014w35.se-https	18	0	0.05555555555555555	0	0.05555555555555555	0.05555555555555555	0.8333333333333333	0.1111111111111111
 reach50.2014w35.se-https-www	26	0	0	0	0	0	0.8846153846153846	0.11538461538461539
-se.2014-07-10.random.100000-http	73605	0.17638747367705998	0.025867807893485497	0	0.20831465253719178	0.20831465253719178	0.42487602744378783	0.36680932001902045
-se.2014-07-10.random.100000-http-www	77261	0.1778775837744787	0	0.026041599254475092	0.20864342941458175	0.20864342941458175	0.4243538136964315	0.3670027568889867
-se.2014-07-10.random.100000-https	282	0.1347517730496454	0.01773049645390071	0	0.1595744680851064	0.1595744680851064	0.8120567375886525	0.028368794326241134
-se.2014-07-10.random.100000-https-www	328	0.10670731707317073	0	0.006097560975609756	0.11280487804878049	0.11280487804878049	0.8536585365853658	0.03353658536585366
+se.2014-07-10.random.100000-http	73605	0.18490351064587338	0.027116712953072705	0	0.2183721427045503	0.2183721427045503	0.39710887986897386	0.38451897742647584
+se.2014-07-10.random.100000-http-www	77261	0.18655571694245726	0	0.027312093610436152	0.21882253926452822	0.21882253926452822	0.39626970013710344	0.38490776059836834
+se.2014-07-10.random.100000-https	282	0.14022140221402213	0.01845018450184502	0	0.16605166051660517	0.16605166051660517	0.8044280442804428	0.02952029520295203
+se.2014-07-10.random.100000-https-www	328	0.10869565217391304	0	0.006211180124223602	0.11490683229813664	0.11490683229813664	0.8509316770186336	0.034161490683229816
 se.healthstatus.2013.counties-http	18	0	0	0	0	0	1	0
 se.healthstatus.2013.counties-http-www	21	0	0	0	0	0	0.9523809523809523	0.047619047619047616
 se.healthstatus.2013.counties-https	3	0	0	0	0	0	1	0
 se.healthstatus.2013.counties-https-www	6	0.16666666666666666	0	0	0.16666666666666666	0.16666666666666666	0.8333333333333334	0
-se.healthstatus.2013.domain-registrars-http	127	0.05511811023622047	0.07086614173228346	0	0.13385826771653545	0.13385826771653545	0.7322834645669292	0.13385826771653545
+se.healthstatus.2013.domain-registrars-http	127	0.056	0.072	0	0.136	0.136	0.728	0.136
 se.healthstatus.2013.domain-registrars-http-www	134	0.1044776119402985	0	0.014925373134328358	0.15671641791044777	0.15671641791044777	0.6940298507462687	0.14925373134328357
 se.healthstatus.2013.domain-registrars-https	40	0.025	0.125	0	0.15	0.15	0.825	0.025
 se.healthstatus.2013.domain-registrars-https-www	42	0.11904761904761904	0	0	0.14285714285714285	0.14285714285714285	0.8095238095238095	0.047619047619047616