Robotstxt

    .com^{8M domains}   

    .org^{1.2M domains}   

    .edu^{48.5K domains}   

    .net^{1.1M domains}   

    .gov^{18.3K domains}   

    .us^{36.1K domains}   

    .ca^{45.1K domains}   

    .de^{81.1K domains}   

    .uk^{66.6K domains}   

    .it^{42.2K domains}   

    .au^{47.2K domains}   

    .co^{34.4K domains}   

    .biz^{18.9K domains}   

    .info^{38.6K domains}   

    .fr^{36.4K domains}   

    .eu^{26.6K domains}   

    .ru^{175.6K domains}   

    .ph^{6.7K domains}   

    .in^{53.6K domains}   

    .vn^{23.5K domains}   

    .cn^{43.6K domains}   

    .ro^{18.6K domains}   

    .ch^{12.9K domains}   

    .at^{11.4K domains}   

    Browser All