A.Allow B.Disallow C.Crawl-delay D.noindex
A.seo/index.html B.seo/ C.seo.aspx D.seo.php?id=21
A.500 B.301 C.200 D.404