Файл Robots.txt в MVC.NET 4
Я прочитал статью об игнорировании роботов из некоторого URL в моем проекте ASP MVC.NET. В своей статье автор сказал, что мы должны добавить некоторые действия в некоторые из контроллеров, как это. В этом примере он добавляет действие в Home Controller:
#region -- Robots() Method --
public ActionResult Robots()
{
Response.ContentType = "text/plain";
return View();
}
#endregion
тогда мы должны добавить файл Robots.cshtml в наш проект с этим телом
@{
Layout = null;
}
# robots.txt for @this.Request.Url.Host
User-agent: *
Disallow: /Administration/
Disallow: /Account/
и, наконец, мы должны добавить эту строку кода вGloabal.asax
routes.MapRoute("Robots.txt",
"robots.txt",
new { controller = "Home", action = "Robots" });
мой вопрос заключается в том, что роботы сканируют контроллеры, которые имеют атрибут [Authorization], напримерAdministration
?