Disallow URL-адреса, которые содержат каталог

Question

У меня есть URL-адреса, которые появляются как так:

www.website.com/user/1 
www.website.com/user/2 
www.website.com/user/3 

Как вы можете видеть, все они содержат /user/, а затем число. Как я могу запретить такие URL-адреса в моем файле robots.txt? Благодарю.

Answer 1

Добавьте это в robots.txt

Disallow: /user/