Robots.txt ژنراتور

ساخت robots.txt اجازه دهید و اجازه ندهید قوانین، تاخیر جستجو، و دستورالعمل های نقشه سایت.

یک مسیر در هر خط، شروع با /. فرآیند رمز گذاری به عنوان %20 و # به عنوان %23 .

robots.txt controls crawling; it does not secure private pages or guarantee removal from search. Google ignores Crawl-delay. One agent token per line (letters, _, -, or *).

robots.txtReview before publishing at the site root. Manual edits are copied and downloaded; changing form fields regenerates the file.
بازگشت به ابزار