Как да си реша проблема с Robot.txt

Здравейте симпатяги! Проблема ми е следният: Ето как е генериран моят файл robot.txt:
User-agent: *
Allow: /
Disallow: /phpBB3
Disallow: /wordpress/
sitemap: lubopitko-bg.ком/sitemap.xml

#Begin Attracta SEO Tools Sitemap. Do not remove
sitemap: http://cdn.attracta.com/sitemap/1457666.xml.gz
#End Attracta SEO Tools Sitemap. Do not remove

Последните три реда, а именно:
#Begin Attracta SEO Tools Sitemap. Do not remove
sitemap: http://cdn.attracta.com/sitemap/1457666.xml.gz
#End Attracta SEO Tools Sitemap. Do not remove
Не съм ги писал аз. От къде се появяват? Трябва ли да ги премахна? Пречат ли на по-доброто индексиране на сайта?
Аз често ги премахвам, но те се появяват сами. Какво да правя, посъветвайте ме!
Благодаря Ви!
 
Последно редактирано:
От: Как да си реша проблема с Robot.txt

Според мен, не пречи. Съмбитнал си да повишиш трафика си с Attracta или си добавил някой плъгин за карта на сайта, който го внедрява. На едно място пише да се пробва ей'тва:
User-agent: *
Allow: /*?$
 
От: Re: Как да си реша проблема с Robot.txt

Disallow: /phpBB3
Disallow: /wordpress/

така не ти се индексират форума и квото има в удпрес блога

роботс тхт може да е напълно празен ...
Известно ми е, че така не се индексират форума и блога, но така искам засега. Но роботс.тхт и празен да го оставя това
#Begin Attracta SEO Tools Sitemap. Do not remove
sitemap: http://cdn.attracta.com/sitemap/1457666.xml.gz
#End Attracta SEO Tools Sitemap. Do not remove
се появява отново.
 

Горе