Проблемка с роботс.

[waveman]

Здравствуйте!!!

Запускаю новый сайт. Вот в чем проблемка. При создании sitemap через сайт http://htmlweb.ru/analiz/sitemap.php, пишет вот такую ошыбку:

"Битые" ссылки(49):
http://torfiles.com/0-9/ из fantastika/, код 404
http://torfiles.com/2012/04/ из xfsearch/2012/, код 404
http://torfiles.com/2012/05/16/ из xfsearch/2012/, код 404
http://torfiles.com/2012/05/17/ из xfsearch/2012/, код 404
http://torfiles.com/Racing/ из fantastika/, код 404
http://torfiles.com/Shooter/ из fantastika/, код 404
http://torfiles.com/a/ из fantastika/, код 404
http://torfiles.com/animaciya/ из main/, код 404
http://torfiles.com/arcad/ из fantastika/, код 404
http://torfiles.com/b/ из fantastika/, код 404
http://torfiles.com/detektiv/ из boevik/, код 404
http://torfiles.com/dokumentalnyy/ из boevik/, код 404
http://torfiles.com/fentazy/ из fantastika/, код 404
http://torfiles.com/films/ из fantastika/, код 404
http://torfiles.com/games/ из fantastika/, код 404
http://torfiles.com/games/action/ из action/, код 404
http://torfiles.com/games/adventure/ из adventure/, код 404
http://torfiles.com/games/arcade/ из arcade/, код 404
http://torfiles.com/games/logic/ из logic/, код 404
http://torfiles.com/games/mmorpg/ из mmorpg/, код 404
http://torfiles.com/games/racing/ из racing/, код 404
http://torfiles.com/games/rpg/ из rpg/, код 404
http://torfiles.com/games/shooter/ из shooter/, код 404
http://torfiles.com/games/simulator/ из simulator/, код 404
http://torfiles.com/games/sportt/ из sportt/, код 404
http://torfiles.com/istoricheskiy/ из drama/, код 404
http://torfiles.com/katastrofy/ из drama/, код 404
http://torfiles.com/mistika/ из melodrama/, код 404
http://torfiles.com/music/ из fantastika/, код 404
http://torfiles.com/music/drum-n-bass/ из drum-n-bass/, код 404
http://torfiles.com/music/dubstep/ из dubstep/, код 404
http://torfiles.com/music/electro/ из electro/, код 404
http://torfiles.com/music/hip-hop/ из hip-hop/, код 404
http://torfiles.com/music/house/ из house/, код 404
http://torfiles.com/music/pop/ из pop/, код 404
http://torfiles.com/music/rap/ из rap/, код 404
http://torfiles.com/music/rnb/ из rnb/, код 404
http://torfiles.com/music/shanson/ из shanson/, код 404
http://torfiles.com/music/soundtrack/ из soundtrack/, код 404
http://torfiles.com/music/techno/ из techno/, код 404
http://torfiles.com/music/trance/ из trance/, код 404
http://torfiles.com/myuzikl/ из multfilm/, код 404
http://torfiles.com/otechestvennyy/ из multfilm/, код 404
http://torfiles.com/semeynyy/ из priklyucheniya/, код 404
http://torfiles.com/serials/ из fantastika/, код 404
http://torfiles.com/sport/ из priklyucheniya/, код 404
http://torfiles.com/strategy/ из fantastika/, код 404
http://torfiles.com/vestern/ из boevik/, код 404
http://torfiles.com/voennyy/ из boevik/, код 404

Запрет индексации(13):

engine/download.php?id=16 вызов из 58-naprolom.html причина:robots.txt
engine/download.php?id=17 вызов из 59-mstiteli.html причина:robots.txt
engine/download.php?id=18 вызов из 57-schastlivchik.html причина:robots.txt
engine/download.php?id=19 вызов из 60-mrachnye-teni.html причина:robots.txt
engine/download.php?id=23 вызов из 76-zapretnaya-zona.html причина:robots.txt
engine/download.php?id=24 вызов из 75-lyudi-v-chernom-3.html причина:robots.txt
index.php?do=feedback вызов из newposts причина:robots.txt
index.php?do=lostpassword причина:robots.txt
index.php?do=register причина:robots.txt
page/2/ вызов из xfsearch/%D4%F0%E0%ED%F6%E8%FF/ причина:robots.txt
pravoobladatelyam.html вызов из main/ причина:robots.txt
user/admin вызов из 75-lyudi-v-chernom-3.html причина:robots.txt
user/waveman вызов из 58-naprolom.html причина:robots.txt


Вот сам роботс:

User-agent: Yandex
Disallow: /user/
Disallow: /backup/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /upgrade/
Disallow: /uploads/
Disallow: /*print
Disallow: /autоbackup.php
Disallow: /admin.php
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=register
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /*action=mobile$
Disallow: /do=*
Disallow: /*do=*
Disallow: /?*
Disallow: /page/*
Disallow: /pravoobladatelyam.html
Disallow: /index.php?name=search
Host: torfiles.com
Sitemap: http://torfiles.com/sitemap.xml

User-agent: *
Disallow: /*print
Disallow: /index.php?name=search
Disallow: /backup/
Disallow: /user/
Disallow: /engine/
Disallow: /language/
Disallow: /upgrade/
Disallow: /autоbackup.php
Disallow: /admin.php
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=register
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /*action=mobile$
Disallow: /do=*
Disallow: /*do=*
Disallow: /?*
Disallow: /page/*
Disallow: / pravoobladatelyam.html
Sitemap: http://torfiles.com/sitemap.xml


Хотелось бы узнать в чем может быть столько ошыбок при создании. Больше интересует запрет на индексацию новостей.
Добавлено: 28-05-2012, 17:43:07

Меня именно интересует будут индексироватся новости или нет?) А то это непонятно engine/download.php?id=16 вызов из 58-naprolom.html причина:robots.txt )