Jump to content

Seo дубли страниц


Николя223
 Share

Recommended Posts

Добрый день возникла задача не по верстке и не по php, по seo

На одном сайте больше 200 000 страниц, половина из них дубли

как их определить?

 

Гугл вебмастер использовать не получиться, сайт почему то не в индексе гугла (возможно из за robot.txt)

 

использовал программку для сбора ссылок с сайта - она успела, только тысяч 60 собрать, очень долго формировала файл с результатами, который оказался на 250 мегабайт, мои браузеры виснут((

 

Есть знающие люди, как  можно сделать такой большой объем? 

Link to comment
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.
Note: Your post will require moderator approval before it will be visible.

Guest
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

 Share

×
×
  • Create New...

Important Information

We have placed cookies on your device to help make this website better. You can adjust your cookie settings, otherwise we'll assume you're okay to continue. See more about our Guidelines and Privacy Policy