Sitemap генератор


Бесплатный генератор Sitemap для быстрого автоматического создания полной карты сайта. Нужно лишь указать его адрес и запустить программу.

Карта сайта обычно бывает в двух форматах:

  1. Как обычная страница в формате HTML, оформленная в стиле своего сайта. Такие страницы в большей степени предназначены для посетителей;
  2. В специальном формате передачи данных XML, который более удобен для поисковых роботов.

С помощью первого варианта карты можно найти страницу по названию и оценить масштаб сайта (увидев перечень всех его страниц).

А второй помогает улучшить индексацию сайта поисковиками.

И программа SiteMap Generator от WonderWebWare дает широчайшие возможности по созданию карты сайта с минимальными усилиями со стороны веб-мастера.

Возможности программы

URL (англ. Uniform Resource Locator) — способ записи адреса страницы сайта или документа в сети.

Самое главное, что может делать это программа — создавать карты сайта в разных форматах (XML, TXT, экспорт ссылок в файл CSV или HTML).


Подобно интернет-пауку поисковика она, получив стартовый URL, сканирует весь Ваш сайт, выдавая список всех ссылок.

В программе даже есть встроенный браузер для предпросмотра сайта.

Еще одна полезность: программой можно пользоваться, сканируя несколько сайтов сразу (не по очереди). Для этого достаточно запустить несколько окон SiteMap Generator и работать с ними одновременно.

Установка SiteMap Generator

Установка программы вполне стандартная. Скачиваем архив с сайта и запускаем установочный файл.

Нажимаем «Next», принимаем Лицензионное соглашение, и далее везде нажимаем «Next» и в конце «Finish».

Интерфейс

Окно программы имеет 8 основных вкладок. В принципе, именно они и описывают все возможности данного софта.

Окно программы SiteMap Generator 0.975 beta

  1. Первая вкладка является главной. Здесь вводится URL сайта, здесь же начинается и старт анализа.
  2. Карта сайта для Google (формат XML).
  3. Карта сайта для Yahoo (текстовый формат).
  4. Карта в формате HTML.
  5. Карта в формате CSV.
  6. Проблемные URL.
  7. Исходящие ссылки.
  8. Файл robots.txt.

Кнопки внизу позволяют обеспечить быстрый доступ к остальным функциям, предоставляемым программой.


Создание карты сайта

Давайте запустим создание карты и посмотрим, как справится эта программа.

Первое, что необходимо сделать — ввести доменное имя сайта в соответствующее поле.

Здесь не нужно добавлять префикс www. Просто вводим само имя до первого знака «/». Затем нажимаем «Start» и наблюдаем за прогрессом.

Запуск сканирования SiteMap Generator 0.975 beta

В зависимости от размера сайта (количества страниц), этот процесс может занять некоторое время. Средняя скорость сканирования — около 200 страниц в минуту при скорости доступа в Интернет не менее 2 мегабит.

Если Вы не меняли никаких настроек, а оставили всё по умолчанию, то SiteMap Generator будет использовать лишь часть пропускной способности канала, позволяя спокойно пользоваться Интернетом и свернув программу в трей с помощью кнопки «Hide to Tray» .

Кнопка Hide to Tray для переключения генератора карты сайта SiteMap Generator в фоновой режим

После того, как сканирование сайта закончено, можно сразу создать его карту.

Предположим, что нам необходим файл карты сайта для поисковика Google. Переходим в соответствующую вкладку.

Как видим, карта создана автоматически, и все, что теперь нужно — сохранить файл в формате XML на Вашем компьютере. Для этого нажимаем кнопку «Save to File».


Вкладка Google Sitemap в SiteMap Generator

Теперь можно загружать файл карты на свой хостинг, и не забыть уведомить Google в своём аккаунте на Google webmaster.

Кнопка «Copy to Clipboard» позволяет скопировать все содержимое в буфер обмена, если необходимо вставить содержимое в другую программу.

Основные настройки

Разберем настройки программы. Во-первых, стоит отметить, что на момент написания этого обзора, последняя версия программы была — 0.974 (beta).

Бета-версия подразумевает незаконченность программы, поэтому в окне настроек есть несколько предупреждений, а так же экспериментальные настройки (Experimental).

Первое, что попадается на глаза из настроек – настройки скорости (Spider Settings).

Здесь есть лишь один пункт — «Max. Simultaneous Connections» (максимальное число одновременных подключений).

Вы можете выбрать значение от 1 до 10, но помните, что делаете это на свой страх и риск, ведь это хоть и увеличивает скорость, но сервер будет получать больше одновременных подключений, что может вызвать проблемы на слабых хостингах.

Spider Settings генератора карты сайта SiteMap Generator

Более подробные настройки можно вызвать, нажав кнопку «Settings», которая есть в главном окне программы и в меню «File».

Окно настроек содержит 3 вкладки:


  • Crawler Settings — настройки поведения «паука» программы.
  • Google XML Settings — настройка дополнительных меток для карты сайта Google.
  • Experimental — экспериментальные настройки, которые можно применять, но на свой страх и риск.

Остановимся подробнее на первой вкладке.

  • Max. file size — здесь задается максимальный размер обрабатываемых страниц. Если страница превышает указанный размер, она пропускается.
  • Max. URL Length — укажите максимальную длину URL. Если URL будет длиннее, страница будет пропущена.
  • Server Response Timeout — максимальное время ожидания от сервера.
  • Delay between pages — это параметр задержки между страницами. Данный параметр влияет на нагрузку, оказываемую на сервер.

Дополнительные настройки (Advanced Settings).

Здесь сразу бросается в глаза предупреждение разработчиков о том, что «не стоит трогать данные настройки, если Вы не знаете или не уверены в том, что делаете! Это может перегрузить ваш сервер».


Для расширения кругозора изучим и эти настройки.

Pause for *** seconds after every *** pages — этот параметр позволяет задать дополнительную паузу между сканированиями после прохождения определенного количества страниц.

Таким образом можно уменьшить нагрузку на сервер за счет замедления сканирования.

Stop after *** pages — остановить сканирование после определенного количества страниц.

Не стоит задавать параметр выше 50 000 страниц, так как Google не принимает карты сайтов, количество ссылок в которых превышают это значение.

Окно настроек, вкладка Crawler Settings в программе для генерации карты сайта

Переходим к следующей вкладке. Здесь Вы выставляете дополнительные атрибуты, но делать это совсем не обязательно, так как Google и так будет сканировать Ваш сайт.

Вы можете на это повлиять, но помните, что настройки применяются ко всем страницам сразу, что не всегда хорошо.

Окно настроек, вкладка Google XML Settings

Вот, собственно, и все. Согласитесь, очень удобная и простая программа.

Достоинства и недостатки программы

Плюсы программы SiteMap Generator 0.975 betaПлюсы:

  • Возможность составления карты сайта в различных форматах;
  • Простое составление файла robots.txt.

Минусы программы SiteMap Generator 0.975 betaМинусы:

  • Не поддерживает Yandex. Хотя Вы без труда создадите карту сайта для Yandex, все же не хватает данной вкладки в программе рядом с Google и Yahoo;
  • Пока программа не закончена и не имеет финальной версии;
  • Англоязычный интерфейс, хотя и достаточно простой.

Выводы

Несмотря на некоторые недостатки, программа-генератор SiteMap Generator поможет быстро и легко составить карту любого сайта.

Для веб-мастера это очень полезный инструмент с широкими возможностями, позволяющий извлечь URL всех страниц сайта и сделать удобную для людей и поисковиков карту сайта.

P.S. Разрешается свободно копировать и цитировать данную статью при условии указания открытой активной ссылки на источник и сохранения авторства Вячеслава Протасова.

P.P.S. Карта сайта, это хорошо, но не менее важно, чтобы все ссылки на страницах были рабочими. А найти битые ссылки поможет вот эта отличная утилита:
Проверка ссылок с Xenu Link Sleuth https://www.bestfree.ru/soft/inet/checklinks.php

www.bestfree.ru

XML Sitemap Generator by Small SEO Tools is a powerful tool, but like any powerful tool, a little training and background on how all the bits work goes a long way.

So let’s run up on the exact steps you’ll need to follow to use the the tool in the most efficient way:


    Step #1: On the XML Sitemap Generator section, enter your website URL.

    Step #2: Specify the optional custom parameters according to your preferences. The parameters include the number of pages you need to crawl, the change frequency, the default priority, and the dates.

    Step #3: Once you’ve specified the parameters you want, click on the “Generate Sitemap” button.

    The tool will take a few moments to analyze your request, crawl your site, and generate a sitemap for you based on the details you provided.

    Step #4: Once the tool has completed the process, it will present you with the sitemap details, including the number of pages, list of broken links, XML file content, and the link to the sitemap file.

    Step #5: Next, click on “Save As XML File” to download the sitemap file in a .xml format.

    sitemap generator


    Step #6: Next up, proceed to the root directory of your website and put the sitemap.xml file into the domain root folder. In the event that you have multiple sitemaps cooped up in a sitemap.zip file, unzip it and upload all the sitemap files to root directory of your website.

    Step #7: As an additional step, go to your Google Search Console (formerly Google Webmaster Tools) account and add your sitemap URL. Like stated earlier, our free online tool also supports other major search engines apart from Google. So if you’re a Bing person, you’d just have to go to your Bing Webmaster Tools account to add it.

Submitting your XML file to the search engines (via Google Search Console for Google) is a way to verify it. Just ensure that the Sitemap is in the correct format and has been properly uploaded to your webserver before you attempt to verify it.

If your website is new, submitting your Sitemap to Google pushes the search engine to discover and index your site sooner than they would have discovered it on their own.

We hope the above information has helped you to make the most of our free online XML map creator. We also have other SEO tools which you may find useful, including Page Speet Test, Seo Checker, and Website Broken Link Checker.

smallseotools.com

Карта сайта sitemap в формате xml — а оно мне надо


Но основным инструментом, предназначенным для прямого указания поисковикам тех страниц ресурса, которые нужно будет обязательно проиндексировать, является файл под названием Sitemap.xml (это его наиболее частое название, но по идее его можно обозвать как угодно, не суть важно), который не будет виден посетителям вашего web проекта.

Он составляется с учетом специального синтаксиса, понятного поисковым машинам, где будут перечислены все страницы, подлежащие индексации с указанием степени их важности, даты последнего обновления и примерной частоты обновления.

Есть два основных файла, которые должны иметься у любого web проекта — robots.txt и sitemap.xml. Если у вашего проекта их нет или они заполнены не правильно, то с большой долей вероятности вы сильно вредите своему ресурсу и не позволяете ему раскрыться на все сто процентов.

Вы, конечно же, можете не послушать меня (ибо я не есть авторитет, в силу относительно малого накопленного фактического материала), но думаю, что со специалистами, имеющими под рукой статистику с десятков тысяч проектов, вы огульно спорить не будете.

На этот случай у меня оказался припасен «рояль в кустах». Прямо перед написанием этой статьи попалась на глаза публикация специалистов из всем известной системы автоматического продвижения под необычным названием «Руки» (это аналог MegaIndex, о котором я писал Мегаиндекса).


Понятно, что любая подобная им система заинтересована в том, чтобы проекты их клиентов успешно продвигались, но они могут только накачивать ресурсы клиентов ссылочной массой, а влиять на наполнение и правильную техническую настройку сайтов они, к сожалению, не могут.

Поэтому и было проведено очень интересное и показательное исследование, которое было призвано выявить 10 самых популярных причин, которые затрудняют продвижение проектов и ткнуть этими данным клиентам прямо в …

На первом месте, конечно же, был «не уникальный контент» (либо вы скопистили, либо у вас украли тексты, что сути не меняет). Но на втором месте была как раз именно карта сайта в формате xml, а точнее ее отсутствие или несоответствие признанному формату создания. Ну, а на третьем месте был уже упомянутый ранее файл robots.txt (его отсутствие или неправильное создание):

Sitemap генератор

Когда голословно утверждаешь, что карта должна быть у вашего проекта обязательно (иначе кирдык), то это не звучит так убедительно, как в случае подкрепления данного утверждения реальными фактами из довольно-таки репрезентативного исследования.

Ладно, будем считать, что я вас убедил и давайте посмотрим, как можно самим создать сайтмап (синтаксис формата), как сделать ее для Joomla и WordPress, а так же посмотрим, как можно будет создать ее с помощью специальных онлайн генераторов (generator).

Но просто создать sitemap еще не достаточно для того, чтобы быть уверенным в правильной индексации вашего проекта поисковиками. Нужно еще будет сделать так, чтобы об этой самой карте сайта узнали поисковые системы (в нашем случае это Google и Яндекс). Сделать это можно будет двумя способами, но об этом мы поговорим чуть позже (должна же быть хоть какая-то интрига, удерживающая внимание читателей).

Зачем вообще нужен сайт мап и файл robots.txt

Давайте для начала попробуем обосновать логическую необходимость использования как файла robots.txt, запрещающего индексацию определенных элементов вашего web проекта, так и файла сайт мап, предписывающего индексацию определенных страниц. Для этого вернемся на пяток-десяток лет назад, когда большинство ресурсов в интернете представляли из себя просто набор Html файликов, в которых и содержались тексты всех статей.

Поисковый робот Гугла или Яндекса просто заходил на такой Html проект и начинал индексировать все, что ему попадется под руку, ибо практически везде содержался контент проекта. А что же происходит сейчас, в условиях повального использования CMS (систем управления контентом)? Собственно, даже сразу после установки движка поисковый робот уже обнаружит у вас несколько тысяч файлов и это при том, что никакого контента у вас еще может и не быть (ну, не написали вы еще ни одной статьи).

Да и вообще, контент в современных CMS, как правило, хранится не в файлах, а в базе данных, которую поисковый робот напрямую проиндексировать, естественно, не сможет (для работы с базами советую бесплатно скачать, установить и настроить PhpMyAdmin).

Понятно, что потыркавшись туда сюда, поисковые роботы Яндекса и Google все же найдут ваш контент и проиндексируют его, но вот насколько быстро это произойдет и насколько полной будет индексация вашего проекта — очень большой вопрос.

Вот именно для упрощения и ускорения индексации проектов поисковиками в условиях повального использования CMS и следует в обязательном порядке создавать robots.txt и sitemap.xml. C помощью первого файла вы подсказываете роботам поисковиков на индексацию каких файлов не стоит тратить время (объекты движка, например), а так же с помощью него можно закрыть от индексации и часть страниц для устранения эффекта дублирования контента, который присущ многим CMS (читайте об этом подробнее в статье про robots.txt).

А с помощью файла сайтмап вы четко и ясно говорите роботам Яндекса и Гугла, что именно на вашем проекте содержит контент, чтобы они не тыркались понапрасну по углам файлового хозяйства используемого движка. Не забывайте, что у ботов есть определенные лимиты на время и количество просмотренных документов. Он побродит у вас по файлам движка и уйдет, а контент останется не проиндексированным еще долгое время. О как.

Помните как в известной комедии говорил один колоритный персонаж: «Ты туда не ходи, ты сюда ходи, а то…». Вот именно функцию этого персонажа и выполняют robots.txt и сайт мап с расширением xml для регулирования перемещений поисковых ботов по закоулкам вашего web проекта. Понятно, что боты могут и взбрыктуть, но скорее всего они послушно будут выполнять ваши грамотно написанные запрещающие и предписывающие (в карте сайта) инструкции.

Понятно? Тогда приступаем непосредственно к решению вопроса, как создать sitemap.xml различным способами и как сообщить о его существовании двум китам поиска в рунете — Google и Яндексу, чтобы они не шарились по вашему проекту почем зря, создавая при этом еще и дополнительную нагрузку на сервер вашего хостинга, но это, правда, уже сильно второстепенная вещь, главное — это именно индексация (быстрая и всеобъемлющая).

В отличии от robots.txt, который вам писать придется скорее всего собственноручно, файл карты сайта в формте xml, как правило, стараются создать каким-либо автоматическим способом. Оно и понятно, ибо при большом количестве страниц на часто обновляемом проекте ручное его создание может привести к повреждению ума у вебмастера.

Да это вовсе и не обязательно, т.к. практически для каждой CMS найдется расширение, которое позволит создать, а при появлении новых материалов и пересоздать файл сайтмап. Ну, или можно будет всегда воспользоваться каким-либо онлайн генератором (generator) карты сайта в виде готового решения.

Но все же, мне кажется, будет не лишним ознакомиться с нехитрым (да что там говорить — простейшим) синтаксисом создания sitemap. К тому же на маленьких и редко обновляемых проектах можно набросать его и вручную.

Как создать Sitemap.xml самому в Joomla и Вордпрессе

Этот файл вы можете создать в любом текстовом редакторе, например, все в том же Notepad++, о котором тут я вам все уши прожужжал. Карта сайта в формате xml имеет обычно примерно такую структуру.

Сначала идет стандартная часть:

<?xml version="1.0" encoding="UTF-8"?> <urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">

А затем идет серия повторяющихся блоков, заключенных в теги «url», каждый из которых описывает одну из страниц вашего проекта, для которого пишется данная карта:

<url> 		<loc>https://ktonanovenkogo.ru/</loc> 		<lastmod>2011-05-12T19:22:36+00:00</lastmod> 		<changefreq>daily</changefreq> 		<priority>1.0</priority> 	</url>

Обязательным в этом xml коде является только пара тегов «loc», в которых заключается адрес страниц вашего проекта, которую должны будут проиндексировать поисковые системы. В теги «lastmod» заключена дата последнего обновления данной страницы, что позволит роботу лишний раз не заходить на не изменившуюся с момента последнего захода страницу.

В тегах «changefreq» указывается примерная частота обновления данной страницы (раз в день, неделю, месяц), ну, а в теге «priority» указывается приоритетность ее индексации. Изначальный приоритет у всех страниц равен 0.5, но вы вольны изменять его для определения очередности индексации вашего web проекта (от 0 до 1).

Не забывайте, что за один проход робот не сможет пройти по всем ссылкам в большой карте сайта (обычно около сотни ссылок за раз проходит), а значит с помощью большего приоритета можно выбрать наиболее важные для быстрой индексации страницы.

По стандарту sitemap.xml не может содержать более 50 000 ссылок и весить более 10 Мб. Хотя, многие даже при превышении 500 — 1000 ссылок в карте сайта стараются ее разбить на несколько файлов, подсунув поисковым системам и указав в robots.txt индексный файл сайтмап, в котором имеются ссылки на все остальные файлы карт большого сайта.

Его синтаксис будет примерно таким:

<?xml version="1.0" encoding="UTF-8"?> <urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"  <sitemap>   <loc>https://ktonanovenkogo.ru/sitemap.xml.gz</loc>   <lastmod>2011-04-01T18:23:17+00:00</lastmod>   </sitemap>   <loc>https://ktonanovenkogo.ru/sitemap2.xml.gz</loc>   <lastmod>2011-04-01T18:23:17+00:00</lastmod>  </sitemap> 

Генерация карты сайта в Joomla и WordPress

Создать карту сайта для WordPress можно будет с помощью плагина Google XML Sitemaps. Для нее вы сможете произвести множество настроек, которые позволят исключить часть материалов вашего сайта, а так же можете задать предполагаемую частоту обновления. Кроме создания карты, плагин Google XML Sitemaps при публикации новых материалов на вашем блоге уведомляет об этом многие поисковые системы, приглашая их побыстрее провести индексацию.

Путь до файла сайтмап можете задать сами в настройках плагина и даже можете дать ему название отличное от классического sitemap.xml. Многие владельцы именно так и делают — называю этот файл kjfdjkf.xml и закапывают его в огромном количестве вложенных папок. Тем самы они прячут карту сайта от посторонних глаз. В роботс.тхт они тоже этот путь не указывают, а сообщают его только Яндексу и Гуглу в их панелях для вебмастеров, о которых речь пойдет чуть ниже.

Sitemap генератор

Создать карту сайта для Joomla можно с помощью компонента Xmap. По приведенной чуть выше ссылке вы найдете довольно подробную инструкцию, как по ее созданию в виде файла xml, так и в формате Html, ориентированную в первую очередь не на ускорение индексации, а на удобство пользователей.

Sitemap генератор

Ссылку на созданный сайтмап сможете найти в настройках компонента, как показано на приведенном скриншоте.

Как добавить сайт мап в Яндекс и Гугл Вебмастер

Как видите, в отличии от файла robots.txt (который обязательно должен находиться в корневой папке вашего web проекта), файл сайт мап может лежать где угодно. Но вам нужно будет сообщить о его местоположении поисковым системам. Сделать это можно двумя способами.

Во-первых, в robots.txt предусмотрена специальная директива «Sitemap», которая, например, для моего блога будет выглядеть так:

Sitemap: https://ktonanovenkogo.ru/sitemap.xml

или так (файл карты сайта вовсе не обязательно должен называться sitemap.xml, как я уже упоминал выше)

Sitemap: https://ktonanovenkogo.ru/forum/index.php?action=sitemap;xml

Обязательно нужно прописывать полный абсолютный путь до сайтмапа, не опуская «https://ktonanovenkogo.ru». Это я говорю потому, что пути во всех остальных директивах robots.txt пишутся без указания «https://ktonanovenkogo.ru» (читайте тут про относительные и абсолютные пути).

Обычно директиву «Sitemap» прописывают в самом конце. Поисковые роботы при очередном заходе на ваш web проект обязательно просмотрят содержимое robots.txt и загрузят для изучения вашу карту. Однако, таким образом могут узнать о ее существования всякие редиски, которым сайт мап поможет тырить у вас контент.

Но существует еще один способ уже напрямую передать информацию о местоположении карты сайта поисковикам без посредничества robots.txt. Делается это через интерфейс Яндекс Вебмастера и панели инструментов Google, хотя можно Bing вебмастер использовать. Вы уже знакомы с этими инструментами поисковых систем?

Если нет, то обязательно добавьте свой проект и в инструменты Яндекс для вебмастеров, и в панель инструментов Гугла, а затем укажите в соответствующих вкладках путь до вашей карты сайта в формате Xml.

Так выглядит форма добавления сайтмапа для Яндекс Вебмастера:

Sitemap генератор

А так выглядит аналогичная форма для прописывания пути в панели инструментов Google:

Sitemap генератор

ktonanovenkogo.ru

Создание и отправка файлов Sitemap

  1. Решите, какие страницы вашего сайта должны сканировать поисковые роботы Google, и определите канонические URL для каждой из них. 
  2. Определите, какой формат файла Sitemap нужно использовать. Создать файлы Sitemap можно как вручную, так и автоматически с помощью сторонних инструментов.
  3. Проверьте файл Sitemap с помощью инструментов, доступных в Search Console.
  4. Сделайте файл Sitemap доступным для Google. Для этого добавьте ссылку на него в файл robots.txt или отправьте его непосредственно в Google с помощью Search Console.

Форматы файлов Sitemap

Google поддерживает несколько форматов файлов Sitemap, описанных ниже. Во всех форматах следует использовать стандартный протокол. Google в настоящее время не поддерживает атрибут <priority> в файлах Sitemap.

Для всех форматов действуют следующие ограничения: файл Sitemap может содержать не более 50 000 URL, а его размер в несжатом виде не должен превышать 50 МБ. Если объем файла или количество перечисленных в нем адресов превышают эти лимиты, разбейте его на несколько частей. Вы можете создать файл индекса Sitemap, перечислив в нем все файлы Sitemap, и отправить их в Google все сразу.

Расширения файлов Sitemap

Google поддерживает расширенный синтаксис в файле Sitemap для приведенных ниже типов информации. С его помощью можно добавлять описание видео, изображений и другого контента для улучшения его индексации.

  • Видео
  • Изображения
  • Новости

Общие рекомендации по файлам Sitemap

  • Используйте один и тот же синтаксис при указании URL. Google будет сканировать их в точности по списку. Например, если сайт размещен по адресу http://www.example.com/, не используйте URL /https://example.com/ (без www) или ./MoyaStranitsa.html (относительный URL).
  • Не указывайте в добавляемых URL идентификаторы сессий – это может привести к избыточному сканированию страниц.
  • Сообщите Google о версии страницы на других языках с помощью атрибута hreflang.
  • Файлы Sitemap должны использовать кодировку UTF-8, а в URL необходимо применять экранирование.
  • Разбивайте большие файлы Sitemap на файлы поменьше, чтобы снизить нагрузку на сервер при отправке информации в Google. Файл Sitemap может содержать не более 50 000 URL, а его размер в несжатом виде не должен превышать 50 МБ. Создайте файл индекса Sitemap, перечислив в нем все файлы Sitemap, и отправьте его в Google вместо отдельных файлов.
  • Используйте рекомендуемые методы канонизации URL, чтобы сообщить Google о версии домена, для которой составлен файл Sitemap (если сайт доступен как с www, так и без www). В этом случае потребуется только один файл Sitemap.
  • Используйте расширения файлов Sitemap для дополнительных типов информации, в частности видео, изображений и новостей.
  • Если у мобильной и обычной версии страницы разные URL, мы рекомендуем указывать только на одну из них. Если все же требуется указание на оба URL, добавьте для них аннотации, чтобы распознавались разные версии.
  • Если существуют версии страницы на других языках или для других регионов, вы можете указать их с помощью файла Sitemap или атрибута hreflang.
  • Применяйте только цифры и латинские буквы. Файл Sitemap обязательно должен быть в кодировке UTF-8 (обычно ее можно выбрать при сохранении). Во всех файлах XML для любых значений данных (включая URL) необходимо применять экранирование элементов при использовании символов, перечисленных в таблице ниже.  Файл Sitemap может содержать только символы ASCII. В нем не должно быть расширенных символов ASCII, определенных управляющих кодов и специальных символов, таких как * и {}. Если они содержатся в URL, то при попытке его добавить появится сообщение об ошибке.
    Символ Маскирование
    Амперсанд & &amp;
    Одинарные кавычки &apos;
    Двойные кавычки « &quot;
    Больше чем > &gt;
    Меньше чем < &lt;

    Кроме того, все URL (включая адреса в вашем файле Sitemap) должны быть правильно экранированы и закодированы, чтобы их мог обработать веб-сервер. Обычно это выполняется автоматически, если для создания URL вы применяете какой-либо скрипт, инструмент или файл журнала, то есть не вводите адреса вручную. Если при отправке файла Sitemap вы получаете оповещение о том, что Google не удалось найти ваши URL, убедитесь, что они соответствуют стандарту RFC-3986 для URI, стандарту RFC-3987 для IRI и стандарту XML.

    Ниже представлен пример URL, в котором содержится символ, не относящийся к кодировке ASCII (ü), а также символ, требующий экранирования (&).
    http://www.example.com/ümlat.html&q=name
    Этот же URL, переведенный в кодировку ISO-8859-1 (для размещения на сервере, использующем эту кодировку) и содержащий маскирование:
    http://www.example.com/%FCmlat.html&q=name
    Этот же URL, переведенный в кодировку UTF-8 (для размещения на сервере, использующем эту кодировку) и содержащий маскирование:
    http://www.example.com/%C3%BCmlat.html&amp;q=name
    Этот же URL, содержащий маскирование:
    http://www.example.com/%C3%BCmlat.html&amp;q=name

Как сделать файл Sitemap доступным для Google

Предоставить Google доступ к файлу Sitemap можно несколькими способами:

  • Отправить его в Google с помощью инструмента Search Console
  • Вставить в любом месте файла robots.txt строку, указывающую на местоположение файла Sitemap:
    Sitemap: http://example.com/adres_sitemap.xml.
  • Воспользоваться запросом ping. Отправьте такой запрос HTTP GET:
      http://www.google.com/ping?sitemap=<polniy_url_faila_sitemap>
    Пример:
      http://www.google.com/ping?sitemap=https://example.com/sitemap.xml

support.google.com

         

Введите адрес сайта:

Частота обновления:
Последнее изменение:

"Карта сайта" — грамотное оформление структуры ресурса

Инструмент "Карта сайта" поможет веб-мастеру за несколько секунд в режиме online создать "путеводитель" по сайту в формате xml. В конечном результате получится документ, который нужно загрузить в корневую папку ресурса. Карта сайта, которую вы создадите с помощью сервиса cy-pr.com, предназначена для поисковых роботов: с ее помощью они быстрее и качественней проиндексируют все страницы вашего ресурса. И когда на сайте появится свежий контент, то карта сайта обновится автоматически – для этого необходимо в специальном поле указать частоту обновлений xml при создании документа. Для крупных ресурсов рекомендуем выставлять частоту обновлений не реже одного раза в неделю.

Задачи инструмента Site map

Данный инструмент предназначен для структурирования информации, находящейся на ресурсе, и приведения этих данных в удобный для понимания поисковыми роботами формат для того, чтобы:

— указать роботам кратчайший путь к нужной странице;

— помочь поисковым машинам лучше ориентироваться в структуре сайта и вовремя реагировать на изменения;

Кроме этого, с помощью карты сайта можно осуществить внутреннюю перелинковку страниц.

Каким ресурсам нужна Карта сайта?

Обычно Карту сайта делают для крупных ресурсов со сложной, запутанной структурой. Сервис cy-pr.com представляет вам удобный инструмент, который автоматически создаст Site map для любого ресурса, а вам только останется внести сгенерированный файл sitemap.xml в его корень.

После того, как вы создали карту своего ресурса и добавили ее в корневой файл, Site map нужно "познакомить" с поисковыми системами. Для добавления карты вашего сайта в Google необходимо создать аккаунт в Google Search Console, далее зайти в меню Sitemap и добавить ссылку: (название_сайта)/sitemap.xml. А для знакомства с Яндексом нужно посетить "Яндекс.Вебмастер" (http://webmaster.yandex.ru) и указать адрес xml файла в разделе "Настройка индексирования".

Не путайте карту в формате XML с HTML-картой для пользователей

Напоследок стоит сказать пару слов о Карте сайта, предназначенной для пользователей. Эту страничку в формате HTML делают для того, чтобы посетители не "заблудились" на сайте со сложной структурой и нашли интересующую их информацию. Эта карта не имеет ничего общего с Site map для поисковых роботов и ее не стоит использовать для внутренней перелинковки.

www.cy-pr.com

Создание sitemap.xml (online generator)

Одним из критериев технической оптимизации сайта и его готовности к продвижению является наличие файла sitemap.xml, содержащего полный набор актуальных страниц и отображающих текущую структуру сайта. Этот файл используется поисковыми системами для нахождения новых страниц сайта, а также с помощью него роботу поисковой системы сообщается информация о тех страницах, которые необходимо индексировать.

Помимо самих URL страниц, файл sitemap.xml содержит дополнительную информацию в виде мета-данных, указывающих для каждого URL:

  • дату его последнего изменения
  • частоту изменений
  • его приоритетность на уровне сайта

Чтобы не тратить время на создание подобного файла вручную и был разработан данный инструмент.
Данный Sitemap Generator предназначен для онлайн генерации файла "sitemap.xml", полностью соответствующего стандартам XML и учитывающегося всеми поисковыми системами.

После создания сайтмап, его необходимо скопировать в корневую папку сайта и добавить в конец файла "robots.txt" директиву "Sitemap: http://www.вашсайт.ru/sitemap.xml".

www.majento.ru

SiteMap Genarator — бесплатная программа, которая сильно упрощает работу оптимизатору при работе с созданием карты сайта.

Совсем недавно наткнулся на эту замечательную, а главное функциональную и бесплатную программу. SiteMap Genarator умеет все:

1. Создание карты сайта:
— возможно выбрать главную страницу;
— исключение не нужных страниц в карте;
— возможность создание карты только для определенных страниц сатй

2. Создает карты в нескольких вариантах:
— Google SiteMap|XML;
— YahooMap|Text;
— Html карта;
— CSV

3. Просмотр корневого файла robots.txt
4. Показывает неверные или не правильные урлы на сайте.
5. Работа в несколько потоков (здесь надо быть осторожней, ваш хостер может заблокировать ваш апи при большом пакете запросов к сайту)
6. и многое другое.

Хоть интерфейс программы на английском языке понять что и где не составит труда.

Самое первое надо ввести урл вашего сайта.

Второе, указываем количество соединений с сайтом, при сборе страниц, и в первой колонке указываем начальную страницу (это если она у вас не стандартная index.php, а другая, типа myhome.php и другое), во второй вкладке прописываем страницы для исключения из карты, например:

*seo/* — исключит все страницы из раздела seo

*seo* — исключит все страницы где встречается искомое слово

и третья вкладка — аналогично второй, но на оборот

*seo/* — включить только страницы в разделе seo

*seo/* — включить все страницы в карту сайта где встречается искомое слово

после всех манипуляций жмем кнопку «start» и в режиме реального времени наблюдаем за результатом программы.

В конце мы получим карту сайта в нескольких вариантах, выбираем какой именно нам нужно и используем по назначению.

Версия: 0.972
Дата выхода: май 2012
Тип: бесплатная
Статус: обновляется
Разработчик: Melanto

И как всегда напоминаю в прошлом посте щупали программу ZeroDomains 1.01 — массовая проверка доменов на занятость.

seo-ng.net

Как работает генератор sitemap.xml

  • Вы указываете адрес вашего сайта
  • Робот сервиса проходит по всему Вашему сайту, начиная с главной страницы и находит страницы, которые можно добавить в sitemap. Не попадают в sitemap страницы с ошибками, не содержащие текста или запрещенные в robots.txt.
  • Если количество страниц не более 1000, Вы сразу получает ссылку на файл.
  • Если количество превышает 1000, то каждые 1000 страниц Вам обойдутся от 20 рублей.

Генерирование(поиск) страниц на Вашем ресурсе может занять длительное время. Это зависит не только от количества страниц, но и, например, от времени генерации страницы на сервере. Для таких долгих ожиданий есть функция об оповещении готовности sitemap на электронную почту.

Если у вас есть предложения или замечания по работе сайта пишите на почту .

С gensitemap.ru создать карту сайта легко и быстро.

gensitemap.ru


You May Also Like

About the Author: admind

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *

Этот сайт использует Akismet для борьбы со спамом. Узнайте как обрабатываются ваши данные комментариев.