Hướng dẫn chi tiết về tệp Sơ đồ trang web. Sơ đồ trang web XML cho hình ảnh: plugin WP, thẻ hình ảnh, lỗi Yandex
Chọn một trang web từ danh sách.
Trong trường này, hãy nhập URL nơi có tệp. Ví dụ, https://example.com/sitemap.xml.
Nhấp vào nút Thêm.
Sau khi thêm tệp, nó sẽ được xếp hàng để xử lý. Robot sẽ tải nó xuống trong vòng hai tuần. Mỗi tệp được thêm vào, bao gồm cả những tệp được đính kèm với tệp chỉ mục Sơ đồ trang web, đều được robot xử lý riêng biệt.
Sau khi tải xuống, bên cạnh mỗi tệp bạn sẽ thấy một trong các trạng thái:
| Trạng thái | Sự miêu tả | Ghi chú |
|---|---|---|
| "ĐƯỢC RỒI" | ||
| "Chuyển hướng" | Xóa chuyển hướng và thông báo cho robot về bản cập nhật | |
| "Lỗi" | Tệp không được định dạng chính xác | thông báo cho robot về bản cập nhật |
| "Không được lập chỉ mục" | Kiểm tra phản hồi của máy chủ |
|
| Không cho phép | thông báo cho robot về bản cập nhật |
| Trạng thái | Sự miêu tả | Ghi chú |
|---|---|---|
| "ĐƯỢC RỒI" | Tệp được định dạng chính xác và được tải vào cơ sở dữ liệu robot | Ngày tải xuống cuối cùng sẽ được hiển thị bên cạnh tệp. Các trang được lập chỉ mục sẽ xuất hiện trong kết quả tìm kiếm trong vòng hai tuần |
| "Chuyển hướng" | URL được chỉ định chuyển hướng đến một địa chỉ khác | Xóa chuyển hướng và thông báo cho robot về bản cập nhật |
| "Lỗi" | Tệp không được định dạng chính xác | Nhấp vào liên kết Lỗi để biết chi tiết. Sau khi thực hiện thay đổi đối với tệp, hãy thông báo cho robot về bản cập nhật |
| "Không được lập chỉ mục" | Khi truy cập Sơ đồ trang web, máy chủ trả về mã HTTP khác 200 | Kiểm tra xem robot có thể truy cập được tệp hay không bằng cách sử dụng công cụ Kiểm tra phản hồi của máy chủ bằng cách chỉ định đường dẫn đầy đủ đến tệp. Nếu tệp không có sẵn, hãy liên hệ với quản trị viên của trang web hoặc máy chủ chứa tệp đó. |
| Quyền truy cập vào tệp bị từ chối trong robots.txt bằng lệnh Disallow | Cho phép truy cập vào Sơ đồ trang web và thông báo cho robot về bản cập nhật |
Cập nhật sơ đồ trang web
Nếu bạn đã thay đổi tệp Sơ đồ trang web được thêm vào Yandex.Webmaster, bạn không cần phải xóa tệp đó và tải lên lại - robot thường xuyên kiểm tra tệp để tìm các bản cập nhật và lỗi.
Để tăng tốc độ thu thập thông tin tệp, hãy nhấp vào biểu tượng. Nếu bạn đang sử dụng tệp chỉ mục Sơ đồ trang web, bạn có thể bắt đầu xử lý từng tệp được liệt kê trong đó. Robot sẽ tải dữ liệu xuống trong vòng ba ngày. Bạn có thể sử dụng chức năng này tối đa 10 lần cho một máy chủ.
Khi bạn đã sử dụng hết tất cả các lần thử, lần tiếp theo sẽ có sau lần thử đầu tiên 30 ngày. Ngày chính xác được hiển thị trong giao diện Webmaster.
Xóa sơ đồ trang web
Trong giao diện Yandex.Webmaster, bạn có thể xóa những tệp đã được thêm trên trang Tệp Sơ đồ trang web: Nếu một lệnh đã được thêm cho Sơ đồ trang web trong tệp robots.txt, hãy xóa nó. Sau khi thực hiện thay đổi, thông tin về Sơ đồ trang web sẽ biến mất khỏi robot và cơ sở dữ liệu Yandex.Webmaster trong vòng vài tuần.
Thông thường, để tạo sitemap.xml, một trong các tùy chọn sau được sử dụng: dịch vụ trực tuyến, mô-đun CMS, chương trình chuyên dụng hoặc thủ công. Dưới đây chúng ta sẽ xem xét chi tiết từng công cụ.
Cách tạo sơ đồ trang web trực tuyến
Có rất nhiều dịch vụ trên Internet cho phép bạn tạo sơ đồ trang web cho robot tìm kiếm. Dưới đây là những cái phổ biến nhất:
Các dịch vụ này hoạt động tốt và thực hiện các chức năng của chúng. Tuy nhiên, theo quy định, họ có giới hạn về số lượng trang được tính đến (thường là 500 trang). Ngoài ra, nếu trang web có điều hướng kém và một số tài liệu khá khó tiếp cận với bưu kiện thì rất có thể những trang này sẽ không được đưa vào sitemap.xml.
Cách tạo sitemap.xml bằng tiện ích bổ sung CMS
Hầu hết các hệ thống quản trị phổ biến đều có tiện ích bổ sung cho phép chúng tạo sơ đồ trang web một cách tự động hoặc thủ công. Đây là cách thuận tiện nhất để làm việc với sơ đồ trang web dành cho các nguồn tài nguyên lớn, với các tài liệu mới được xuất bản liên tục. Như thực tế cho thấy, bạn có thể tìm thấy một số tiện ích bổ sung phù hợp, bạn chỉ cần chọn một tiện ích bổ sung phù hợp nhất với mục tiêu của mình.
Ví dụ: đối với WordPress, plugin như vậy là Sơ đồ trang web Google XML và đối với Joomla, đó là thành phần Xmap. Ngoài ra, trên nhiều công cụ, khả năng tạo tệp sơ đồ trang web có trong cấu hình ban đầu (ví dụ: 1c-Bitrix hoặc DataLife Engine).
Cách tạo sơ đồ trang web bằng Xenu
Xenu là một trong những sản phẩm phần mềm phổ biến nhất được tạo ra cho các chuyên gia SEO. Chương trình này không chỉ có thể tạo sơ đồ trang web cho một trang web mà còn có rất nhiều chức năng hữu ích - kiểm tra các liên kết bị hỏng, xác định các chuyển hướng và hơn thế nữa.
Cần lưu ý rằng Xenu không phải là chương trình duy nhất cho phép bạn tạo sơ đồ trang web.
Cách tạo sơ đồ trang web cho trang web theo cách thủ công
Phương pháp tốn nhiều công sức nhất nhưng đồng thời đáng tin cậy nhất là phương pháp thủ công. Nó được sử dụng khi các tùy chọn khác không phù hợp. Ví dụ: điều này có thể xảy ra nếu có quá nhiều trang không cần thiết trong sơ đồ trang web hoặc một trang web có điều hướng kém không sử dụng CMS.
Sau khi bạn tạo sitemap.xml, hãy nhớ kiểm tra tệp kết quả. Điều này có thể được thực hiện bằng cách sử dụng dịch vụ trong bảng quản trị trang web Yandex, được đặt tại
Trong hướng dẫn này, chúng tôi sẽ đề cập đến các câu hỏi sau:
Sơ đồ trang web là gì?
Đây là một tệp chứa danh sách các liên kết đến tất cả các trang quan trọng của trang web. Tức là tài liệu này hướng các công cụ tìm kiếm đến nội dung chính trên trang web.
Tại sao bạn cần một bản đồ trang web?
Cần có sơ đồ trang web nếu trang web gặp vấn đề về lập chỉ mục do:
1) một số lượng lớn trang;
2) thiếu liên kết (nội bộ hoặc bên ngoài) tới các trang;
3) lồng sâu vào trang web (cấu trúc khó hiểu).
Sơ đồ trang web HTML và XML
Sơ đồ trang web có các loại sau:
- HTML;
Giải thích đơn giản nhất về sự khác biệt giữa các định dạng này là bản đồ XML chủ yếu dành cho các công cụ tìm kiếm, trong khi HTML chủ yếu dành cho người dùng.
bản đồ HTML– Đây chỉ là phần tổng quan chung về trang web, chỉ chứa những thông tin, trang mà người dùng cần xem. Nếu bạn đang ở trên một trang web và đang tìm kiếm một phần cụ thể, bạn có thể dễ dàng tìm thấy nó khi truy cập HTML Sơ đồ trang web. Mặc dù loại sơ đồ trang web này tập trung vào người dùng nhưng nó cũng có thể giúp ích cho thứ hạng của bạn trên công cụ tìm kiếm. Đây là một bằng chứng cho thấy bạn quan tâm đến trải nghiệm người dùng của trang web.
Khi tạo sơ đồ trang web HTML, điều quan trọng cần xem xét là:
1. Nội dung có cấu trúc.
Sơ đồ trang web phải rõ ràng và thuận tiện cho người dùng hiểu. Điều mong muốn là nó bao gồm các phần, danh mục, danh mục con, v.v.
2. Liên kết neo.
Giao thức Thẻ XML Trang web này dành cho robot tìm kiếm. Tệp XML chứa thông tin về thời điểm URL được cập nhật lần cuối, tầm quan trọng của nó và tần suất xảy ra các thay đổi.
Thông thường, Sơ đồ trang web bao gồm các thẻ XML sau:
Yêu cầu:
Необязательные:
Не устанавливайте для каждого URL-адреса слишком частую смену файла и максимальный приоритет. Если метки частоты и приоритета не отражают реальность, вероятнее всего, поисковые системы будут более склонны игнорировать всю карту XML.
Другие форматы Sitemap
Помимо вышеперечисленных карт сайта, поисковые системы также поддерживают следующие форматы:
Для Google:
— RSS, mRSS и Atom 1.0;
RSS / Atom фиды должны содержать последние обновления вашего сайта. Обычно они небольшие и часто обновляются (что является плюсом).
— Сайты Google.
Для сайтов, созданных на платформе Google Сайты, Sitemap создаётся автоматически, и внести какие-то изменения невозможно.
Для Google и Яндекс:
— текстовый формат (TXT).
Файл должен быть в кодировке UTF-8 и состоять только из URL-адресов.
Требования Google и Яндекса к файлам Sitemap
1. Используйте кодировку UTF-8.
2. Максимальное количество URL – 50 000.
3. Ссылки в сайтмапе должны быть на том же домене, что и файл.
4. Если файл слишком большой, разделите его на несколько и укажите их в файле индекса Sitemap.
5. Ответ сервера при обращении к файлу должен быть 200 ОК.
6. Указывайте только канонические адреса страниц (без GET-параметров и идентификаторов сессий).
1. Максимальный размер – 10 МБ.
2. Поддерживает кириллические URL.
1. Максимальный размер – 50 МБ.
2. Поддерживает только цифры и латинские буквы.
Распространённая ошибка: чтобы уменьшить требования к пропускной способности канала, используют архиватор gzip. Размер сайтмапа должен быть 50 МБ (10 МБ) до сжатия, а не после.
Совет: русские доменные имена можно преобразовать с помощью кодировки Punycode.
Как создать XML Sitemap
1. Чтобы создать карту сайта, в первую очередь нужно определить канонические адреса, которые будут добавлены в файл.
2. Определить, какой формат файла будете использовать.
3. Создать файл можно вручную или, воспользовавшись генератором Sitemap.
Google в своей справке подготовил список онлайн и десктопных, платных и бесплатных генераторов карт сайта. Ознакомиться со всем списком можно, перейдя по ссылке .
Сгенерировать Sitemap проще, чем кажется. Разберём, как сгенерировать сайтмап, на примере деcктопного приложения Majento:
1. Парсим сайт.
2. Переходим в раздел «Сайты» => «Генерировать Sitemap».
3. Сохраняем в нужном нам формате.
4. Карта сайта готова.
Из online-генераторов XML-карты сайта заслуживает внимания XML Sitemap Generator .
Расширенные возможности этого сервера позволяют установить определённые XML-теги, включить/исключить нужные документы.
Исключить ненужные страницы можно и с помощью регулярных выражений.
Google поддерживает расширенный синтаксис для изображений. Для этого вы можете создать отдельную карту сайта для изображений или добавить синтаксис в существующую. Использование расширенного синтаксиса в Sitemap предоставляет поисковой системе дополнительную информацию об изображениях на сайте. Также это может помочь Google обнаружить и проиндексировать изображения, которые он не может найти при сканировании сайта.
Как и в обычной карте сайта, есть обязательные и необязательные XML-теги.
Обязательные:
Необязательные:
Ещё один расширенный синтаксис, который поддерживает Google, – XML-карта для видео.
Плюсы добавления XML-тегов для видео:
1) даёт понять Google, какой контент на сайте;
2) даёт возможность предоставить детальное описание к файлу;
3) станет доступным для поиска в Google Видео;
4) в поисковой выдаче будет отображаться заставка видео (может повысить количество переходов из поисковой выдачи).
Карта сайта для видеофайлов состоит из следующих обязательных элементов:
Заголовок и описание видео должны быть экранированы или упакованы в блок CDATA.
Со всеми XML-тегами карты сайта для видео можно ознакомиться в справке Google .
Где разместить карту сайта
Распространённые заблуждения о Sitemap
Так как у многих этот файл вызывает трудности и является «тёмным лесом», возникают определённые мифы в отношении карт сайта. Рассмотрим некоторые из них:
– «Включение URL-адреса в файл Sitemap для XML гарантирует, что он будет проиндексирован».
Нет. Важно отметить, что XML-файлы Sitemap – это только рекомендации. Карта сайта XML не гарантирует индексацию поисковыми системами страниц, указанных в файле.
– «Если я удалю URL из XML-карты, он будет удалён из индекса».
Нет. Карта сайта XML не исключает индексацию страниц, не включённых в карту сайта XML.
– «XML-файлы Sitemap трудно создавать и поддерживать»
Нет. Небольшие сайты могут легко создавать и размещать собственные XML-файлы вручную, используя приведённые выше примеры в качестве руководства по форматированию. Для более крупных сайтов и сайтов, которые изменяются чаще, плагины или модули, доступные для большинства CMS, могут автоматизировать обновление XML-файлов.
Заключение
Файл Sitemap – полезный инструмент для передачи поисковым роботам информации о структуре сайта. Используйте это руководство, чтобы понять, как работает карта сайта, как она устроена, как сгенерировать, разместить и проверить файл.
Которые нужны для поисковых роботов. Кто-то скажет, что она и не нужна, ведь все разделы уже отображаются. Однако необходимость такой страницы существует в том случае, если на сайте содержится пятьдесят страниц и больше. Для поисковиков и для пользователей она будет служить путеводителем, помогающим понять, где содержится та или иная информация.
XML- и HTML-файлы
Так как используется не только для поисковых роботов, но и для пользователей, посещающих сайт, обычно составляют две карты: в XML- и HTML-форматах.
Чтобы создать Sitemap для используют XML-файл. Благодаря ему роботы заносят в свою поисковую базу новые При отсутствии карты на многостраничном сайте большое количество страниц может не индексироваться на протяжении иногда очень долгого времени.
Для создания карты сайта для пользователей используется HTML-файл. Важность этой карты заключается в том, что от ее удобства напрямую зависит, найдет ли пользователь интересующую его информацию или нет. Поэтому такую карту создают для тех интернет-проектов, у которых все разделы и их подразделы не помещаются в главном меню.
Как создать Sitemap XML
Существует три способа решения данной задачи:
Покупка генератора для карты сайта.
Создать Sitemap при помощи онлайн-сервисов.
Ручное написание файла.
Для существенной экономии времени предлагается приобретение генераторов. Поэтому если двадцать — тридцать долларов для покупки лицензии являются для веб-мастера мелкой тратой денег, то купить его, особенно для крупного интернет-ресурса, все-таки не помешает, так как не нужно будет тогда создавать сайт вручную.
Для сайта, содержащего несколько сотен страниц, рекомендуются онлайн-сервисы, где для того, чтобы создать Sitemap, необходимо будет лишь указать адрес интернет-ресурса и загрузить результат.
Самым верным вариантом является ручное создание карты. Для этого нужно знать такие теги, как url, urlset, loc, lastmod, changefreg и priority. При этом первые три тега считаются обязательными, а без последних трех можно и обойтись.
Создание Sitemap в Joomla
Чтобы на сайте создать Sitemap, Joomla и Wordpress имеют специальные дополнения, как и большинство известных систем администрирования, благодаря которым карта сайта создается вручную или автоматически. Для крупных интернет-проектов, у которых постоянно обновляются материалы, такое дополнение очень удобно.
В "Джумле" оно называется Xmap, в Wordpress - Google XML Sitemaps.
Автоматическое создание карты сайта
Автоматически создать Sitemap помогают бесплатные онлайн-серверы, если страниц сайта насчитывается не более пятисот. Вот как легко проводится генерация карты сайта:
Зайдя на один из таких интернет-ресурсов, нужно найти пункт «Генерация Sitemap», нажать на кнопку «Создать» и создать файл Sitemap автоматически.
Найти «URL сайта» и ввести там адрес сайта, для которого создается карта.
Возможно, система потребует введение проверочного кода. Его нужно также ввести и нажать «Старт».
Готовую карту загрузить на сайт.
Ручной способ создания карты
Такой способ является, с одной стороны, самым трудным, отнимающим драгоценное время, но с другой стороны, это самый верный способ, применяющийся в тех случаях, когда другие варианты не подходят. Так, например, если есть много страниц, в занесении в карту сайта которых нет особой необходимости, но автоматически они, конечно, туда попадают, ручной способ избавит карту от «передозировки» таких страниц. Другой причиной, по которой выбирают этот способ, является плохая навигация сайта.
Для реализации ручного создания карты необходимо:
Собрать страницы для включения их в карту.
В excel-файл вставить все адреса в третий столбик.
В 1-м и 2-м столбиках вставить и url и loc.
В 4-м и 5-м столбиках вставить закрывающие url и loc.
Применить функцию «сцепить» для соединения пяти столбиков.
В сделать sitemap.xml.
Добавить в этот файл теги и urlset и /urlset.
Вставить между ними соединенный столбик.
Получившийся файл необходимо проверить. Сделать это можно, например, в "Яндексе", в панели веб-мастера.
Как создать Sitemap для "Яндекса" и Google
После создания сайта ее добавляют на сайт. С этой целью файл с картой сайта нужно назвать Sitemap.xml и добавить его в корневую директорию. Чтобы поисковые роботы поскорее нашли ее, в Google и "Яндекс" имеются специальные инструменты. Они называются «Инструменты для веб-мастеров» (в Google) и «Яндекс-вебмастер» (в "Яндексе").
Добавление Sitemap в Google
Добавление Sitemap в "Яндекс"
Так же и в «Яндекс-вебмастер» нужно сначала авторизоваться. Потом перейти на индексирование/файлы Sitemap, указать там путь файла и нажать кнопку «Добавить».
Поисковые роботы сегодня возьмут только те файлы, которые содержат не больше пятидесяти тысяч url.
При превышении карты десяти мегабайт лучше разбить ее на несколько файлов. Благодаря этому перегрузки сервера не будет.
Чтобы создать Sitemap xml правильно, при нескольких файлах нужно их всех прописать в файле индекса, используя теги sitemapindex, sitemap, loc и lastmod.
Все страницы нужно прописывать или с префиксом «www» или без его использования.
Необходимая кодировка файла — это UTF8.
Также в файле нужно добавить указание пространства имен языка.
Как создать карту сайта для пользователей
Поскольку такая карта создается для пользователей, она должна быть максимально проста и наглядна. Несмотря на это, необходимо качественно донести всю информацию о структуре используемого сайта.
HTML-карты в основном имеют привычную пользовательскую структуру, состоящую из разделов и подразделов, выделенных определенным образом, например, стилями CSS и графическими элементами.
Чтобы создать Sitemap для крупного интернет-проекта, как и в случае с XML-картой, здесь также рекомендуется разбивание. В этом случае оно осуществляется в виде отдельных вкладок, избавляющих карту от громоздкости.
Повысить функционал страницы позволит язык JavaScript, который в этой карте допускается использовать, так как она создается не для роботов-поисковиков, а для пользователей.
Порядок для файла карты сайта
Желательно, чтобы в созданном файле, содержащем Sitemap, всегда были чистота и порядок, особенно если у сайта имеется большое количество страниц. Поскольку роботы-поисковики просматривают карты сайта очень быстро, для просмотра всего файла крупного интернет-ресурса может просто не хватить времени.
Поэтому если привыкнуть добавлять страницы в карту сайта не внизу, а в верхней ее части, то, с одной стороны, можно не сомневаться, что поисковый робот успеет просмотреть адреса новых страниц, а с другой стороны, таким образом намного легче будет контролировать все страницы.
Что такое карта сайта
Содержимое любого веб-ресурса рано или поздно будет проиндексировано поисковыми системами. А как сделать так, чтобы этот процесс происходил побыстрее?
Один из наиболее эффективных способов – использование так называемой карты сайта (Sitemap ).
Карта сайта (Sitemap ) – это xml -файл с информацией для поисковых систем о страницах веб-ресурса, которые подлежат индексации. Sitemap помогает поисковикам определить местонахождение объектов веб-ресурса, время их последнего обновления, частоту обновления, приоритетность.
Формат протокола Sitemap состоит из XML -тегов.
В файле необходимо использовать кодировку UTF-8 .
Атрибуты XML -тегов Sitemap
Пример XML -файла Sitemap
(необязательные теги выделены ):
Nếu trang web của bạn chứa nhiều trang web, bạn có thể bỏ qua các thuộc tính tùy chọn (điều này sẽ làm giảm đáng kể kích thước tệp Sơ đồ trang web):
Sử dụng tệp chỉ mục Sơ đồ trang web
Tài liệu Sơ đồ trang web phải chứa không quá 50.000 URL và kích thước của nó không được vượt quá 10 MB.
Nếu cần tập tin Sơ đồ trang web có thể được nén bằng bộ lưu trữ gzipđể giảm yêu cầu về băng thông.
Nếu bạn cần chuyển trên 50.000 URL, bạn nên tạo một số tập tin Sơ đồ trang web. Bạn sẽ cần liệt kê từng tệp này trong tệp chỉ mục. Sơ đồ trang web. Trong tệp chỉ mục Sơ đồ trang web tối đa 50.000 tệp có thể được liệt kê Sơ đồ trang web. Kích thước của tập tin này không được vượt quá 10 MB.
Cách tạo sơ đồ trang web
Để tạo sơ đồ trang web, bạn có thể sử dụng cái gọi là trình tạo Sơ đồ trang web, hoặc bạn có thể tự mình làm mọi việc:
- mở Sổ tay;
– tuân theo các quy tắc của giao thức Sơ đồ trang web, điền vào tập tin Sơ đồ trang web ;
– nhập tên tệp vào trường văn bản thích hợp (ví dụ: sơ đồ trang web.xml);
– trong danh sách thả xuống Loại tệp lựa chọn Tất cả các tệp (*.*);
– trong danh sách thả xuống Mã hóa lựa chọn UTF-8, nhấn Cứu;
- tải lên Sơ đồ trang web vào thư mục gốc của trang web của bạn.
Thông báo cho máy quét của công cụ tìm kiếm về sự hiện diện và vị trí của tệp Sơ đồ trang web
Sau tập tin Sơ đồ trang webđược tạo và lưu trữ trên máy chủ web, vị trí của nó phải được báo cáo cho các công cụ tìm kiếm hỗ trợ giao thức này. Điều này có thể được thực hiện theo những cách sau:
Tải lên Sơ đồ trang web bằng Giao diện Web của Công cụ Tìm kiếm
Để gửi một tập tin Sơ đồ trang web trực tiếp đến công cụ tìm kiếm, nơi cung cấp khả năng lấy thông tin về trạng thái và lỗi xử lý, hãy tham khảo hệ thống trợ giúp của công cụ tìm kiếm.
Ví dụ, chuyển
