大規模なサイトマップ XML を作成する方法。サイトマップ。サイトマップの開発履歴

サイトマップは、リソースのインデックス作成を高速化するために作成された、Web サイトのすべてのページのリストを含む Sitemap.xml ファイルです。ユーザー向けのサイトマップもあります。これは本の目次に似ています。後者は HTML マップと呼ばれ、階層を表示するプロジェクトページのディレクトリです。

今日は、Sitemap.xml ファイルを自分で作成し、Web サイトにアップロードし、検索エンジンに追加する方法を説明します。 HTML マップの作成を見てみましょう。

サイトマップはサイトマップであり、組み込みの階層 (ネストレベル) をサポートするカテゴリ、サブカテゴリ、プロジェクトページへのリンクのディレクトリです。Sitemap.xml を使用すると、現在の構造、ネストのレベル、ページ数、およびそれらへのリンクを Google および Yandex 検索エンジンに通知できます。

サイトマップの例

Sitemap.xml を使用する必要性に関する最も詳細な情報は、Yandex.Webmaster および Google Webmasters ディレクトリに記載されています。

Google は、.txt、RSS、.xml、および 4 つのサイトマップ形式をサポートしています。「Google サイト」 (リソースが Good Corporation の同じ名前のサービスを使用して作成されている場合)。 Yandex は .xml カードのみをサポートします。
Google はこのタグをサポートしていません .
Google の場合、robots.txt ファイルにサイトマップへのリンクを追加して、閲覧可能であることを示すことが必須です。

Sitemap.xml ファイルへのパスを指定するには、ウェブマスターのアカウントを使用するか、次のリンクを指定します。 robots.txt ファイル。両方やったほうがいいですよ。膨大な数のページがある Web サイトの場合、複数のサイトマップが存在する可能性があります。 Google の標準的な制限:

サイトマップのファイルサイズは最大50メガバイトです。
リンク数は 50,000 未満です。

Yandex 検索エンジンも同様の要件を満たしています。

サイトマップの重要性を過小評価することはできません。今でも、これはウェブサイトの SEO プロモーションの取り組みを開始する際の最初のステップの 1 つです。

カードの種類

サイトマップには次の 2 種類があります。

XML サイトマップ– 計算されたロボットを検索し、すべてのリンク (カテゴリ、サブカテゴリ、個々のページ) を収集して処理します。ページや記事へのリンクを含むタグのセットです。
HTMLサイトマップ- のためにユーザー。これは、カテゴリとサブカテゴリに従って分割されたリンクで構成される別のページです。それほど頻繁ではありませんが、カテゴリ自体が実際には役に立たない場合、既存の記事の通常のカタログとして使用されます。多くの場合、メインページのメニューからアクセスできます。

また、マップは手動で作成する場合と、オンラインサービス、プラグイン、またはモジュールを使用して生成する場合に分けられます。

Sitemap.xml ファイルの作成方法

Sitemap.xml ファイルを作成するには、さまざまな方法を使用する必要があります。

マニュアル。あなた自身が、任意のエディタ (Notepad ++ など) を使用して、タグとリンクを特定の順序で設定します。
サービス。必要なリンクをダウンロードするか、サイトアドレスを入力すると、生成された sitemap.xml ファイルを受け取ります。
プラグイン/モジュール。一部の Web サイトエンジン (CMS) には、ワンクリックでサイトマップを生成できるプラグインが組み込まれています。その他には追加のインストールが必要です。

自動でも同様のことが行われるため、記事の文脈で手動によるサイトマップの作成を検討することは意味がありません。さらに、人的要因も排除されます。結局のところ、いつでも間違いを犯したり、タグを閉じなかったり、何か間違ったことをしたりする可能性があります。

オンラインジェネレーターを使用してサイトマップを作成する

非常にシンプルなプロセス。以下の指示に従ってください。

このサービスを使用すると、サイズが 500 ページ以下のサイトのマップを生成できます。同じ原理で動作する他の類似物があります。

プラグインとモジュールを使用した接続

まず、世界で最も人気のあるエンジンである WordPress を見てみましょう。 Yoast SEO プラグインをダウンロードすることをお勧めします。これはユニバーサルであり、検索エンジンの結果でのプロモーション用にページを最適化するために必要になります。嬉しい特典として、これを使用してサイトマップを生成できます。手順は次のとおりです。

完了サイトマップが作成され、次の場所から入手できます。 site.com/sitemap.xml- つまり、ルートフォルダーにあります。

DataLife Engine (DLE) では、マップジェネレーターはすでに組み込まれており、プロジェクトコントロールパネルからアクセスできます。Joomla では、OSMap モジュールを使用する必要があります。Bitrix では、xml ファイルが自動的に生成されます。Drupal では、このための XMLSitemap モジュール。

Sitemap.xml ファイルを Web サイトに追加し、検索エンジンにアップロードする方法

ファイルが CMS によって作成された場合、ファイルはサイトのルートに配置されます。これは、Yandex.Webmaster と Google Search Console へのリンクを追加する必要があることを意味します。このプロセスには後で戻りましょう。

ファイルが手動またはジェネレーターを使用して作成された場合は、ウェブマスターのアカウントに追加する前に、サイトのルートフォルダーにアップロードする必要があります。最も簡単な方法:

エンジンや追加モジュールを使用してサイトマップを自動的に生成する機能が提供されていない他のサイトでも、同じことを行う必要があります。ただし、ルートフォルダーのネストのレベルは異なる場合があります。多くの場合、最初に public_html パスに移動する必要があります。

次に、Yandex.Webmaster に追加します。手順は次のとおりです。

正常に完了すると、ロボットは地図のどこを探すべきかを認識し、Web サイトにアクセスすると、さまざまなネストレベルのすべてのリンクにインデックスを付けます。

マップファイルを Google Search Console に追加するには、次の手順を実行する必要があります。

サイトマップ XML サイトマップ

サイトマップは、サーバーのルートディレクトリに保存される .xml 形式の特別なファイルです。 Web サイトの所有者は、なぜサイトマップが必要なのか、このドキュメントの有無が検索エンジンのプロモーションに影響するのか、ということに関心を持つことがよくあります。これらの質問に答えるには、サイトマップの目的と構造を検討してください。

では、なぜ XML サイトマップが必要なのでしょうか?それは何ですか? サイトマップは、サイトのすべてのセクションとページにつながるリンクのリストで構成されるディレクトリの一種です。サイトマップファイルは、検索エンジンがインターネットプロジェクトのインデックスをより迅速かつ効率的に作成するのに役立ちます。これは、Web リソースの量が数千ページまたは数万ページに達する場合に特に重要です。

[yt=R09Qywy5DXI]

私たちのチャンネルの他のビデオ - SEMANTICA でインターネットマーケティングを学びましょう

大事です！サイトマップには、検索インデックスに含める必要があるページのみを含める必要があります。インデックス作成が禁止されているドキュメントや専有情報をサイトマップに含めないでください。サイトマップには、タグ付きページや動的 URL も含まれません。

サイトマップはプロモーションに影響しますか?

検索エンジンは、このファイルがないからといってインターネットプロジェクトを悲観することはありません。理論的には、ロボットはサイトのすべてのページを独立してクロールし、検索に含める必要があります。ただし、システムがクラッシュして一部の Web ドキュメントが見つからない可能性があることを考慮する必要があります。通常、「問題領域」は、長いリンクチェーンと動的に生成された URL を介してのみアクセスできるセクションです。

SEO の観点から見ると、サイトマップはインデックス作成を大幅に高速化するため、一定の効果があります。さらに、悪意のある競合他社がコンテンツをコピーして公開する前に、Web ページがインデックスに登録される可能性が高くなります。検索エンジンはオリジナルのソースを優先しますが、コピー＆ペーストは否定的です。

地図サイトの作り方

最も簡単な方法は、専門サービスのいずれかを使用することです。たとえば、オンラインジェネレーター http://www.mysitemapgenerator.com/ を使用すると、最大 500 ページのサイトマップを無料で作成できます。有料サイトマップは制限なく生成できます。ウェブマスターは自分のサイトのアドレスを指定し、その結果得られたファイルをサーバーのルートフォルダーに配置するだけで済みます。

SiteMap Generator プログラムを使用できます。 http:// フィールドにサイトのスタートページのアドレスを入力し、「開始」ボタンをクリックして、サイトマップが生成されるまで待ちます。次に、[Google サイトマップ/XML] タブに移動し、結果のコードをコピーして .xml 形式のファイルに貼り付ける必要があります。

サイトマップ XML ファイル - 使用可能なディレクティブ

Lastmod パラメータは、ドキュメントが最後に更新された日時をロボットに伝えます。
priority タグは、サイト上の他のページに対するドキュメントの優先度を示します。
loc パラメータは、ページの URL アドレスを示します。
changefreq タグは、ページが動的であることを示すために使用されます (「0」パラメーターを持つドキュメントにロボットがアクセスすることはほとんどありません)。

検索エンジンにサイトマップを通知する方法

Yandex に通知するには、robots.txt ファイルにサイトマップディレクティブを追加します。コードは次のようになります。

サイトマップ: http://yoursite.ru/sitemap.xml

さらに、Yandex.Webmaster インターフェイスを通じてサイトマップを転送できます。これを行うには、[インデックス設定] >> [サイトマップファイル] タブに移動し、システムにサイトマップアドレスを指定する必要があります。

同じ方法で Google に通知することができます。ウェブマスターツールバーで、[クロール] >> [サイトマップ] タブに移動します。

この記事では、サイトマップを作成して Googlebot と共有する方法を説明します。

サイトマップの作成と送信

サイトマップのファイル形式

Google は、以下で説明するいくつかのサイトマップファイル形式をサポートしています。すべての形式で標準プロトコルを使用する必要があります。 Google は現在この属性を考慮していませんサイトマップファイル内。

すべての形式には次の制限が適用されます。サイトマップには最大 50,000 個の URL を含めることができ、非圧縮サイズは 50 MB を超えてはなりません。ファイルのサイズまたはファイルにリストされているアドレスの数がこれらの制限を超える場合は、ファイルをいくつかの部分に分割してください。すべてのサイトマップをリストしたサイトマップインデックスファイルを作成し、それらを一度に Google に送信できます。

非 ASCII 文字 (ü) とエスケープが必要な文字 (&) を含む URL の例:
http://www.example.com/ümlat.html&q=name
ISO-8859-1 エンコード (このエンコードを使用してサーバーでホストされる) でエスケープが適用された同じ URL:
http://www.example.com/%FCmlat.html&q=name
同じ URL を UTF-8 でエンコードし (このエンコードを使用するサーバーでホストされるように)、エスケープを適用します。
アンパサンド文字の代わりにエスケープシーケンスを使用した同じ URL:
http://www.example.com/%C3%BCmlat.html&q=name

サイトマップ内のすべての URL をクロールすることは保証されないことに注意してください。そのようなファイルは役立つだけです Google は、どのページが重要であると判断するかを決定します。

priority と changefreq の値は無視されるため、追加する必要はありません。

Google は lastmod 値を読み取りますが、それが正しく指定されている場合に限ります。

サイトマップを Google で利用できるようにする方法

サイトマップは、サイトがクロールされるたびではなく、最初に見つかったときにのみ分析されます。ファイルを再処理するには、ファイル内のデータが変更されたことを当社に通知する必要があります。これは ping リクエストを使用して行われます。ファイルが変更されていて新しい場合を除き、同じサイトマップを複数回追加したり、ping リクエストを送信したりしないでください。

Googlebot にサイトマップへのアクセスを提供するには、いくつかの方法があります。

Search Consoleの特別なツールを使用してGoogleに送信します
robots.txt ファイル内の任意の場所に、サイトマップファイルの場所を示す行を挿入します。
サイトマップ: http://example.com/sitemap_location.xml
ping リクエストを使用します。 HTTP GET リクエストを送信します。
http://www.google.com/ping?sitemap=<polniy_url_faila_sitemap>
例：
http://www.google.com/ping?sitemap=https://example.com/sitemap.xml

XML サイトマップ XML 形式の Web サイトの URL リストです。サイトマップファイルは、インデックスを作成する必要がある Web サイト上のページについて検索エンジン (Google、Bing、Yahoo、Yandex、MSN など) に通知するように設計されています。さらに、サイトマップを使用すると、検索エンジンが通常のクロールでは取得できない情報も含め、サイトのすべてのページに関する情報を送信できます。

サイトマップの作成次の場合に特に役立ちます。

サイトでは、新しいページが自動的かつ頻繁に生成されます。
あなたのサイトは新しいため、リンクの数が少ないことがわかります。
あなたのサイトには、貧弱な、または相互にまったく関連性のないコンテンツページの大規模なアーカイブがあります。

XML サイトマッププロトコル: サイトマップには何が含まれますか?

に従って、 XML サイトマッププロトコルおよび検索エンジンの要件により、サイトマップファイルには 50,000 ページ以下、サイズが 10 MB を超えてはなりません。つまり、サイトに 50,000 ページを超え、サイトマップのファイルサイズが 10 MB を超える場合は、複数のサイトマップを作成する必要があります。

... https://appcube.ru/ja/URL ... ...

必須の URL パラメーターに加えて、XML サイトマッププロトコルは各ページに追加のタグを提供します。

ラストモッド– は最終変更日の日付を示します。

日付 (ISO 8601)

変更頻度– ページコンテンツの推定頻度。有効な値は次のとおりです。

常に – ページが読み込まれるたびに
毎時 – 毎時
毎日 – 毎日
毎週 – 週に 1 回
毎月 – 月に1回
毎年 – 年に1回
決して – ページのコンテンツが変更されないことを意味します。

構文：

有効な値

優先度– サイト上の他のページに対するページの優先度。有効な範囲は 0.0 ～ 1.0 です。このタグにより、どのページが最も価値があると思われるかを検索エンジンに知らせることができます。

0.0 ～ 1.0 の 10 進数

sitemap.xml ファイルは、Web マスターがインデックス作成に使用できるサイトページについて検索エンジンに通知できるツールです。また、XML マップでは、追加のページパラメーター (最終更新日、更新頻度、他のページとの相対的な優先度) を指定できます。 sitemap.xml 内の情報は、検索クローラーの動作、および一般に新しいドキュメントのインデックス作成プロセスに影響を与える可能性があります。サイトマップには、クロールのキューにページを含めるディレクティブが含まれており、ページを除外するディレクティブが含まれる robots.txt を補完します。

このガイドには、sitemap.xml の使用に関するすべての質問への回答が記載されています。

sitemap.xml は必要ですか?

検索エンジンはサイトマップを使用して、ナビゲーションからはアクセスできないがクロールする必要があるサイト上の新しいドキュメント (HTML ドキュメントまたはメディアコンテンツなど) を検索します。 sitemap.xml にドキュメントへのリンクがあるからといって、そのドキュメントがクロールされたりインデックスが作成されたりすることは保証されませんが、多くの場合、このファイルは大規模なサイトのインデックス作成に役立ちます。さらに、rel=canonical タグで特に指定されていない限り、XML マップのデータは正規ページを決定するために使用されます。

Sitemap.xml は、次のようなサイトにとって重要です。

一部のセクションにはナビゲーションメニューからアクセスできません。
孤立したページや接続が不十分なページが多数あります。
検索エンジンによるサポートが不十分なテクノロジ (Ajax、Flash、Silverlight など) が使用されています。
ページが多数あるため、検索クローラーが新しいコンテンツを見逃す可能性があります。

これに当てはまらない場合は、sitemap.xml は必要ない可能性があります。インデックス作成に重要なすべてのページが 2 クリック以内で利用可能で、コンテンツの表示に JavaScript や Flash テクノロジーが使用されておらず、必要に応じてカノニカルタグと地域タグが使用され、新しいコンテンツがロボットがサイトにアクセスするのと同じ頻度で表示されるサイトの場合、ファイル sitemap.xml は必要ありません。

小規模なプロジェクトの場合、大規模なドキュメントのネストに問題があるだけであれば、XML マップを使用せずに HTML サイトマップを使用して簡単に解決できます。ただし、sitemap.xml がまだ必要であると判断した場合は、このガイドを最後までお読みください。

技術的な案内

Sitemap.xml は XML 形式のテキストファイルです。ただし、検索エンジンはテキスト形式もサポートしています (次のセクションを参照)。
各サイトマップには最大数を含めることができます 50,000のアドレスそしてもう体重はかかりません 50MB(Yandex の場合は 10MB)。
gzip 圧縮を使用すると、sitemap.xml ファイルのサイズを削減し、転送速度を高めることができます。この場合、gz 拡張子 (sitemap.xml.gz) を使用します。同時に、非圧縮サイトマップには重量制限が残ります。
サイトマップの場所によって、サイトマップに含めることができる URL のセットが決まります。サイト全体のページのアドレスを含むマップはルートに配置する必要があります。サイトマップがフォルダー内にある場合、このサイトマップ内のすべての URL はこのフォルダーまたはそれより深い場所にある必要があります ()。
sitemap.xml 内のアドレスは絶対アドレスである必要があります。
URL の最大長は 2048 文字 (Yandex の場合は 1024 文字) です。
URL 内の特殊文字 (アンパサンド「&」や引用符など) は、HTML エンティティ内でマスクする必要があります。
マップで指定されたページには、200 http ステータスコードが表示される必要があります。
マップにリストされている住所は、robots.txt ファイルまたはメタロボット内で閉じてはいけません。
robots.txt 内でサイトマップを閉じないでください。閉じないと、検索エンジンがサイトマップをクロールしません。ファイル自体がインデックスに存在する可能性がありますが、これは正常です。

XML マップ形式

検索エンジンは、追加パラメータなしでページ URL を単にリストする単純なテキストサイトマップ形式をサポートしています。この場合、ファイルは UTF-8 でエンコードされ、拡張子が次である必要があります。 。TXT.

検索エンジンは標準の XML プロトコルもサポートしています。 Google はさらに、画像、動画、ニュースのサイトマップをサポートしています。

アドレスが 1 つだけ含まれるサイトマップの例。

https://сайт/ 2018-06-14 daily 0.9

XMLタグ
URLセット
URL(必須) - 各 URL の親タグ。
ロック(必須) - ドキュメント URL。絶対パスである必要があります。
ラストモッド- ドキュメントの最終変更日 (日時形式)。
変更頻度- ページ変更の頻度 (常に、毎時、毎日、毎週、毎月、毎年、まったく)。このタグの意味は、コマンドではなく、検索エンジンへの推奨です。
優先度- スキャン順序の他のアドレスに対する URL の優先順位 (0 から 1)。指定しない場合、デフォルトは 0.5 です。

画像の XML マップ

一部のオプティマイザーは、HTML ドキュメントへのリンクと同じ方法で、画像へのリンクを sitemap.xml に挿入します。これは可能ですが、Google にとっては、標準プロトコルの拡張機能を使用し、画像に関する追加情報を URL とともに送信する方が良いでしょう。 XML イメージマップの作成は、イメージをスキャンしてインデックスを作成する必要があると同時に、ボットから直接アクセスできない (JavaScript が使用されているなど) 場合に便利です。

1 つのページとそれに関連する画像を含むサイトマップの例

http://example.com/primer.html http://example.com/kartinka.jpg http://example.com/photo.jpg Вид на Балаклаву Севастополь, Крым http://creativecommons.org/licenses/by-nd/3.0/legalcode

XMLタグ
画像:画像(必須) - 1 つの画像に関する情報。最大1000枚の画像を使用できます。
画像:ロック(必須) - 画像ファイルへのパス。 CDN が使用されている場合、ウェブマスターパネルで検証されていれば、別のドメインへのリンクが許可されます。
画像:キャプション- 画像のキャプション (長いテキストが含まれる場合があります)。
画像:タイトル- タイトル画像 (通常は短いテキスト)。
画像:地理的位置- 撮影場所。
画像:ライセンス- 画像ライセンスの URL。高度な画像検索に使用されます。

ビデオの XML マップ

イメージマップと同様に、Google にはビデオサイトマッププロトコル拡張機能もあり、ビデオ検索での表示に影響を与えるビデオコンテンツに関する詳細情報を指定できます。ビデオサイトマップは、ローカルでホストされているビデオをサイトで使用している場合、および使用されているテクノロジーのせいでこれらのビデオのインデックス作成が難しい場合に必要です。 YouTube のビデオを Web サイトに埋め込む場合、ここでビデオサイトマップは必要ありません。

ニュースサイトマップ

サイトにニュースコンテンツがあり、Google ニュースに参加している場合は、ニュースにサイトマップを使用すると便利です。これにより、Google は最新の資料をすぐに見つけて、すべてのニュース記事のインデックスを作成します。この場合、サイトマップには過去 2 日間に公開されたページのアドレスのみが含まれ、含まれる URL は 1000 個以下である必要があります。

複数のカードを使用する

必要に応じて、複数のサイトマップを使用して、1 つのインデックスサイトマップに結合できます。複数の sitemap.xml は、次の場合に使用されます。

このサイトでは複数のエンジン (CMS) を使用しています。
このサイトには 50,000 ページ以上あります。
セクションごとに便利なエラー追跡を設定する必要があります。

後者の場合、サイトの大きなセクションごとに独自の sitemap.xml があり、それらはすべて Web マスター用のパネルに追加され、どのセクションに最も多くのエラーがあるかを確認するのに便利です (サイトマップ）。

2 つ以上のサイトマップがある場合は、インデックスサイトマップに結合する必要があります。インデックスサイトマップは通常のサイトマップと同じように見えます (urlset と url の代わりに sitemapindex と sitemap タグが存在する点を除く)。同様の制限があり、リンクのみが可能です。通常の XML マップ (インデックスマップではない) に変換します。

サイトマップインデックスの例:

http://www.example.com/sitemap-blog.xml.gz 2004-10-01T18:23:17+00:00 http://www.example.com/sitemap-webinars.xml.gz 2005-01-01

サイトマップインデックス(必須) - 現在のプロトコル標準を指定します。
サイトマップ(必須) - 別のサイトマップに関する情報が含まれます。
ロック(必須) - サイトマップの場所 (Google の場合は xml、txt、または RSS 形式)。
ラストモッド- サイトマップの変更時期。検索エンジンが大規模なサイト上の新しい URL を迅速に検出できるようにします。

sitemap.xmlの作成方法

XML サイトマップを作成する方法:

内部 CMS ツール。多くの CMS はすでにサイトマップの作成をサポートしています。これを確認するには、CMS のドキュメントを読むか、管理パネルのメニュー項目を確認するか、エンジンのテクニカルサポートに問い合わせてください。ファイル https://yoursite.com/sitemap.xml をサイトにアップロードします。このファイルはすでに存在しており、動的に生成されている可能性があります。
外部プラグイン。 CMS にサイトマップを生成する機能がなく、プラグインがサポートされている場合は、Google でエンジンの sitemap.xml に関する質問をカバーし、インストールするプラグインが表示されます。場合によっては、プログラマーに連絡して同様のプラグインを作成してもらう必要があります。
サイト上の別のスクリプト。 XML マッププロトコルと技術的な制限を理解していれば、CRON に生成スクリプトを追加することで、sitemap.xml を自分で作成できます。プログラマではない場合は、このリストの他の項目を使用してください。
サイトマップジェネレーター。サイトをスキャンして、ダウンロードできる既製のマップを提供する sitemap.xml ジェネレーターが多数あります。ここでの欠点は、サイトが更新されるたびにサイトマップを手動で生成する必要があることです。
パーサー。 Web サイトの技術分析用に設計されたデスクトッププログラムでは、通常、クロールされたページに基づいて生成された sitemap.xml をダウンロードする機会が提供されます。サイトマップジェネレーターと同様に機能しますが、マシン上でローカルに実行される点が異なります。

XML サイトマップを生成するローカルプログラム

G-Mapper サイトマップジェネレーター

Windows 用サイトマップジェネレーターの無料デスクトップバージョン。

スクリーミングフロッグSEOスパイダー

多くの設定を備えた柔軟なサイトマップ生成ツール。すでに他の SEO タスクに Screamin frog を使用している場合に便利です。サイトをスキャンした後、メニュー項目 [サイトマップ] -> [XML サイトマップの作成] を使用します。

ネットピークスパイダー

柔軟性は劣りますが、sitemap.xml を迅速に生成するための便利なソリューションです。サイトをスキャンした後、メニュー項目 [ツール] -> [サイトマップの生成] を使用する必要があります。