最近，我們的一位用戶問我們如何阻止搜索引擎抓取和索引他們的 WordPress 網站。在幾種情況下，您希望阻止搜索引擎抓取您的網站并將其列在搜索結果中。在本文中，我們將向您展示如何阻止搜索引擎抓取 WordPress 網站。

為什么要阻止搜索引擎抓取 WordPress 網站？

對于大多數WordPress網站來說，搜索引擎是最大的流量來源。你可能會問，為什么有人要勸阻搜索引擎？

以下是您不希望搜索引擎將您的網站編入索引的一些情況：

• 剛開始時，您可能不知道如何創建本地開發環境或暫存站點，而是在網站上線時開發網站。您不希望 Google 在您的網站正在建設中或處于維護模式時將其編入索引。

• 也有很多人使用WordPress創建私人博客。他們不希望它們被搜索引擎索引，因為它們是私有的。

• 您可以使用 WordPress 進行項目管理或內部網。在這些情況下，您不希望您的內部文檔可公開訪問。

一個常見的誤解是，如果你沒有指向你的域名的鏈接，那么搜索引擎可能永遠不會找到你的網站。這并不完全正確。

例如，可能存在指向您網站的鏈接，因為該域名以前歸其他人所有。此外，互聯網上有數以千計的頁面只是簡單地列出了域名。您的網站可能會出現在其中之一上。

話雖如此，讓我們來看看如何阻止搜索引擎抓取您的網站。我們將介紹四種方法：

1. 要求搜索引擎不要抓取你的WordPress網站

2. 要求搜索引擎不要抓取單個頁面

3. 使用cPanel密碼保護整個站點

4. 使用插件密碼保護 WordPress

方法1：要求搜索引擎不要抓取您的WordPress網站

這是最簡單的方法，但并不能完全保護您的網站不被抓取。

WordPress 帶有一個內置功能，允許您指示搜索引擎不要索引您的網站。您需要做的就是訪問“設置”?“閱讀”，然后選中“搜索引擎可見性”旁邊的框。

選中此框后，WordPress 會將以下行添加到您網站的標題中：

<meta name=``'robots'` `content=``'noindex,follow'` `/>

WordPress 還會修改您網站的robots.txt 文件，并向其添加禁止規則：

User-agent: *``Disallow: /

這些行要求機器人（網絡爬蟲或機器人）不要索引您的網頁。但是，完全取決于搜索引擎是否接受或忽略此請求。盡管大多數搜索引擎都尊重該請求，但您網站上的某些頁面或圖像仍有可能被編入索引。

如果你想讓搜索引擎無法索引或抓取你的網站，那么你需要使用方法3或4對你的WordPress網站進行密碼保護。

方法2：要求搜索引擎不要抓取單個頁面

您可能希望搜索引擎抓取您的網站并將其編入索引，但不要在搜索結果頁面中包含特定帖子或特定頁面。

最簡單的方法是使用多合一 SEO （AIOSEO） 插件。它是 WordPress 最好的 SEO 工具，受到超過 3 萬家企業的信任。

在本教程中，我們將使用 AIOSEO 免費版本，因為它包括 SEO 分析工具。還有一個高級版本的 AIOSEO，它提供了更多功能，如站點地圖工具、重定向管理器、模式標記、robots .txt 編輯器等。

您需要做的第一件事是在您的網站上安裝并激活 AIOSEO 插件。您可以按照我們關于如何為 WordPress 設置多合一 SEO 的分步指南來學習如何安裝和配置插件。

設置插件后，您可以使用它來要求搜索引擎不要索引某些帖子和頁面。同樣，完全取決于搜索引擎是否接受或忽略它。

只需編輯您不想被編入索引的帖子或頁面即可。您需要向下滾動到 WordPress 編輯器底部的 AIOSEO 設置，然后單擊“高級”選項卡。

請注意，本文使用的是默認的機器人設置。

要更改此設置，您需要將“使用默認設置”開關切換到關閉位置。

現在，您可以單擊“無索引”復選框。一旦帖子發布或更新，搜索引擎將被要求不要將其編入索引。

方法3：使用cPanel密碼保護整個站點

如果您的 WordPress 托管服務提供商提供 cPanel 訪問權限來管理您的托管帳戶，那么您可以使用 cPanel 保護您的整個網站。

您所要做的就是登錄到cPanel儀表板，然后單擊“文件”部分中的“目錄隱私”圖標。

接下來，您需要找到安裝 WordPress 的文件夾。通常，它是public_html文件夾。

之后，只需單擊該文件夾旁邊的“編輯”按鈕。

注意：如果您在該目錄下安裝了多個 WordPress 站點，則需要單擊鏈接以瀏覽這些站點，然后編輯要密碼保護的網站的文件夾。public_html``public_html

這將帶您進入一個屏幕，您可以在其中打開密碼保護。

只需選中“密碼保護此目錄”框，然后單擊“保存”按鈕。如果您愿意，還可以自定義受保護目錄的名稱。

您將看到一條確認消息，指出該目錄的訪問權限已更改。

接下來，您必須單擊“返回”按鈕。

您將被帶到一個屏幕，您可以在其中創建訪問此目錄時需要使用的用戶名和密碼。

您需要輸入用戶名和密碼，然后確認密碼。請務必在安全的地方記下您的用戶名和密碼，例如密碼管理器應用程序。

單擊“保存”按鈕后，您已成功將密碼保護添加到您的 WordPress 網站。

現在，每當用戶或搜索引擎訪問您的網站時，系統都會提示他們輸入您之前創建的用戶名和密碼來查看該網站。

方法4：使用插件密碼保護WordPress

如果您使用的是托管 WordPress 托管解決方案，那么您可能無法訪問 cPanel。在這種情況下，您可以使用 WordPress 插件對您的網站進行密碼保護。

以下是兩種最流行的解決方案：

1. SeedProd 是 WordPress 的 #1 即將推出和維護模式插件，用于超過 800,000 個網站。它具有完整的訪問控制和權限功能，您可以使用這些功能向所有人（包括搜索引擎）隱藏您的網站。我們為 SeedProd 提供了分步操作指南。

2. 密碼保護是一種非常簡單的方法，可以使用單個密碼對WordPress網站進行密碼保護（無需用戶創建）。

我們希望本文能幫助您阻止搜索引擎抓取或索引您的 WordPress 網站。