Nội Dung Bài Viết

Trong hệ sinh thái WordPress, plugin Yoast SEO từ lâu đã được xem là “kim chỉ nam” cho việc tối ưu hóa công cụ tìm kiếm. Tuy nhiên, không chỉ dừng lại ở việc tối ưu từ khóa hay thẻ meta, Yoast SEO còn mang đến một công cụ kỹ thuật cực kỳ mạnh mẽ: Crawl Optimization (Tối ưu hóa thu thập dữ liệu). Ban đầu được ra mắt trong phiên bản Premium 18.6, tính năng này đã chính thức có mặt trên phiên bản miễn phí từ bản cập nhật 20.4, mở ra cơ hội tối ưu hiệu suất cho hàng triệu website. Vậy làm thế nào để thiết lập tính năng này nhằm giảm tải cho máy chủ và tăng tốc độ index? Hãy cùng Thủ Thuật đi sâu vào chi tiết cấu hình.

Về bản chất, Crawl Optimization giúp website của bạn trở nên “gọn gàng” hơn trong mắt các bot tìm kiếm (crawlers). Bằng cách loại bỏ các liên kết dư thừa, siêu dữ liệu không cần thiết và ngăn chặn các bot vô ích, bạn sẽ tiết kiệm được “ngân sách thu thập dữ liệu” (Crawl Budget). Điều này đặc biệt quan trọng với các website có lượng nội dung lớn, giúp Googlebot tập trung vào việc index các bài viết quan trọng thay vì lãng phí tài nguyên vào các trang rác hoặc các đoạn mã lỗi thời. Hơn nữa, việc giảm số lượng yêu cầu gửi đến máy chủ cũng góp phần bảo vệ môi trường bằng cách giảm lượng điện năng tiêu thụ.

Giao diện cài đặt Crawl Optimization trong Yoast SEO giúp tối ưu hóa thu thập dữ liệu

Truy cập và Cấu hình Crawl Optimization

Để bắt đầu quá trình tối ưu, bạn cần truy cập vào trang quản trị WordPress của mình. Tại thanh menu bên trái, hãy điều hướng theo đường dẫn: Yoast SEO > Cài đặt (Settings) > Nâng cao (Advanced) > Crawl optimization.

Giao diện cấu hình sẽ hiện ra với các tùy chọn được phân chia rõ ràng thành từng nhóm chức năng cụ thể. Các mục chính bao gồm quản lý siêu dữ liệu (metadata), định dạng nội dung, tài nguyên tĩnh, chặn bot, dọn dẹp tìm kiếm nội bộ và xử lý URL nâng cao. Việc hiểu rõ từng mục này là chìa khóa để bạn không vô tình tắt đi các tính năng quan trọng mà website đang thực sự cần sử dụng.

Remove unwanted metadata (Xóa siêu dữ liệu không cần thiết)

Mặc định, WordPress chèn khá nhiều thẻ liên kết và dữ liệu vào phần <head> của trang web cũng như trong HTTP Headers. Đa phần các dữ liệu này phục vụ cho các tính năng cũ hoặc ít được sử dụng bởi người dùng phổ thông. Việc loại bỏ chúng giúp giảm kích thước trang HTML, từ đó tăng tốc độ tải trang.

Tùy chọn Remove Unwanted Metadata trong Yoast SEO để loại bỏ dữ liệu rác

Tại đây, bạn nên cân nhắc kích hoạt các tùy chọn sau:

Remove shortlinks: Loại bỏ các liên kết rút gọn mặc định của WordPress (dạng ?p=123) nếu bạn đã sử dụng đường dẫn tĩnh (permalinks) đẹp.
Remove REST API links: Nếu website của bạn không kết nối với các ứng dụng bên ngoài cần gọi dữ liệu qua API, hãy tắt nó để bảo mật hơn.
Remove RSD / WLW links: Đây là các giao thức hỗ trợ đăng bài từ xa qua các phần mềm cũ như Windows Live Writer. Nếu bạn viết bài trực tiếp trên trình duyệt, các thẻ này là hoàn toàn thừa thãi.
Remove oEmbed links: Ngăn người khác nhúng bài viết của bạn dưới dạng thẻ xem trước, giúp tiết kiệm băng thông.
Remove generator tag: Xóa thẻ hiển thị phiên bản WordPress đang dùng, một biện pháp nhỏ giúp tăng cường bảo mật.

Xem thêm: Hiển Thị Số Lượng Bình Luận Của Thành Viên Trong WordPress: Thủ Thuật Tăng Tương Tác Cộng Đồng

Disable unwanted content formats (Vô hiệu hóa định dạng nội dung thừa)

WordPress tự động tạo ra rất nhiều luồng dữ liệu (RSS Feeds) cho từng chuyên mục, tác giả, thẻ (tag) và bình luận. Đối với các công cụ tìm kiếm, việc phải thu thập dữ liệu từ quá nhiều luồng RSS không mang lại giá trị SEO cao mà còn gây lãng phí tài nguyên.

Cấu hình Disable Unwanted Content Formats giúp tắt các RSS Feed không dùng đến

Bạn có thể tối ưu bằng cách tắt các định dạng không cần thiết:

Global feed: Chỉ nên giữ lại nếu bạn có lượng độc giả lớn theo dõi qua RSS.
Comments feed: Hầu như không cần thiết, nên tắt để giảm tải.
Author/Post type/Category/Tag feeds: Nếu website không phải là trang tin tức lớn cần syndication, bạn có thể vô hiệu hóa các luồng này.
Atom/RDF feeds: Các định dạng cũ, nên tắt và chỉ giữ lại RSS 2.0 chuẩn.

Lưu ý: Nếu bạn đang sử dụng Google News hoặc các hệ thống email marketing tự động lấy bài qua RSS (như Mailchimp), hãy kiểm tra kỹ trước khi tắt mục Global Feed.

Remove unused resources (Xóa tài nguyên không sử dụng)

Một trong những nguyên nhân khiến website tải chậm là việc phải tải các tệp script và style không bao giờ được dùng đến. Yoast SEO cho phép bạn loại bỏ chúng chỉ với vài cú nhấp chuột.

Tùy chọn Remove Unused Resources giúp loại bỏ script Emoji và WP-JSON

Hai tùy chọn quan trọng trong mục này là:

Remove Emoji scripts: Các trình duyệt hiện đại đều đã hỗ trợ hiển thị biểu tượng cảm xúc (emoji) một cách tự nhiên. Việc WordPress tải thêm một file JS riêng để xử lý emoji là không cần thiết và gây thêm một HTTP request thừa.
Block index WP-JSON API: Ngăn Google index các đường dẫn API, giúp tránh lỗi trùng lặp nội dung hoặc lộ dữ liệu cấu trúc website.

Block unwanted bots (Chặn bot không mong muốn)

Không phải bot nào truy cập vào website của bạn cũng mang lại lợi ích. Ngoài Googlebot hay Bingbot, có hàng ngàn bot khác từ các công cụ SEO, AI scraping, hay các hệ thống quảng cáo liên tục “cào” dữ liệu, gây tốn băng thông máy chủ.

Tính năng Block Unwanted Bots giúp chặn các trình thu thập dữ liệu AI và quảng cáo

Yoast SEO cung cấp giải pháp chặn các bot này ngay từ cấp độ máy chủ (thông qua file robots.txt hoặc header):

Google AdsBot: Nếu bạn không chạy quảng cáo Google Ads cho Landing Page, bạn có thể chặn bot này.
AI Bots (GPTBot, Google Bard, Vertex AI): Nếu bạn không muốn nội dung của mình bị sử dụng miễn phí để huấn luyện các mô hình AI, hãy kích hoạt chặn các bot này. Lưu ý rằng một số tùy chọn chặn bot cao cấp có thể yêu cầu phiên bản Yoast SEO Premium.

Xem thêm: [Tối Ưu Tốc Độ WordPress: Tạo Nút Chia Sẻ Mạng Xã Hội Siêu Nhẹ Không Dùng JavaScript]

Internal site search cleanup (Dọn dẹp tìm kiếm nội bộ)

Chức năng tìm kiếm trên website thường là “tử huyệt” bị các hacker lợi dụng để spam URL. Họ có thể tạo ra hàng nghìn đường dẫn tìm kiếm vô nghĩa, khiến Google index nhầm các trang rác này, làm giảm uy tín của tên miền (Domain Authority).

Mục Internal Site Search Cleanup giúp ngăn chặn spam URL tìm kiếm

Các tính năng tối ưu bao gồm:

Filter search terms: Lọc bỏ các từ khóa spam, ký tự đặc biệt hoặc emoji trong truy vấn tìm kiếm.
Limit query length: Giới hạn độ dài từ khóa tìm kiếm để ngăn chặn các cuộc tấn công DoS vào cơ sở dữ liệu.
Block search URLs: Quan trọng nhất, hãy chặn công cụ tìm kiếm index các trang kết quả tìm kiếm nội bộ (?s=...). Điều này tuân thủ nguyên tắc của Google: “Không index các trang kết quả tìm kiếm”.

Advanced: URL cleanup (Nâng cao: Dọn dẹp URL)

Cuối cùng, việc xử lý các tham số URL (Query parameters) là bước tinh chỉnh nâng cao để đảm bảo tính nhất quán của đường dẫn. Các tham số theo dõi như utm_source hay fbclid thường tạo ra nhiều biến thể của một URL gốc, gây ra lỗi trùng lặp nội dung (Duplicate Content).

Tùy chọn Advanced URL Cleanup để xử lý các tham số theo dõi chiến dịch

Trong phần này, bạn có thể thiết lập:

Xóa các tham số theo dõi: Tự động loại bỏ các tham số UTM hoặc ID chiến dịch sau khi trang đã tải xong, giữ cho URL trên thanh địa chỉ luôn sạch đẹp.
Xóa tham số không đăng ký: Loại bỏ bất kỳ tham số lạ nào không được khai báo. Cảnh báo: Hãy cực kỳ thận trọng với tùy chọn này vì nó có thể làm hỏng chức năng của các plugin lọc sản phẩm hoặc giỏ hàng nếu không được cấu hình đúng.

Kết luận

Tính năng Crawl Optimization của Yoast SEO là một bước tiến lớn trong việc đơn giản hóa quy trình SEO kỹ thuật (Technical SEO) cho người dùng WordPress. Bằng cách loại bỏ những “mỡ thừa” trong mã nguồn và ngăn chặn các truy cập không cần thiết, bạn không chỉ giúp website tải nhanh hơn, mượt mà hơn mà còn tiết kiệm tài nguyên máy chủ đáng kể.

Tuy nhiên, “Thủ Thuật” khuyên bạn nên kiểm tra kỹ từng mục trước khi kích hoạt, đặc biệt là các phần liên quan đến API và RSS Feed, để đảm bảo không ảnh hưởng đến trải nghiệm người dùng hiện tại. Hãy áp dụng ngay hôm nay để tối ưu hóa ngân sách thu thập dữ liệu của Google dành cho website của bạn.

Nếu bạn có bất kỳ thắc mắc nào về cách cấu hình hoặc gặp vấn đề trong quá trình thực hiện, đừng ngần ngại để lại bình luận bên dưới. Đội ngũ Thủ Thuật luôn sẵn sàng hỗ trợ bạn.