Một trong những tác dụng của người dùng Ahrefs là sử dụng công cụ này để lần theo đối thủ, soi backlink của đối thủ từ đó tiếp cận nguồn tài nguyên seo của đối thủ.

Trong bối cảnh backlink chất lượng cao ngày càng khó kiếm và nguôn tài nguyên seo chất lượng ngày càng cạn kiệt thì việc theo dõi đối thủ và học theo đối thủ là một hành động thông minh.

Tuy nhiên như nhiêu công ty công nghệ khác thì ahrefs hoạt động dựa trên sự thu thập thông tin của Bot. Bot (bọ) sẽ di chuyển đến từng website, thu thập dữ liệu backlink của website đó và trả về kết quả. Để đơn giản không bị đối thủ theo dõi, không bị bot ahrefs ghé thăm thì cách đơn giản nhất là hãy chặn bot ahrefs lại.

Nghe việc chặn Bot Ahrefs có vẻ đơn giản nhưng thực tế lại không hề đơn giản vì không phải ai cũng biết cách chặn. Mặt khác trên thực tế Ahrefs có lẽ cũng không ngừng nâng cấp bọ để chống lại việc bị chủ các website chặn. Vì nếu tất cả các website mà chặn được hết Bot Ahrefs thì ahrefs làm sao lấy được dữ liệu của các site nữa. Mà không còn dữ liệu thì ahrefs chỉ có nước đóng cửa chứ làm sao mà tồn tại được.

Trong khuôn khổ bài viết này, chúng tôi backlinkchatluong.net sẽ hướng dẫn các bạn những cách chặn Bot Ahrefs hiệu quả nhất, triệt để nhất, qua đó chắc chắn ngăn bot ahrefs không thể viếng thăm website của bạn bất kỳ lần nào nữa, giúp bạn bảo vệ website của mình, bảo vệ nguồn tài nguyên seo (backlink chất lượng) của bạn. Các đối thủ không thể checklink, soi link từ website của bạn.

Cách 1: chặn bot ahrefs từ file robots.txt

chặn bot Ahrefs lại, chỉ cần thêm 2 dòng này vào file robots.txt của bạn:

user-agent: AhrefsBot

disallow: /

Ngoài ra các bạn cũng có thể kiểm soát tần số ghé thăm của Ahref Bot bằng cách thêm 2 dòng này vào file robot:

User-Agent: AhrefsBot

Crawl-Delay: 2

Bạn cũng có thể áp dụng cách này để chặn thêm một số công cụ check backlink khác nữa nhé

User-agent: AhrefsBot

User-agent: MJ12bot

user-agent: rogerbot

User-agent: BacklinkCrawler

Disallow: /

Trong đó:

AhrefsBot – ahrefs.com

MJ12bot – majesticseo.com

rogerbot – moz.com

BacklinkCrawler – backlinktest.com

Cách 2: chặn bot ahrefs trong ht.access

Để chặn bot ahrefs từ ht.access, bạn mở ht.access ra và chèn câu lệnh như sau:

RewriteEngine On
#moz.com
RewriteCond %{HTTP_USER_AGENT} rogerbot [OR]
#majestic.com
RewriteCond %{HTTP_USER_AGENT} MJ12bot [OR]
#moz.com
RewriteCond %{HTTP_USER_AGENT} dotbot [OR]
#gigablast.com
RewriteCond %{HTTP_USER_AGENT} gigabot [OR]
#ahrefs.com
RewriteCond %{HTTP_USER_AGENT} AhrefsBot
RewriteRule .* – [F]
Deny from .ahrefs.com
Deny from .dotnetdotcom.org
#please remove the line below if you don’t want to block requests from AWS
Deny from .amazonaws.com

Cách 3: chặn bot ahrefs từ server

Để chặn bot ahref bằng server, tức chặn IP của ahrefs thông qua tường lửa, bạn thao tác như sau:

Đối với server có Firewall thì chặn cả dãy luôn 151.80.31.0/24 thì đỡ mất thời gian vào cấu hình .htaccess từng website. Hoặc bạn login bằng SSH vào server với tài khoản Root, chạy command này để chặn cũng được.

Code:

iptables -I INPUT -s 151.80.31.0/24 -j DROP

Kết quả whois dãy IP robots của Ahrefs:

https://whois.domaintools.com/151.80.31.110

https://whois.domaintools.com/151.80.31.111

https://whois.domaintools.com/151.80.31.112

Theo backlinkchatluong.net chúng tôi thì bạn nên chặn bằng block IP của Ahref là triệt để nhất (nếu bạn không rành kỹ thuật, không biết cách chặn từ server như thế nào thì bạn có thể làm việc với đội ngũ kỹ thuật của đơn vị cung cấp dịch vụ VPS hoặc hosting yêu cầu họ chặn giúp)

Hoặc nếu muốn chắc ăn thì bạn dùng luôn cả 3 cách trên nhé 😀

Tóm lại có 3 cách chặn: cách 1 chặn trong file robot.txt, cách 2 chặn trong htacess, cách 3 chặn IP từ firewall của server.

Chúc các bạn thành công!

__________________________________________________________________________________________

Bán backlink chất lượng cao vượt trội, đấy top nhanh, giữ top lâu, Liên hệ  để biết chi tiết Điện thoại: 0904138793; email: qualitybacklink4u@gmail.com ;  chat Skype: qualitybacklink