Green SEO: Dùng Screaming Frog cho Web Bền Vững

Là những người làm SEO, chúng ta thường ám ảnh về hiệu suất. Tốc độ. Hiệu quả thu thập dữ liệu. Core Web Vitals. Tỷ lệ chuyển đổi. Nhưng chúng ta hiếm khi nói về chi phí môi trường của những gì chúng ta đưa lên web. Internet hiện chiếm khoảng 4% lượng khí thải nhà kính toàn cầu – ngang bằng với ngành hàng không. Kể từ năm 2015, kích thước trung bình của các trang web đã tăng vọt, kéo theo năng lượng cần thiết để phục vụ chúng. Và với sự trỗi dậy nhanh chóng của AI tạo sinh, nhu cầu năng lượng trên hạ tầng số chỉ ngày càng gia tăng. Điều này không còn xa vời. Mỗi lượt xem trang đều tiêu tốn năng lượng. Mỗi tài nguyên không cần thiết, mỗi tập lệnh phình to hay trang dư thừa đều làm tăng tải – lên máy chủ, mạng lưới, thiết bị và cuối cùng là hành tinh.

Nội dung

Thank you for reading this post, don't forget to subscribe!

Bài viết này được đồng tác giả bởi những người đồng sáng lập GreenSEO là Stu Davies và Will Barnes, cùng với Mark Porter, Trưởng phòng Marketing tại Screaming Frog.

GreenSEO là gì?

GreenSEO là việc đưa tính bền vững vào thực hành SEO hàng ngày.

Đây không phải một chuyên ngành mới. Không phải một huy hiệu. Đó là sự thay đổi tư duy.

Điều đó có nghĩa là:

Thiết kế website nhẹ hơn, nhanh hơn
Giảm lãng phí trong thu thập dữ liệu không cần thiết
Đặt câu hỏi về sự bành trướng số
Đo lường tác động, không chỉ thứ hạng

Nếu các nhà thiết kế web bền vững có Tuyên ngôn Web Bền vững, thì GreenSEO là lời kêu gọi hành động tương tự của ngành SEO.

Tại sao GreenSEO lại quan trọng ngay bây giờ

Người làm SEO đứng ở giao điểm giữa hạ tầng, nội dung và hiệu suất. Chúng ta ảnh hưởng đến quyết định hosting, hành vi crawl, trọng lượng trang, cách sử dụng phương tiện và kiến trúc kỹ thuật. Ảnh hưởng đó đi kèm trách nhiệm.

Tin tốt là: phần lớn những gì làm website xanh hơn cũng khiến nó tốt hơn – thời gian tải nhanh hơn, kiến trúc sạch hơn, giảm lãng phí.

GreenSEO không phải là sự hoàn hảo. Đó là nhận thức, đo lường và cải tiến từng bước.

Và điều đó bắt đầu bằng việc biết mình đang ở đâu.

Sự hợp tác giữa GreenSEO và Screaming Frog

GreenSEO và Screaming Frog đã kết hợp để tạo ra tác động thực sự đến tính bền vững số. Sự hợp tác thú vị này bắt đầu khi GreenSEO trao đổi với Screaming Frog về khả năng phát hành tính năng đo CO2 trong công cụ SEO Spider của họ – một công cụ hữu ích nhằm đo lường và cắt giảm lượng carbon của website.

Screaming Frog đã trở thành đồng minh tuyệt vời, ủng hộ các sáng kiến của GreenSEO, bao gồm tài trợ cho các sự kiện bên lề GreenSEO tại hội nghị SEO quốc tế BrightonSEO.

Thúc đẩy các thực hành SEO bền vững

Sự hợp tác giữa GreenSEO và Screaming Frog tập trung vào việc khai thác công nghệ và dữ liệu để thúc đẩy các thực hành SEO bền vững.

Cùng nhau, chúng tôi trang bị cho người làm SEO những công cụ và hiểu biết cần thiết để đo lường, phân tích và giảm lượng khí thải carbon liên quan đến website của họ. Sự hợp tác này thực sự làm nổi bật sức mạnh của việc làm việc cùng nhau để xây dựng một web xanh hơn.

Giới thiệu về khả năng đo CO2 của Screaming Frog SEO Spider

Một trong những bước thực tế nhất mà người làm SEO có thể thực hiện ngay hôm nay là đo lường lượng khí thải thực tế. Phiên bản 20.0 của Screaming Frog SEO Spider đã giới thiệu tính năng carbon footprint và xếp hạng. Khi thu thập dữ liệu một website, SEO Spider tự động tính toán lượng khí thải carbon cho mỗi trang bằng thư viện CO2.js.

Ở cấp độ tổng quan, thư viện CO2.js nhận đầu vào là dữ liệu byte và ước tính lượng khí thải carbon tạo ra để truyền dữ liệu đó qua internet.

Cùng với tính toán CO2, có xếp hạng carbon cho mỗi URL được thu thập, sử dụng Thang xếp hạng Carbon Kỹ thuật số từ Sustainable Web Design. Xếp hạng này xem xét các trung tâm dữ liệu, truyền tải mạng và sử dụng thiết bị trong tính toán.

Insight có thể hành động

Tính toán CO2 và hệ thống xếp hạng có thể được sử dụng làm điểm chuẩn, cũng như chất xúc tác để đóng góp vào một web bền vững hơn, giúp bạn xác định các trang và tài nguyên có xếp hạng carbon cao trên site của mình.

Cải thiện carbon footprint thường trùng với tối ưu hóa hiệu suất – các trang nhẹ hơn thường là trang nhanh hơn.

Sau đó, bạn có thể xem xét các cơ hội tối ưu hóa để giảm kích thước tệp tin và lượng khí thải CO2, cải thiện carbon footprint và xếp hạng.

Tính toán CO2 và xếp hạng carbon thậm chí có thể được tích hợp với dữ liệu phân tích để giúp ưu tiên các khu vực hoặc URL cần tập trung, bởi vì sẽ hợp lý hơn khi xử lý các trang có lưu lượng truy cập cao và xếp hạng carbon cao thay vì các trang có lưu lượng thấp và xếp hạng carbon cao. Tính bền vững trở nên chiến lược khi được ưu tiên dựa trên tác động, không chỉ dựa trên URL.

SEO Spider có thể giúp gì

Thiết lập đường cơ sở cho vị trí hiện tại

Bước đầu tiên để cắt giảm carbon footprint website là đo lường vị trí hiện tại của bạn. Screaming Frog SEO Spider cung cấp cho bạn bức tranh rõ ràng về mức sử dụng năng lượng và lượng khí thải carbon của website. Thông tin này rất cần thiết để xây dựng kế hoạch bền vững và theo dõi tiến trình theo thời gian.

Bạn có biết rằng trung bình một trang web tạo ra khoảng 0.4 gram CO2 cho mỗi lượt xem? Bằng cách đánh giá carbon footprint của site, bạn có thể xác định các lĩnh vực cần cải thiện và thiết lập mục tiêu giảm thiểu.

Tạo lộ trình / Nhận sự ủng hộ

Được trang bị những hiểu biết này, bạn có thể phát triển một lộ trình bền vững toàn diện. Kế hoạch này sẽ nêu chi tiết các bước cần thiết để giảm carbon footprint website, đồng thời thu hút sự ủng hộ từ các bên liên quan. Bằng cách đưa ra dữ liệu thuyết phục và thiết lập các mục tiêu rõ ràng, bạn có thể thuyết phục những người ra quyết định chủ chốt và truyền cảm hứng cho sự thay đổi thực sự.

Ví dụ, Wholegrain Digital đã cắt giảm được 60% lượng khí thải carbon từ website của Ecover bằng cách tuân theo một lộ trình bền vững kỹ thuật số. Chiến lược của họ bao gồm tối ưu hóa hình ảnh, giảm thiểu yêu cầu máy chủ và chuyển sang một nhà cung cấp hosting xanh.

Đo lường tác động của các thực hành bền vững

SEO Spider biến tính bền vững từ lý thuyết thành hành động có thể đo lường.

Hạ tầng

Hãy bắt đầu với nền tảng – nơi website của bạn sống và cách nó được truy cập.

Chuyển sang Green Web Host: Hosting chạy bằng năng lượng tái tạo có thể giảm đáng kể lượng khí thải vận hành qua đêm lên tới 90%.
Tối ưu hóa Ngân sách Crawl: Quản lý crawl thông minh hơn giảm áp lực lên máy chủ và lãng phí kỹ thuật số.

Hiệu suất

Tiếp theo, tập trung vào trọng lượng và hiệu quả – trang nhẹ hơn đồng nghĩa với năng lượng tiêu thụ ít hơn.

Tối ưu hóa Tệp tin Media: Nén hình ảnh/video để giảm đáng kể năng lượng sử dụng.
Cải thiện Core Web Vitals: Các trang nhanh hơn sử dụng ít hơn tới 20% năng lượng.
Loại bỏ Nội dung Dư thừa: Thời gian tải nhanh hơn (cải thiện tới 50%) giảm tiêu thụ năng lượng.

Trải nghiệm

Cuối cùng, xem xét thiết kế và UX ảnh hưởng như thế nào đến mức tiêu thụ trên thiết bị.

Triển khai Chế độ Tối: Tiết kiệm tới 39% năng lượng trên màn hình OLED.
Áp dụng Thực hành Thiết kế Sinh thái: Tối ưu hóa phông chữ/thiết kế để giảm năng lượng render.
Cải thiện Luồng UX: Các hành trình tốt hơn giảm tỷ lệ thoát và sử dụng năng lượng.

Không phải mọi hành động đều có tác động như nhau – việc kết hợp dữ liệu khí thải với dữ liệu lưu lượng truy cập giúp ưu tiên các thay đổi mang lại tác động thực tế lớn nhất.

Cách kiểm toán carbon website bằng SEO Spider

Nếu chúng ta thực sự nghiêm túc với GreenSEO, việc đo lường không thể hời hợt. Chúng ta cần thu thập dữ liệu website như người dùng trải nghiệm nó.

Bước quan trọng nhất để giảm lượng carbon đầu ra của một site là đo lường và thiết lập điểm chuẩn cho trạng thái hiện tại cũng như lượng CO2. Đây là lúc Screaming Frog SEO Spider phát huy tác dụng. Với các cài đặt phù hợp, công cụ crawl cho phép người làm SEO đo lường tác động của toàn bộ website.

Ben Meyer, người đã phát biểu tại một sự kiện GreenSEO trước đây, đã thực hiện một bài phân tích chuyên sâu về việc chạy kiểm toán carbon với Screaming Frog và thậm chí còn có một bảng điều khiển Looker Studio để bạn nhập dữ liệu vào.

Cách tiết kiệm năng lượng khi dùng SEO Spider

GreenSEO không chỉ nói về những gì chúng ta kiểm toán, mà còn về cách chúng ta kiểm toán. Ngoài việc thực hiện các bước chủ động để giảm carbon footprint bằng cách xử lý các trang và tài nguyên carbon cao trên site, bạn cũng có thể thu thập dữ liệu có trách nhiệm hơn khi sử dụng Screaming Frog SEO Spider.

Thu thập dữ liệu có trách nhiệm

Trước tiên, hãy cân nhắc liệu bạn có thực sự cần thu thập toàn bộ website hay không. Thường thì không cần thiết. Các website thường được xây dựng theo mẫu, và một mẫu thu thập các loại trang từ các phần khác nhau sẽ đủ để đưa ra quyết định sáng suốt trên toàn bộ site.

Tại sao phải crawl 5 triệu URL khi 50 nghìn là đủ? Với một vài điều chỉnh đơn giản, bạn có thể tránh lãng phí tài nguyên và thời gian vào những việc này.

Ngoài ra, tốt nhất nên sử dụng tính năng JavaScript crawling một cách có chọn lọc.

JavaScript crawling chậm hơn và tốn nhiều tài nguyên hơn, vì tất cả tài nguyên (dù là JavaScript, CSS hay hình ảnh) đều cần được tải để render mỗi trang web trong một trình duyệt headless ở nền nhằm xây dựng DOM.

Mặc dù điều này không phải vấn đề với các website nhỏ, nhưng với một site lớn có hàng nghìn trang trở lên, điều này có thể tạo ra sự khác biệt lớn. Nếu website của bạn không phụ thuộc vào JavaScript để thao tác động một trang web đáng kể, thì không cần lãng phí thời gian và tài nguyên.

Các tính năng tốn tài nguyên khác bao gồm kiểm tra chính tả, ngữ pháp và tích hợp AI.

Điều chỉnh cấu hình crawl mặc định

Càng nhiều dữ liệu được thu thập và càng crawl nhiều, nó càng tốn tài nguyên. Có nhiều cách để thực hiện một crawl ‘nhẹ’ hơn, chẳng hạn như bỏ chọn các tài nguyên bạn không cần trong ‘Configuration > Spider > Crawl’:

Crawl & Store Images
Crawl & Store CSS
Crawl & Store JavaScript
Crawl & Store SWF

Lưu ý: nếu bạn đang crawl ở chế độ JavaScript rendering, có thể bạn sẽ cần kích hoạt hầu hết các tùy chọn này, nếu không sẽ ảnh hưởng đến render.

Bỏ chọn bất kỳ mục nào trong số các liên kết trang sau đây trong ‘Configuration > Spider > Crawl’ cũng sẽ giúp tiết kiệm tài nguyên:

Crawl & Store External Links
Crawl & Store Canonicals
Crawl & Store Pagination
Crawl & Store Hreflang
Crawl & Store AMP

Bạn có thể bỏ chọn các thuộc tính không cần thiết để lưu trữ trong ‘Configuration > Spider > Extraction’ để tiết kiệm bộ nhớ, chẳng hạn như meta keywords. Hoặc chỉ các mục bạn không kiểm toán, chẳng hạn như structured data.

Chúng tôi cũng khuyên bạn nên tắt tính năng custom link positions thông qua ‘Config > Custom > Link Positions’. Tính năng này sử dụng nhiều bộ nhớ hơn, vì nó lưu trữ XPath của mọi liên kết được tìm thấy trong một crawl để phân loại vị trí của nó (navigation, sidebar, footer, v.v.).

Bạn có thể tìm thấy các tinh chỉnh cấu hình khác trong hướng dẫn của chúng tôi về cách crawl các website lớn.

Loại trừ các URL không cần thiết

Có nhiều cách để thu hẹp phạm vi crawl nhằm tránh xử lý các URL không cần thiết. Cách rõ ràng nhất là tính năng exclude, cho phép bạn loại trừ toàn bộ phần, bộ lọc, tham số URL, thư mục con, v.v.

Mặt khác, bạn có thể sử dụng tính năng include để kiểm soát đường dẫn URL mà SEO Spider sẽ crawl. Ví dụ, nếu bạn muốn crawl các trang từ https://www.screamingfrog.co.uk có chứa ‘search’ trong chuỗi URL, bạn chỉ cần thêm regex: .*search.* trong tính năng ‘include’.

Điều này sẽ tìm thấy các trang /search-engine-marketing/ và /search-engine-optimisation/ vì cả hai đều có ‘search’ trong đó.

Cuối cùng, có nhiều giới hạn khác nhau cho phép bạn lấy mẫu các trang từ khắp website mà không cần crawl mọi thứ. Bao gồm:

Limit Crawl Total – Giới hạn tổng số trang được crawl. Duyệt website để ước tính sơ bộ số lượng cần thiết để crawl một lựa chọn rộng các mẫu và loại trang.
Limit Crawl Depth – Giới hạn độ sâu của crawl đến các trang chính, cho phép đủ độ sâu để lấy mẫu tất cả các mẫu.
Limit Max URI Length To Crawl – Tránh crawl các liên kết tương đối không chính xác hoặc URL rất sâu, bằng cách giới hạn theo độ dài của chuỗi URL.
Limit Max Folder Depth – Giới hạn crawl theo độ sâu thư mục, hữu ích hơn cho các site có cấu trúc trực quan.
Limit Number of Query Strings – Giới hạn crawl nhiều facet và tham số theo số lượng query string. Bằng cách đặt giới hạn query string là ‘1’, bạn cho phép SEO Spider crawl một URL với một tham số đơn lẻ (ví dụ: ?color), nhưng không nhiều hơn. Điều này có thể hữu ích khi nhiều tham số có thể được thêm vào URL trong các kết hợp khác nhau!

Một trong những giới hạn mới hơn là ‘Limit by URL Path’, cho phép giới hạn tổng số URL khớp với một biểu thức chính quy cụ thể. Ví dụ: sử dụng ‘/products/’ trong ‘Configuration > Spider > Limits > Limit by URL Path’, giới hạn tổng số URL chứa ‘/products/’ mà Spider sẽ crawl.

Theo mặc định, giá trị này được đặt là 1.000 nhưng có thể điều chỉnh. Có thể đặt nhiều quy tắc trong phần này với các giới hạn khác nhau.

Lên lịch crawl chạy trong thời gian năng lượng thấp điểm

Bạn có thể lên lịch cho các crawl chạy tự động trong SEO Spider, dưới dạng một lần hoặc theo các khoảng thời gian đã chọn. Tính năng này có thể được tìm thấy trong ‘File > Scheduling’ trong ứng dụng.

Bạn có thể chọn trước chế độ (spider hoặc list), cấu hình đã lưu, v.v.

Điều này cho phép bạn lên lịch các crawl chạy qua đêm, khi nhu cầu năng lượng thấp hơn và lưới điện thường sử dụng nhiều năng lượng tái tạo và ít nhiên liệu hóa thạch hơn.

Kết luận

SEO bền vững không phải là một chuyên ngành riêng biệt.

Đó chỉ đơn giản là tối ưu hóa tốt – được thực hiện với nhận thức.

Với tư cách là người làm SEO, chúng ta ảnh hưởng đến lựa chọn hosting, kiến trúc site, hành vi crawl, ngân sách hiệu suất và sự bành trướng nội dung. Ảnh hưởng đó đi kèm trách nhiệm. Tin tốt là phần lớn những gì làm website xanh hơn cũng khiến nó tốt hơn: nhanh hơn, gọn nhẹ hơn, hiệu quả hơn.

Sự ra đời của tính năng đo carbon trong Screaming Frog SEO Spider mang đến cho ngành một thứ mà chúng ta đã thiếu trong nhiều năm – khả năng hiển thị. Khi bạn có thể đo lường một thứ, bạn có thể ưu tiên nó. Khi bạn có thể ưu tiên nó, bạn có thể cải thiện nó.

GreenSEO không phải là sự hoàn hảo. Đó là sự tiến bộ. Đó là việc đưa ra một quyết định tốt hơn tại một thời điểm – dựa trên dữ liệu, không phải phỏng đoán.

Nếu bạn muốn tiếp tục cuộc trò chuyện này, chúng tôi sẽ thảo luận về các phương pháp GreenSEO thực tế, nghiên cứu điển hình và công cụ tại sự kiện bên lề GreenSEO tiếp theo tại BrightonSEO.

Bởi vì tương lai của SEO không chỉ là về thứ hạng.

Đó là về trách nhiệm.

Bài viết được biên dịch và tổng hợp từ bài gốc.