GoogleBot Crawling mới thu thập thông tin cho điện thoại thông minh

Hiện nay trên các diễn đàn SEO và mạng xã hội Facebook anh em làm SEO có than là từ khoá tụt bất thường. Ngoài các vấn đề vi phạm các thuật toán của Google không biết thông tin trong bài viết này có phải là một nguyên nhân. Hôm qua 23-02-2014 theo giờ US thì Google chính thức đưa thêm 1 một GoogleBot mới vào hoạt động có nhiệm vụ crawling thu thập thông tin cho điện thoại thông minh. Xem thêm bài viết về Google Bot (Spider) đọc website của bạn như thế nào? GoogleBot dành cho mobile cũ sẽ tạm dừng sau 3-4 tuần nữa, việc thay đổi này ảnh hưởng tới 0,001 kết quả xếp hạng nhưng điều này sẽ giúp các webmaster có thể kiểm soát và tuỳ chỉnh index cho từng loại thiết bị.

Dưới đây là Googlebot cũ:

	
			Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)

Và chúng sẽ được thay thế bởi Googlebot mới:

	
			Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

Việc thay đổi GoogleBot ngày không ảnh hưởng tới loại Googlebot thường còn lại cho web. Xem thêm về các loại Googlet Bot cũ trong bài Hướng dẫn tối ưu hóa khi thiết kế website cho mobile wap. Để kiểm chứng cho sự thay đổi này các bạn có thể truy cập vào Google Webmaster Tools trong phần Tìm nạp như Google(Fetch as Google dùng ngôn ngữ tiếng anh).

⭐GoogleBot Crawling mới thu thập thông tin cho điện thoại thông minh

Cùng với sự ra đời của GoogleBot mới thì việc thay đổi với file robots.txt cũng thay đổi chút ít, trường hợp bạn muốn chặn tất cả các GoogleBot Crawling thì chỉ cấu trúc vẫn như cũ:

	
			User-agent: Googlebot
Disallow: /

Bạn muốn chặn GoogleBot crawling cho điện thoại thông mới thì cấu trúc file robots.txt như sau

	
			User-agent: Googlebot-Mobile
Disallow: /

Bonus cho các bạn nào chưa biết thông tin thêm về các loại Bot mà Google dùng để crawl website chúng ta:

Crawler	User-agents	HTTP(S) requests user-agent
Googlebot (Google Web search)	`Googlebot`	`Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html`) or (rarely used): `Googlebot/2.1 (+http://www.google.com/bot.html`)
Googlebot News	`Googlebot-News` (`Googlebot`)	`Googlebot-News`
Googlebot Images	`Googlebot-Image` (`Googlebot`)	`Googlebot-Image/1.0`
Googlebot Video	`Googlebot-Video` (`Googlebot`)	`Googlebot-Video/1.0`
Google Mobile	`Googlebot-Mobile`	[various mobile device types] (`compatible; Googlebot-Mobile/2.1`;`+http://www.google.com/bot.html`)
Google Smartphone	`Googlebot`	`Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)`
Google Mobile AdSense	`Mediapartners-Google`or`Mediapartners` (`Googlebot`)	[various mobile device types] (`compatible; Mediapartners-Google/2.1`;`+http://www.google.com/bot.html`)
Google AdSense	`Mediapartners-Google` `Mediapartners` (`Googlebot`)	`Mediapartners-Google`
Google AdsBot landing page quality check	`AdsBot-Google`	`AdsBot-Google` (`+http://www.google.com/adsbot.html`)

Hi vọng sau bài viết này sẽ giúp các bạn làm dịch vụ SEO có thêm kiến thức về làm SEO trên các thiết bị di động smartphone. Chúc các bạn thành công!

Tags:

GoogleBot Crawling mới thu thập thông tin cho điện thoại thông minh

Tin tức khác | Xem tất cả

Web 4.0 là gì? Giải mã công nghệ Web 4.0 của tương lai Internet

Web 4.0 sử dụng công nghệ tiên tiến tạo ra không gian Internet thông minh và tự động hóa giúp cải thiện đáng kể sự tương tác giữa người dùng và hệ...

Web 5.0 là gì? Các yếu tố cốt lõi và tiềm năng ứng dụng

Web 5.0 là bước tiến vượt bậc trong quá trình phát triển của Internet, mang đến khả năng tương tác thông minh và cảm xúc giữa người dùng và máy...

Localhost là gì? Hướng dẫn cài đặt localhost từ A - Z

Cài đặt localhost với các công cụ Xampp, WampServer là bước quan trọng để kiểm thử các ứng dụng web trực tiếp trên máy tính mà không cần Internet.

Widget là gì? Các loại widget website phổ biến nhất

Web widget không chỉ là công cụ hỗ trợ chức năng mà còn là yếu tố quan trọng trong thiết kế giao diện người dùng (UI/UX) giúp tăng tính tương tác.

Backend là gì? Vai trò và cách hoạt động của website backend

Website backend đóng vai trò cốt lõi trong xử lý dữ liệu, tối ưu hiệu suất và bảo mật, giúp website hoạt động ổn định, nhanh chóng và an toàn hơn.

Mobile website: Xu hướng tất yếu trong kỷ nguyên di động

Hơn 60% lưu lượng web đến từ di động, mobile responsive website không chỉ là xu hướng mà còn là yếu tố quyết định sự thành công của một trang web.

Frontend là gì? Vai trò & công nghệ lập trình frontend cốt lõi

Frontend đóng vai trò quan trọng trong phát triển web, ảnh hưởng trực tiếp đến trải nghiệm người dùng, hiệu suất và tính tương tác của trang web.

Name server là gì? Cách thay đổi name server nhanh chóng

Thay vì phải ghi nhớ địa chỉ IP phức tạp, name server cho phép người dùng nhập tên miền dễ nhớ như websitechuyennghiep.vn để có thể truy cập web nhanh chóng.