Đánh giá và đánh giá Deepcrawl

DeepCrawl đã tăng giá một chút kể từ khi chúng tôi lần đầu tiên nhìn vào nó. Công cụ này hiện bắt đầu ở mức 89 đô la mỗi tháng, được tính hóa đơn hàng tháng; $ 81, 50 khi thanh toán hàng năm). Đó là khoảng 10 đô la nhiều hơn so với chi phí trước đây, vì vậy nó không phải là vấn đề đối với hầu hết các khách hàng công cụ tối ưu hóa công cụ tìm kiếm (SEO). Tuy nhiên, điều có thể ném bạn là trọng tâm thiết kế của nó: công cụ này chỉ dành cho một thứ và một thứ duy nhất: thu thập dữ liệu từ trên xuống dưới, từ trên xuống dưới. Các công cụ SEO nói chung có thể được nhóm thành ba loại chính. Đầu tiên có nghiên cứu từ khóa ad hoc, giúp bạn tìm các trang tìm kiếm cơ hội nhất để nội dung của bạn được xếp hạng cao hơn. Tiếp theo, có giám sát vị trí đang diễn ra, đó là cách bạn theo dõi các vị trí tìm kiếm của mình để xác định nơi bạn đạt được và mất điểm. Cuối cùng, có thu thập thông tin, trong đó các bot web phân tích một trang web hoặc thu thập dữ liệu một cách có hệ thống và lập chỉ mục toàn bộ internet. DeepCrawl không thực hiện thu thập dữ liệu trên internet nhưng nó sẽ cung cấp cho trang web của bạn toàn diện về SEO "quét toàn bộ cơ thể" như bạn có thể nhận được.

Loại thu thập dữ liệu trang web sâu này hữu ích cho các doanh nghiệp theo một số cách. DeepCrawl là một công cụ cho cả người dùng mới làm quen muốn làm nổi bật các sự cố trang web hoặc người dùng nâng cao tùy chỉnh thu thập dữ liệu của họ, nhưng không có bất kỳ hạn chế nào đối với truy cập dữ liệu. Thu thập thông tin cũng làm cho việc theo dõi sức khỏe của trang web dễ dàng hơn với cả bối cảnh lịch sử và thời gian thực, mang lại cho doanh nghiệp khả năng so sánh thu thập thông tin hàng năm và đi sâu vào các xu hướng và loại báo cáo khác nhau. Nói chung, bạn cần sử dụng kết hợp nhiều công cụ trong ba loại SEO để có chiến lược hiệu quả nhất và trình thu thập trang web là cách bạn xác định điểm mạnh và điểm yếu của trang web và trang đích của riêng mình.

Các công cụ SEO Lựa chọn của biên tập viên Moz Pro, SpyFu và AWR Cloud có độ sâu giám sát từ khóa và vị trí cao hơn nhiều, nhưng không có khả năng thu thập dữ liệu và kiểm tra trang web gần như. Vì vậy, ví dụ: nếu bạn đã sử dụng một trong các công cụ Lựa chọn của Biên tập viên hoặc một sản phẩm dành riêng cho từ khóa như KW Downloader.com để xác định trang kết quả của công cụ tìm kiếm mục tiêu (SERP) và phát hiện lý tưởng cho nội dung của bạn để xếp hạng, thì bạn sẽ chạy quét DeepCrawl kiến ​​trúc trang web của bạn để tạo ra các sự cố trang và xác định các vấn đề SEO cụ thể mà trang web của bạn cần cải thiện và giải quyết để trang đó được xếp hạng. Điều tương tự cũng xảy ra khi tìm hiểu lý do tại sao nội dung của bạn bị mất điểm trong bảng xếp hạng tìm kiếm như được theo dõi trong một công cụ giám sát như AWR Cloud hoặc tiến hành một số phân tích nguyên nhân gốc rễ về lý do trang web của bạn bị phạt với tìm kiếm của Google và cách bạn có thể phục hồi. Sớm hay muộn, một chiến lược SEO luôn quay trở lại để kiểm tra trang web của riêng bạn. Đó là công việc duy nhất và duy nhất của DeepCrawl.

Giá cả và kế hoạch

Như đã nêu, DeepCrawl bắt đầu ở mức 81, 50 đô la mỗi tháng, được lập hóa đơn hàng năm (89 đô la mỗi tháng) cho gói Starter, đi kèm với 100.000 URL hoạt động, năm dự án đang hoạt động, cùng với quyền truy cập giao diện lập trình ứng dụng (API) đầy đủ. Hầu hết các công cụ SEO dành quyền truy cập API cho các cấp doanh nghiệp, đây là điểm cộng nhất định cho người dùng DeepCrawl, những người muốn tùy chỉnh sâu hơn mà không cần thẻ giá doanh nghiệp.

Một thay đổi khác đã xảy ra kể từ lần cuối chúng tôi xem xét công cụ này là công ty đã loại bỏ các kế hoạch định giá khác. Đối với những người muốn đăng ký trực tuyến cho dịch vụ, có kế hoạch bắt đầu và đó là kế hoạch. Các tính năng nâng cao hơn và các tùy chọn dịch vụ gia tăng hiện chỉ có sẵn trong một loại kế hoạch khác: Kế hoạch doanh nghiệp. Không có nhiều chi tiết ở đây, ngoài giá "Bespoke", mà chúng tôi giả sử có nghĩa là một cuộc gọi đến đại diện công ty để họ có thể điều chỉnh kế hoạch dịch vụ và giá cả theo nhu cầu của bạn.

Thu thập dữ liệu trang web

Quá trình thu thập dữ liệu trang web trong DeepCrawl bắt đầu bằng một thiết lập bốn bước nhanh chóng. Trong bất kỳ một lần thu thập thông tin nào, bạn có thể bao gồm tối đa năm nguồn, sơ đồ trang web, trang web, phân tích, liên kết ngược và danh sách URL. Ý tưởng là giúp bạn dễ dàng xác định các lỗ hổng trong kiến ​​trúc trang web của mình, với các số liệu cụ thể mà bạn sẽ không tìm thấy trong các công cụ thu thập thông tin khác như Lưu lượng truy cập trang mồ côi. DeepCrawl được thiết kế để cung cấp cho người dùng một cái nhìn tổng quan hoàn chỉnh về sức khỏe kỹ thuật của trang web của họ, với dữ liệu có thể hành động và hiểu biết để tăng khả năng hiển thị SEO và biến lưu lượng truy cập tự nhiên thành doanh thu.

Khi bạn đăng ký dùng thử DeepCrawl miễn phí, trước tiên giao diện sẽ đưa bạn đến bảng điều khiển dự án. Để thiết lập dự án PCMag Test của tôi, tôi đã nhập PCMag.com làm tên miền chính. Bước hai là chọn nguồn dữ liệu cho thu thập thông tin, bao gồm chính trang web, sơ đồ trang web của PCMag và phân tích mà bạn có thể truy cập bằng tài khoản Google Analytics đang hoạt động. Bạn cũng có thể thêm các tham số đích liên kết ngược và URL cụ thể trong tên miền (ví dụ: nếu bạn đã xác định các trang mục tiêu trong công cụ nghiên cứu từ khóa) bằng cách tải lên các tệp CSV của danh sách liên kết ngược hoặc URL cụ thể. Ngoài ra còn có một hộp bật lên ở cuối trang để xem hướng dẫn bằng video về cách thiết lập các dự án và thu thập thông tin DeepCrawl.

Bước ba cho phép bạn thiết lập các tham số cho chính nó. Tôi đã có thể chuyển tốc độ thu thập dữ liệu đến bất kỳ nơi nào từ một URL đến 50 URL mỗi giây. Từ đó, tôi có tùy chọn đặt bao nhiêu "mức thu thập dữ liệu" sâu trong quá trình quét từ trang chủ PCMag và đặt số lượng URL tối đa mà quá trình thu thập thông tin sẽ dừng. Bản dùng thử miễn phí của tôi là dành cho gói Starter, vì vậy URL của tôi được giới hạn ở mức 100.000. Bước cuối cùng là đặt liệu đây sẽ là thu thập thông tin một lần hay định kỳ, có thể là hàng giờ, hàng ngày, hàng tuần, hai tuần một lần, hàng tháng hoặc hàng quý, với tùy chọn đặt thời gian bắt đầu và kết thúc cho thu thập thông tin.

Đây là một tính năng quan trọng cần thiết nếu bạn cần kiểm tra trang web thường xuyên nhưng hãy cẩn thận với các giới hạn URL của bạn tùy thuộc vào gói bạn chọn. Ngoài ra còn có các cài đặt nâng cao hơn để hạn chế thu thập dữ liệu sâu hơn, URL bị loại trừ, viết lại URL và gọi lại API, nhưng người dùng SEO không có kỹ thuật sẽ không nhất thiết phải tham gia vào đó. Từ đó, tôi nhấp vào Bắt đầu thu thập thông tin và nhận được email vài phút sau khi thu thập thông tin hoàn tất.

Trong bảng điều khiển thu thập thông tin đã hoàn thành, bạn ngay lập tức phải đối mặt với một bức tường thông tin. Nếu bạn biết những gì bạn đang tìm kiếm, thì có các thanh tìm kiếm kép ở trên cùng để tìm một URL cụ thể hoặc tìm báo cáo về một khu vực cụ thể của kiến ​​trúc trang web; đây có thể là bất cứ điều gì từ nội dung cơ thể và thẻ xã hội đến các URL và chuyển hướng trang web không thành công. Tổng cộng, DeepCrawl đã chạy 175 báo cáo về URL của tôi, trong đó bản dùng thử miễn phí hóa ra được giới hạn ở mức hơn 10.000 một chút và phát hiện ra 30 vấn đề trang web và thu thập sáu "cấp độ" hoặc liên kết sâu từ trang chủ.

Trang bảng điều khiển chính cung cấp bảng phân tích danh sách tất cả các sự cố trang web hiện tại, từ đó bạn có thể đi sâu vào các URL cụ thể nơi DeepCrawl sẽ làm nổi bật các lỗi trang như nội dung trùng lặp, trang bị hỏng, liên kết thừa hoặc trang có tiêu đề, mô tả và siêu dữ liệu cần cải thiện SEO. Bên cạnh danh sách đó, tôi đã tìm thấy bảng phân tích trang biểu đồ tương tác về các vấn đề phổ biến nhất trong số hơn 10.000 trang được thu thập thông tin.

DeepCrawl cũng đã cập nhật giao diện người dùng (UI) kể từ đánh giá ban đầu của chúng tôi, thêm các mẩu bánh mì trên mỗi trang để giúp điều hướng đến các phần khác của nền tảng và thêm phần bảng điều khiển để đánh giá tất cả các lần thu thập thông tin đang chạy ở một nơi. Đối với tên miền của tôi, tôi thấy rằng, mặc dù không có vấn đề gì lớn với 49 phần trăm trang của tôi (hầu hết trong số đó là trang "chính"), 30 phần trăm trang của tôi bên dưới bề mặt đang xử lý lỗi máy chủ 5xx, năm phần trăm trang có URL không thành công và 16 phần trăm trang là "không thể lập chỉ mục." Theo DeepCrawl, các lỗi 5xx có thể xảy ra do trang PCMag chặn các khía cạnh của thu thập thông tin hoặc do thu thập dữ liệu quá nhanh để máy chủ xử lý. DeepCrawl cũng đã làm rõ rằng các trang được gắn cờ là chính không nhất thiết không có vấn đề và vẫn có thể được xem xét để bao gồm các trang bị thiếu, loại trừ các trang có giá trị thấp và chú thích với các đề xuất SEO trên trang.

Một số công cụ thu thập thông tin khác mà tôi đã thử nghiệm, bao gồm Ahrefs và Majestic, cũng cung cấp cho bạn loại sự cố này, bao gồm các sự cố cơ bản về trang web cũng như lập chỉ mục backlink, nghĩa là các siêu liên kết đến từ các trang web khác của bạn. Những gì người khác không làm được là đi sâu hơn đến mức DeepCrawl làm, đặc biệt là với các sự cố như các trang được bảo mật bằng giao thức HTTPS an toàn hơn so với HTTP, thuật toán Google tính đến khi xếp hạng các trang.

DeepCrawl cũng cung cấp cho bạn các Nhóm trang không liên quan (mà bạn có thể tìm thấy trong Cài đặt nâng cao khi thiết lập thu thập thông tin), nghĩa là việc lấy mẫu của bạn dựa trên tỷ lệ phần trăm của trang chứ không phải là số. Nhóm các trang theo cách này rất quan trọng ở chỗ nó cung cấp cho bạn một mẫu nhất quán trên các lần thu thập thông tin. Hãy nghĩ về nó giống như một thử nghiệm khoa học: nếu bạn là một trang web thương mại điện tử thu thập 20 phần trăm các trang sản phẩm của bạn, trong lần thu thập sau, Deepcrawl sẽ quét cùng 20 phần trăm cho các trang đã được thêm, xóa, thiếu hoặc thay đổi trong từng báo cáo. Điều này cũng làm giảm thời gian và chi phí thu thập thông tin, vì bạn đang nhắm mục tiêu thu thập dữ liệu của mình đến tập hợp con cụ thể của các trang mà bạn quan tâm.

Tương tự, Trích xuất tùy chỉnh của DeepCrawl có thể được sử dụng để bao gồm hoặc loại trừ các tham số bạn chọn. Đây là một tính năng nâng cao hơn được thiết kế để thu thập dữ liệu chuyên biệt hơn để tập trung vào các khu vực trọng tâm của bạn. Công ty cũng đã bổ sung các trích xuất tùy chỉnh cài sẵn cho người dùng không có kỹ thuật, vì viết trích xuất tùy chỉnh đòi hỏi kiến ​​thức về ngôn ngữ biểu thức chính quy (Regex).

Báo cáo nâng cao

Ngoài tích hợp GSC, các cải tiến nổi bật nhất của DeepCrawl nằm ở khả năng báo cáo của nó, mà DeepCrawl đã thêm 75 báo cáo mới trong năm qua. Ngoài những điều cơ bản, chia sẻ và xuất báo cáo, hoặc thêm một nhiệm vụ cho báo cáo đó, bạn có thể nhấp vào nút Chia sẻ để nhận liên kết có thể chia sẻ với báo cáo đó. Sau đó, bạn có thể gửi email báo cáo cho bất kỳ số lượng người nhận. Bạn cũng có thể tải xuống báo cáo dưới dạng tệp CSV hoặc sơ đồ trang web XML và tùy chỉnh các báo cáo với nhãn hiệu tùy chỉnh.

Tính năng dựa trên nhiệm vụ đặc biệt hữu ích. DeepCrawl cho phép tôi thêm một tác vụ cho các báo cáo cụ thể trong trường hợp này, danh sách các lỗi máy chủ 5xx, lỗi để xử lý lỗ hổng SEO đó. DeepCrawl cho phép bạn không chỉ lên lịch và tùy chỉnh thu thập thông tin, mà bằng cách sử dụng Trình quản lý tác vụ, bạn có thể theo dõi tiến trình và quản lý sự cố và thời hạn công việc. Dấu hiệu của một công cụ tốt là không chỉ phát hiện ra vấn đề hoặc cơ hội mà còn giúp bạn hành động nó với các khuyến nghị được nhắm mục tiêu. Tôi đã được cung cấp tùy chọn để thiết lập một nhiệm vụ mở hoặc cố định; chỉ định mức độ ưu tiên thấp, trung bình, cao hoặc quan trọng; đặt thời hạn và giao nhiệm vụ đó cho các cá nhân cụ thể trong nhóm của tôi. DeepCrawl đã cho tôi một con đường hữu hình để giải quyết các vấn đề SEO với trang web của tôi. Chỉ các đề xuất được nhắm mục tiêu của SpyFu và KW Downloader.com cung cấp khả năng tương tự để báo cáo SEO và không có trình thu thập dữ liệu nào khác bao gồm loại tính năng hành động dựa trên nhiệm vụ này.

DeepCrawl đã cải thiện thanh tìm kiếm điều hướng bên trái để tìm báo cáo bằng cách sử dụng từ khóa (ngay cả khi từ khóa không xuất hiện trong báo cáo tiêu đề thực tế) và lọc báo cáo theo bất kỳ số liệu liên quan hoặc URL nào có liên quan. Ngoài ra còn có một số trực quan hóa dữ liệu mới trên màn hình báo cáo và danh mục bao gồm biểu đồ phân tích, biểu đồ liên quan, biểu đồ xu hướng mới và cải tiến UX như cuộn và chuyển đổi biểu đồ, cũng như giải thích tương tác trên các số liệu cụ thể xuất hiện trong biểu đồ cụ thể. Giao diện người dùng báo cáo cũng linh hoạt, có nghĩa là bạn có thể kéo và thả các báo cáo bạn muốn hiển thị.

Nhấp vào bất kỳ URL nào trong bất kỳ báo cáo nào sẽ cung cấp cho bạn số liệu chi tiết trên mỗi trang. Trong tất cả các báo cáo URL-by-URL của mình, DeepCrawl sử dụng một số liệu tùy chỉnh có tên DeepRank, đo lường "trọng lượng bên trong" của một liên kết được tính toán tương tự như thuật toán PageRank của Google. Đó là số liệu thẩm quyền URL của DeepCrawl, trên thang điểm từ 0-10, hiển thị các URL quan trọng nhất của bạn hoặc những URL cần cải thiện nhất. Vì vậy, trong khi trang chủ PCMag và các trang hàng đầu đều được xếp hạng trong phạm vi 8-10, một số trang có vấn đề còn lại với DeepRank gần bằng không.

Ngoài việc đồng bộ hóa với Google Analytics, DeepCrawl cũng bao gồm một phần dữ liệu phá vỡ các trang dành cho máy tính để bàn và thiết bị di động không chỉ cho thiết kế web đáp ứng, mà tất cả các cấu hình di động bao gồm các trang di động và máy tính để bàn, trang động và trang AMP riêng biệt. Các loại sự cố di động quan trọng này cũng có thể được tìm thấy trong SpyFu và SEMrush, nhưng không theo chiều sâu của các số liệu của DeepCrawl và không có trong bất kỳ công cụ theo dõi trình thu thập thông tin và backlink nào khác mà tôi đã thử nghiệm, bao gồm LinkResearchTools.

Bản cập nhật khả năng lớn nhất cho DeepCrawl vì đánh giá ban đầu của chúng tôi là tích hợp với Google Search Console (GSC) và thậm chí cả trải nghiệm người dùng từng trang (UX) nâng cao hơn và số liệu hiệu suất trang web. Việc tích hợp cho phép bạn kết nối những hiểu biết về hiệu suất trang web hiện tại của DeepCrawl với thông tin tìm kiếm không phải trả tiền từ báo cáo Phân tích Tìm kiếm của GSC. Bằng cách thêm thuộc tính Search Search làm nguồn URL trong cài đặt thu thập dữ liệu của bạn, DeepCrawl hiện có thể cung cấp số lần hiển thị, số lần nhấp, tỷ lệ nhấp (TLB) và số liệu vị trí trung bình cho mỗi trang được lập chỉ mục xuất hiện trong kết quả tìm kiếm. Báo cáo Phân tích Tìm kiếm của Google có giới hạn 1.000 URL trong giao diện GSC, nhưng việc truy cập báo cáo thông qua DeepCrawl sẽ đưa bạn đi vòng quanh nó.

Các công cụ SEO khác như SEMrush và Majestic cũng tích hợp với Google Search Console, nhưng tích hợp của DeepCrawl là công cụ duy nhất trong số các công cụ chúng tôi đã thử nghiệm để sử dụng công cụ này để cung cấp số liệu SERP dành riêng cho thiết bị. Thông qua tích hợp, DeepCrawl đã phát hành 10 báo cáo mới, hai biểu đồ mới và so sánh máy tính để bàn / thiết bị di động / máy tính bảng sâu hơn. Sự cố và so sánh thiết bị hiện kéo theo dữ liệu GSC trên cơ sở từng quốc gia, số lần hiển thị và hiệu quả tìm kiếm cho các trang có thể lập chỉ mục và không thể lập chỉ mục, thu thập dữ liệu nhận lưu lượng truy cập từ tìm kiếm hình ảnh và số liệu trên các trang Google AMP.

Một tính năng độc đáo ở đây là thước đo các trang di động / AMP nhận lưu lượng truy cập máy tính để bàn và ngược lại, có nghĩa là DeepCrawl sẽ hiển thị nếu các trang của bạn xếp hạng trên thiết bị sai. Điều này có nghĩa là DeepCrawl thu thập tất cả các URL di động hoặc AMP riêng biệt để làm nổi bật sự khác biệt và không khớp giữa nội dung trên máy tính để bàn và thiết bị di động. Các báo cáo kiểm tra rằng tất cả các trang có giá trị cao đều tồn tại trên thiết bị di động.

DeepCrawl cũng cung cấp dữ liệu về gắn thẻ xã hội, chẳng hạn như các trang có Thẻ Twitter hợp lệ, cũng như một tab chỉ hiển thị hiệu suất của trang về thời gian tải hoặc thời gian để "tìm nạp" một trang. Cuối cùng, công cụ cung cấp các báo cáo di chuyển trang web để phân tích các trang web trực tiếp và dàn dựng trong quá trình di chuyển và báo cáo cụ thể trên các trang HTTP và HTTP. Đây là những số liệu bạn sẽ tìm thấy trong các công cụ giám sát trang web, nhưng về mặt SEO, nó có thể có giá trị đơn giản trong việc xác định các trang có UX kém và đảm bảo di chuyển trang web trơn tru.

Dưới kính hiển vi thu thập dữ liệu trang web

DeepCrawl là công cụ thu thập dữ liệu tốt nhất mà chúng tôi đã thử nghiệm bằng một lề rộng. Nó cung cấp độ sâu lớn nhất của quét tên miền và báo cáo SEO với dữ liệu và số liệu cực kỳ chi tiết mà đối với người mới làm SEO, có thể thực sự áp đảo. Phần lớn ánh xạ kiến ​​trúc trang web và phân tích tên miền mà nó cung cấp có thể phù hợp hơn cho các nhà phát triển và CNTT. PCMag không xem xét các tính năng beta, nhưng DeepCrawl cũng đang thử nghiệm Chế độ Site Explorer thử nghiệm cho phép bạn khám phá trực quan kiến ​​trúc trang web.

Như với sự thống trị của KW Downloader.com trong nghiên cứu từ khóa ad hoc, việc tập trung vào việc thu thập thông tin bằng laser của DeepCrawl là cả phước lành và lời nguyền của nó. Phạm vi hẹp này của chức năng của nó ngăn cản DeepCrawl kiếm được cái gật đầu của Biên tập viên cùng với các nền tảng SEO chính thức hơn Moz Pro và SpyFu. Nhưng xét về khả năng thu thập dữ liệu độc lập để quét trang web của bạn hoặc các trang web của đối thủ từ trên xuống dưới, DeepCrawl là một kính hiển vi SEO mạnh mẽ.