🐸 فرض کن یه قورباغه داخل سایتت راه میوفته و همه صفحات، لینکها، هدینگها، متاها و خطاهای احتمالی رو شکار میکنه.
این دقیقا همون کاریه که Screaming Frog SEO Spider یا اسکریمینگ فراگ انجام میده:
اون مثل یه ربات خزنده گوگل تو سایت میچرخه و بررسی میکنه چه چیزهایی درستن، چه چیزهایی مشکل دارن و کجای ساختار سایت میتونه رتبهی تو رو پایین بیاره.
اسکریمینگ فراگ را دانلود کنید 🔗 این ابزار اول برای متخصصان سئو ساخته شد و هنوز هم پایهی هر بررسی تکنیکال سئوست.
چون خیلی از مشکلات سایت رو خودکار پیدا میکنه و بهت نشون میده کجا باید دست به کار شی.
🧰بدون این ابزار، بخش زیادی از خطاهای تکنیکال رو یا دیر متوجه میشی، یا اصلا نمیبینی.
مثلا این چیزهایی که خودش اتومات بررسی میکنه:
- لینکهای خراب (۴۰۴ و خطاهای سرور)
- ریدایرکتها و زنجیرههای اشتباه
- متا تگها (عنوان، توضیحات)
- محتواهای تکراری
- ساختار لینکهای داخلی
- بررسی robots.txt و meta robots
- نقشه سایت XML
- اتصال به Google Analytics، Search Console و PageSpeed Insight برای دادههای تکمیلی
این یعنی فقط نگاه کردن به یک سری صفحات نیست، بلکه یه دید ۳۶۰ درجه از وضعیت سایتت بهت میده.
۱. خزیدن سایت مثل گوگل: اول ابزار رو باز میکنی، URL سایتت رو وارد میکنی و میذاری خودش کارش رو بکنه.
🌎این ابزار صفحات سایتت رو مثل گوگل میخونه و هر لینک و مسیر قابل دسترسی رو دنبال میکنه تا همه چیز رو ثبت کنه.
وقتی کارش تموم شد، یه جدول کامل از همه صفحات، لینکها، خطاها، تگها و دادههای SEO بهت میده.
۲. تحلیل خطاها: خروجی ابزار در قالب لیست کوچیک بهت میگه کجا مشکل وجود داره. مثلا:
- صفحات با خطای ۴۰۴
- صفحات با تکراری بودن متا تگ
- صفحات بدون H1
- لینکهای ناقص
- صفحات با ریدایرکت اشتباه
این لیست بهت میگه کجا باید اول کار کنی تا بیشترین تاثیر از سئو رو بگیری.
۳. نقشه سایت و ساختار: وقتی ابزار سایت رو بررسی میکنه، میتونی خروجی XML Sitemap بگیری.
این فایل به موتورهای جستجو کمک میکنه ساختار سایتت رو بهتر بفهمن و صفحات مهم رو سریعتر ایندکس کنن.
🛒این یکی از اولین کاراییه که برای سایتهای بزرگ یا فروشگاهی باید انجام بدی.
💰ابزار اسکریمینگ فراگ نسخه رایگان داره که تا ۵۰۰ آدرس سایت (URL) رو میتونه بررسی کنه. برای سایتهای کوچیک یا تست اولیه کافیه. نسخه پولی هم امکانات بیشتر و محدودیت حذفشده داره.
اگر سایتت خیلی بزرگه یا میخوای پروژههای حرفهایتری انجام بدی، نسخه پولی ارزشش رو دارد.
اکثر کاربرها فقط بخش استاندارد ابزار رو میبینن، ولی Screaming Frog قابلیتهای زیادی داره که خیلیها ازش خبر ندارن.
✅️ مقایسه چند نقشه سایت XML: میتونی چند sitemap رو بارگذاری کنی و بفهمی کدوم صفحها اضافه یا حذف شده.
✅️ مقایسه دو خزیدن مختلف: خیلی وقتها بعد از تغییرات، باید بفهمی چه تغییراتی تو بخش SEO ایجاد شده. این امکان فقط با Compare امکانپذیره.
✅️ ادغام AI با API ابزارهای هوش مصنوعی: نسخههای جدید میتونن به OpenAI یا Gemini وصل بشن و تحلیل متن، تولید alt text، تشخیص نیت محتوا و خلاصهسازی انجام بدن.
✅️ تحلیل Embeddings و خوشهبندی محتوا: این بهت کمک میکنه محتواهای مشابه رو دستهبندی کنی و مشکلات Keyword Cannibalization رو حل کنی.
✅️ تولید خودکار alt text برای تصاویر: حسابتو راحتتر میکنه برای بهینهسازی رسانههای سایت.
✅️ خلاصهسازی متادیتا با AI: میتونی از هوش مصنوعی بخوای بهترین توضیحات متا رو بسازه.
✅️ پشتیبانی از XPath سفارشی: برای استخراج دقیقتر دادهها از صفحات.
✅️ حالت List برای بررسی URLهای خاص: میتونی فقط بخش خاصی از سایت رو بررسی کنی.
✅️ ادغام با سایر ابزارهای سئو: مثل Google Analytics یا Search Console.
✅️ گزارشهای مقایسهای دقیق: برای بررسی تغییرات بعد از مهاجرت سایت یا بازطراحیهای بزرگ.
اینها ابزارهاییه که فرق بین یه بررسی معمولی و یه بررسی حرفهای رو تعیین میکنن.
2️⃣ وقتی میخوای رتبه بگیری: خیلی از مشکلات سئو فنی مثل لینکهای خراب یا متادیتا ناقص، مستقیم روی رتبه تاثیر میذارن. Screaming Frog اول اینها رو نشونت میده و بعد راه حل عملیش رو مشخص میکنه.
3️⃣ وقتی بعد از آپدیت یا ریدیزاین سایت میخوای بررسی کنی: مقایسه دو خزیدن بهت میگه چیا از دست رفته، چیا تغییر کرده، چیا بهتر شده یا بدتر شده.
ابزار وقتی بهترینه که درست پیکربندی شده باشه. اگر پیکربندی نادرست باشه:
❌ممکنه صفحات کامل نشناسه
❌لینکها رو بد گزارش بده
❌ بعضی خطاها رو ندیده بگیره
اینها معمولاً بخاطر تنظیمات رندر کردن جاوااسکریپت یا robots.txt هستن. پس قبل از نتیجهگیری، حتما تنظیمات رو چک کن.
📊 اتصال به دادههای واقعی: با وصل کردن ابزار به Google Analytics و Search Console، اطلاعات واقعی کاربران هم به نتایج crawl اضافه میشه. این باعث میشه خطاها و فرصتهای SEO بهتر دیده بشن.
📉 خروجی گرفتن و اقدام فوری: بعد از بررسی، خروجی CSV بگیر و شروع کن به اصلاح خطاها. اینقدر این بخش مهمه که بدون اون کل فرآیند بیفایده میشه.
👑 اسکریمینگ فراگ میتونه تا ۳۰۰+ خطای مختلف رو شناسایی کنه و بهت بگه کجا باید سریع اصلاح انجام بدی.
👑 نسخه رایگان برای شروع خوبه، نسخه پولی برای سایتهای بزرگ واجبه.
👑 ویژگیهای پیشرفته مثل مقایسه خزیدن، AI و تجزیهتحلیل ساختار، باعث میشن ابزار تکرارنشدنی بشه.
