اسکریمینگ فراگ یا Screaming Frog SEO Spider (که به آن اسکریم فراگ هم می‌گویند) یک خزنده دسکتاپ برای ویندوز، مک و لینوکس اوبونتو است. این برنامه مثل ربات موتورهای جستجو صفحات سایت را می‌پیماید و لینکهای خراب، ریدایرکتها، عنوانها، متادیسکریپشن‌ها، کنونیکالها و محتوای تکراری را یکجا نشان میدهد. نسخه رایگان آن در هر خزش تا 500 URL را بررسی میکند و نسخه پولی این محدودیت را ندارد. در این آموزش نصب، خزش، خواندن تب‌ها و خروجی گرفتن را قدم‌به‌قدم می‌بینید.
اگر با تکنیک‌های سئو سروکار دارید، اسکریمینگ فراگ در کنار دیگر ابزارهای سئو برای عیبیابی فنی سایت کاربرد زیادی دارد.
آموزش اسکریمینگ فراگ (Screaming Frog)
کار اصلی اسکریمینگ فراگ خزیدن سایت و تحلیل بخش‌های مختلف آن است و بیشتر در سئوی تکنیکال به کار می‌رود. این امکان به شما توانایی میدهد تا همه پارامترهای مهم سئو سایت را از دیدی شبیه گوگل نگاه کرده و ایرادهای آن را برطرف کنید. در آموزش اسکریمینگ فراگ به مهم‌ترین ویژگی‌ها و امکانات آن که در سئوی سایت بیش از دیگر امکانات به کار می‌آیند، پرداخته‌ایم.
نصب و راه‌اندازی اسکریمینگ فراگ
در قدم اول برای آموزش Screaming Frog به سراغ نصب آن می‌رویم. برای نصب و راه‌اندازی اسکریمینگ فراگ ابتدا فایل آن را از سایت سازنده (https://www.screamingfrog.co.uk/quick-start-guide) دانلود کرده، با گذراندن مراحل نصب و زدن گزینه next، آن را روی سیستم خود نصب کنید. روند نصب این نرم‌افزار به سادگی طی می‌شود و پیچیدگی خاصی ندارد. پس از پایان مراحل نصب، نسخه رایگان آن راه‌اندازی می‌شود. با این نسخه می‌توانید در هر خزش تا 500 URL را بررسی کنید. برای رفع این محدودیت و دسترسی به امکانات پیشرفته باید لایسنس سالانه را از سایت سازنده بخرید.
در نظر داشته باشید که اسکریمینگ فراگ نرم‌افزاری دسکتاپ برای ویندوز، مک و لینوکس اوبونتو است و به صورت نرم افزار اشتراکی سئو قابل خرید نیست. اطلاعات سایت‌ها پس از خزش بر روی کامپیوتر شما ذخیره خواهد شد و به صورت آنلاین ذخیره سازی نمی‌شود. حداقل نیاز آن سیستم‌عامل 64 بیتی با 4 گیگابایت رم است و برای سایت‌های بزرگ، سازنده پیشنهاد میکند حالت database storage را فعال کنید و حافظه بیشتری به برنامه بدهید.
دانلود اسکریمینگ فراگ و تفاوت نسخه رایگان و پولی
اسکریمینگ فراگ را فقط از سایت رسمی Screaming Frog دانلود کنید. نسخه رایگان و پولی یک برنامه‌اند و لایسنس فقط محدودیت‌ها را برمی‌دارد. هر لایسنس برای یک کاربر است و یک سال اعتبار دارد. طبق تاریخچه نسخه‌ها، آخرین نسخه در نوامبر 2026 شماره 25.1 است.
| مورد | نسخه رایگان | نسخه پولی |
|---|---|---|
| سقف خزش | 500 URL | نامحدود (وابسته به رم و فضای ذخیره‌سازی) |
| Custom Extraction، زمانبندی خزش، اتصال به Google Analytics، سرچ کنسول و PageSpeed Insights | ندارد | دارد |
| قیمت در صفحه رسمی قیمت | رایگان | 245 یورو در سال برای هر لایسنس |
خزیدن در وب سایت با اسکریمینگ فراگ
خزیدن در وب سایت با اسکریمینگ فراگ به دو روش کلی انجام می‌شود. در روش پیش‌فرض که spider نام دارد، شما آدرس وب‌سایت را وارد می‌کنید و نرم‌افزار شروع به خزیدن در کل سایت می کند. اما در روش دیگر که list نام دارد، شما لیستی از آدرس‌های URL که می‌خواهید خزش شوند را وارد می‌کنید تا نرم‌افزار کار را برای شما انجام دهد. در صورتی که می‌خواهید همه محتوای یک سایت را خزش کنید، باید آدرس صفحه اصلی آن را در کادر Enter URL to spider در بالای نرم‌افزار وارد کنید و دکمه Start را بزنید.
با این کار نرم‌افزار شروع به خزش سایت و کلیه صفحاتی که URL همین سایت را دارند، میکند. در بحث آموزش اسکریمینگ فراگ مهم است بدانید که این ابزار کار خزش را به صورت لحظه‌ای و زنده انجام میدهد و شما می‌توانید سرعت کار، تعداد لینکهای باقی‌مانده و مدت زمان لازم برای پایان کار را در پایین صفحه نرم‌افزار ببینید. همچنین می‌توانید کار خزش را به صورت موقت متوقف کنید، یا آن را ذخیره کرده و بعد ادامه دهید. اما اگر می‌خواهید لیستی از URLها برای خزش به سایت بدهید، باید از قسمت Mode در منوهای بالای صفحه، گزینه List را انتخاب کنید. به طور کلی اسکریمینگ فراگ به گونه‌ای برنامه‌ریزی شده که تا جای ممکن شبیه به خزنده‌های گوگل سایت را خزش کند اما به هرحال روش‌های بی‌شماری برای خزش یک سایت وجود دارد.
اگر شما نوع خزش خاصی را مدنظر دارید می‌توانید آن را در اسکریمینگ فراگ اجرا کنید. برای این کار باید از منوهای بالای صفحه، به قسمت configuration بروید و روشی که مدنظر دارید را انتخاب کنید. برای مثال با انتخاب گزینه exclude یا include می‌توانید انتخاب کنید یک ساب فولدر خاص مورد خزش قرار گیرد یا نه. همچنین اگر وب سایت شما برای اجرا به اسکریپت‌های جاوا وابسته است، می‌توانید گزینه JavaScript rendering را انتخاب کنید.
خواندن نتایج خزش: هر تب چه چیزی را نشان میدهد
بعد از پایان خزش، بیشتر کار شما در تب‌های بالای برنامه و فیلترهای هر تب انجام می‌شود. این جدول تب‌هایی را نشان میدهد که بیشترین استفاده را دارند:
| تب | چه چیزی را بررسی کنید |
|---|---|
| Internal | همه URLهای داخلی، کد وضعیت، عمق صفحه و لینکهای ورودی؛ برای تصمیم‌گیری درباره بودجه خزش |
| Response Codes | صفحات خطای 404، ریدایرکت 301 و خطاهای سرور |
| Page Titles و Meta Description | عنوان و توضیحات خالی، تکراری یا بیش از حد بلند |
| H1 و H2 | هدینگ خالی، تکراری یا چندتایی |
| Content | محتوای تکراری و صفحات کم‌محتوا |
| Images | تصاویر بدون alt یا پرحجم |
| Canonicals | وضعیت تگ کنونیکال هر صفحه |
| Directives | صفحات noindex و دستورهای متای robots، در کنار قوانین فایل robots.txt |
پیدا کردن ریدایرکت با اسکریمینگ فراگ
در مرحله بعدی آموزش Screaming Frog به سراغ نحوه پیدا کردن ریدایرکت با اسکریمینگ فراگ می‌رویم. برای این کار از دو روش می‌توانید اقدام کنید که در ادامه آنها را بررسی می‌کنیم:
- خزش کل سایت برای پیدا کردن ریدایرکتها
- وارد کردن لیستی از URLها برای پیدا کردن ریدایرکتها
برای این کار ابتدا آدرس سایت یا لیستی از URLهای مدنظر خود را در قسمت enter url to spider وارد کرده و دکمه start را بزنید تا کار خزش سایت شروع شود. سپس روی تب Response Codes کلیک کرده و فیلتر آن را روی 3xx قرار دهید. می‌توانید صبر کنید کل مراحل خزیدن تمام شود و بعد به سراغ ریدایرکتها بروید. یا اینکه در حین عملیات خزیدن، فیلتر را روی 3xx قرار دهید و ریدایرکتها را مشاهده کنید. کد هر ریدایرکت و وضعیت آن در کنار هر کدام از آنها نشان داده می‌شود. همچنین خارجی بودن یا داخلی بودن ریدایرکت را هم می‌توانید در دیگر ستون‌ها ببینید. علاوه بر این در ستون Redirect URL مقصد ریدایرکت هر URL ستون Address را می‌توانید پیدا کنید.
اما اگر می‌خواهید بدانید چه صفحاتی به صفحه‌ای که ریدایرکت شده، لینک داده‌اند تا آنها را اصلاح کنید، کافی است روی هر URL مدنظرتان کلیک کرده و تب Inlinks را در پایین صفحه بزنید. در ستون From می‌توانید صفحه‌ای که به ریدایرکت شما لینک داده را ببینید و در ستون To، صفحه‌ای که ریدایرکت شده را می‌بینید. همچنین اطلاعاتی مثل انکرتکست، خصوصیت alt تصویر و فالو یا نوفالو بودن لینک هم در این گزارش به شما نمایش داده می‌شود.
بیشتر بخوانید: آموزش جی تی متریکس در جت سئو
پیدا کردن لینکهای 404 با اسکریمینگ فراگ
لینکهای 404 یکی از دردسرسازترین مشکلاتی است که در سایت‌ها ایجاد می‌شوند. وجود چنین لینک‌هایی به راحتی می‌تواند همه زحماتی که برای یک صفحه از سایت کشیده‌اید را بر باد دهد. در این قسمت از آموزش اسکریمینگ فراگ به نحوه پیدا کردن لینکهای 404 با این ابزار می‌پردازیم.
برای این کار ابتدا آدرس سایت موردنظر را در باکس Enter URL to spider وارد کرده و دکمه Start را بزنید تا خزش سایت آغاز شود. سپس روی تب Response Codes کلیک کنید و فیلتر آن را در حالت Client Error (4XX) قرار دهید. در این حالت کلیه لینکهای 404 را می‌توانید ببینید. در این مورد هم می‌توانید صبر کنید تا کار خزش سایت تمام شود و بعد فیلتر را اعمال کنید یا می‌توانید همزمان با انجام خزش، فیلتر را اعمال کنید. کاری که در این مرحله باید انجام دهید، شناسایی صفحاتی است که بهURLهای 404، لینک داده‌اند. با شناسایی این صفحات می‌توانید لینکهای آن را اصلاح کنید. برای این کار کافی است روی URL موردنظر در نتایج خزش کلیک کنید و از پایین صفحه تب Inlinks را انتخاب کنید. حالا نتایج موردنظرتان را می‌توانید ببینید. در پنجره‌ای که به شما نمایش داده می‌شود، در ستون From صفحه‌ای که به 404 URL لینک داده را مشاهده می‌کنید و در ستون To هم آدرس صفحه 404 نمایش داده می‌شود.
همچنین اطلاعاتی مثل انکر تکست، alt تصاویر و اینکه لینک فالو بوده یا نوفالو را می‌توانید در ستون‌های بعدی مشاهده کنید. ویژگی جالب اسکرمینگ فراگ این است که نه تنها لینکهای شکسته خارجی را به شما نمایش میدهد بلکه اگر لینکهای داخلی به صفحات 404 هم داشته باشید، به شما نشان میدهد.
همچنین بخوانید: soft 404 چیست
پیدا کردن محتوای تکراری با اسکریمینگ فراگ
یکی از مهم‌ترین مواردی که باید در آموزش Screaming Frog به آن اشاره کرد، امکان پیدا کردن محتوای تکراری سایت با استفاده از این نرم افزار است. از آنجا که محتواهای تکراری می‌توانند برای سئوی سایت مشکلات زیادی ایجاد کنند، لازم است نسبت به وجود آنها حساسیت زیادی نشان دهید. برای پیدا کردن محتوای تکراری کافی است از منوی بالای صفحه گزینه Config را انتخاب کرده، سپس گزینه Content را و پس از آن روی گزینه Duplicates کلیک کنید. در پنجره‌ای که باز می‌شود تیک گزینه Near Duplicates را بزنید.
نکته مهمی که در این قسمت از آموزش اسکریمینگ فراگ باید یادآور شویم، این است که اسکریمینگ فراگ به طور پیش‌فرض صفحاتی که محتوای کاملا یکسان دارند را به شما نشان میدهد اما روشی که در این قسمت معرفی کردیم برای نمایش صفحاتی با محتوای مشابه است. از همین‌رو در این قسمت می‌توانید میزان شباهت محتوا را هم تعیین کنید. در گزینه near duplicate similarity threshold می‌توانید درصد شباهت موردنظرتان را هم تعیین کنید.
پیدا کردن تگ‌های کنونیکال با اسکریمینگ فراگ
پیدا کردن تگ‌های کنونیکال معمولا به طور پیش‌فرض در تنظیمات نرم‌افزار فعال است اما به خاطر اهمیت این موضوع راه فعال کردن آن را در آموزش Screaming Frog یادآور می‌شویم. اگر پیدا کردن تگ‌های کانونیکال در اسکریمینگ فراگ شما فعال نبود کافی است از منوی بالای صفحه روی گزینه Configuration کلیک کرده، سپس Spider را انتخاب کنید و روی Crawl کلیک کنید. حالا در پنجره جدید تیک‌های مقابل canonical را بزنید تا از این به بعد صفحات با تگ کنونیکال خزش شوند.
حالا می‌توانید در قسمت Enter URL to spider آدرس سایت را وارد کنید و Start را بزنید تا کار خزش سایت شروع شود. پس از اینکه عملیات خزیدن سایت پایان یافت در تب canonical کلیه صفحات با تگ کنونیکال و همچنین صفحه کنونیکال متناظر آن در ستون‌های مجزا نمایش داده می‌شود.
بررسی بک لینکهای سایت با اسکریمینگ فراگ
علاوه بر کاربردهای سئوی داخلی اسکریمینگ فراگ، می‌توانید با استفاده از آن بک‌لینک‌های داده شده به صفحات سایت خود را هم پیدا کنید. این چیزی است که در این بخش از آموزش کار با اسکریمینگ فراگ ارائه خواهیم کرد. برای پیدا کردن بک‌لینک‌های سایت باید از منوی بالای صفحه Configuration را انتخاب کنید. سپس روی Custom کلیک کرده و بعد به قسمت Extraction بروید. در فیلترهای تنظیمات این قسمت باید به جای دامنه screamingfrog.co.uk، دامنه سایت موردنظر خود را وارد کنید.
حالا می‌توانید لینکهای داده شده همراه با انکرتکست آن را مشاهده کنید.
این روش فقط وجود لینک در صفحاتی را بررسی میکند که آدرس‌شان را دارید. برای پیدا کردن دامنه‌هایی که به رقبا لینک داده‌اند و شاید به شما هم لینک بدهند، از بک‌لینک رقبا در جت سئو استفاده کنید.
گرفتن خروجی و ساخت نقشه سایت
برای تحویل گزارش به تیم فنی، از منوی Bulk Export داده‌ها را یکجا خروجی بگیرید؛ مثلا همه لینک‌هایی که به صفحات 404 می‌روند تا برنامه‌نویس بداند کدام صفحات را اصلاح کند. خروجی هر تب هم با دکمه Export همان تب گرفته می‌شود. بعد از خزش می‌توانید از بخش Sitemaps فایل XML Sitemap یا Image Sitemap هم بسازید.
کاربرد نرم افزار اسکریمینگ فراگ
نرم‌افزار اسکریمینگ فراگ یک ابزار سئو است که به عنوان خزنده سایت شناخته می‌شود. مهم‌ترین کاربرد نرم افزار Screaming Frog، خزیدن در سایت و ارائه اطلاعات موردنیاز سئوکارها به شکلی سرراست و دسته‌بندی شده است. اسکریمینگ فراگ اطلاعات متنوعی از عناوین و تگ‌های مختلف سایت، محتوای تکراری، لینکهای داخلی و خارجی سایت، ریدایرکتها و کدهای پاسخ HTTP و همچنین اطلاعات مربوط به core web vitals در اختیار کاربر قرار میدهد. هر سئوکاری می‌تواند با استفاده از این اطلاعات به یک براورد کامل و جامع از سایت موردنظر خود دست یابد.
ابزارهای مکمل اسکریمینگ فراگ
در کنار استفاده از اسکریمینگ فراگ پیشنهاد می کنیم بررسی سئو سایت خود را با جت سئو و افزونه کروم برای سئو جت سئو نیز انجام دهید. یکی از مزایای جت سئو این است که راه حل رفع هر مشکل فنی را هم به طور کامل توضیح می دهد. همچنین با جت سئو رتبه بندی سایت خود را مشاهده کنید. اگر نسخه رایگان با سقف ۵۰۰ آدرس برای سایت شما کم است یا خزش روی سیستم خودتان کند پیش می‌رود، تحلیل فنی و محتوایی در پنل جت سئو خزش را آنلاین انجام میدهد و لینکهای شکسته، ریدایرکتها، کنونیکال، عنوان و متا، عمق صفحات و سرعت را با راه رفع هر خطا گزارش میکند.
اگر می خواهید با سایر ابزارهای سئو آشنا شوید می توانید مقالات دیگر جت سئو را هم مطالعه کنید:
ممنون خیلی مفید بود
خوشحالیم که براتون مفید واقع شده
سلام یک ارور در اسکرامینگ فراگ بنام contain space ینی چه؟
سلام به این معنی هست که در بخش مورد نظر فاصله و space اضافه وجود دارد.
سلام محتوایی که نوشته شده به نسبت سایر سایت ها بهتر بود و از این بابت ممنون اما بنظرم ناقصی داشت چون من جواب سوال خودم رو نگرفتم، من میخوام لینک های داخلی سایت رو ببینیم و بفهمم ازچه صفحه ای به چه صفحه ای لینک داده شده که در این مورد چیزی نوشته نشده.
ممنون بابت بازخوردی که دادین. برای مشاهده لینکهای داخلی در اسکریمینگ فراگ، صفحه مورد نظر را انتخاب کنید و سپس به تب inlinks در پایین صفحه مراجعه نمایید.
سلام خیلی نرم افزار فوق العاده ای هست. مخصوصا این قسمت custom extraction اش که فرمودید باهاش میشه تقریبا هر سایتی رو اطلاعاتش رو بیرون کشید. ممنون از معرفی تون
ممنون از محتوای بسیار عالی. کاربردی، مفید، ساده و خلاصه اطلاعات لازم در مورد اسکریمینگ فراگ را ارائه کردید.
سلام وقت بخیر یک سوال داشتم از خدمتتون چطوریه که یکسری از سایت ها روی همه کلمات کلیدی (در ارتباط با زمینه کاریشون) جزء لینک های اول یا دوم هستن؟
با سلام و احترام این امر در حوزه های رقابتی معمولا زمانی اتفاق می افتد که یک سایت استراتژی سئو و مارکتینگ قدرتمندی را تدوین و پیاده کرده باشد. ساختار مناسب سایت، لینک سازی خارجی صحیح و برندینگ می توانند در این زمینه بسیار تاثیرگذار باشند.
سلام چند بار خواستم داخل سایتتون عضو شم هی میزنه رمز ورود اشتباه است.
احتمالا به جای ثبت نام از فرم ورود استفاده کرده اید.