نقد و بررسی Semalt - دریافت یک Scraper سفارشی برای تجزیه و تحلیل لینک ها

به عنوان یک متخصص بهینه سازی موتور جستجو ، بسیاری از سؤال ها به ذهنم خطور می کند ، اما من راه حل های ساده ای برای پرداختن به آنها ندارم. بیشتر اینها مربوط به پروفایل لیست های URL ها بر اساس اطلاعات موجود در محتوای صفحه است. بنابراین ، من تصمیم گرفتم که از موتور جستجوی سفارشی Google استفاده کنم ، گرچه راه حل کاملی ارائه نکرد. برخی از راه حل هایی که می خواهم به صورت خودکار به طور کامل شامل شوند:

  • خراب کردن شبکه پیوند
  • همراه با مجموعه بذر کلمات کلیدی مورد استفاده برای تحقیقات کلمات کلیدی
  • ارزیابی ارتباط پیوند URL
  • دریافت منابع پیوندی از سیستم های خاص CMS
  • استخراج وبلاگ نویسان متخصص در یک طاقچه خاص
  • ردیابی محتوای جاسازی شده

این سفر با ایجاد یک اسکرابر اساسی شروع شد تا از آن به عنوان اثبات مفهوم برای تجزیه و تحلیل پیوندهای پیچیده تر استفاده شود. استفاده از Caveats که بیشتر ابزاری برای مفهوم است تا ابزاری صیقلی ، برای استفاده کامل به مهارت های فنی و برنامه نویسی نیاز دارد. راندمان مقیاس پذیری آن توسط هر متخصص برنامه نویسی قابل گسترش است.

به عنوان یک سازنده پیوند ، لازم است لیست کاملی از وبلاگ نویسان را در جایی قرار دهیم که با مخالفان من پیوند برقرار کند. اینها شامل وبلاگهایی است که من می توانم برای وبلاگ نویسی مهمان ، اظهار نظر ، پخش محتوای و شبکه های اجتماعی قرار دهم. استفاده از ابزاری مانند Open Site Explorer خروجی پیوند دامنه ها را به شما ارائه می دهد اما داده های خاصی را در مورد دامنه ها ارائه نمی دهد.

شناسایی یک سایت با استفاده از یک اسکریپت قوی اولین قدم است. با خروجی ژنراتور که توسط CM های متعدد ایجاد می شود ، شروع می شود. چک های دیگر در حین ساختن آن گنجانیده شده است.

ابزار لیستی از پیوندها را پردازش می کند و CMS آن را تعیین می کند ، ضمن حفظ داده های OSE دست نخورده ، داده های خام را در CSV تولید می کند. ابزار از طریق تمام URL ها اجرا می شود ، محتوای را ذخیره می کند و کد منبع را تجزیه می کند

پیدا کردن وبلاگ

راه اندازی اولیه پیدا کردن وبلاگ هایی که به distiled.co.uk پیوند دارند آسانتر می شوند. این یک نکته اساسی برای کشف وبلاگ های جدید است. می توان نتایج خروجی از مخالفان مختلف را گردآوری کرد و تمام دامنه های پیوند دهنده را چک کرد تا پیوندهایی را برای طاقچه اصلی خود بدست آورید.

موارد اضافی برای CMS

ردپاهای دیگری برای شناسایی CMS مانند صفحات فرود صفحه ، مضامین و پوشه های مدیریت وجود دارد. برای کمک به شناسایی CMS در حال اجرا در وب سایت ، می توان یک سیستم خوب و قوی ایجاد کرد. به دلایل زیر مفید است.

  • یافتن انجمن ها
  • یافتن CMS اجتماعی
  • یافتن وب سایتهای ویکی
  • دریافت پیوند do-follow
  • پیوند افت می کند

همچنین می توانید پذیرش تعبیه ، ابزارک سایت و سایر اینفوگرافی ها را بررسی کنید. با تنظیم هشدارها ، جستجوی پیشرفته و جعل جسمی در پیوند پروفایل ، این امر بهتر مشاهده می شود.

بررسی ارتباط لینک - خروجی های بک لینک می توانند اطلاعات اساسی مانند URL و عنوان را ارائه دهند. اهمیت دیگری ندارد.

سایر کارهایی که می تواند انجام دهد شامل موارد زیر است:

  • یافتن پیوندهای دایرکتوری
  • استخراج حساب های اجتماعی مانند Facebook و Twitter
  • آدرس های ایمیل Mining
  • در حال بررسی سایتهای Adsense که دارای درآمد هستند
  • ارزیابی کیفیت پیوندها و اسپم مرس