پرش به


تصویر

ارور 404 در صفحات عجیب!


  • لطفا وارد حساب کاربری خود شوید تا بتوانید پاسخ دهید
7 پاسخ برای این موضوع

#1 p30mania

p30mania

    عضو سایت

  • عضو سایت
  • ستارهستاره
  • 170 ارسال

ارسالی 1392/08/16 ساعت 17:13

سلام
امروز داشتم صفحه های 404 که گوگل شناسایی کرده از طریق وبمستر بررسی می کردم، با صفحاتی روبرو شدم که اصلا مشخص نیست گوگل این صفحات رو چطوری پیدا کرده.
بعضی از صفحات :

lastnews/page/57/index.php?do=search
lastnews/page/58/index.php?do=search
tags/%D8%AA%D8%A7%D9%86%DA%AF%D9%88+%D8%A8%D8%B1%D8%A7%D
B%8C+android/index.php?do=search
news/page/35/index.php?do=search
news/economy/index.php?do=search
و ...


این هم رباتی که برای سایت تنظیم کردم (robots.txt)

User-agent: *
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /upgrade/
Disallow: /statistics.html
Disallow: /favorites/
Disallow: /login/
Disallow: /catalog/
Disallow: /topnews/
Disallow: /newposts/
Disallow: /ads.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Disallow: /rules.html
Disallow: /*action=mobiledisable


از دوستان کسی تاحالا با این صفحات مواجه شده؟
از لطف دوستانی که در تاپیک شرکت می کنند، پیشاپیش تشکر می کنم.
:flower:
  • 0

#2 sahar5555

sahar5555

    عضو جدید

  • عضو سایت
  • ستاره
  • 16 ارسال

ارسالی 1392/08/17 ساعت 11:56

من هم همین مشکل رو دارم :recourse:
  • 0

#3 IMP

IMP

    مدیر بازنشسته

  • عضو سایت
  • ستارهستارهستارهستارهستارهستارهستاره
  • 4,928 ارسال

ارسالی 1392/08/17 ساعت 16:52

چیز خاصی نیستند این مشکلات. با تنظیم فایل robots مشکلات به مرور زمان برطرف میشه. برای مثال شما باید صفحه تگ ها رو هم داخل فایل robots قرار بدید. برای من هم صفحات اضافی پیدا میکرد قدیم ها، ولی به مرور مشکلات برطرف میشه.
  • 0

#4 amirff

amirff

    عضو سایت

  • عضو سایت
  • ستارهستاره
  • 71 ارسال

ارسالی 1392/08/17 ساعت 17:43

IMP,
سلام دوست عزیز
من هم زیر سایتم ماژول نمایش تگ ها رو دارم
ولی ضاحرا این ماژول باعث پیدا کردن صفحات 404 توسط گوگل میشه!
برش دارم یا اینکه قابل حذف هست؟
و اینکه گوگل بعضی موقع ها سراغ فایل های فولدر engine میره! و 404 نشون میشه!!
این هم رفع میشه؟؟
  • 0

#5 IMP

IMP

    مدیر بازنشسته

  • عضو سایت
  • ستارهستارهستارهستارهستارهستارهستاره
  • 4,928 ارسال

ارسالی 1392/08/17 ساعت 17:52

شما اگر کد زیر رو توی فایل robots بزارید، مشکلتون برطرف میشه:

Disallow: /tags/

برای فولدر engine هم:

Disallow: /engine/

فقط انتظار نداشته باشید یک شبه همه مشکلات ایندکس شدن صفحات برطرف بشه. یک سری آموزش هم روی سایت هست برای بهینه کردن سیستم، اون ها رو هم یک نگاهی بکنید. با همین تغییرات ساده، گالری عکس من با نزدیک به 6500 صفحه، حتی یک دونه Not Found هم توی گوگل وبمستر نداره.

موفق باشید
  • 0

#6 amirff

amirff

    عضو سایت

  • عضو سایت
  • ستارهستاره
  • 71 ارسال

ارسالی 1392/08/17 ساعت 17:16

IMP,
خیلی ممنونم به خاطر راهنمایی
حالا با این تغییرات ، اگر گوگل نتونه تگ ها رو نگاه کنه واسه سئو چه اتفاقی می افته؟ تاثیر منفی داره یا مثبت؟
من فکر کنم دی آلو انجین باید تو robots.txt به صورت پیش فرض باشه! شایدم پاکس کردم! :recourse:
  • 0

#7 p30mania

p30mania

    عضو سایت

  • عضو سایت
  • ستارهستاره
  • 170 ارسال

ارسالی 1392/08/17 ساعت 18:01

IMP,
از اینکه در تاپیک شرکت کردید ممنونم.
فقط یک موردی من مخصوصا تگ رو در robots.txt قرار ندادم، چون هدفم این هست که تگ های سایت ایندکس بشن.
راهی نداره که این مورد بدون محدود کردن تگ ها از دسترس موتور جستجو خارج بشن؟

پ.ن: اگه برای مورد بالا راهی نیست، به این صورت می شه طوری ربات رو تنظیم کرد که تمام آدرس هایی که به index.php?do=search ختم می شن رو ایندکس نکنه؟
فکر کنم باید به این صورت نوشته بشه :

Disallow: /index.php?do=search
Disallow: */index.php?do=search


منبع

پ.ن2: موردی که در بالا گفتم درست هست یا نه؟ (یعنی توضیحاتی که در منبع قرار دادم رو درست متوجه شدم یا خیر؟)

با تشکر مجدد از دوستانی که در تاپیک شرکت می کنن (مخصوصا جناب IMP) :flower:
  • 0

#8 IMP

IMP

    مدیر بازنشسته

  • عضو سایت
  • ستارهستارهستارهستارهستارهستارهستاره
  • 4,928 ارسال

ارسالی 1392/08/17 ساعت 18:11

نقل قول: p30mania
راهی نداره که این مورد بدون محدود کردن تگ ها از دسترس موتور جستجو خارج بشن؟

فکر نمیکنم. شما یا باید به ربات اجازه دسترسی بدید و یا برعکس!

در مورد کد زیر:

Disallow: */index.php?do=search

فکر میکنم مشکلی پیش نیاد، البته باید تست کنید تا نتیجه معلوم بشه.
  • 0


0 کاربر در حال خواندن این موضوع است

0 کاربر، 0 مهمان و 0 عضو مخفی