مثلا در سایت http://ariae.irتمامی آدرس های فارسی که چیزی حدود 54700 عدد هست همگی این مشکل را دارند و باعث این میشه که بعد یه مدت رتبه سایت شدید میاد پایین و تعداد کلیک ها کم میشه . اما در پست هایی که آدرس دهی انگلیسی هست دیگه این مشکل وجود نداره .
نمونه :
http://ariae.ir/54698-%D9%85%D8%B2%D8%B1%D8%B9%D9%87-%D9%85%D8%B1%D8%AF%DA%AF%D8%A7%D9%86-%D9%85%D8%B2%D8%B1%D8%B9%D9%87-%D8%A7%DB%8C-%D9%88%D8%AD%D8%B4%D8%AA%D9%86%D8%A7%DA%A9-%D8%AF%D8%B1-%D8%A2%D9%85%D8%B1%DB%8C%DA%A9%D8%A7.html
آدرس بالا که فارسی هست علاوه بر شکل بالا یکبار هم به شکل :
http://ariae.ir/54698-xd8\xb9\xda\xa9\xd8\xb3\xd9
کراول شده و باعث خطا در وبمستر میشه و یکبار هم به صورت :
http://ariae.ir/54698-
که این هم دوباره باعث خطا میشه .
اما در عوض آدرسی مثل :
http://ariae.ir/54700-Kaspersky-operating-system.html
هیچ مشکلی نداره .
شما اگر خودتون هم سایت فارسی زبانی داشته باشید که تعداد صفحاتش زیاد باشه می تونید با مراجعه به قسمت AWstat سرور لینوکسی قسمت لینکهای بازدید شده چنین صفحاتی را پیدا کنید .
همچنین تگ های فارسی هم این مشکل را داران که دوبار کراول میشن اما خوشبختانه یا متاسفانه خطایی براش توی گوگل وبمستر درج نمیشه . مثلا تگ درخت سیب که در آدرس دهی تگ به شکل :
tags/درخت+سیب
هست علاوه بر شکل بالا به شکل :
tags/درخت سیب
هم کراول میشه یعنی یکبار با مثبت و یکبار با اسپیس .