اشهر موقعك فى جوجل ووضع ملفrobots.txt

سوف نتناول في هذا الموضوع مايلي
1-robots.txt: فهرسة أو بدون فهرسة هذا هو السؤال؟
2- كيف استفيد من ملف htaccess
3-أسرار ترتيب المواقع في ألكسا
4-كيف تحسن ترتيبك في Google؟
5-مصطلحات في تتبع الزوار
6-وسائل نشر موقعك على الشبكة
7- احصائيات جوجل لموقعك
8- خدمة ال site map وكيفية تفعيلها
9- كيفية تحسين البيج رنك الخاص بموقعك

ارجو من اخواني التركيز لكي يعم الفائده علي الجميع ولا يحتاج احد الي إشــهار موقعه بطرق غير مشرووعه

بسم الله نبدء بأول النقاط
1-robots.txt: فهرسة أو بدون فهرسة هذا هو السؤال؟
مقدمه
مع تقدم خدمات الأرشفة index و البحث أصبح جوجل أكثر دقة و قدرة على أرشفة و فهرسة الصفحات و بالتالي أصبح قادرا على الوصول إلى معلومات مهمة قد لا ترده الوصول إليها مثل أرقام الهواتف و أرقام بطاقات الائتمان. و بالتالي تقدم للها كرز المعلومات على طبق من ذهب . و بهذه الطريقة هي لا تحتاج إلى مخترق خبير فمن الممكن أن يصل إليها حتى الشخص العادي المبتدأ بواسطة جوجل فقط .

بالرغم من أن معظم حالات سرقات بطاقات الائتمان تتم عن طريقة سرقة قواعد البيانات إلا أننا لا نستطيع إغفال خطورة الوضع .
هل يجب أن نلوم جوجل؟

جوجل أو ما يسمى Google spider يقوم بعمله فقط . جوجل لا يفهرس الصفحات عنوه لكنه يفهرس صفحات الإنترنت ووضعك للمعلومات الحساسة و المهمة على شبكة الإنترنت بدون حماية خطأك وحدك .و حماية هذه المعلومات مسئوليتك .

والان
|استخدم ملفات robots.txt

هذه بالتأكيد أحد أهم الأدوات و هو ملف صغير نصي ترفعه إلى مستضيفك يحوي على الملفات و المجلدات التي يستطيع أو لا يستطيع إلى محرك بحث و ليس جوجل فقط فهرستها .في الخطوة التالية سنستعرض محتويات الملف .
حذف ملفاتك المهمة من جوجل

لو وقع الفأس في الرأس و فهرس جوجل صفحات مهمة و حساسة في موقعك يمكنك إزالتها عن طريق عدد من الخطوات مذكورة هنا http://www.google.com/webmasters/remove.html

سأحاول ترجمتها على عجالة ( أو استخلاص المفيد منها )
ملاحظة

لو كنت تريد حذف صفحة من جوجل فورا و لا تريد انتظار عملية الأرشفة القادمة زر الوصلة التالية و اطلب حذف الأرشيف
automatic URL removal system
|حذف موقعك بالكامل من جوجل أو محركات البحث الأخر
لمنع كل محركات البحث من أرشفة موقعك ضع الكود التالي في

ملف robots.txt

كود PHP: رمز PHP:

User-agent: *

رمز PHP:

[center][font=Times New Roman]Disallow: / [/font]السلام عليكم ورحمه الله وبركاته
[center][font=Times New Roman][/font][/center][/center]

رمز PHP:

[center][font=Times New Roman]Disallow: / [/font]
[font=Times New Roman][/font]

لمنع جوجل فقط من أرشفة صفحات موقعك .
كود PHP:
رمز PHP:





User-agent: Googlebot

كل بورت port يحتاج لملف robots.txt خاص له مثلا http تحتاج لملف و https يحتاج لملف و ftp يحتاج ملف و هكذا .

|إزالة صفحة واحدة من جوجل .

هناك طريقتان :
أولا : ملف robots.txt

بعد جملة user-agent يمكنك ان تحدد محرك بحث بعينه مثلا googlebot أو يمكنك أن تضع * لمنع جميع محركات البحث .

الأمثلة التالية على تمنع جميع محركات البحث لكن يمكنك استبدال googlebot بـــ * لمنع جميع محركات البحث .

لمنع فهرسة مجلد

كود PHP: رمز PHP:

User-agent: Googlebot

رمز PHP:

[center][font=Times New Roman]Disallow: /lemurs [/font]
[font=Times New Roman][/font][/center]

لمنع فهرسة نوع معين من الملفات مثلا الصور من نوع gif

كود PHP: رمز PHP:

User-agent: Googlebot

رمز PHP:

[center][font=Times New Roman]Disallow: /*.gif$ [/font]
[font=Times New Roman][/font][/center]

لمنع فهرسة الصفحات الديناميكية مثل

index.php?task=anything

كود PHP: رمز PHP:

User-agent: Googlebot

رمز PHP:

[center][font=Times New Roman]Disallow: /*? [/font]
[font=Times New Roman][/font][/center]

ثانيا : الميتاتاج met tag

لمنع فهرسة صفحة معينه نضع التالي في منطقة الرأس بين و
كود PHP: رمز PHP:

رمز PHP:

[center][font=Times New Roman][/font][/center]

لمنع جوجل فقط من فهرسة هذه الصفحة نضع

كود PHP: رمز PHP:

رمز PHP:

[center][font=Times New Roman][/font][/center]

للسماح بفهرسة الصفحة و لكن عدم فهرسة الصفحات المربوطة بها

كود PHP: رمز PHP:

رمز PHP:

[center][font=Times New Roman][/font][/center]

|حذف الوصف snippets

عند إظهار جوجل للنتائج فإنها تظهر وصف snippets تحت كل موقع لحذفه

كود PHP: رمز PHP:

رمز PHP:

[center][font=Times New Roman][/font][/center]

|حذف النسخ المخزنة cached pages

جوجل تحتفظ بنسخة من صفحات موقعك في قواعدها لمنع ذلك
كود PHP: رمز PHP:

رمز PHP:

[center][font=Times New Roman][/font][/center]

|حذف صورة من محرك بحث جوجل للصور .

جميع الأمر تطبق عليها لكن اسم الروبوت هنا Googlebot-Image و ليس googlebot

لحذف صورة معينة أضف في ملف
robots.txt

كود PHP: رمز PHP:

User-agent: Googlebot-Image

رمز PHP:

[center][font=Times New Roman]Disallow: /images/dogs.jpg [/font]
[font=Times New Roman][/font][/center]

لمنعه من فهرسة جميع صور موقعك

كود PHP: رمز PHP:

User-agent: Googlebot-Image

رمز PHP:

[center][font=Times New Roman]Disallow: / [/font]
[font=Times New Roman][/font][/center]

ما مدى درجة الأمان لهذه الملفات ؟

ملف robots.txt ليس وسيلة حماية يمكن الاعتماد عليها لحماية موقعك . في الحقيقة هي أقرب لوحة ممنوع الدخول على الباب و ليست قفلا عليها.لذلك عليك تأمين موقعك جيدا و حماية مجلداتك بكلمات مرور أو منع الدخول بواسطة ملفات htaccess

[/center]