שלום לכולם,

אני בונה למישהו אתר ולאורך כל תהליך הבניה שלו שמתי אותו באחסון של האתר שלי והקפדתי לא לקשר אליו משום מקום כדי שגוגל לא יאנדקס אותו. זה היה לי נוח לאחסן אותו על השרת כי כך יכולתי להראות אותו ללקוח ולאנשים אחרים בנוחות ולקבל הערות ולעבוד עליו בשיתוף פעולה. הכנתי לאתר גם בלוג כדי לאפשר ללקוח לצרף תכנים באופן עצמאי ונוח מבלי שיהיה תלוי בי. להפתעתי גיליתי היום שהבלוג התאנדקס בגוגל ואנשים כבר מוצאים אותו. הבלוג הוא בלוג של וורדפרס. דרך אגב אני לא שמתי באתר תגיות מטא שאמורות למנוע ממנועי החיפוש לאנדקס את האתר.

אני ממש אשמח לדעת האם גוגל יכול למצוא אתרים ששום קישור לא מקשר אליהם? ואם כן איך הוא מגלה אותם? האם זה לא מקרה שהוא גילה דווקא את הבלוג? מה יש בבלוג שגרם לו להתגלות? האם זה לא מומלץ לשים אתר שעובדים עליו על השרת כשזו לא הכתובת שצריכה להיות לו? כיצד אתם נוהגים?  

כרגע האתר שבניתי לא אונדקס... האם מומלץ להוריד אותו ואת הבלוג מהרשת? האם אצטרך לבצע הפניה ברגע שאשים את הבלוג בדומיין האמיתי? 

המון תודה. 

:-) 

ישנם מקרים בהם גוגל "מצליח" למצוא אתרים שאינם מקושרים, לכאורה, משום מקום. יש על כך הרבה מידע באינטרנט (חפשי בגוגל ). חלק ניכר מהמקרים הם בשל חוסר שימת לב. לדוגמה - האם, במקרה, שלחת ללקוח את הקישור בבלוג תוך שימוש בכתובת Gmail? אם כן - הרי שגוגול מאנדקסים את Gmail, ומגיעים לקישור משם... 

צטט: Foothold 2010-02-23 16:19:20

ישנם מקרים בהם גוגל "מצליח" למצוא אתרים שאינם מקושרים, לכאורה, משום מקום. יש על כך הרבה מידע באינטרנט (חפשי בגוגל ). חלק ניכר מהמקרים הם בשל חוסר שימת לב. לדוגמה - האם, במקרה, שלחת ללקוח את הקישור בבלוג תוך שימוש בכתובת Gmail? אם כן - הרי שגוגול מאנדקסים את Gmail, ומגיעים לקישור משם... 

 חחח... בדיוק עכשיו נפל לי האסימון והבנתי שגוגל נכנס לאתר דרך הקישור ששלחתי ללקוח באימייל.

כתבתי את זה בפורום אחר יש שם גם תגובות לשאלה שלי למי שרוצה לקרוא:

http://www.seoforums.co.il/forum_posts.asp?TID=24637&PN=1&TPN=1

 תודה על התגובה.

 :-)

מומלץ לפתח אתר באופן לוקאלי ולא ברשת, זה הרבה יותר נוח מאשר להעלות כל פעם קבצים לשרת.

גם לאחר שמעלים אותו, בוודאי אם לכתובת זמנית וגם אם לכתובת הקבועה, ולפני ה"עלייה הרשמית", מומלץ להוסיף קובץ תגית מטה עבור הרובטים שתגיד להם לא לאנדקס את האתר, בדיוק כדי שמנועי החיפוש לא יאנדקסו את העמודים לפני שאת רוצה.

לאחר שהאתר מוכן וגמור אפשר להסיר את זה ולהתחיל "לספר" לגוגל על קיומו האתר, כדי לקצר את זמני האינדוקס.

איזה קטעים, אנשים עובדים חודשים כדי שגוגל ימצא את האתר שלהם, את ניסית להתחמק

והוא אינדקס אותך

,

אבל מה הבעיה, למה זה מפריע לך בכלל, ?

אני מנסה לקדם אתר כבר חודשיים והוא בקושי זז

אם בא לך לראות את האתר "זנב ארוך"

צטט: מרטין בוקסדורף 2010-02-24 11:25:55

איזה קטעים, אנשים עובדים חודשים כדי שגוגל ימצא את האתר שלהם, את ניסית להתחמק

 

והוא אינדקס אותך

,

 

אבל מה הבעיה, למה זה מפריע לך בכלל, ?

 

אני מנסה לקדם אתר כבר חודשיים והוא בקושי זז

 

אם בא לך לראות את האתר "זנב ארוך"

 כן... הידיעה הזאת שאנשים מתאמצים כדי שגוגל יסרוק אותם גרמה לי לחשוב שאם אני אסתתר ממנו הוא פשוט לא יראה אותי. עשיתי טעות כשלא סידרתי את תגי המטה למרות שגם זה לא ממש מבטיח אותי אבל הטעות העיקרית שלי הייתה ששלחתי אימל עם קישור לאתר והאימל הזה המשיך להישלח הלאה ולא הבנתי שזה קישור לכל דבר.

זה מפריע לי כי האתר לא מאוחסן במקום שהוא צריך להיות מאוחסן בו ולא נמצא בכתובת האמיתית שלו. הוא מאוחסן אצלי באופן זמני תחת הדומיין שלי ואני לא מעוניינת שגוגל יפנה את האנשים לדומיין שלי אלא לדומיין האמיתי. כמו כן אני לא רוצה שהתוכן שיופיע באחסון האמיתי יראה כמו תוכן משוכפל מהאתר שלי.

אתה יכול לפתוח לעצמך בלוג ולקשר מהבלוג לאתר אולי זה יעזור לך בקידום.

:-)

צטט: מאוריציוס 2010-02-24 02:58:19

מומלץ לפתח אתר באופן לוקאלי ולא ברשת, זה הרבה יותר נוח מאשר להעלות כל פעם קבצים לשרת.

 

גם לאחר שמעלים אותו, בוודאי אם לכתובת זמנית וגם אם לכתובת הקבועה, ולפני ה"עלייה הרשמית", מומלץ להוסיף קובץ תגית מטה עבור הרובטים שתגיד להם לא לאנדקס את האתר, בדיוק כדי שמנועי החיפוש לא יאנדקסו את העמודים לפני שאת רוצה.

לאחר שהאתר מוכן וגמור אפשר להסיר את זה ולהתחיל "לספר" לגוגל על קיומו האתר, כדי לקצר את זמני האינדוקס.

 

 

 

 כמובן שאני בונה את האתר באופן לוקאלי ולא על השרת. העניין שאני שמה אותו על השרת כדי שאוכל להראות אותו ללקוח ונוכל להמשיך ולעבוד עליו ביחד. זה יותר נוח מאשר לשלוח לו את האתר באימל במיוחד כשהאתר גדול.

מסתבר שגוגל סרק לי דף אחד מהבלוג ודף אחד מהאתר ולכן מיהרתי להוריד אותו מהשרת וביקשתי מהלקוח לקנות אחסון ודומיין וזה יהיה מסודר תוך כמה ימים.

בינתיים קיבלתי מפורום אחר הצעה שנראית לי מאוד יפה כיצד להגן על האתר מכניסה של גוגל. הרעיון הוא להגן על האתר בסיסמה... אני מבינה שאצטרך להגן על כל דף ודף עם סיסמה... זה נראה לי פתרון מצויין. אני מבינה שקוד ג'אווה סקריפט יספיק כדי למנוע ממנוע החיפוש להכנס.

:-)

אפשר לקרוא תגובות לנושא הזה גם פה:

צטט: נאוה :-) 2010-02-24 21:33:20

צטט: מאוריציוס 2010-02-24 02:58:19

מומלץ לפתח אתר באופן לוקאלי ולא ברשת, זה הרבה יותר נוח מאשר להעלות כל פעם קבצים לשרת.

 

גם לאחר שמעלים אותו, בוודאי אם לכתובת זמנית וגם אם לכתובת הקבועה, ולפני ה"עלייה הרשמית", מומלץ להוסיף קובץ תגית מטה עבור הרובטים שתגיד להם לא לאנדקס את האתר, בדיוק כדי שמנועי החיפוש לא יאנדקסו את העמודים לפני שאת רוצה.

לאחר שהאתר מוכן וגמור אפשר להסיר את זה ולהתחיל "לספר" לגוגל על קיומו האתר, כדי לקצר את זמני האינדוקס.

 

 

 

 

 כמובן שאני בונה את האתר באופן לוקאלי ולא על השרת. העניין שאני שמה אותו על השרת כדי שאוכל להראות אותו ללקוח ונוכל להמשיך ולעבוד עליו ביחד. זה יותר נוח מאשר לשלוח לו את האתר באימל במיוחד כשהאתר גדול.

מסתבר שגוגל סרק לי דף אחד מהבלוג ודף אחד מהאתר ולכן מיהרתי להוריד אותו מהשרת וביקשתי מהלקוח לקנות אחסון ודומיין וזה יהיה מסודר תוך כמה ימים.

בינתיים קיבלתי מפורום אחר הצעה שנראית לי מאוד יפה כיצד להגן על האתר מכניסה של גוגל. הרעיון הוא להגן על האתר בסיסמה... אני מבינה שאצטרך להגן על כל דף ודף עם סיסמה... זה נראה לי פתרון מצויין. אני מבינה שקוד ג'אווה סקריפט יספיק כדי למנוע ממנוע החיפוש להכנס.

:-)

 

אפשר לקרוא תגובות לנושא הזה גם פה:

http://seoforums.co.il/forum_posts.asp?TID=24637

אין סיבה ממשית להתחיל להוסיף סיסמאות וסקריפטים עבור כל עמוד, פשוט תוסיפי בתוך אלמנט ה - head את השורה -

 <meta name='robots' content='noindex,nofollow' /> 

אם האתר דינמי ויש לך header אחד שאחראי על ה head עבור כל העמודים אז מספיקה לך פעם אחת.

אם האתר סטטי וכל עמוד הוא עם תגיות html מלאות, אז תצטרכי להוסיף את זה ב-head של כל עמוד.

בנוסף, בתיקיה הראשית של האתר להוסיף קובץ טקסט פשוט בשם  robots.txt ובו ההגדרות - 

 Disallow: / 

זה אמור להספיק כדי שהרובוטים של מנועי החיפוש לא יסרקו את האתר.

כמובן לא לשכוח להסיר את זה בסוף.

 

   <meta name='robots' content='noindex,nofollow' />   

 

User-agent: *

   Disallow: /   

 

 

 

כמובן שזה יצא הפוך עם הסימנים בעברית ואנגלית, לעזאזל עם הכיווניות הזאת שתמיד יוצאת הפוך בפורומים.

בלינק הזה תוכלי לראות את הטקסט עבור הקובץ robots.txt

וכאן למשל  לגבי תגיות מטה.

האמת היא, שאפשר עקרונית להסתפק בקובץ robots.txt כדי לעשות את ההגבלה הזו.

מאור,

המון תודה על התגובה.

העניין הוא שממה שמעתי זה עדיין לא מספיק בטוח והדף יכול להיסרק למרות זה.

ולכן אני מחפשת משהו יותר בטוח.

עכשיו אני מתלבטת בבעיה הזאת:

http://cafe.themarker.com/view.php?t=1479664

צטט: נאוה :-) 2010-02-25 12:18:18

מאור,

המון תודה על התגובה.

העניין הוא שממה שמעתי זה עדיין לא מספיק בטוח והדף יכול להיסרק למרות זה.

ולכן אני מחפשת משהו יותר בטוח.

 

לא יודע מה שמעת, אבל יש לי מספר אתרים המצויים בכתובות זמניות שחסומות בצורות האלו. הלינקים הישירים נשלחו במיילים לא מעט פעמים, וגוגל עדיין לא סורק אותם או מאנדקס אותם.

בדקתי עכשיו לינק של אתר שהושאר גם בכתובת הזמנית שלו כבר זמן רב אחרי שהאתר בכתובת האמיתית עלה לאוויר.

האתר בכתובת הזמנית לא קיים בגוגל בשום מקום.