פורסם: 26/10/2005 - 18:46
נושא ההודעה: יש סיבה מיוחדת שהאתר עולה ויורד לסירוגין?
|
אמנם אני כותב זאת בפורום טענות אבל...
ברור שאין לי כל טענה נגד האתר או מפעיליו.
בכל מקרה רק ליידע אתכם שיש בעית התחברות לאתר ביומיים האחרונים
|
|
חזרה לתוכן הדיון |
פורסם: 26/10/2005 - 18:50
נושא ההודעה:
|
באמת גם אני במשך כל היום לא הצלחתי להתחבר לאתר
_________________ קזית 3 - קנופיקס עברי.
BiDiTeX - תמיכה בכיווניות ל-LaTeX.
CppCMS - פיתוח ל־web ב־++C.
גם לי יש בלוג
|
|
חזרה לתוכן הדיון |
פורסם: 26/10/2005 - 19:30
נושא ההודעה:
|
איזה bot שלא שמעתי עליו מעולם אינדקס אותנו ביומיים האחרונים. בנוסף , נרשמה עליה בפניות ל-RSS בתקופה האחרונה (לפחות לעומת הפעם האחרונה שבדקתי, לפני כחודשיים).
ענין הפניות ל-RSS טופל:
http://whatsup.org.il/forum/24842
|
|
חזרה לתוכן הדיון |
פורסם: 26/10/2005 - 19:36
נושא ההודעה:
|
mksoft : | איזה bot שלא שמעתי עליו מעולם אינדקס אותנו ביומיים האחרונים. |
נצל"ש:
אני מניח שמנועי חיפוש אתיים יסרקו אתר במשך זמן רב עם מרווח זמן בין קריאה לקריאה כדי לא להעמיס.
במקרה שמדובר בחריג שלא מקפיד על כללים ומעמיס את האתר, האם יש דרך כלשהי (באפאצ'י) לחסום מספר רב של בקשות HTTP שמגיעות ממקור בודד בפרק זמן לא סביר?
|
|
חזרה לתוכן הדיון |
פורסם: 26/10/2005 - 19:45
נושא ההודעה:
|
בדרך כלל בוט שלא מתנהג יפה, אני חוסם בעזרת robots.txt (כמובן שאם הוא לא יכבד אותו, אין הרבה מה לעשות). אך זו פעולה בדיעבד.
|
|
חזרה לתוכן הדיון |
פורסם: 26/10/2005 - 19:46
נושא ההודעה:
|
דוביקס : | mksoft : | איזה bot שלא שמעתי עליו מעולם אינדקס אותנו ביומיים האחרונים. |
נצל"ש:
אני מניח שמנועי חיפוש אתיים יסרקו אתר במשך זמן רב עם מרווח זמן בין קריאה לקריאה כדי לא להעמיס.
במקרה שמדובר בחריג שלא מקפיד על כללים ומעמיס את האתר, האם יש דרך כלשהי (באפאצ'י) לחסום מספר רב של בקשות HTTP שמגיעות ממקור בודד בפרק זמן לא סביר? |
יש איזשהו קוד אתי לא רשמי בנושא?
נניח - 30 עמודים לדקה, פעילות בשעות לא עמוסות וכו'???
|
|
חזרה לתוכן הדיון |
פורסם: 26/10/2005 - 19:47
נושא ההודעה:
|
נ.ב.
הבוט ממשיך לאנדקס כעת, אך נראה שהעומס סביר. נראה שה-RSS היה גורם משמעותי יותר. ואכן, עם יישום ה-caching, העומס על השרת ירד בצורה משמעותית (ומקווה שגם מהירות התגובה).
|
|
חזרה לתוכן הדיון |
פורסם: 26/10/2005 - 19:55
נושא ההודעה:
|
Anonymous : |
יש איזשהו קוד אתי לא רשמי בנושא?
נניח - 30 עמודים לדקה, פעילות בשעות לא עמוסות וכו'??? |
מאמר שמתייחס לנושא:
http://mingo.info-science.uiowa.edu/eichmann/www-f94/ethics/ethics.ps
"אבי" הרעיון של אתיקה לספיידרים:
Koster, M., "Guide for Robot Writers," Nexor Corp.
http://web.nexor.co.uk/mak/doc/robots/guidelines.ht-ml
|
|
חזרה לתוכן הדיון |
פורסם: 26/10/2005 - 23:36
נושא ההודעה:
|
mksoft : | בדרך כלל בוט שלא מתנהג יפה, אני חוסם בעזרת robots.txt (כמובן שאם הוא לא יכבד אותו, אין הרבה מה לעשות). אך זו פעולה בדיעבד. |
אולי mod_bandwidth ?
http://www.cohprog.com/mod_bandwidth.html
והמקביל שלו לשרתים שרצים על windows :
http://www.ivn.cl/apache/#bandwidth
|
|
חזרה לתוכן הדיון |
פורסם: 27/10/2005 - 00:00
נושא ההודעה:
|
עיקר הבעיה נובעת משאילתות מרובות שנוצרות על הממשקים החיצוניים של האתר. נושא ה cache אשר מאיר מטפל בו מזה זמן מה, מסיר באופן משמעותי את העומס על השרת ומאפשר לו לפעול ביתר קלות אשר מורגשת.
לגבי מניעת מנועי חיפוש על ידי הגבלת כתובות IP, איננה כה ריאלית בשל העובדה שסריקות נעשות מכתובות IP מרובות אשר קשה ( או בלתי אפשרי ) למפות אותן באופן יעיל.
אנו מקווים שהמצב ישתפר בעתיד הקרוב, ובעיות אלו לא יפריעו לקהל המבקרים.
|
|
חזרה לתוכן הדיון |
|