שיחת תבנית:Ynet/הוספת פלוס

• יעד=שיחת תבנית:Ynet/הוספת פלוס/דוגמאות
• תיוג=U:בורה בורה
• פורמט פלט=0
• דיווח על תקלות בגישה לאינטרנט=לא

מבוא

ראו שיחת תבנית:ynet בורה בורה - שיחה 09:48, 29 באוגוסט 2021 (IDT)

תבנית להסבה

תבנית:ynet

ערכים להסבה מושהה

טיוטה:בדיקת פלוס מקלדת מחשב 10 אחוז

אישורים

• מאשר בורה בורה - שיחה 13:28, 30 באוגוסט 2021 (IDT)
• מאשר דוד שי - שיחה 13:53, 30 באוגוסט 2021 (IDT)

דיון

משתמש:עלי אתה רואה אולי בכלים שלך על מה ולמה זה תקוע? בורה בורה - שיחה 12:11, 29 באוגוסט 2021 (IDT)

או יותר נכון בלולאה. בורה בורה - שיחה 12:13, 29 באוגוסט 2021 (IDT)

לא. עלי - שיחה 15:43, 29 באוגוסט 2021 (IDT)

בורה בורה, לא עדיף לבדוק את המפרט על ערך שזקוק להסבה? עלי - שיחה 16:31, 29 באוגוסט 2021 (IDT)

עלי רציתי לבדוק שהמפרט בכלל כתוב נכון. אתה רואה איזה באג במפרט? בורה בורה - שיחה 16:39, 29 באוגוסט 2021 (IDT)

יכול להיות שצריך לתת לו את הקישור ואני לא עושה זאת נכון. בורה בורה - שיחה 16:41, 29 באוגוסט 2021 (IDT)

אכן. אתה מחפש את המחרוזת "Ynet+ Article" בדף מקלדת מחשב. אני בכלל לא בטוח שכדאי להריץ את הבוט הזה, מדובר בעשרות אלפי קריאות לדפי אינטרנט. באיזשהו שלב השרת של Ynet (אם הוא פועל בצורה תקינה) צפוי לחסום את הבוט. עלי - שיחה 16:55, 29 באוגוסט 2021 (IDT)

הרצתי בעבר משהו דומה על האתר של בריטניקה עם איזה 200,000 קריאות וזה עבר בשלום. אז סבורני שזה יעבור בשלום עם כמה עשרות אלפים, לא ספרתי עדיין כמה. אז איך לתת לו את הקישור? הרי יש לנו אותו ביד בעת הריצה. בורה בורה - שיחה 17:07, 29 באוגוסט 2021 (IDT)

אשמח אם תפנה אותי להסבה המדוברת משום שכל שרת שמתוחזק ברמה בסיסית אמור לזהות 200,000 קריאות בפרק זמן קצר כהתקפת DoS לכל דבר ועניין. אני מניח שצריך לשלוף את המזהה מפרמטר |3= של התבנית ולבנות את ה-URL. עלי - שיחה 17:28, 29 באוגוסט 2021 (IDT)

ראה שיחת תבנית:בריטניקה/הטמעה. אכן שם אנו בונים את ה-URL. עכשיו המפרט עובר על יחסית מעט ערכים, אבל בהטמעה הראשונית זה היה עשרות אלפים. בורה בורה - שיחה 17:33, 29 באוגוסט 2021 (IDT)

עלי הכנסתי בנייה של ה-URL. עוד לא מושלם. יכול להיות או http או https. וגם 0,7340 או 1,7340 (אולי עוד, אחר כך נבדוק). אתה יכול לסדר את זה? בורה בורה - שיחה 18:30, 29 באוגוסט 2021 (IDT)

יש 22,279 ערכים עם התבנית אז מסתמא יהיו כ-60,000 עד 70,000 קריאות. בורה בורה - שיחה 20:21, 29 באוגוסט 2021 (IDT)

להוציא שתי ההסתייגויות לעיל גמרתי את המפרט והוא עובד טוב. מנסה עכשיו על כלל הערכים עם מגבלת פלט של עשרה. בורה בורה - שיחה 20:59, 29 באוגוסט 2021 (IDT)

משתמש:דוד שי מתי יש 0,7340 ומתי 1,7340? יש עוד אפשרויות? בורה בורה - שיחה 21:42, 29 באוגוסט 2021 (IDT)

כמו כן התחזית שלך "שאין כמעט ערכים" לא בכיוון. הוא מעדכן בערך 1 מ-80 ערכים כך שיש בערך 280 ערכים לעדכן. ועוד לא טיפלנו בסוג השני של הקישורים... בורה בורה - שיחה 22:28, 29 באוגוסט 2021 (IDT)

צריך לבדוק את האלגוריתם. אני מריץ שוב עם הצגת תוכן הדף, כי עולים גם דפים לא נעולים. בורה בורה - שיחה 22:39, 29 באוגוסט 2021 (IDT)

הבנתי את הבעיה באלגוריתם. מנסה לתקן. בורה בורה - שיחה 23:12, 29 באוגוסט 2021 (IDT)

Ynet+ Article לא מספיק כי הוא מוציא גם דפים שיש שאלה על זה. תוכל לראות בגרסאות קודמות של הדפים. דף הדוגמאות הראשון מכיל כרגע מקרה של ערך שבאמת נעול. רעיונו? בורה בורה - שיחה 00:19, 30 באוגוסט 2021 (IDT)

"isAccessibleForFree": false עלי - שיחה 00:59, 30 באוגוסט 2021 (IDT)

משתמש:עלי רעיון טוב אבל לא עובד... ניסיתי אפילו עם שני סוג מרכאות. בורה בורה - שיחה 01:37, 30 באוגוסט 2021 (IDT)

עדיין פתוח

• http://www.ynet.co.il/articles/1,7340,L-2918510,00.html
  • כאשר יש 1,7340
  • כאשר יש http
• https://www.ynet.co.il/digital/article/r1AIJ48pH מקרים כאלה

אני לא יודע מתי יש 0,7340 ומתי 1,7340, אבל זה לא משנה - אם מחליפים את 1 ב-0 מגיעים לאותו דף.

האם באתר ynet יש עדיין http (ולא https)? לא סביר. דוד שי - שיחה

משתמש:דוד שי אם יש עדיין http? לא יודע. לקחתי את הקישור בראש פיסקה זו מתוך דף הדוגמאות של התבנית! אולי צריך לרענן את הדוגמאות. בכל אופן, בדוק בבקשה את הפלט של עשרת הערכים שיצאו ואשר שזה אכן מה שרצינו. בורה בורה - שיחה 13:27, 30 באוגוסט 2021 (IDT)

תיקנתי את הדוגמה ואישרתי את הבוט. דוד שי - שיחה 13:54, 30 באוגוסט 2021 (IDT)

משתמש:עלי תוכל לתקן בסגנון http(s)://www.ynet.co.il/articles/[0-9],7340,L-<<<3>>>,00.html. אני סתם מנסה... עשה מה שנכון. בורה בורה - שיחה 18:09, 30 באוגוסט 2021 (IDT)

לא. שתי סיבות: התיקון לא יעבוד; התיקון לא נחוץ. כתובת ה-URL צריכה להיות זהה לכתובת אליה מפנה התבנית, והיא תמיד מתחילה ב-https://www.ynet.co.il/articles/0,7340,L- אם הפרמטר "3" הוא מספר. איזו בעיה אתה מנסה לפתור? יכול להיות שהפתרון ההולם הוא שימוש ב-##כתובת מעודכנת. עלי - שיחה 21:31, 30 באוגוסט 2021 (IDT)

אז זהו, שלא תמיד. למשל http://www.ynet.co.il/articles/1,7340,L-2918510,00.html. אני לא חושב שהבוט יעבד אותה כי היא לא בדיוק מה שאמרנו לו לחפש. בורה בורה - שיחה 23:11, 30 באוגוסט 2021 (IDT)

זה לא נכון. הכתובת שהתבנית מפנה אליה תמיד מתחילה במה שציינתי. לעיתים, השרת מפנה לכתובת אחרת (redirect), ולשם כך נועד התרגום ##כתובת מעודכנת. עלי - שיחה 23:19, 30 באוגוסט 2021 (IDT)

אחרי שהריצה תגמור נבדוק את זה. אז איך הביטוי המשופר אמר להיות? אתה שם לב שפנינו לשרת של ynet לפחות 40,000 פעמים עד עכשיו והם סלחנים איתנו! בורה בורה - שיחה 23:40, 30 באוגוסט 2021 (IDT)

לא שמתי לב לזה כלל. הבוט לא פונה לשרתי Ynet אלפי פעמים כאשר הוא מבצע 10 עריכות, ושמתי לב שהוא נתקע שוב ושוב. עלי - שיחה 00:21, 31 באוגוסט 2021 (IDT)

בשלב זה הפרמטר "פלוס=כן" מופיע ב33 ערכים, שזה עבודה יפה של הבוט, כי לפני הפעלת הבוט היו בערך שישה ערכים כאלה. דוד שי - שיחה 06:52, 31 באוגוסט 2021 (IDT)

ובכן, בשלב זה כאשר חלף מספר דו ספרתי של שעות מתחילת הריצה, נדמה לי שניתן לקבוע די בביטחון שהשרת מפעיל throttling משמעותי למדי על קריאותיו של הבוט. עלי - שיחה 07:24, 31 באוגוסט 2021 (IDT)

כן גם אני סבור שהשרת מתעלל בבוט אבל הגענו כבר לאות ש' אז זה מסתיים בקרוב בורה בורה - שיחה 13:54, 31 באוגוסט 2021 (IDT)

תקציר עריכה

הוספת |פלוס==כן בתבנית:ynet אם הקישור נעול

מפרט הסבה

<<<דלג אם יש##<<<פלוס>>>>>>...
<<<יהי $נעול##"isAccessibleForFree": false>>>...
<<<יהי $תוכן_האתר##<<<תוכן דף אינטרנט##https://www.ynet.co.il/digital/article/<<<3>>> >>> >>>...
<<<דלג אם אין##<<<$תוכן_האתר##רק:<<<$נעול##בדיוק>>>>>>>>>...
{{ynet<<<כל הפרמטרים##הוסף פרמטר:פלוס=כן>>>}}

מפרט הסבה סוג ראשון

<<<דלג אם יש##<<<פלוס>>>>>>...
<<<יהי $נעול##"isAccessibleForFree": false>>>...
<<<יהי $תוכן_האתר##<<<תוכן דף אינטרנט##https://www.ynet.co.il/articles/0,7340,L-<<<3>>>,00.html >>> >>>...
<<<דלג אם אין##<<<$תוכן_האתר##רק:<<<$נעול##בדיוק>>>>>>>>>...
{{ynet<<<כל הפרמטרים##הוסף פרמטר:פלוס=כן>>>}}

<<<! תוכן דף= <<<$תוכן_האתר>>>
>>>...

סטטוס

עלי אפשר להרוג שוב בבקשה? בורה בורה - שיחה 21:36, 29 באוגוסט 2021 (IDT)

טוב, הצלחתי להרוג לבד. בורה בורה - שיחה 22:00, 29 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-10 דפים מתוך 22,655. • KotzBot • דף שיחה • תרומות • 21:52, 29 באוגוסט 2021 (IDT)

בוצע יבש 10 עריכות; 494 דולגו במפורש; 298 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 22:14, 29 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-10 דפים מתוך 22,655. • KotzBot • דף שיחה • תרומות • 22:44, 29 באוגוסט 2021 (IDT)

בוצע יבש 7 עריכות; 401 דולגו במפורש; 228 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. ההסבה נעצרה לאחר 9 עמודי פלט @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 22:46, 29 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-10 דפים מתוך 12. • KotzBot • דף שיחה • תרומות • 23:00, 29 באוגוסט 2021 (IDT)

בוצע יבש 7 עריכות; 2 דולגו במפורש; 0 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. ההסבה נעצרה לאחר 9 עמודי פלט @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 23:00, 29 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-10 דפים מתוך 12. • KotzBot • דף שיחה • תרומות • 23:12, 29 באוגוסט 2021 (IDT)

בוצע יבש 7 עריכות; 2 דולגו במפורש; 0 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. ההסבה נעצרה לאחר 9 עמודי פלט @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 23:13, 29 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-3 דפים מתוך 3. • KotzBot • דף שיחה • תרומות • 23:20, 29 באוגוסט 2021 (IDT)

בוצע יבש 1 עריכות; 2 דולגו במפורש; 2 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 23:20, 29 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-1 דפים מתוך 1. • KotzBot • דף שיחה • תרומות • 23:28, 29 באוגוסט 2021 (IDT)

בוצע יבש 1 עריכות; 0 דולגו במפורש; 0 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 23:28, 29 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-1 דפים מתוך 1. • KotzBot • דף שיחה • תרומות • 23:48, 29 באוגוסט 2021 (IDT)

בוצע יבש 0 עריכות; 1 דולגו במפורש; 1 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 23:48, 29 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-1 דפים מתוך 1. • KotzBot • דף שיחה • תרומות • 00:00, 30 באוגוסט 2021 (IDT)

בוצע יבש 0 עריכות; 1 דולגו במפורש; 1 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 00:00, 30 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-1 דפים מתוך 1. • KotzBot • דף שיחה • תרומות • 01:24, 30 באוגוסט 2021 (IDT)

בוצע יבש 0 עריכות; 1 דולגו במפורש; 1 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 01:24, 30 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-1 דפים מתוך 1. • KotzBot • דף שיחה • תרומות • 01:32, 30 באוגוסט 2021 (IDT)

בוצע יבש 0 עריכות; 1 דולגו במפורש; 1 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 01:32, 30 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-1 דפים מתוך 1. • KotzBot • דף שיחה • תרומות • 02:00, 30 באוגוסט 2021 (IDT)

בוצע יבש 1 עריכות; 0 דולגו במפורש; 0 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 02:00, 30 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-3 דפים מתוך 3. • KotzBot • דף שיחה • תרומות • 02:04, 30 באוגוסט 2021 (IDT)

בוצע יבש 1 עריכות; 2 דולגו במפורש; 2 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 02:04, 30 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-10 דפים מתוך 22,654. • KotzBot • דף שיחה • תרומות • 02:08, 30 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-10 דפים מתוך 22,655. • KotzBot • דף שיחה • תרומות • 07:48, 30 באוגוסט 2021 (IDT)

בוצע יבש 10 עריכות; 11141 דולגו במפורש; 6141 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 10:59, 30 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-22,656 דפים מתוך 22,656. תג=32097164 מצא עריכות • KotzBot • דף שיחה • תרומות • 14:41, 30 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-22,662 דפים מתוך 22,662. תג=32101254 מצא עריכות • KotzBot • דף שיחה • תרומות • 00:41, 31 באוגוסט 2021 (IDT)

בוצע ריצת אמת 15 עריכות; 42933 דולגו במפורש; 22647 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה תג=32101254 מצא עריכות • KotzBot • דף שיחה • תרומות • 13:52, 31 באוגוסט 2021 (IDT)

סוג שני

לא מוצא פרק מפרט הסבה @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 23:16, 31 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-3 דפים מתוך 3. • KotzBot • דף שיחה • תרומות • 23:20, 31 באוגוסט 2021 (IDT)

בוצע יבש 3 עריכות; 0 דולגו במפורש; 0 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 23:20, 31 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-3 דפים מתוך 3. • KotzBot • דף שיחה • תרומות • 23:28, 31 באוגוסט 2021 (IDT)

בוצע יבש 3 עריכות; 1 דולגו במפורש; 0 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 23:28, 31 באוגוסט 2021 (IDT)

מתחיל בעבודה, אטפל ב-3 דפים מתוך 3. • KotzBot • דף שיחה • תרומות • 00:24, 1 בספטמבר 2021 (IDT)

בוצע יבש 0 עריכות; 4 דולגו במפורש; 3 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 00:24, 1 בספטמבר 2021 (IDT)

מתחיל בעבודה, אטפל ב-1 דפים מתוך 22,664. • KotzBot • דף שיחה • תרומות • 01:12, 1 בספטמבר 2021 (IDT)

בוצע יבש (עצרתי בגלל {{עצור}}) 0 עריכות; 8415 דולגו במפורש; 4645 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה • KotzBot • דף שיחה • תרומות • 03:34, 1 בספטמבר 2021 (IDT)

מתחיל בעבודה, אטפל ב-22,664 דפים מתוך 22,664. תג=32108692 מצא עריכות • KotzBot • דף שיחה • תרומות • 03:41, 1 בספטמבר 2021 (IDT)

עצרתי את הריצה. הבוט על הסוג השני לא מוצא ערכים לתיקון. בורה בורה - שיחה 13:17, 1 בספטמבר 2021 (IDT)

בוצע ריצת אמת (עצרתי בגלל {{עצור}}) 0 עריכות; 41125 דולגו במפורש; 21616 לא נצפה שינוי, 0 תקלות, 0 ארכיון, 0 לא דפים. @מש:בורה בורה תג=32108692 מצא עריכות • KotzBot • דף שיחה • תרומות • 13:19, 1 בספטמבר 2021 (IDT)