הצעת פתרון לזירוז בדיקת תמונות



  • אנחנו כולנו מודים לנטפרי על כל מה שהם עושים לנו
    וכן זה הסינון הכי טוב ומושלם עבור יהודי שומר תורה ומצוות
    אבל העניין של בדיקת תמונות למי שצריך את זה רבה כגון גרפיקאים, סוחרים במכירות אונליין וכו' זה קצת מפריע שכל פעם צריך להמתין עד שהתמונה נבדקת וזה יכול להיות מדובר באלפי תמונות ביום ואפילו כשזה עומד רק על חצי דקה לכל תמונה שזה ממש בחסד זה גם הרבה מאוד זמן לכל אילו
    לכן חשבתי שיש אולי אפשרות לשלב רובוט לבדיקת התמונות ושזה יעבוד כך.
    תמונה שהרובוט מזהה שיש בו רק צבעים כגון אדום ירוק כחול וכו' כאילו צבעים שאין מציאות שזה יהיה תמונה של אדם זה הוא יפתח מיד דהיינו שזה לא ישלח בכלל לבדיקה ורק תמונות שהוא מזהה שיש בהם גוון או אפילו ספק של ספק של צבע עור מהכי לבן עד הכי שחור שקיים בצבע עור רק אילו ישלח לבדיקה אנושית וכך נחסוך 70% של הבדיקות תמונות וכך יהיה מהירות הרבה יותר גבוה של פתיחת תמונות וכן זה יכול לחסוך הרבה כסף לנטפרי.
    כמובן תיצרכו קודם לעשות נסיון שזה עובד חלק ואז בהמשך להכניס את זה למערכת של נטפרי, אני חושב שזה רעיון טוב ושזה גם אפשרי לעשות ואני מקווה שיקחו את זה רציני
    תודה רבה


  • בודקים ותומכים

    @IE למעשה הרעיון של בדיקת תמונות ע"י בינה מלאכותית, נבחנה לעומק לפני שעברו לבדיקה אנושית.
    זה לא פרקטי מכמה סיבות, וביניהם, יש הרבה תמונות בעייתיות שאין בהם בכלל צבע גוף, כגון תמונות בגווני אפור, אנשים שחומי עור, תמונות שצריך לחסום ולא מטעמי צניעות (אלימות, עבודה זרה וכו').
    בקיצער, הרעיון נחמד והוא נטחן עד אשר דק, והוחזר למקום ממנו בא.



  • @MacroShadow הגויות יודעות לחסום אלימות ועבודה זרה וכדו'?


  • בודקים ותומכים

    @ee תתפלא, אבל כן.
    הם מקבלים הדרכה מקיפה הכוללת בין השאר כללים ברורים בליווי דוגמאות.



  • @IE

    @נטפריס אמר בלהביט אל עבר העתיד:

    הנושא של הבינה המלאכותית מוצה. לא שלא ייתכנו רעיונות, אבל אף אחד מכם לא העלה אחד כזה. המושג בינה מלאכותית הרי הוא לא "רעיון" ואפשר לומר על העלאת הנושא "בוקר טוב". המושג הזה קיים ונבדק ונמצא שאכן יכול לעזור אבל עזרתו היא שולית בצורה קיצונית לצורך בכח אדם. זה נבדק עד תום במסגרת מה שהיה ידוע בזמנו. אם למישהו יש מידע/רעיון חדש מעבר לעצם קיומה של האפשרות הזו, הוא מוזמן לכתוב את הרעיון.
    עיקר הקושי הוא אסטרטגי, וזה אומר שצריך להכיר את צורת העבודה ואת המגבלות הטכנלוגיות.

    להלן האסטרטגיה הקיימת:

    1. אדם נכנס לאמזון ויש שם תמונה, הדפדפן טוען אותה כדי להציגה
    2. תוכנת נטפרי מקבלת את הבקשה ומתבוננת בכתובת בה התמונה נמצאת (זה לרוב שונה מהכתובת של הדף בה היא נמצאת)
    3. אם הכתובת בלתי מוכרת במערכת (לא במסד הנתונים), נשלחת כתשובה תמונה של רשת פיקסלים גסה ללא סימן מים
    4. אם הכתובת נמצאת: אם היא מוגדרת לפתיחה חופשית, התוכנה שולחת את התמונה המקורית. אם הכתובת מוגדרת כצריכה סינון תמונות (הרוב המכריע) אז תוכנת נטפרי קוראת את תוכן התמונה (פיקסלים).
    5. במידה והתוכן נמצא קיים ברשימת התמונות שנבדקו כבר (פה יש אלגוריתם קטן למקרה של תוכן כבר נבדק אבל עם מידות שונות), אז אם זה כשר היא נשלחת ואם לא נשלחת תמונת רשת פיקסלים גסה עם סימן מים של חסימה.
    6. אם היא לא נמצאת, היא נשלחת לתור ממתיני הסינון. בתור זה ישנם כמות אדירה של תמונות. שנבדקות אנושית בקצב של 50,000 בשעה כיום.
      הבודקת רUאה מול המסך מטריצה של תמונות רבות בבת אחת והיא יכולה בבאת אחת להכשיר ולפסול את כולם או להחריג בודדות כך שעבדותה מהירה מאוד.
      בשלב ההמתנה הזאת הבינה המלאכותית יכולה לעשות: א. לפסול תמונות ש99.9% פסולות ב. לקבץ תמונות דומות להקלה על הבדיקה ג. להכשיר תמונות ש100.0000000000000000000000000000000000% כשרות כמו תרשימי אדריכלות, טקסט, טקסטורות וכדומה.
      שלושת הסעיפים הללו נמצאו כבלתי יעילים כיום.
      כלומר התועלת שלה היא זניחה ואף שאין לי כלל נתונים אני מרשה לעצמי להניח שבסעיף א. ייחסכו מבדיקה אחוז מהתמונות + הפסד לחסימת שבריר האחוז המוטעה, מסעיף ב. ייחסכו אולי אחוז או שתיים מהזמן ג. פחות מעשירית האחוז.

    כעת, ההנחה שבינה מלאכותית היא חינם היא לא מדוייקת בלשון המעטה. העלות היא

    1. כח אדם של פיתוח (במשכורת לפיתוח האלגוריתמים הללו אפשר להעסיק 500 עובדות. גם אם תמצאו מישהו שיעשה זאת בחינם אין סיבה שהוא יתרום את יכולתו מעבר לשאחרים יתרמו את כספם).
    2. כח מחשוב (פתיר לטווח הרחוק, עם שפע של מאמצים באסטרטגיה).


  • @MacroShadow לא יאומן ממש אחרית הימים!


  • בודקים ותומכים

    @ee אתה מזכיר לי, היה דיון בזמנו אם אפשר לדרוש מנוצרים לחסום סמלים נוצריים.
    למעשה הוכרע שאין בעיה מכיון שלא אכפת להם דבר מלבד הכסף. דבר המוכיח את עצמו עד היום :)



  • @MacroShadow אמר בהצעת פתרון לזירוז בדיקת תמונות:

    @ee אתה מזכיר לי, היה דיון בזמנו אם אפשר לדרוש מנוצרים לחסום סמלים נוצריים.
    למעשה הוכרע שאין בעיה מכיון שלא אכפת להם דבר מלבד הכסף. דבר המוכיח את עצמו עד היום :)

    מעניין, כי סה"כ גם לשיטתם זה לא פגיעה באמונתם... זה לא מחיקה או משו כזה?



  • @MacroShadow אמר בהצעת פתרון לזירוז בדיקת תמונות:

    @ee אתה מזכיר לי, היה דיון בזמנו אם אפשר לדרוש מנוצרים לחסום סמלים נוצריים.
    למעשה הוכרע שאין בעיה מכיון שלא אכפת להם דבר מלבד הכסף. דבר המוכיח את עצמו עד היום :)

    אני נדהם כל פעם מחדש מעוד חשיפה ולו הקטנה ביותר, שמספרת לנו כמה המוצר שאנו נהנים ממנו, אינו מובן מאליו בכלל, אלף ואחד פרטים שאנחנו המשתמשים לא שמים לב ולא אמורים לדעת עליהם, ומאחורי הקלעים עמדו מספר אנשים קטן שחלמו על דבר מוזר, ועם הרבה סייעתא דשמיא שהצטרפה יחד עם רצון אכפתיות ומסירות למטרה, בנו מאפס לבנה אחר לבנה את הדבר האדיר הזה. אשריכם אנשי נטפרי הצדיקים.

    נ.ב. הניחו את ההצטנעות בצד וגלו לנו מידי פעם עוד:relaxed:



  • אכן, התהליך מרתק!
    האם יש באנשהו באתר נטפרי תאור איך מתנהלים הדברים?
    איך הגיעו דווקא לאוקראינה? מי מסביר להם את הדרישות? איך גוישע קאפ מצליח לקלוט דקויות?

    כולנו מברכים על התוצאות יום יום, וזוהי חויה מרתקת להסיט מעט את הקלעים ולהבין מהקורה מאחוריהם



  • כידוע הרבה פעמים ה"שבעס גוי" מתגלה כת"ח לא קטן....


  • בודקים ותומכים

    @ארז-מלבנון לא יודע אם ת"ח...
    אבל בתחילה נשים משלנו סיננו תמונות, והיה מדהים לראות לאחר שעברו לגויים, הם החמירו יותר.
    אולי בגלל שהלכו לפי הכללים בצורה מרובעת, משא"כ אנ"ש הפעילו שיקול הדעת.



  • @MacroShadow אמר בהצעת פתרון לזירוז בדיקת תמונות:

    והיה מדהים לראות לאחר שעברו לגויים, הם החמירו יותר.

    עכשיו אני מבין איך דברים שעברו ועדה רוחנית של עיתונים חרדים, נחסמים ע"י הגויים :)


התחבר כדי לפרסם תגובה