חדש Key אחד לכל המודלים, עם הערכת מחיר לפני כל קריאה. יוצרים Key

GPT
P

pexels-photos-janpf

קוד פתוח

ppbrownother2024-06-15

  • pexel

תמונות באיכות גבוהה שנאספו מאתר Pexels ומחולקות לקובצי ארכיון דחוסים. המאגר מתאים למי שמחפש צילומי סטוק פתוחים, אך הוא עבר למיקום חדש.

  • 1,193הורדות בחודש
  • 18לייקים

מה זה

המאגר מציג צילומי עולם אמיתי שהורדו ישירות מאתר פקסלס. הדאטהסט כולל 86 קבצים, רובם ארכיונים מכווצים בחלוקה פנימית כמו xca.zip או xcb.zip, לצד קובצי עזר המכילים רשימות קישורים וטבלאות מיפוי של סכומי ביקורת מסוג MD5. היוצר לא פירט כמה תמונות קיימות בסך הכל, איך הוא בחר אותן מהאתר, או אם התבצע סינון כלשהו על בסיס רזולוציה, תגיות או תוכן.

לפי כרטיס הדאטהסט המקורי, המיקום הזה נחשב מיושן ולא מתוחזק. המידע הועתק בשלמותו לכתובת חדשה תחת הארגון opendiffusionai, ושם שמות התמונות שונו כך שיתאימו לערכי ה־MD5 שלהן. מי שבוחר להשתמש בגרסה הזו מקבל בעיקר את קובצי ה־zip הישנים וטבלת תרגום שמאפשרת לקשר בין השמות הישנים לקבצים המקוריים.

מתאים ל

  • אימון מודלי תמונה

    אימון או כוונון של מודלי דיפוזיה ויצירת תמונות על בסיס צילומי סטוק מגוונים.

  • ניתוח ראייה ממוחשבת

    בדיקת אלגוריתמים לזיהוי אובייקטים וסגמנטציה על צילומים באיכות גבוהה.

  • אימות שלמות קבצים

    שימוש ברשימות ה־MD5 המצורפות לבדיקת התאמה בין קבצים שהועברו למיקומים אחרים.

איפה זה נופל

המגבלה הכי גדולה היא שהמאגר מסומן למחיקה ואינו מעודכן. מעבר לכך, אין שום תיעוד על הטיות בתוכן, אילו קטגוריות צילום נכללות, שפות התגיות, או גודל הנתונים בדיסק. כדאי לבדוק את התמונות ידנית לפני שמכניסים אותן לפרויקט כדי לוודא שאין בהן חומרים לא רצויים או איכות לא אחידה.

שאלות
נפוצות

האם מותר להשתמש בדאטהסט הזה למוצר מסחרי?

הרישיון בדף מוגדר כאחר ולא כרישיון קוד פתוח מוכר. התמונות מגיעות מפקסלס, ולכן אתם מחויבים לתנאי השימוש של האתר המקורי. לא כדאי להסתמך על זה למוצר מסחרי בלי בדיקה משפטית של הרישיונות המקוריים של הצלמים.

כמה שוקל הדאטהסט ואיך מורידים אותו?

הנפח המדויק אינו מצוין בכרטיס, אך ישנם עשרות קובצי ארכיון גדולים. מורידים אותם באמצעות huggingface-cli עם פילטר של קובצי zip ישירות למחשב המקומי. קחו בחשבון שתצטרכו מקום פנוי גם לקבצים המכווצים וגם לחילוץ התמונות.

למה הדאטהסט מוגדר כמיושן?

היוצר העביר את כל הנתונים למאגר חדש תחת opendiffusionai כדי לפנות מקום. לפי ההודעה שלו, המאגר הנוכחי עלול להימחק בכל רגע. אם אתם מתחילים פרויקט חדש, עדיף להוריד ישירות מהכתובת החדשה שפורסמה.

האם המאגר כולל תיאורים או תגיות בעברית?

אין שום עברית במאגר והוא אינו כולל טקסט מתורגם. הקבצים מכילים צילומים, שמות קבצים ורשימות כתובות בלבד. אם המודל שלכם דורש כיתובים בעברית, תצטרכו לתייג את התמונות בעצמכם.

איך טוענים

טוענים את הקבצים ישירות מהטרמינל בעזרת huggingface-cli לפקודת הורדה ייעודית שמכוונת לקובצי ה־zip. אין צורך בבקשת גישה מיוחדת, והמאגר פתוח להורדה ישירה. הקבצים שמורים כארכיונים דחוסים, כך שצריך לחלץ אותם מקומית לפני אימון, ולהשתמש בקובצי ה־url-list ובטבלאות ה־md5 כדי לעשות סדר בשמות.

from datasets import load_dataset

ds = load_dataset("ppbrown/pexels-photos-janpf")

הרישיון

הרישיון מוגדר כאחר. פקסלס עצמם מחזיקים ברישיון שימוש משלהם, אך בעל המאגר לא הצמיד רישיון סטנדרטי מוכר. בלי בדיקה של תנאי האתר המקורי, שימוש מסחרי במודל שמאומן על המידע הזה נמצא באזור אפור ומסוכן מבחינה משפטית.

הרישיון המלא ב־Hugging Face ↗