MiniGPT-4: כלי חינמי של תמונה לטקסט בינה מלאכותית שתוכל לנסות היום

ChatGPT זה נהדר, אבל כרגע, זה מוגבל לטקסט בלבד - טקסט פנימה, הוצא טקסט. GPT-4 היה אמור להרחיב על זה על ידי הוספת עיבוד תמונה כדי לאפשר לו ליצור טקסט על סמך תמונות.

עם זאת, OpenAI עדיין לא שחררה את התכונה הזו, וזה המקום שבו MiniGPT-4 נכנס לתמונה. פרויקט הקוד הפתוח הזה נותן לנו תצוגה מקדימה של עיבוד התמונה GPT-4 יכול להיות כמו - וזה די מסודר.

מה זה MiniGPT-4?

MiniGPT-4 הוא פרויקט קוד פתוח שפורסם ב-GitHub כדי להדגים יכולות שפת חזון במערכת AI. כמה דוגמאות למה שהוא יכול לעשות כוללות יצירת תיאורים של תמונות, כתיבת סיפורים המבוססים על תמונות, או אפילו יצירת אתרים רק מציורים.

למרות מה שהשם מרמז, MiniGPT-4 אינו מחובר רשמית ל-OpenAI או ל-GPT-4. הוא נוצר על ידי קבוצה של Ph. D. סטודנטים שבסיסם בערב הסעודית באוניברסיטת המלך עבדאללה למדע וטכנולוגיה. הוא מבוסס גם על מודל שפה גדול אחר (LLM) בשם Vicuna, שבעצמו נבנה על קוד פתוח Large Language Model Meta AI (LLaMA). זה לא ממש חזק כמו ChatGPT, אלא לפי ציון לפי

כיצד להשתמש ב-MiniGPT-4

MiniGPT-4 הוא רק הדגמה והוא עדיין בגרסה הראשונה שלו. לעת עתה, ניתן לגשת אליו בחינם באתר הרשמי של הקבוצה. כדי להשתמש בו, פשוט גרור תמונה פנימה או לחץ על "שחרר תמונה כאן". לאחר העלאתו, הקלד את ההודעה בתיבת החיפוש.

אילו סוגי דברים כדאי לנסות? ובכן, לבקש מ-MiniGPT-4 לתאר תמונה זה פשוט מספיק. אבל אולי אתה צריך איזה עותק לפוסט באינסטגרם עבור החברה שלך. או שאולי אתה רוצה לדעת את המרכיבים הדרושים למנה מעניינת, ואפילו מתכון לבישול שלה. MiniGPT-4 יכול להתמודד עם משימות אלה בצורה מפתיעה.

היבטי הקידוד קצת יותר מחוספסים בקצוות. הפיכת ציור פשוט של מפית לאתר מתפקד היה טריק שהפגין OpenAI כשהכריזו לראשונה על GPT-4. אבל נראה ש-MiniGPT-4 עדיין לא מסוגל להתמודד עם זה באותה מידה. ChatGPT יספק קוד מדויק יותר - למעשה, הפעלת כל מה שקוד ה-MiniGPT-4 הוא דרך ChatGPT או GPT-4 יניב לך תוצאות טובות יותר.

דבר אחד שיש לציין הוא ש-MiniGPT-4 אכן משתמש ב-GPU של המערכת המקומית שלך. לכן, אלא אם כן יש לך GPU דיסקרטי חזק למדי, אתה עשוי למצוא את החוויה איטית למדי. לצורך ההקשר, ניסיתי את זה ב-a M2 Max MacBook Pro, ולקח בערך 30 שניות ליצור טקסט על סמך תמונה שהעליתי.

מגבלות של MiniGPT-4

המהירות של MiniGPT-4 היא בהחלט מגבלה. אם אתה מנסה לגשת לזה בלי כמה גרפיקה הגונה, זה איטי מכדי להרגיש מגיב. אם אתה רגיל למהירות של ChatGPT מבוסס ענן או אפילו Bing Image Creator, MiniGPT-4 הולך להרגיש איטי עד כאב.

מעבר לכך, ל-MiniGPT-4 יש את כל אותן המגבלות של ChatGPT או גוגל בארד או כל צ'אט בוט אחר של AI בכך שהוא יכול "להזות" או להמציא מידע.

המלצות עורכים

• זו הסיבה שאנשים חושבים ש-GPT-4 עשוי להיות מטומטם יותר עם הזמן
• ChatGPT: החדשות האחרונות, המחלוקות והטיפים שאתה צריך לדעת
• מהי בקשת DAN עבור ChatGPT?
• Google Bard יכול עכשיו לדבר, אבל האם הוא יכול להטביע את ChatGPT?
• יצרנית ChatGPT OpenAI עומדת בפני חקירה של FTC על חוקי הגנת הצרכן

שדרג את אורח החיים שלךמגמות דיגיטליות עוזרות לקוראים לעקוב אחר עולם הטכנולוגיה המהיר עם כל החדשות האחרונות, ביקורות מהנות על מוצרים, מאמרי מערכת מעוררי תובנות והצצות מיוחדות במינן.