OpenAI עשתה צעד נוסף באינטגרציה של בינה מלאכותית עם שימוש יומיומי במחשב על ידי שיפוץ יסודי של Codex, סוכן הקוד שלה לשולחן העבודה. הכלי, שנודע בעבר בעיקר בזכות סיוע התכנות שלו, הופך כעת לעוזר המסוגל לטפל ביישומים, לזכור העדפות ולנהל פרויקטים כמעט בצורה חלקה.
עם עדכון זה, החברה בראשות סם אלטמן מקרבת את תוכניתה ליצירת "אפליקציית-על" למחשב שולחני המאחדת את ChatGPT, Codex ואת דפדפן Atlas שלךהמהלך נועד לפשט את חוויית המשתמש, לרכז משאבים בסביבת עבודה אחת ולהתמודד מול יריבים כמו Anthropic, במיוחד בסביבת פיתוח תוכנה ואוטומציה מתקדמת.
קודקס לומד להשתמש במחשב כמו כל משתמש אחר
אחד השינויים הבולטים ביותר הוא שקודקס יכול כעת לשלוט במחשב ברקעהסוכן מסוגל לראות מה מופיע על המסך, להזיז את הסמן שלו, ללחוץ, להקליד טקסט ולהגיב למה שקורה ביישומים המותקנים, מבלי להפריע לפעולת המשתמש עם העכבר או המקלדת.
יכולת זו מאפשרת למספר סוכני קודקס לעבוד יחד במקביל באותו צוותזה כרוך בביצוע בדיקות, שינוי תצורות או ביצוע משימות חוזרות בזמן שהאדם ממשיך בפעילותו הרגילה. זה פותח את הדלת לאוטומציה של זרימות עבודה שבעבר דרשו פיקוח מתמיד, כגון בדיקת אפליקציה לאחר כל שינוי קוד או חזרה על פעולות ממשק.
OpenAI מציעה פונקציה זו כדרך עבור העוזר לפעול עם כלים שאין להם API או אינטגרציות ישירות, דבר נפוץ בתוכניות שולחן עבודה רבות. קודקס, על ידי "ראיית" המסך ושליטה בסמן, יכול לתקשר עם יישומים אלה בדיוק כפי שמשתמש אנושי היה עושה, אם כי לעת עתה בצורה מבוקרת ועם תשומת לב מיוחדת לאבטחה.
לפי החברה, השימוש במחשב זמין בתחילה ב- macOS דרך אפליקציית Codex לשולחן העבודה, מקושר לחשבון ChatGPT. גרסת Windows תגיע בהמשך, לאחר בדיקת הביצועים וההתאמה של התכונות לסביבת מיקרוסופט.
במקרה של אירופה ובריטניה, OpenAI אישרה כי ה- בקרת מחשב, התאמה אישית מתקדמת, הצעות הקשר וזיכרון הם יופעלו בהמשך. הסיבה לכך היא הצורך להתאים תכונות אלו לתקנות הגנת המידע, דרישה תובענית במיוחד באיחוד האירופי ובשוק הבריטי.
דפדפן משולב ועבודה ישירה על דפי אינטרנט
העדכון גם מחזק את הקשר של קודקס עם האינטרנט הודות ל- דפדפן משולב בתוך האפליקציה עצמהבמקום לקבל הוראות טקסט גנריות בלבד, הסוכן יכול לקבל פקודות ישירות על אלמנטים ספציפיים בדף.
בפיתוח Frontend, לדוגמה, המשתמש יכול בחר רכיב אינטרנט ותאר את השינוי. המשתמש רוצה לעשות משהו (כמו לשנות את הצבע, גודל הטקסט או הפריסה של בלוק), וקודקס מבין את ההוראה בתוך ההקשר הוויזואלי הספציפי הזה. זה מונע את הצורך לכתוב הנחיות ארוכות המסבירות איזה חלק באתר צריך לשנות.
דפדפן מוטמע זה מאפשר גם קודקס ניתוח תוכן, איסוף מידע והשתמש בו כהקשר עבור משימות אחרות, כגון תיעוד קוד, סקירת מפרטי מוצר או השוואת תיעוד טכני, הכל נעשה באותה סביבה, מבלי שיהיה צורך לעבור בין חלונות מרובים של מערכת הפעלה.
יצירה ועריכה של תמונות באמצעות gpt-image-1.5
עמוד תווך נוסף של הגרסה החדשה של קודקס הוא שילוב המודל gpt-image-1.5 ליצירה ושינוי תמונות מתוך יישום שולחן העבודה עצמו, הסוכן יכול ליצור תרשימים, דיאגרמות, מוקאפים או סקיצות חזותיות מטקסט, או על ידי שילוב הוראות עם צילומי מסך וקטעי קוד.
יכולת זו מכוונת ישירות לצוותים העובדים ב עיצוב מוצר, ממשקי משתמש או אבות טיפוס של משחקי וידאולדוגמה, מפתח יכול לצלם צילום מסך של ממשק חצי גמור, לבקש מקודקס להציע עיצוב מחדש של תפריט או ערכת צבעים חדשה, ולקבל תמונות שנוצרו שמתאימות להקשר זה, מבלי לשנות כלים.
כאשר הכל מרוכז בקודקס, סוכנים יכולים שרשור משימות קידוד ועיצוב: לכתוב את הלוגיקה של פונקציונליות, לעדכן את ממשק הקצה המתאים וליצור מוקאפ ויזואלי להצגה לצוות, מבלי לצאת מתהליך העבודה או לפתוח יישומי עריכה גרפית חיצוניים.
זיכרון, הקשר ואוטומציה של משימות לטווח ארוך
מעבר לשליטה במחשב ויצירת תמונות, ההימור הגדול של OpenAI עם גרסה זו הוא לתת לקודקס זיכרון מתמשך וניהול הקשר רחב הרבה יותרהכלי יכול לעשות שימוש חוזר בשיחות קודמות, לשמר מידע חשוב ולאחזר אותו בעת הצורך להמשך פרויקט.
תכונת הזיכרון, שמשוחררת בתצוגה מקדימה, מאפשרת לקודקס לזכור העדפות אישיות, תיקונים תכופים או נתונים שהיו קשים לאיסוףזה כולל הכל, החל ממערך הטכנולוגיה האופייני של הצוות ועד לאופן שבו תיקיות מאורגנות, פורמטי הדוחות הנפוצים ביותר והתג המשמש בדרך כלל ב-GitHub עבור סוגים מסוימים של בעיות.
בעזרת ההקשר המצטבר הזה, הסוכן יכול להציע משימות באופן יזוםניתן להשתמש בזה כדי להציע חידוש פרויקט לא גמור, להמליץ על עיבוד מחדש ממתין, או להודיע למשתמשים על בקשות משיכה ארוכות טווח. חברות מסוימות כבר משתמשות בזה כדי לעקוב אחר שיחות ב-Slack, Gmail או Notion ולהגיב כאשר מתרחשים אירועים מסוימים.
קודקס יכול גם לתכנן עבודה לעתיד ולהפעיל את עצמך מחדש באופן עצמאי להשלמת משימות ארוכות טווח. לדוגמה, הוא יכול לנהל תור של סקירות קוד במשך ימים או שבועות, לטפל בהערות ולעדכן תיעוד מבלי שהמפתח יצטרך לנטר זאת כל הזמן.
מעל 90 תוספים ותמיכה משופרת למפתחים
כדי להשלים את השינוי, OpenAI הוסיפה כמעט 90 תוספים חדשים של קודקסאלה כוללים אינטגרציות עם Microsoft Suite, GitLab Issues, Neon by Databricks, Render ו-Superpowers, כמו גם תמיכה בשרתי MCP (Model Context Protocol). המטרה היא לתת לסוכן יותר מקורות הקשר ויכולות תפעוליות גדולות יותר.
הודות לתוספים אלה, קודקס יכול איסוף מידע משירותים שונים ופעולה על סמך זה מסביבת עבודה אחת, ניתן לסקור בעיות ב-GitLab, לבצע שאילתות על נתונים בסביבת Databricks, לעדכן מסמכי Office או לקיים אינטראקציה עם שירותי פריסה, מבלי לאלץ את המשתמש לקפוץ מפלטפורמה לפלטפורמה.
ברמה הטכנית גרידא, העדכון מחזק את זרימות עבודה טיפוסיות למפתחיםכעת Codex עוזר לך לסקור בקשות משיכה, לנהל מספר לשוניות טרמינל בו זמנית, להתחבר לסביבות פיתוח מרוחקות באמצעות SSH ולפתוח קבצים עם תצוגות מקדימות עשירות, בין אם מדובר בקבצי PDF, גיליונות אלקטרוניים, מצגות או מסמכים בפורמטים אחרים.
כל זה מרוכז בחוויה מאוחדת שלפי OpenAI עצמה מאפשרת התקדמות מהירה יותר בכל שלבי מחזור חיי התוכנהמכתיבת הקוד הראשוני ועד לבדיקות, פריסות, תיעוד ותחזוקה שלו, כאשר סוכני בינה מלאכותית משתפים פעולה באופן רציף באותה סביבת שולחן עבודה.
זמינות, התמקדות במפתחים ומצב באירופה
הגרסה החדשה של קודקס כבר נפרסת ב יישום שולחן עבודה עבור macOS למי שמתחבר באמצעות חשבון ChatGPT. לא כל התכונות דורשות את אותו סוג מנוי, וחלק מהתכונות המתקדמות עשויות להיות תלויות בתוכנית שנרכשה, כפי שקורה בכלים אחרים של OpenAI.
טיבו סוטיו, מנהל קודקס, הסביר כי עדכון זה זה מכוון במיוחד למפתחיםלמרות שהכוונה היא להרחיב זאת לקהל רחב יותר בהמשך. הרעיון הוא שצוותים טכניים יהיו הראשונים לנצל את הסוכנים החדשים ואת זרימות העבודה האוטומטיות, ובמשך הזמן יעבירו מודל זה למשימות משרדיות, ניהול מסמכים או פרודוקטיביות אישית.
OpenAI מדגישה כי השימוש בכוח מחשוב וזיכרון מיושם באמצעות גישת אבטחה ותאימות רגולטוריתזה רלוונטי במיוחד באיחוד האירופי ובממלכה המאוחדת. מסיבה זו, תכונות התאמה אישית מתקדמות, הצעות הקשר, זיכרון מתמשך ושליטה ישירה במערכת ההפעלה ייקח קצת יותר זמן עד שיהיו זמינות בשווקים אלה.
בכל מקרה, החברה טוענת כי התפתחות זו של קודקס פותחת דלת ל... אפליקציית-על לשולחן העבודה המתמקדת באוטומציה חכמהשבהם סוכני בינה מלאכותית לא רק עוזרים בכתיבת קוד, אלא גם מתאמים משימות, מסתגלים לסגנון העבודה של המשתמש ומאפשרים לפרויקטים מורכבים לפעול למשך תקופות ממושכות. עבור מפתחי תוכנה באירופה, המסר ברור: יכולות חדשות מגיעות, אך עם ההתאמות הנדרשות כדי להתאים למסגרת הרגולטורית הקיימת.