OpenAI Enhances Codex for Mac with Screen-Aware ‘Chronicle’ Feature

OpenAI Enhances Codex for Mac with Screen-Aware ‘Chronicle’ Feature

OpenAI Enhances Codex for Mac with Screen-Aware ‘Chronicle’ Feature

OpenAI has launched a significant update to its Codex app for Mac, introducing a powerful new feature called Chronicle. 

Designed to improve context awareness, this update allows the AI to understand the user's workspace without the need for repetitive prompts or overly specific instructions. 

By evolving beyond traditional chat interactions, OpenAI intends to make Codex an essential tool for a broader audience of builders and creators, rather than focusing solely on software engineers.

The Chronicle feature represents an evolution of Codex’s existing memory capabilities. 

While the app could previously recall details from past conversations, Chronicle now utilizes recent screen content to build a real-time understanding of the user's task.

 It can identify on-screen error messages, reference open documents, and observe individual workflows over time. 

This ambient awareness allows the AI to provide more relevant assistance based on the visual data currently present on the user's desktop.

Technically, Chronicle operates by running background agents that take temporary screen captures to create short-term "memories" stored locally on the device. 

To ensure transparency, users have the ability to inspect and edit these stored memories. 

However, OpenAI emphasizes that users maintain full control over their privacy; the feature can be paused or disabled at any time via the macOS menu bar. 

It is also noted that due to the high volume of data processed, using Chronicle may consume API rate limits more quickly than standard text interactions.

Currently, Chronicle is available as a research preview exclusively for Codex Pro subscribers on Mac. 

To activate the feature, users must navigate to the personalization section of their settings, enable "memories," and then opt into Chronicle. 

The setup process requires granting macOS-specific permissions for screen recording and accessibility, followed by a consent dialog that outlines how the data is handled to personalize the AI's responses.

This update positions Codex as a more integrated digital assistant that bridges the gap between insight and action. 

By synthesizing on-screen information with OpenAI’s advanced models, the app aims to reduce the manual overhead of explaining context to an AI. 

As the research preview progresses, this screen-aware technology could redefine how professionals interact with AI agents across various industries, making the digital workspace more intuitive and responsive.

OpenAI ने स्क्रीन-अवेयर ‘क्रॉनिकल’ फ़ीचर के साथ Mac के लिए Codex को बेहतर बनाया है

OpenAI ने Mac के लिए अपने Codex ऐप में एक बड़ा अपडेट लॉन्च किया है, जिसमें क्रॉनिकल नाम का एक नया पावरफ़ुल फ़ीचर शामिल है।

कॉन्टेक्स्ट अवेयरनेस को बेहतर बनाने के लिए डिज़ाइन किया गया यह अपडेट AI को बार-बार आने वाले प्रॉम्प्ट या बहुत ज़्यादा खास निर्देशों की ज़रूरत के बिना यूज़र के वर्कस्पेस को समझने देता है।

पुराने चैट इंटरैक्शन से आगे बढ़कर, OpenAI का मकसद Codex को सिर्फ़ सॉफ़्टवेयर इंजीनियरों पर फ़ोकस करने के बजाय, बिल्डर्स और क्रिएटर्स की बड़ी ऑडियंस के लिए एक ज़रूरी टूल बनाना है।

क्रॉनिकल फ़ीचर Codex की मौजूदा मेमोरी क्षमताओं में हुए बदलाव को दिखाता है।

जबकि ऐप पहले पिछली बातचीत की डिटेल्स याद रख सकता था, क्रॉनिकल अब यूज़र के काम की रियल-टाइम समझ बनाने के लिए हाल के स्क्रीन कंटेंट का इस्तेमाल करता है।

यह ऑन-स्क्रीन एरर मैसेज की पहचान कर सकता है, खुले डॉक्यूमेंट्स को रेफर कर सकता है, और समय के साथ अलग-अलग वर्कफ़्लो को देख सकता है।

यह एम्बिएंट अवेयरनेस AI को यूज़र के डेस्कटॉप पर अभी मौजूद विज़ुअल डेटा के आधार पर ज़्यादा ज़रूरी मदद देने की इजाज़त देता है।

 टेक्निकली, क्रॉनिकल बैकग्राउंड एजेंट चलाकर काम करता है जो डिवाइस पर लोकल स्टोर की गई शॉर्ट-टर्म "मेमोरीज़" बनाने के लिए टेम्पररी स्क्रीन कैप्चर लेते हैं।

ट्रांसपेरेंसी पक्का करने के लिए, यूज़र्स के पास इन स्टोर की गई मेमोरीज़ को देखने और एडिट करने की एबिलिटी होती है।

हालांकि, OpenAI इस बात पर ज़ोर देता है कि यूज़र्स अपनी प्राइवेसी पर पूरा कंट्रोल रखें; इस फ़ीचर को macOS मेन्यू बार के ज़रिए कभी भी पॉज़ या डिसेबल किया जा सकता है।

यह भी ध्यान दिया गया है कि प्रोसेस किए गए डेटा के ज़्यादा वॉल्यूम के कारण, क्रॉनिकल का इस्तेमाल करने से स्टैंडर्ड टेक्स्ट इंटरैक्शन की तुलना में API रेट लिमिट ज़्यादा तेज़ी से खत्म हो सकती है।

अभी, क्रॉनिकल खास तौर पर Mac पर Codex Pro सब्सक्राइबर्स के लिए एक रिसर्च प्रीव्यू के तौर पर उपलब्ध है।

फ़ीचर को एक्टिवेट करने के लिए, यूज़र्स को अपनी सेटिंग्स के पर्सनलाइज़ेशन सेक्शन में जाना होगा, "मेमोरीज़" को इनेबल करना होगा, और फिर क्रॉनिकल में ऑप्ट इन करना होगा।

सेटअप प्रोसेस में स्क्रीन रिकॉर्डिंग और एक्सेसिबिलिटी के लिए macOS-स्पेसिफिक परमिशन देने की ज़रूरत होती है, जिसके बाद एक कंसेंट डायलॉग होता है जो बताता है कि AI के रिस्पॉन्स को पर्सनलाइज़ करने के लिए डेटा को कैसे हैंडल किया जाता है।

यह अपडेट Codex को एक ज़्यादा इंटीग्रेटेड डिजिटल असिस्टेंट के तौर पर दिखाता है जो इनसाइट और एक्शन के बीच के गैप को कम करता है।

 OpenAI के एडवांस्ड मॉडल्स के साथ ऑन-स्क्रीन जानकारी को सिंथेसाइज़ करके, ऐप का मकसद AI को कॉन्टेक्स्ट समझाने के मैनुअल ओवरहेड को कम करना है।

जैसे-जैसे रिसर्च प्रीव्यू आगे बढ़ेगा, यह स्क्रीन-अवेयर टेक्नोलॉजी अलग-अलग इंडस्ट्रीज़ में प्रोफेशनल्स के AI एजेंट्स के साथ इंटरैक्ट करने के तरीके को फिर से डिफाइन कर सकती है, जिससे डिजिटल वर्कस्पेस ज़्यादा इंट्यूटिव और रिस्पॉन्सिव बन जाएगा।

OpenAI, Mac కోసం Codexను స్క్రీన్-అవేర్ ‘క్రానికల్’ ఫీచర్‌తో మెరుగుపరుస్తుంది

OpenAI, Mac కోసం తన Codex యాప్‌కు ఒక ముఖ్యమైన అప్‌డేట్‌ను విడుదల చేసింది, దీనిలో 'క్రానికల్' అనే శక్తివంతమైన కొత్త ఫీచర్‌ను పరిచయం చేసింది.

సందర్భ అవగాహనను మెరుగుపరచడానికి రూపొందించబడిన ఈ అప్‌డేట్, పదేపదే వచ్చే ప్రాంప్ట్‌లు లేదా అతి నిర్దిష్టమైన సూచనలు అవసరం లేకుండానే, వినియోగదారుడి వర్క్‌స్పేస్‌ను అర్థం చేసుకోవడానికి AIకి వీలు కల్పిస్తుంది.

సాంప్రదాయ చాట్ ఇంటరాక్షన్‌లను అధిగమించడం ద్వారా, కేవలం సాఫ్ట్‌వేర్ ఇంజనీర్లపై మాత్రమే దృష్టి పెట్టకుండా, బిల్డర్లు మరియు క్రియేటర్ల వంటి విస్తృత శ్రేణి వినియోగదారులకు Codexను ఒక ఆవశ్యక సాధనంగా మార్చాలని OpenAI ఉద్దేశిస్తోంది.

క్రానికల్ ఫీచర్, Codex యొక్క ప్రస్తుత మెమరీ సామర్థ్యాల పరిణామాన్ని సూచిస్తుంది.

గతంలో ఈ యాప్ గత సంభాషణల వివరాలను గుర్తుంచుకోగలిగినప్పటికీ, ఇప్పుడు క్రానికల్ వినియోగదారుడి పనిని నిజ సమయంలో అర్థం చేసుకోవడానికి ఇటీవలి స్క్రీన్ కంటెంట్‌ను ఉపయోగిస్తుంది.

ఇది స్క్రీన్‌పై కనిపించే ఎర్రర్ మెసేజ్‌లను గుర్తించగలదు, తెరిచి ఉన్న డాక్యుమెంట్‌లను సూచించగలదు మరియు కాలక్రమేణా వ్యక్తిగత వర్క్‌ఫ్లోలను గమనించగలదు.

ఈ యాంబియంట్ అవేర్‌నెస్, వినియోగదారుడి డెస్క్‌టాప్‌పై ప్రస్తుతం ఉన్న విజువల్ డేటా ఆధారంగా మరింత సంబంధిత సహాయాన్ని అందించడానికి AIకి వీలు కల్పిస్తుంది.

 సాంకేతికంగా, క్రానికల్ అనేది బ్యాక్‌గ్రౌండ్ ఏజెంట్లను నడపడం ద్వారా పనిచేస్తుంది. ఇవి తాత్కాలిక స్క్రీన్ క్యాప్చర్‌లను తీసుకుని, పరికరంలో స్థానికంగా నిల్వ చేయబడిన స్వల్పకాలిక "జ్ఞాపకాలను" సృష్టిస్తాయి.

పారదర్శకతను నిర్ధారించడానికి, వినియోగదారులు ఈ నిల్వ చేయబడిన జ్ఞాపకాలను తనిఖీ చేయడానికి మరియు సవరించడానికి అవకాశం ఉంటుంది.

అయితే, వినియోగదారులు తమ గోప్యతపై పూర్తి నియంత్రణను కలిగి ఉంటారని OpenAI నొక్కి చెబుతోంది; ఈ ఫీచర్‌ను macOS మెనూ బార్ ద్వారా ఎప్పుడైనా పాజ్ చేయవచ్చు లేదా నిలిపివేయవచ్చు.

అంతేకాకుండా, అధిక పరిమాణంలో డేటా ప్రాసెస్ చేయబడటం వలన, ప్రామాణిక టెక్స్ట్ ఇంటరాక్షన్‌ల కంటే క్రానికల్‌ను ఉపయోగించడం API రేట్ పరిమితులను వేగంగా వినియోగించుకోవచ్చని కూడా గమనించబడింది.

ప్రస్తుతం, క్రానికల్ అనేది Macలో కోడెక్స్ ప్రో సబ్‌స్క్రైబర్‌ల కోసం ప్రత్యేకంగా ఒక పరిశోధన ప్రివ్యూగా అందుబాటులో ఉంది.

ఈ ఫీచర్‌ను యాక్టివేట్ చేయడానికి, వినియోగదారులు తమ సెట్టింగ్స్‌లోని పర్సనలైజేషన్ విభాగానికి వెళ్లి, "జ్ఞాపకాలను" ఎనేబుల్ చేసి, ఆపై క్రానికల్‌ను ఎంచుకోవాలి.

సెటప్ ప్రక్రియలో స్క్రీన్ రికార్డింగ్ మరియు యాక్సెసిబిలిటీ కోసం macOS-నిర్దిష్ట అనుమతులను మంజూరు చేయడం అవసరం. ఆ తర్వాత, AI ప్రతిస్పందనలను వ్యక్తిగతీకరించడానికి డేటాను ఎలా నిర్వహిస్తారో వివరించే ఒక సమ్మతి డైలాగ్ వస్తుంది.

ఈ అప్‌డేట్, కోడెక్స్‌ను అంతర్దృష్టికి మరియు చర్యకు మధ్య వారధిగా నిలిచే మరింత సమగ్రమైన డిజిటల్ అసిస్టెంట్‌గా నిలుపుతుంది. OpenAI యొక్క అధునాతన మోడళ్లతో ఆన్-స్క్రీన్ సమాచారాన్ని సమన్వయం చేయడం ద్వారా, ఒక AIకి సందర్భాన్ని వివరించడంలో మానవీయంగా పడే అదనపు శ్రమను తగ్గించడమే ఈ యాప్ లక్ష్యం.

పరిశోధన ప్రివ్యూ పురోగమిస్తున్న కొద్దీ, ఈ స్క్రీన్-అవేర్ టెక్నాలజీ వివిధ పరిశ్రమలలోని నిపుణులు AI ఏజెంట్లతో సంభాషించే విధానాన్ని పునర్నిర్వచించగలదు, తద్వారా డిజిటల్ కార్యస్థలాన్ని మరింత సహజంగా మరియు ప్రతిస్పందించే విధంగా చేస్తుంది.

OpenAI యొక్క అధునాతన మోడళ్లతో ఆన్-స్క్రీన్ సమాచారాన్ని సమన్వయం చేయడం ద్వారా, ఒక AIకి సందర్భాన్ని వివరించడంలో పడే మానవ శ్రమను తగ్గించడమే ఈ యాప్ లక్ష్యం.

పరిశోధన ప్రివ్యూ పురోగమిస్తున్న కొద్దీ, ఈ స్క్రీన్-అవేర్ టెక్నాలజీ వివిధ పరిశ్రమలలోని నిపుణులు AI ఏజెంట్లతో సంభాషించే విధానాన్ని పునర్నిర్వచించగలదు, తద్వారా డిజిటల్ కార్యస్థలాన్ని మరింత సహజంగా మరియు ప్రతిస్పందించే విధంగా మారుస్తుంది.