Халықаралық ғалымдар тобы жасанды интеллект бойынша компьютерлік агенттердің жұмысын тексеруге және жақсартуға арналған «Арена» қорының қоры құрылды. Жобада Ватерлоо университетінің сарапшылардың, Гонконг университетінің, Salesforce Research және Карнеги Меллон университетінің сарапшыларының қатысуы бар.

Компьютерлік көмекшілер — бұл адам араласусыз тапсырмаларды орындайтын бағдарламалар. Осындай көмекшілердің мысалдары — бұл сири дауыстық көмекшісі, олар хабарлама жібере алады және жиналыстар өткізе алады. Алайда, заманауи айырмашылықтар әр түрлі қосымшалармен өзара әрекеттесуді қажет ететін күрделі тапсырмаларды орындауда қиындықтарға тап болады. Мысалы, жиілік туралы есептер әріптерден, үзінділер мен кестелерде деректерді табу керектігіне байланысты қиын болуы мүмкін.
Компьютерлік агент Арена Шынайы компьютерлік ортадағы AISSTISTINY-ді тексерудің алғашқы алаңына айналды. Бұл алдыңғы OSWORLD жобасының дамуы — мультимодальдық жүйелерді пайдалану үшін алғашқы кеңейту ортасы.
Әзірлеушілердің айтуынша, Варлоо университетінің профессоры Виктор Чонг, жаңа орта сізге тілдік және визуалды технологиялар негізінде әртүрлі AI модельдерін салыстыруға мүмкіндік береді. Пайдаланушылар амалдық жүйені, бағдарламаларды, бағдарламаларды (мысалы, Google Chrome немесе Excel) таңдайды, содан кейін көмекшінің тапсырмасын, содан кейін жүйені нақты уақыт режимінде, содан кейін жүйені екі түрлі модельмен салыстырады.