Urgent.News

What's breaking now, across thousands of outlets.

AI

OpenAI LifeVal Nedir? Günlük Görev Benchmark'ı

OpenAI LifeVal Nedir? Günlük Görev Benchmark'ı OpenAI LifeVal, bir çocuğu okula kaydettirmek, ev bütçesini yönetmek veya bir devlet dairesiyle işleri halletmek gibi günlük yaşam görevlerinden oluşan 169 görevlik bir kıyaslama setidir; bir yapay zekâ ajanı bu görevleri tarayıcı kullanımı, bilgisayar kullanımı ve bağlayıcılar aracılığıyla tamamlar. Her deneme bir rubrikle puanlanır ve puan, 0 ile 1…

OpenAI LifeVal, 169 günlük yaşam görevlerinden oluşan bir kıyaslamadır; model bunları tarayıcı, bilgisayar ve bağlayıcılar kullanarak tamamlar. Her deneme puanlanır ve genel bir puan alınır, 0 ile 1 arasında. GPT-6 Astra, xhigh efor düzeyinde %80,6 puan kazanır. OpenAI bu modeli insanların günlerini ne şekilde geçirdiğini ve bu etkinliklerden hangileri kullanacaklarını öğrenmek için Time Use Survey'ları kullanarak oluşturdu.

Her modelin, model çıkış tarihine göre xhigh eforuyla puanlandığı grafikte, GPT-6 Astra, %80,6 puan elde ediyor. Bu puan, akıl yürütme kapasitesine göre değil, yaşam görevlerini başarılı bir şekilde tamamlamaya yönelik performansı gösterir.

Written by urgent.news from Dev.to's reporting — not their text. Machine-written — may contain errors; check the original before relying on it.

Also reported by 1 other outlet

Read the original at dev.to →

More in AI

What is OpenAI LifeVal? The everyday tasks benchmark

What is OpenAI LifeVal? The everyday tasks benchmark OpenAI LifeVal evaluates agents based on 169 everyday tasks: all published scores, the numbers per reasoning effort and what the benchmark does not…

  • OpenAI LifeVal assesses AI agents' performance in 169 everyday tasks.
  • GPT-6 Astra achieved an 80.6% score under high resource consumption.
  • The benchmark reveals limitations in evaluating AI reasoning effort.

More from Tuesday 3 November →