Urgent.News

What's breaking now, across thousands of outlets.

AI

디시전 AI 글로벌 벤치마크 'S1MB' 1위: 퍼플렉시티·클라우드플레어·메타 제친 Darwin-27B-ZTC-v5

요약(TL;DR): 비드래프트의 판정 엔진 Darwin-27B-ZTC-v5가 허깅페이스 공개 벤치마크 S1MB에서 152개 모델 중 종합 1위에 올랐다. 137개 벤치마크 순위를 점수로 바꿔 평균한 Borda 점수는 91.16으로, 2위 퍼플렉시티(88.66)를 2.50점, 타입세이프AI의 JEV 공식 모델(14위)을 9.72점 앞섰다. 상위 5위 안에 비드래프트 모델이 두 개(1위·4위) 들어갔다. S1MB가 뭐고, 왜 중요한가? S1MB(System One Mosaic Benchmark)는 '디시전 AI'를 겨루는 공개 리더보드다. 디시전 AI는 글을 생성하지 않고 판단만 내리는 AI다. 상황과 질문을 받으면 선택지마다 확률을 숫자로 돌려주기 때문에, 프로그램이 그 값을 바로 조건문에 넣어 쓸 수…

Original Korean Read in English

비드래프트의 Darwin-27B-ZTC-v5가 체인아이 공개 벤치마크 S1MB에서 1위를 차지하였습니다. 이 모델은 137개의 벤치마크 중 평균 91.16점을 받았으며, 2위는 퍼플렉시티 88.66점, 타입세이프AI의 JEV가 14위로 9.72점 차를 냈습니다. 비드래프트는 이 경기에서 두 모델(1위와 4위)이 상위 5위에 들어간 것으로, 대결을 강력히 주도했습니다. S1MB는 디시전 AI를 평가하기 위한 공개 리더보드로, 어떤 상황과 질문이 주어졌을 때 확률을 숫자로 반환하는 AI 모델의 성능을 비교합니다. 이는 프로그램이 결과를 즉시 조건문에 적용할 수 있게 해주며, 사람들의 미처 생각하지 못한 시스템적 판단을 가능하게 합니다.

Written by urgent.news from Dev.to's reporting — not their text. Machine-written — may contain errors; check the original before relying on it.

Read the original at dev.to →

More in AI

Training Transformers on 'Inference-Only' NPUs: How VKORE Reached 0.9999 Parity

TL;DR: NPUs are sold as inference-only accelerators. VIDRAFT built VKORE, a software acceleration layer that leaves the chip untouched and (1) raises single-user inference 3.8x and server throughput…

  • VKORE software accelerates inference-only NPUs for transformer model training.
  • VKORE achieves 0.9999 numerical parity with PyTorch for LoRA training.
  • VKORE boosts inference speed 3.8x and server throughput 4.1x on eight-card NPU server.

Close the Trace on a Matching Receipt

An agent trace is closed when a local export receipt names the same tool set as the plan. A zero exit code does not close it.

  • Agent trace closes only when plan matches exported tool names
  • Exit code indicates runtime stop, receipt scans all crate IDs
  • Discrepancies between sets reveal exporter or runner issues

Linus Torvalds On Why AI Works For Him

An anonymous reader quotes a report from ZDNet: Many open-source developers still dislike AI. The latest example is System76 banning AI-generated content from its COSMIC desktop.

  • Linus Torvalds enjoys using AI tools in programming.
  • He shifted from negative view to appreciating AI's value.
  • AI aids in creating modern user interfaces and incremental improvements.

More from Tuesday 13 October →