AI benchmarks

Ανθρώπινο χέρι και ρομποτικός βραχίονας λύνουν χωρικό παζλ για τεστ νοημοσύνης AI

Τα τεστ που μπερδεύουν την AI: τι αποκαλύπτουν για την πραγματική της νοημοσύνη

Τα τεστ νοημοσύνης AI αποκαλύπτουν πότε ένα μοντέλο γενικεύει, πότε βασίζεται σε shortcuts και πώς μια επιχείρηση μπορεί να το αξιολογήσει με πραγματικά workflows.

Прочетете повечеΤα τεστ που μπερδεύουν την AI: τι αποκαλύπτουν για την πραγματική της νοημοσύνη
Επιστήμονας ελέγχει αυτοματοποιημένη προσαρμογή εργαστηριακού πρωτοκόλλου με AI

BenchBench-Protocol: πόσο καλά προσαρμόζουν τα AI τα πραγματικά εργαστηριακά πρωτόκολλα

Το BenchBench-Protocol μετατρέπει 149 πραγματικές αλλαγές πρωτοκόλλων σε benchmark και δείχνει τι χρειάζονται τα αξιόπιστα AI evals για επιχειρήσεις.

Прочетете повечеBenchBench-Protocol: πόσο καλά προσαρμόζουν τα AI τα πραγματικά εργαστηριακά πρωτόκολλα
Разбиране на видео с помощта на изкуствен интелект въз основа на хронологична поредица от сцени и звуков контекст

Защо изкуственият интелект гледа филм, но не улавя сюжета

CHNB показва, че звукът, времевата последователност и връзките между сцените са по-важни от повечето отделни кадри за разбирането на видеото от изкуствения интелект.

Прочетете повечеЗащо изкуственият интелект гледа филм, но не улавя сюжета
Ερευνητής συγκρίνει διαφορετικές διαμορφώσεις για αξιόπιστο AI benchmark harness

Δεν υπάρχει ουδέτερο AI benchmark: πώς το harness αλλάζει τον νικητή

Νέα μελέτη δείχνει ότι 26 έγκυρα evaluation harnesses μπορούν να αλλάξουν δραστικά τα scores και τον νικητή ενός LLM leaderboard. Τι σημαίνει για τις επιχειρήσεις.

Прочетете повечеΔεν υπάρχει ουδέτερο AI benchmark: πώς το harness αλλάζει τον νικητή
Επιστημονική ομάδα ελέγχει παραδοτέα από AI agent

K-Bench: γιατί η καλή απάντηση ενός AI agent δεν σημαίνει σωστή δουλειά

Το K-Bench δείχνει γιατί η αξιολόγηση AI agents πρέπει να ελέγχει ακρίβεια, artifacts και overclaiming — όχι μόνο μια πειστική απάντηση.

Прочетете повечеK-Bench: γιατί η καλή απάντηση ενός AI agent δεν σημαίνει σωστή δουλειά
Контролирана оценка на модели с изкуствен интелект в професионална тестова кухня

FlavourBench: какво ни учи една кухня за надеждното оценяване на изкуствения интелект

FlavourBench показва как плътните карти на възнагражденията, общите задачи и проверките за несигурност правят оценяването на моделите за изкуствен интелект по-контролируемо и полезно.

Прочетете повечеFlavourBench: какво ни учи една кухня за надеждното оценяване на изкуствения интелект
Екип тества специализацията „Медицинска изкуствена интелигентност“ в компютърна лаборатория
Μηχανικοί διαχειρίζονται ελεγχόμενη μνήμη AI agents σε υποδομή server