Нейрожелілер рейтингін қалай санаймыз

Баллға не кіреді

Балл үш бөліктен жиналады: модельдің қабілеті (негізгі салмақ), сенімділік және жауап жылдамдығы. Қабілет қорытындының көп бөлігін шешеді, сенімділік пен жылдамдық бағаны нақтылайды. Әр бөлік ортақ шкалаға келтіріледі, ал қорытынды ағымдағы көшбасшыға нормаланады, сондықтан «10» — бүгінгі ең күшті модельге бағдар, абсолютті шек емес.

Қабілетті қалай бағалаймыз

Қабілетті тәуелсіз ашық бенчмарктармен (жалпы білім, бағдарламалау, пайымдау) және нақты сұрақтардағы өз прогондарымызбен бағалаймыз. Сыртқа өзіміздің 0–10 жиынтық бағамызды береміз, сыртқы бенчмарктардың шикі сандарын емес — бұл адалырақ.

Сенімділік пен жылдамдық — біздің өлшеулерден

Сенімділік пен жылдамдық соңғы 30 күндегі телеметриямыздан алынады: сәтті жауаптар үлесі және жауаптың медиандық уақыты. Жеткілікті өлшеуі жоқ модель қалғандар бойынша медиандық мәнді алады — әйтпесе жұмыс істеп тұрған флагмандар нақты сандармен жазаланар еді.

Баға мен контекст

Бағаны және контекст көлемін OpenRouter ашық каталогынан аламыз. Беттердегі «сұрақ бағасы ≈N ₸» — орташа профиль бойынша иллюстрация; нақты шот осы бағамен емес, жұмсалған токендер бойынша саналады.

Қаншалықты жиі жаңарады

Бағалар, қолжетімділік және қабілет бағалары әр сағат сайын автоматты түрде тартылады. «Максимум» мен «Эконом» құрамдары жаңа балл бойынша қайта жиналады, сондықтан модельдер орны мен беттердегі сандар қолмен араласпай өзгереді.

Балл нені алмастырмайды

Балл модельдерді ортақ тапсырмаларда салыстырады — көшбасшы дәл сіздің сұрағыңызда ең жақсы болатынына кепілдік бермейді. Маңызды шешімдерде (ақша, денсаулық, құқық) кез келген нейрожелінің бір жауабын қайта тексерген жөн. КьюВи дәл осылай істейді: сұрақты бірнеше күшті модельге қояды және олардың қай жерде келісетінін көрсетеді.