Артыкулы для тых, хто
выводзіць стэк у прод
Матэрыялы пра React, Node.js, TypeScript і AI. Перакладзены тэкст паказваецца, калі ён ёсць. Калі не — вы бачыце англійскі тэкст і пазнаку пра гэта.
Тэг: Benchmarking
RAG чы знанняўскі граф? 2 160 оцэненых адказоў і эфект модэля
RAG проты разліку заеўканняў, выкананага: 2 160 атеставаных адказаў у трох сем’ях модэляў і 120 запытанняў. Пераможцы змінююцца залежна ад модэля, і сам модэль мае найбольшы значэнне.
9 хв чытанняСкількі запыткаў на самае справа можа обрабацаваць сервер Node.js?
Скількіх запитоў насправды може обробіць сервер Node.js? Тесты навантажэння Express на Heroku і AWS у поріванні з Django, оцінка працездатнасці у 40 тыс. запитоў на секунду, а такса, што спам’чвае API.
6 хв чытанняToolCallingAgent проты CodeAgent на локальных моделях Qwen2.5 14B
ToolCallingAgent протыў CodeAgent у smolagents на M4 Mac: шырокасць і точнасць маршрутацыі з вялікімі моделямі Qwen2.5 14B для інструкцый і кодавання пры разных тэмпературах.
4 хв чытанняКалі модель ніколі не завершае роботу: мовчазныя невыпадкі, якія залишаюцца непазначанымі у рэйтингах галюцинацый.
Два пункты контролю, две формы квантавання і два часу виконання булі прыменены на выдуманных назвах: адзін модель застаецца мовчазным прыблізна на калькі хвілін, а рэтельны оценяльнік выявляе тыя балы, якія працяглі залишыцца незафіксаванымі.
11 хв чытанняЧы гэты большыя LoRA адрабо? Ацэніце точнасць па адносу да косту, а не за іншымі факторамі.
Маленький прярок, який обробляе рецепты LoRA як даныя та відображае точність, час навчання, затрягання та пам'ять, тож вибік рейтингування та кількості повторень залежить від цифр.
5 хв чытанняПрактычныя прытамулкі: MTG Bench: Чаму тэставанне LLM-ў на Magic: The Gathering ёсць
Практычныя прытамулкі: MTG Bench – чаму тэставанне LLM-ў у Magic: The Gathering ёсць важным элементам; кантракты, перакрычанні та спецыяльныя слоты для коду для команд, якія викорыстоўваюць гэты патэрн.
11 хв чытанняNode.js протык Go для JSON API: аднаковая працэздатнасць, на 2,6 раза меней памяці
Паралельныя тэсты на навантажэнне ідэентычных служб HTTP на базе Node.js і Go паказваюць, дзе перапісва прыносіць парадоксальныя выгоды (выкарыстоўванне памяці), а дзе — ні (пропускная здатнасць і затрымка).
8 хв чытанняFugu Ultra: Как модель-оркестратор на базе AI кантэнуе GPT і Claude
Пасвячана таму, як Sakana AIのFugu Ultra v2 распрацоўвае задачы за дапамогою спецыялізаваных модэляў у замен на аднаго велікага LLM, а таксі яго пасункі ў співалеўнанні з крэтарыямі, цэнамі та прозрачнасцю.
10 хв чытання
Пра гэтыя артыкулы
Ацэнка за 24 гадзіны
Патрэбны такі стэк у аператарскім слоі? Дашліце брыф — ацэнка за 24 гадзіны.