Статті для тих, хто
виводить стек у прод
Оригінальні матеріали про React, Node.js, TypeScript і AI — з тієї ж практики, що й наше операторське ПЗ. Текст статей англійською.
Тег: multilingual
Багатомовний помічник для студентів, який відповідає лише за перевіреними даними
Асистент підтримки студентів на Gemini з оцінкою релевантності під час пошуку та посиланнями на джерела англійською, тамільською й сингальською, а також про те, як він відмовляється вигадувати відповіді, яких бракує.
1591 слівЧитатиТокенізація — це рішення системного дизайну, а не етап передобробки
Як байтовий BPE будує словник, який бачить LLM, чому кількість токенів залежить від мови, які збої це спричиняє і що виміряти, перш ніж звинувачувати модель.
2081 слівЧитатиЧому індійські мови коштують більше токенів у LLM і як лагодять токенізатори
Те саме речення займає 5 токенів англійською і 34 тамільською. Як до цього призводять навчальні дані BPE, що змінюють перебалансування й розмір словника і як працює розширення словника.
1932 слівЧитати
Про ці статті
Оцінка за 24 години
Потрібен такий стек в операторському шарі? Надішліть бриф — оцінка за 24 години.