Інженерні нотатки
Статті для тих, хто
виводить стек у прод
Матеріали про React, Node.js, TypeScript і AI. Перекладений текст показується, якщо він є. Якщо ні — ви бачите англійський текст і примітку про це.
Тег: monitoring
Робота агентів AI AWS у масштабі: токени, витрати, ліміти та автономія
Підрахунок токенів, моніторинг витрат, відновлення після перевищення лімітів контексту та стійкі автономні робочі процеси для агентів AWS, кожен з яких пояснюється за допомогою патернів, відомих розробникам full-stack JavaScript.
8 хв читанняЩо не може бачити LiteLLM: моніторинг роботи GPU під гейтвеєм
LiteLLM відстежує запити та витрати. Очікування у черзі, попереднє заповнення проти декодування, перезапуски контейнерів та навантаження на хост вимагають використання Prometheus, метрик vLLM, cAdvisor та трекінгу.
4 хв читання
FAQ
Про ці статті
Так. Кожен текст — оригінальний англійський рерайт для цього сайту. Структура й код за джерелом; прозу переписано й перевірено на збіги.
Джерело — англійське. Інша мова показується лише якщо є переклад тіла. Порожній переклад лишається англійським, зокрема на локалізованій адресі.
Нові чернетки потрапляють у чергу після редактури. Імпорт на сайт бере лише нові чи змінені slug — без дублів.
Приклади ілюстративні. Перевіряйте стек і ліцензії перед продом. Для впровадження надішліть бриф.
Оцінка за 24 години
Потрібен такий стек в операторському шарі? Надішліть бриф — оцінка за 24 години.