Інженер від бога

Шановні читачі, звертаюся до вас з проханням закрити збір на ремонт авто для 27-мої окремої артилерійської бригади імені Петра Калнишевського. Авто потребує ремонту та відновлення ходової частини. Машина використовується для потреб служби та пересування…

Шановні читачі, звертаюся до вас з проханням закрити збір на ремонт авто для 27-мої окремої артилерійської бригади імені Петра Калнишевського. Авто потребує ремонту та відновлення ходової частини. Машина використовується для потреб служби та пересування на позиції Будемо всім вдячні 🎯Ціль: 25 000.00 ₴ 🔗Посилання на Банку https://send.monobank.ua/jar/768YampCq8 💳Номер картки Банки 4874 1000 3800 3441 Якщо не можете задонатити, то скиньте цей пост іншим

Панове з Google, вам слід прискіпливіше сумарищувати CoT (токени міркування моделі) своїх моделей. Вже не вперше проривається CoT Gemini 3.1 Pro

Бота в групі коментарів перевів на gemma4 з вимкненим міркуванням. Він буде доступний сьогодні-завтра. Модель розумніша (неочікувано) за Gemma 3 — краще розуміє запит, якісніше використовує вебпошук, відчувається менш людською. Проте системний промпт та налаштування для цього бота на ній не тестував. Щодо планів: свою задачу бот виконав, мені особисто його присутність не заважатиме у випадку перенесення проєкту у хмару (як сайд-навантаження). Тоді ж можна використати потужнішу модель. Проте в планах на найближче майбутнє поки що цього немає. На всяк випадок повторю: це бот-трендун, а не пропрієтарний чатбот.

Вид з камери, закріпленої на кораблі Оріон. На відео момент відділення SRB (твердопаливних прискорювачів) SLS та скидання трьох захисних панелей (Spacecraft Adapter Jettison Fairings), які захищають сонячні панелі європейського сервісного модуля. Source: NASA

Що ж, певний успіх є. Рівно добу бот був доступний і допилювався в критичних моментах. За цей час ви допомогли назбирати трохи інформації, на основі якої я міг поекспериментувати. Основна річ, яка тестувалась і заради якої я затіяв цей невеличкий проєкт — поведінка моделі. Бот працює на Gemma3, а точніше, починаючи з другого десятка запитів до бота — Mamay — дотренованої на українських даних моделі Gemma3-4b. Було цікаво провести цей експеримент якраз через малий розмір моделі, адже налаштувати її на потрібну поведінку є нетривіальною задачею. Також через розмір моделі вона не може проводити якісь розрахунки (окрім простих і в неперевантажених запитах) і поводитись як чат-бот/розробницький інтелект. Взагалі бот і був розрахований на підтримку розмови, а не виконання завдань: "Поводься як аерокосмічний аматор, що спілкується неформальним текстом, підтримуючи розмову та цікавість до теми" На основі ваших з ним взаємодій я покращив налаштування і додав вебпошук, який бот може виконувати при явному проханні про це. Чим точніше питання, тим краще він працює. Загалом поки що бот буде доступний. Явної користі від бота небагато, проте для мене ця робота з приручення малих моделей була корисною.

Друзі, трохи інтерактиву. Грався з ботами і вирішив зробити одного для каналу. Тепер у нас в групі коментарів до каналу з'явився UP_Bot-триндофіл. Його характер — в міру прошарений у тематиці каналу учасник. З ним можна балакати на різні теми; місцями його реакції можуть бути цікавими. Бот працює на основі невеликої локальної моделі, тобто потрібно мати реалістичні очікування щодо його "розуму". Також поки без мультимедіа. Можете також спробувати вгадати що це за модель. Бот відповідає на усі повідомлення по черзі і бачить історію листування лише у вигляді запитв, проте ідентифікувати імена юзерів не може (тому можна самостійно "привчити" його до якогось імені). Оскільки це локальна модель, його останні знання обмежені датасетом, проте функція вебпошуку вже реалізована і в майбутньому я її увімкну. Бот реагує лише на реплаї його ж повідомлень з обмеженням на частоту запитів у 15 секунд. Також він буде не завжди доступними Не соромтесь його мучити!

Вже давненько є проєкт з оптимізації процесу міркування однієї відкритої моделі: вона надто неекономно міркує, але сама модель цікава і є понтенціал до зменшення к-ті токенів міркування для простих задач (які не вимагають багато логіки). Питання вирішую формулюванням системного промпта. Доробив кілька речей і візуалізував результати (кількість токенів для кожного з 7-ми питань і 12-ти промптів). До прикладу, випадок "№1" — це модель без заданого системного промпта. "Питання 2" практично усюди лідирує у вижиранні токенів, бо є відкритим, є задачею на логіку й одночасно сформульовано українською. "Питання 1/4" є простими математичними задачами українською та англійською відповідно. Колись продовжу, бо лишилось якраз найцікавіше — на основі даних про реакцію моделі на різні формулювання та вказівки зібрати остаточний варіант. #LLM

Ой, шось зламалось... А модель то Ministral-3-3B-Instruct-2512 (Instruct — не є думаючою і увімкнути штатний процес міркування неможливо). А тут вона думає... Насправді можна помітити, що це не класичне міркування: модель просто оформлює "чернетку" у класичний блок міркування (відокремлює її та фінальну відповідь). Відверто мені ця відповідь сподобалась більше, ніж без ерзац-міркування — лаконічніша приємніша для читання. Хоча факти плутає в обох випадках. Приклад моделі не дуже, бо куди цікавіше зробити таке з якою-небудь Gemma3. #LLM

Якщо прикинути відстань від точки о 17:20 до приблизно Швейцарії, то вийде ~ 15 хвилин по часу — трансляція SpaceX завершилась трохи раніше, тому точно сказати неможливо. Отже ~ о 17:35 ступінь був там, що ідеально співпадає з часом, а також з напрямом зйомки. Також є відео з міста Sortland (північ Норвегії), на якому цей же ступінь видно о 17:39 (останнє зображення).

Трохи контенту. Підписник з центральної Європи надіслав фото, ймовірно ракети. Спершу подумав, що це щось інше, до того ж сьогоднішній запуск Falcon 9 з місією Twilight відбувся о 15:44 (14:44 CET). Але виявилось, що цього разу корисне навантаження летіло на сонячно-синхронну орбіту, тому стало цікаво. Ця місія була, насправді, цікавою: головним пасажиром була Pandora — апарат для вивчення атмосфери екзопланет. Окрім того летіло ще 38 апаратів, зокрема "BlackCAT" — "мисливець за чорними дірами розміром з коробку для пластівців (6U кубсат). Отже запуст відбувся з Ванденбергу, тобто траєкторія ракети була спрямована на південь. О 17:20 за CET другий ступінь знаходився над центральною Африкою і почав розгортання BlackCAT (ліва частина другого зображення). 9 хвилин до цього ступінь почав проліт над південним узбережжям Африки.

Коли твої великі проєкти починають проявляти емерджентність і стають схожими на LLM-ку, а не на алгоритмічний код:)

"Хайп" пройшов, тому можу висловити певні роздуми щодо «Орєшніка». Тут тільки про технічні питання (а не про те, хто кого хотів залякати і чи доцільно це було). Отже, «Орєшнік» в "неядерному варіанті" прилітав по Україні двічі, і якщо у випадку удару по Південмашу в 24му році все очевидно: бойові блоки (або їх болванки) гарантовано проб'ють дах, перекриття і підлогу приміщень. Себто, якщо ББ влучить в якусь частину приміщення, то він завдасть шкоду на всій "глибині" цього приміщення. Але у випадку атаки на Львівську область удар був спрямований (кудись) і, за деякою інформацією, на підземні газосховища. Отже, є гіпотеза, що якщо звичайною балістичною чи крилатою ракетою можна пошкодити лише "обв'язку" цих сховищ, то «Орєшнік» може добратись до самого сховища... Якщо відкинути саме поняття підземних сховищ газу, адже це не "балон" чи порожнина в землі, а різного роду старі родовища газу/нафти з пористими пластами порід, або інші конфігурації подібних структур, які до того ж розташовуються на глибинах від кількасот (300-400+) метрів до пари кілометрів, і подумати, як глибоко може зануритись боєголовка в землю, то вийде дещо неочевидне (на перший погляд). Загалом відомо, що на термінальній стадії ББ мають швидкість ~ 13 тис. км/год — це приблизно 3.6 км/с. Також, скоріш за все, в ББ додається баласт, аби компенсувати відсутність заряду. Тобто, якщо брати масу корисного навантаження якоїсь РС-24 "Ярс" у ~ 1.2-1.5 тонни, то зважаючи на 36 об'єктів, які досягають землі, їх маса має становити 35-40 кг кожен. Але це неважливо:) Швидкість звуку в породі (в районі, про який йдеться) становить кілька сотень м/с (менше швидкості звуку), а на глибинах самих сховищ мова йде про кілометри/с, але це також неважливо. Отже, на етапі торкання ББ поверхні землі — вході в неї — ББ рухаються з гіперзвуковою швидкістю. Тому для загального розуміння маси чи точні значення швидкостей і є непотрібними. За таких умов ми говоримо не про звичне "проникнення" в землю, а про середовище, яке описується законами гідродинаміки. Фактично, аналогія з пострілом з РПГ в землю тут має місце бути. Щоб оцінити глибину проникнення болванки в ґрунт, можна використовувати т.зв. "формулу Ньютона для глибини проникнення", і вона враховує лише співвідношення густин матеріалу ББ та породи, а також висоти самого ББ. Якщо взяти цифри від балди (окрім густини ґрунту:), то отримаємо глибину занурення — в районі 2 метрів.. Тарас Чмут в одному з інтерв'ю казав, що кратери на Південмаші були в районі кількох метрів в діаметрі (в оригіналі розмір порівнювали з розміром стола в студії), що десь приблизно сходиться з розрахунками. До речі, концепція зброї у вигляді вольфрамових стовпів, які падають з навколоземної орбіти, і працюватиме, адже енергія зіткнення не йде суто на занурення в ґрунт.

Отже перше місце посіла Nanbeige, на другому місці — qwen3:4b-thinking-2507 з незначним відривом, але через оформлення відповіді. Хоча для цієї моделі така поведінка є характерною. Після цього йде найменша думаюча модель в світі — qwen3:0.6b і аж після неї — Gemini 3 Flash (?). Доволі неочікувано, правда? Решта "дрібноти" — якраз ті, що в середньому по 500 МБ розміром (при тому, що gemma3:270m важить всього 240 МБ). Це й не дивно, бо загалом це вже не зовсім їх рівень складності. Хоча трохи дивно чому gemma3:1b аж на передостанньому місці. І звісно, все це виключно для англійської мови. Лінійка gemma3 доволі непогано орієнтується в українській (але "1b" якраз не дуже), а мій фаворит - qwen3:4b-thinking-2507 - від української страшно дуріє і думає по десять хвилин. Тому для роботи з українською моделі треба адаптовувати. #LLM