Hammerill Light Logo

libfpv - FPV дрон в будь-якій грі

23 жовтня 2026 р.

Куку, давненько я не працював над по-справжньому цікавим проєктом. Радий бачити вас тут - схоже, вам справді хочеться дізнатися, як я створив libfpv.

Спойлер: ви можете розчаруватися.

Перш за все мені треба показати, на що здатен libfpv. Ти, ага ти ось, до тебе говорю, давай, зіграй у Маріо 64 прямо тут: завантаж гру (пробіл, пробіл), дочекайся появи Маріо й натисни F7, щоб заспавнити дрон:

Якщо хочете пограти на весь екран, переходьте сюди: https://sm64ex-fpv.hammerill.com

Я також уже показував проєкт на Reddit, ось найперший пост із Super Mario 64:

А ось наступний, із GTA IV:

І нарешті, моє повне проходження SM64, зроблене майже виключно на дроні:

Усе почалося з того, як я зацікавився FPV-симуляторами загалом. Спочатку спеціалізованими симуляторами як ото Liftoff та інших, потім FPV-модами для великих ігор як GTA V. Не розповідатиму, чому мене все це взагалі зацікавило... Просто пропущу це.

Отже, грати в GTA V з FPV-модом було чудово, це ніби заново відкрити для себе гру з зовсім іншого ракурсу. А ще відчуття свободи: класичні FPV-симулятори змушують вас залишатися в межах мапи, а з цим модом я міг облетіти всю карту GTA V, з усіма її будівлями, природою та всім іншим.

Це був неймовірний досвід, і він підштовхнув мене купити справжній FPV-дрон у реальному житті. Сьогодні можна купити найкрихітніші тінівупи, тож я взяв собі Air65 II. Пізніше хочу спаяти свою п'ятірку, але до цього я поки не дійшов (до того ж паяю я жахливо).

Польоти на цій крохотній істоті змусили мене зрозуміти одну річ: граючи з FPV-модом, я повністю пропустив уроки як дрон отой армити. Я просто вимкнув "армування" в налаштуваннях і більше про нього не згадував. А зі справжнім дроном це треба робити постійно, і я провів кілька хвилин з уже забінженим дроном, окулярами та апкою не в змозі злетіти, бо просто не знав, що квад треба армити і як це взагалі робиться... Пишу я це відчуваючи себе дурнем, але я справді був у такій ситуації.

Це був перший раз, що змусив мене усвідомити: мод, у який я граю, оминає речі, які відбуваються в реальному житті. А отже, точно не симулює й багато чого іншого.

Тоді ж я почав налаштовувати OSD свого дрона: рівень батареї тут, рівень сигналу там, ім'я пілота HAMMERILL у самому низу... А ще можливість сховати все це тумблером вимкнення OSD на пульті, бо мені не особливо треба бачити уце все 100% часу.

До речі, про тумблери. На самому початку щоразу, коли мій вуп падав догори дриґом, мені доводилося знімати окуляри й іти перевертати його руками. Потім я побачив, як якийсь мужик в Інстаграмі робить щось чарівне: CRASH FLIP - і дрон перевертається сам. Так я дізнався, що це реальна функція під назвою черепаха або "turtle mode". І знову це штука, яку симулятор мене не навчив.

Увімкнення turtle mode - це дуже технічно: якщо в симуляторі просто тиснеш "фліп", і все, дрон знову летить, то в реальному житті треба дизармити, увімкнути тумблер crash flip, армити з ним (переконавшись, що газ на 0%), штовхнути стік у бік перевороту, дизармити, вимкнути той самий тумблер, армити (знову переконавшись, що газ на 0%) і взлітати. Досі мені не траплявся жоден FPV-симулятор, який змушував би тебе проходити всю цю процедуру, щоб ти звик до неї ще до того, як політаєш на справжньому дроні.

...

Після всього цього мені захотілося ще й засунути FPV-дрон у BeamNG.drive, щоб знімати, а саме - робити це в записі сцени, щоб потім зняти з дрона, як я гоняю боком на машині, дрифтую короче. Я завантажив мод з FPV-дроном і... не розумів, як його заспавнити. Лише пізніше до мене дійшло, що квад - це новий "транспортний засіб", так я його й заспавнив. Налаштував пульт, але не знайшов жодних опцій для налаштування рейтів (мені потрібні мої 533). Нарешті злетів і... Фізика була жахливою, вона працювала зовсім не так, як в інших симуляторах, і зовсім не так, як літає мій вупчик. Це було жахливо: дрон не слухався, не тримав напрямок (в реальному то житті PID якраз і потрібен, щоб дрон був чуйним) і все в такому дусі.

Я навіть не намагався заспавнити його в записі сцени - я б просто не зрозумів, як помістити туди FPV-"транспорт", щоб політати навколо сцени (мод без документації), та й з такою фізикою мені це було просто нецікаво.

Усе це змусило мене зрозуміти, що у "FPV-модів" загалом є дві проблеми, які для мене важливі. Ось вони:

  1. Кожен мод треба робити з нуля для кожної гри. "З нуля" означає, що треба витратити багато часу, підігнати фізику, створити/прикріпити об'єкт дрона до ігрового світу, розробити OSD/рейти/тюнінг... Роботи величезна кількість, і все це доводиться переробляти знову і знову для КОЖНОЇ гри, в якій хочеться FPV-мод.
  2. Як прямий наслідок пункту 1, для конкретної гри вам можуть трапитися FPV-моди з поганою фізикою, поганою інтеграцією з ігровими режимами (наприклад, незрозуміло, як заспавнити квад у записі сцени в BeamNG), поганими або відсутніми OSD/рейтами/тюнінгом... І жоден FPV-мод не намагається бути максимально реалістичним, тож ви не зможете, наприклад, напрацювати м'язову пам'ять для перевороту через черепаху, граючи в нього.

Коротко: моддерам завжди доводиться робити весь FPV-мод з нуля, і він не буде настільки реалістичним, наскільки міг би.

Одного дня мені просто спала на думку ось така ідея: "От би пограти в FPV-симулятор, де дрон просто... крутиться на Betaflight, як справжній дрон, який буквально літає по віртуальному світу, і щоб я міг налаштовувати його через конфігуратор і все таке".

Тоді я ще не знав, що після недовгих пошуків натраплю на pr0p - FPV-симулятор, який робить саме це.

Та більше, ця гра працює на опенсорсному двигуні SimITL, саме він реалізує весь квад з Беткою на борту. І фізика в нього добра, адже він емулює справжню поведінку PID справжнього квадрокоптера (і все, що робить польотний контролер), тож можна відчути, наприклад, справжній "prop wash", або опір повітря.

Кілька місяців тому, коли я побачив усе це, мене це дуже надихнуло, але тоді я нічого з цим не зробив.

...

Ви бачили величезну хвилю людей, які модять ігри за допомогою штучного інтелекту? Я - так, ще й як.

Усе це нагадало мені про те, що люди робили кілька років тому з декомпіляцією Super Mario 64, я говорю про libsm64. Якщо ви не знаєте, що це, - це штука, яка дозволяє вбудувати іграбельного Маріо з цієї гри в абсолютно будь-яку іншу гру.

Тепер складіть ці два факти: є FPV-спільнота, яка хоче модити ігри, додаючи в них FPV-дрони, але для кожної гри це треба робити з нуля; і є libsm64, яка дозволяє грати за Маріо з точно такою самою фізикою, анімаціями, керуванням і поведінкою, як в оригінальній грі, в усіх інших іграх.

Ніхто ж не розробляє Маріо з нуля щоразу, коли роблять мод з libsm64, ні?

То навіщо щоразу розробляти FPV-дрон?

Я знав, що треба робити. Я мав створити libfpv - духовного спадкоємця libsm64, що вбудовує FPV-дрони в ігри так само, як libsm64 робить це з Маріо.

Я знав, що вручну робитиму все надто повільно, тому віддав ШІ всю технічну частину (сумно це казати, враховуючи, що кілька років тому я писав проєкти на C/C++ руками та ігнорував ШІ - так було і з розробкою цього сайту, на якому ви читаєте цю статтю, і зі збиранням ядра Linux з драйверами HDMI CEC для моєї роботи, де я вовтузився з "offset bits", щоб драйвер міг отримати доступ до периферії, прописував це в "device tree", щоб ядро це запам'ятало, і де ШІ був марний, бо просто нічого не знав/не розумів... Але сьогодні мені доводиться переглянути свою позицію й почати користуватися ним усерйоз). Просто ось що таке сьогодні "software dev".

ШІ використовувався навіть на етапі технічного проєктування. Я пояснив ідею Claude, сказав, що хочу, щоб libfpv була заснована на SimITL, попросив його поставити мені уточнювальні технічні питання (наприклад, де крутитиметься логіка Betaflight і хто рахуватиме фізику дрона - гра чи libfpv) і видати мені промпт з повною специфікацією, щоб закинути його у Claude Code для ініціалізації проєкту libfpv.

Claude Code (Opus 5.5) почав збирати проєкт з модулями SimITL, самого Betaflight, Dear ImGui... Потім скомпілював самостійний приклад, який трохи нагадував pr0p, тільки з гіршою графікою та відстойную мапою. Але цього мені вистачило, щоб зрозуміти, що ця штука має потенціал.

Я навіть не казав йому, що має бути в меню ImGui, - він сам зрозумів, що воно буде потрібне для налаштування апаратури й навіть самого дрона, ніби конфігуратор Бетафлайту був недоступний (хоча він був доступний завдяки SimITL; але от у браузерних версіях - ні).

Ще на ранніх етапах розробки я зробив libfpv сумісним з будь-якою ОС: Windows, Linux, macOS. Імовірно, навіть з консолями, але поки не офіційно (у мене є PS Vita, тож дайте знати, якщо хочете, щоб я щось із нею зробив).

Я також попрацював над доведенням інтеграції Бетки. SimITL це робив, але не реалізовував деякі речі як GPS-елементи на OSD і робочої черепахи, а також обробки тумблерів вимкнення OSD / увімкнення airmode... Тепер можу зробити свій власний ідеально "реалістичний" FPV-симулятор, який можу закинути будь-куди!

Після двох годин роботи Claude, коли перша версія libfpv була готова, я попросив його спробувати інтегрувати libfpv у Super Mario 64. Кумедно, адже сам проєкт народився з ідеї libsm64. Зрештою, це гра мого дитинства.

Я змусив його працювати над форком sm64ex, щоб перша інтеграція була не інжектована в гру, а вбудована навпрямки в її сурс код.

Я дав Claude попрацювати... 30 хвилин. За 30 хвилин він зміг видати вже протестовану мінімальну версію.

Він зробив так, щоб дрон взаємодіяв з оточенням, з робочими колізіями та всім іншим, що стосується зв'язки sm64ex <-> libfpv.

Результат був настільки добрий, що я просто мусив запостити це на Reddit. Потім я пішов спати. Було пізно. Зранку мені треба було займатися математикою.

Побачивши, що людям ідея дуже сподобалася, вже наступного вечора я захотів протестувати справжнє впровадження в гру, у велику гру. З усіх цікавих ігор я обрав GTA IV. Не GTA V, бо наявний FPV-мод для неї добрий, і не GTA San Andreas, яку я дуже хотів, бо вона в мене просто не була встановлена.

Я знову дав Claude попрацювати, але цього разу було складніше: спочатку треба підготувати інструменти для модингу, а після години очікування отримуєш першу версію з купою багів. Я її дебажу, змушую свого агента все виправляти... Зрештою за 3 години в мене була ще одна робоча інтеграція libfpv. Тож я мусив запостити на Reddit і її!

Якщо я витратив 3 болісні години на дебаг, чи можна це досі називати вайб-кодингом? 🤔

Згідно з Вікіпедією - так, враховуючи, що я лише тестував отриманий код і спрямовував свого агента, щоб той його виправляв, не вичитуючи його повністю. Який сором 🙈

Після GTA IV я нарешті зрозумів, що libfpv має майбутнє і що я маю переконатися, що це саме те майбутнє, яке нам потрібне. Замість того щоб пробувати інші ігри, я почав покращувати саме ядро libfpv і переробляти фізику, бо отримав щодо цього відгуки. Усе для того, щоб libfpv (і його інтеграція в SM64) відчувалася менш "плаваючою" і менш млявою.

Інтеграції, які я хочу зробити пізніше, - це, звісно, GTA San Andreas і BeamNG.drive, ігри, про які я вже згадував. Будуть і інші, я впевнений.

А ще разом з libfpv готується інший секретний проєкт, ви дізнаєтесь 😉