FPV, современный смартфон и "нереальная виртуальность"

Портос

Сразу скажу, что окончательная идея не оформилась, пока как есть сумбурные наброски, так и их выкладываю.

1. Началось всё с того, что решил вместо носимого монитора купить удобный “намордник”, вроде этого - Quanum DIY FPV Goggle V2 w/5 inch LCD Monitor (Kit)

Разрешение штатного TFT-монитора на 5" составляет 800x480, что для подобных намордников считается неплохо.
И уже чуть было не купил эту радость…

2. …Но столь отдаленные ассоциации напомнили, что современные смарфоны своей матрицей побивают этот допотопный монитор одной левой.
Например, X iaomi Redmi Note 3 имеет 1920 X 1080 - с 800x480 даже не сравнить.

Эх, если бы у него еще был AV-вход… Но не все так плохо.

3. И наконец, вспомнился последний писк фанатов виртуальной реальности VR - недорогие шлемы вроде Xiaozhai BOBOVR Z4 -

Это были исходные данные для размышлений.
Просьба пока с комментами не влазить.
Продолжение следует.

X3_Shim

Av вход еще должен быть правильный, без синьки. А еще не плохо вообще hd сигнал иметь.

Портос

Так вот, кратко напомню, как работает этот шлем виртуальной реальности: в него вставляется приличный смартфон, т.е. в высоким разрешением и наличием гироскопа и акселерометра для реализации виртуальных эффектов, из з всего этого нас интересует первая характеристика
На смартфон подается 3D-видео, состоящее из двух независимых вертикальных половинок, например -

а виртуальный шлем за счет высококачественных полноценных линз (а не дешевого Френеля, как в FPV-намордниках) доносит каждую картинку до своего глаза, за счет чего и получается стереоэффект (подробнее о VR можно ознакомится на 4pda).

Первое, что сходу можно позаимствовать из этой VR-технологии - получение 3D-FPV (о преимуществах его распространяться думаю, нет смысла).
Причем, VR предлагает нам для этого главное - высококачественный экран и оптику.
И хотя не решен вопрос подачи видеосигнала на смартфон, где-то встречались адаптеры, преобразующие 5,8 GHz в 2,4 WiFi.
Также нужен видеопередатчик, передающий два видеоканала, левый и правый, и их приемник.
Конечно, задержка по WiFi при слабом смарте будет изрядная, и для “акробатов” это не подойдет.

Также можно пока ограничится моно видеоприемом, но гораздо лучшего качества, чем предлагают типовые FPV-намордники, для этого надо думать, как для этого настроить VR-оптику, может зеркала какие-то надо будет.

В-общем, поле деятельности FPV+VR широкое, есть на чем подумать.

В заключение отмечу, что стереосъемка не стоит на месте, уже продается полно компактных стереокамер, предназначенных именно для этого, например, BlackBird 2 и многие другие:

Баян все это или нет, не знаю, но донести до вас счел нужным. Так, хотя бы на всякий случай.

Портос

Кстати, сам пристальнее присмотрелся к этой BlackBird 2, и вот что узнал: оказывается, ничего с двухканальным передатчиком - все украдено придумано до нас! 😁
Т.е. - никакой двухканальной передачи мудрить не требуется, все передается по одному каналу!
Если правильно понял, то с этой или подобной ей камерой колхозить ничего не требуется - покупается подобная камера, шлем VR, смартфон - и можно наслаждаться настоящим 3D FPV-полетом! 😃

Возможности The BlackBird 2:

Беспроводная передача стереоизображения с помощью одного видеопередатчика (один видео канал);

  • 3D SIDE BY SIDE очень популярный стерео формат видео, поддерживается многими устройствами: стерео видео очки, 3D телевизоры и т.д.;
  • 3D SIDE BY SIDE CROP 16:9 – специальный 3D видео формат, для стерео видеошлемов типа Oculus Rift, либо других шлемов построенных на одном дисплее;
  • 3D SIDE BY SIDE CROP manual – ручная настройка CROP режима;
  • INTERLACED 3D – удобный стерео формат видео для работы со сторонними OSD модулями;
  • Моно видео режим;
  • Двухканальный 3D видео режим - позволяет получить максимальное качество стереоизображения;
  • Подключаемые модули;
  • Питание от 5В до 15В и потребление до 150 мА;

Линк на использование BB2 не даю, а то сочтут за рекламу, сами легко найдете.
Надеюсь, что вы еще лучше разберетесь в этом квази ноухау.

Rover

Находясь в плену эйфории, вы забываете про очень важный параметр - полную задержку сигнала в канале. А очень зря.
Ибо пилотировать по фпв с задержкой, которая переваливает за 0,3с крайне некомфортно. И все эти идеи с использованием смартфона в качестве монитора -
это велосипед, который изобретается всё новыми энтузиастами с завидной регулярностью. Вы бы хоть почитали про это побольше. Разрешение, частота… в итоге народ натыкается на задержки оцифровки, которые напрочь убивают кайф от пилотирования по фпв. Вот где проблема на самом деле. Обработка картинки софтом имеет вполне конечную скорость. Простое решение с изикапом вообще дает задержку почти в секунду, и при этом еще не каждый чипсет смартфона его тянет.

Портос:

И хотя не решен вопрос подачи видеосигнала на смартфон…

Решен давным-давно. Гуглите EasyCAP. Даже в режиме моно канала задержки просто лютые. Летать невозможно.

Портос
Rover:

вы забываете про очень важный параметр - полную задержку сигнала в канале

Вы внимательно читали? Тогда для это для кого писалось?

Портос:

Конечно, задержка по WiFi при слабом смарте будет изрядная, и для “акробатов” это не подойдет

Про ваши Изикапы прекрасно наслышан, поэтому предлагал совсем другое.
Вот, нашел специально для вас - 2.4G FPV WiFi Transmitter / A/V to WiFi Conversion Module 802W
ru.aliexpress.com/item/…/32677224200.html

По идее, оно не вносит задержку совсем, потому что не занимается преобразованием в видео, а только переносит спектр.

Rover
Портос:

По идее, оно не вносит задержку совсем, потому что не занимается преобразованием в видео, а только переносит спектр.

Какой спектр? Откуда и куда переносит? Наверное вам просто сильно хочется, чтобы так было:)😃
Ему тупо на вход подают аналоговое VGA видео, оно его оцифровывает и про протоколу 802.11b гонит через вайфай в андроидный гаджет. Это устройство для передачи видео с уличных камер наблюдения по радиоканалу на SmartTV. И ничего более.
Вам даже такой очевидный фрагмент описания ничего не говорит:
Видео resulutions: VGA
Сжатие видео: H.264

Сжатие видео по H.264 на дохлой хреновинке. Всё. В морг. Народ пробовал его подключать к выходу обычного видеоприемника канала 5.8ГГц. По отзывам, тормоз полный. Я даже пробовать покупать не стал, начитавшись.
И это мы еще не говорим про стек TCP/IP, про восстановление пакетов, про софтовую обработку полученного потока в смартфоне.

Портос:

Конечно, задержка по WiFi при слабом смарте будет изрядная, и для “акробатов” это не подойдет

Скажу прямо: херня полная даже на топовом андроидном смарте. На айфоне не пробовал.
Это не подходит не только для “акробатов”, это не подходит для полетов вообще. Даже для плавных и тягучих. Дискомфорт ужасный, и напомню, через эфир - качество VGA. Наличие экрана HD само по себе в данном случае не значит ни-че-го. Потому что нет доступного по цене HD канала передачи без тормозов на всём протяжении канала от матрицы камеры до матрицы монитора. Даже обычный 5-дюймовый монитор и то вносит задержку сам по себе. И камеры вносят задержку, если брать аналоговый сигнал, а не сырой цифровой поток. В ряде дискуссий народ в основном сошелся во мнении, что при задержке порядка 0,3 секунды уже ощутимо дискомфортно даже на обычном большом коптере.

Вот неужели вы не понимаете очевидной вещи: то, что вы придумали, уже давно испробовано и обмусолено на форумах 4PDA, rcgroups, на этом форуме тоже? Очень жаль, но у вас ничего нового. Совсем ничего…

X3_Shim
Портос:

По идее, оно не вносит задержку совсем, потому что не занимается преобразованием в видео, а только переносит спектр.

А я уж думал тут что приличное родится… Ан нет, влажные мечты опять.

Rover:

И это мы еще не говорим про стек TCP/IP, про восстановление пакетов, про софтовую обработку полученного потока в смартфоне.

Это уже бисер.

Портос
Rover:

Наверное вам просто сильно хочется, чтобы так было

Да, вы правы, мне очень хочется, чтобы из этого винегрета получился замечательный компот 😉
Хотя я прекрасно наслышан, то готовые решения с WiFi (например, та же Syma X8W) не стоят выеденного яйца из-за малой дальности и низкой помехоустойчивости ввиду совпадения частот, огромной задержки, но все же надеюсь, что со временем на стыке этих технологий получится что-то стоящее.

Olegos

2Портос:

  1. Данный намордник я видел, выглядит отвратительно, но лёгкий и удобный (очень понравилось). По картинке скажу что пиксилизация на грани восприятия.
  2. Я бы не стал, они все без NoBlueScreen, а это очень важно.
  3. Про BlackBird2 могу сказать что камера очень крута, и оно того стоит. Кактинка может передаваться в различных стандартах/форматах, а может и раздельно, и это её большой плюс. Как пользователь очень доволен, это надо видеть.
3 months later
Alick_now

Ребят, с устройством easycap и стерео камерой все отлично работает на vr box с андроидом!!! Качество приемлемое…

5 months later
macrokernel

А вот такое кто-нибудь пробовал: ru.aliexpress.com/item/…/32789085923.html?

Набор состоит из VR-шлема для смартфона и аналогового 5.8G FPV приёмника с интегрированным конвертером UVC. Заявленная задержка 0.1с. Разрешение нигде не указывается, но у аналогичного UVC приёмника другого производителя заявлено 640x480.

4 months later
Blond055

Необходимо оживить тему! Неужели еще никто не испробовал новинку выше? Китайцы заявляют о малой задержке (см.фото)

Видео теперь уже передается по 5.8 ГГц аналоговое и преобразуется уже в смартфоне. Об HD или даже AV ясно дело думать рано. Но вот если использовать преобразователь на камере такой ru.aliexpress.com/item/…/32544373101.html

Получим уже AV!
Поправьте если ошибаюсь, может все уже додумано до нас))

macrokernel

Аналоговый AV выход есть на этой плате, достаточно снять термоусадку и подпаяться.

Качество картинки, записанной с этого приёмника программой FPViewer, несколько уступает записи с очков Fatshark Dominator HD.

Blond055

Такую систему стоит рассматривать как бюджетный вариант, для тех кто хочет попробовать FPV, так как фатшарки стоят как чугунный мост. А с каким разрешением пишут фатшарки?