Русский
Русский
English
Статистика
Реклама

Потоковое видео

Нетфликс и искусственный интеллект

09.10.2020 12:10:51 | Автор: admin
На одной из презентаций технического отдела Netflix представительница компании показала публике вот такой экран по ее утверждению, это инструмент для продюсеров, который призван помогать тем принимать правильные решения на этапе предпроизводства. Вложить ли деньги в известных актеров, поменять ли стилистическую направленность и тут же узнать, как и с какой вероятностью это скажется на сборах.



Любой, кто имеет хотя бы отдаленное представление о производстве кино, уже сейчас может смеяться. После череды скандалов под флагом #metoo, в ходе которых продолжает вскрываться глубоко коррумпированное устройство Голливуда и прилегающих пространств, сложно принять всерьез рассказы в духе Стар Трека о переливающихся инструментах для бюджетирования. Рассказы эти, к тому же, напрочь лишены конкретики Нетфликс известен своим нежеланием раскрывать реальные рейтинги своих продуктов, поэтому подсказывать художественные решения их производителям с таким же успехом может шестигранный кубик. Что, конечно, не означает, что работа в этом направлении не ведется. Более того, не только Нетфликс и другие гиганты, но и небольшие компании пытаются выстраивать свою бизнес-модель на машинных предсказаниях.



В общих чертах процесс устроен следующим образом специально нанятые люди просматривают большое количество популярных и случайных фильмов и сериалов, отмечая их многочисленные особенности снят женщиной, длится 98 минут, физического насилия нет, звезд нет, бюджет такой-то, сборы такие-то, действие происходит в Нью-Йорке (и далее насколько позволяет фантазия непосредственных исполнителей и их менеджеров). Параллельно с этим анализируются всевозможные открытые источники структурированной информации вроде IMDB и в целом интернет на предмет зрительских отзывов, ключевых слов и других связей с внешним миром. Дальше в дело вступают алгоритмы, специфичные для конкретных задач, но, если упрощать, то современное машинное обучение в этой области все больше сводится к решению задачи продолжения последовательности. Что нужно сделать, когда уже сделано одно, другое и третье. Самым очевидным примером такой задачи можно считать генерацию текста, а самым перспективным на данный момент решением модель GPT-3, способную учитывать более 170 миллиардов параметров. Последняя цифра, конечно, звучит слегка комично математический контекст и современные модели человеческого мозга накладывают свои стандарты, но речь в числе прочего идет о том, чтобы кто-то на потеху публике поскользнулся на банановой кожуре. В теории это, конечно, способ писать сценарии автоматически, а также автоматически их снимать (и смотреть). На практике кино по-прежнему пишут и снимают люди, но, если говорить о Нетфликсе, часть традиционно человеческих художественных задач машины все же решают. По утверждениям сотрудников компании, искусственный интеллект используется для создания трейлеров, постеров, а также на некоторых стадиях монтажа. Если возвращаться к вопросам предпроизводства и думам продюсеров, то Нетфликс утверждает, что в их распоряжении есть инструменты для поиска локаций для съемок, а также формирования съемочных групп, исходя из графиков занятости тех или иных людей. Стоит, впрочем, учитывать, что продюсер контента для Нетфликса, если он сумел таковым стать, и без специальных инструментов имеет огромное количество привилегий расписания актеров и осветителей хоть и серьезная вещь, но все же способная подстроиться под нужды людей с деньгами и выходом на большую аудиторию.



И все же главная гордость Нетфликса как технологической компании сегодня это система рекомендаций. Есть сообщения о том, что благодаря тому, как фильмы и сериалы соединяются с потенциальной аудиторией, процент коммерчески успешных проектов Нетфликса составляет 80% то есть, 4 из 5 снятых благодаря компании фильмов и сериалов отбивают затраты. оставим подробности о том, как и возможно ли вообще доказать это при оплате за подписку на весь каталог, интереснее тут другое. А именно, как эти рекомендации устроены. В общем и целом, новизны относительно деятельности, скажем, палатки с видеокассетами из 90-х, тут быть не может. Вопрос лишь в том, как глубоко мы готовы погружаться. Не нужно много ума и машинной мощи, чтобы поместить на главную страницу сериал Друзья, но ни одна компания, когда-либо транслировавшая Друзей до Нетфликса не оценивалась в 26 миллиардов долларов. Шутка ли, в марте компания была вынуждена снизить пропускную способность своих европейских каналов на 25%, чтобы интернет не сломался. При всем возможном скепсисе к тому, на чем компания строит свой публичный образ, сложно отрицать очевидное огромное количество людей не просто смотрит сериалы, а смотрит конкретно Нетфликс.



Ключевая концепция для Нетфликса (и, конечно, многих других) в смысле организации бизнеса поведение пользователя. Если немного подумать о том, что такое поведение человека, который смотрит интернет-телевидение, в воображении всплывает довольно простой набор действий зайти на сайт, пролистать главную страницу, куда-то щелкнуть, вернуться назад, что-то выбрать, что-то посмотреть, когда-то остановиться, продлить или отменить подписку и так далее. Конечно, все эти и многие другие действия отслеживаются и анализируются. А будучи наложенными на вкратце описанный выше массив всевозможных тегов, которыми размечены фильмы и сериалы, они превращаются в беспрецедентную по масштабам коллекцию данных о том, кто и как смотрит продукцию Нетфликса. И на основе этой базы круглосуточно происходит изобретение следующих действий компании. Все, от лицензирования контента до того, как он показывается на телефоне зрителя так или иначе связано с этими данными. Поскольку данных становится все больше, а алгоритмы обращения с ними совершенствуются, сценарий, при котором даже на нашем веку задача производства фильма может быть полностью возложена на мир роботов, не кажется недостижимым. И именно эта, пусть и условная (что это вообще будут за фильмы?) реалистичность и обеспечивает непрерывный рост всех показателей Нетфликса как бизнеса. Однако есть и бесчисленное множество сдерживающих факторов, из которых мне бы хотелось подробно остановиться на одном сопротивлении материала.

В последние годы ни один разговор о судьбе видео в интернете не может обойтись без упоминания социальной сети TikTok. Короткие видео со всего света крутятся на невероятных скоростях и невероятном количестве смартфонов (речь чуть ли о миллиарде) по велению, казалось бы, все тех же алгоритмов. Но Тикток (а в этом смысле можно говорить и о YouTube) это не только миллиард пользователей, но и примерно столько же видео. Причем видео настолько коротких, что впору говорить о попытках за их счет даже не захватить внимание, а непосредственно включать конкретные нейроны в мозге зрителя. Но поскольку зритель в данном случае почти равно создатель, то есть продюсер, гораздо более прозрачны в его случае аналитические инструменты, а по факту их эфемерность. Да, теги, да, количество просмотров и подобные цифры вкупе с демографическими данными о зрителях все это можно применять и строить свою тикток-империю, но по большому счету тикток остается слишком быстро крутящейся каруселью образов, чтобы о каком-то бизнес-подходе было интересно рассуждать. Тикток таким образом оказывается в первую очередь доказательством возможности простроить связи между миллионами людей, попутно их развлекая или оповещая о чем-то важном. И по сути это ничем не отличается от того, чем занимается тот же Нетфликс. Кроме одного Нетфликс показывает кино и сериалы, а это вещи слишком глубоко укорененные в драматических структурах и скоростях прошлого. Пока Аль Пачино пройдет от столика в ресторане до туалета, можно посмотреть 4 тиктока.



Те несколько тысяч фильмов и сериалов, имеющихся в каждый момент на Нетфликсе, не могут обеспечить такую же модель потребления, как Тикток или даже Youtube. Во-первых, сериалы, даже самые короткие все-таки не продукт определенной платформы, закрепленной за брендом. В то же время короткие видео, производимые и загружаемые обычными пользователями все равно что шахматные партии или, чаще, отдельные ходы в них то есть, случаи в особом мире, пусть даже этот мир уравнивает в правах спящих котов и спорящих друг с другом политиков. Тикток, конечно, не появился бы без долгих лет съемки видео на мобильные телефоны, но то, чем сегодня заполнена эта соцсеть это в первую очередь продукты желания создать видео для Тиктока, лишь при специальном угле зрения способные перерасти изначальный контекст. С Нетфликсом все иначе. Сериал Черное зеркало не может быть равен Крестному отцу не потому что одно произведение лучше другого, а потому что они банально слишком длинны, чтобы не растерять формальной связи друг с другом к финальным титрам. Нетфликс, безусловно, метит в статус удобства в бытовом смысле: в доме есть горячая вода и Нетфликс. Но горячая вода, будем честны, вещь несколько более простая. Десятки и сотни актеров, декораций, проездов камеры, перекличек с окружающей действительностью и хотя бы даже возникающих про просмотре ассоциаций все это вместе не производит эффекта, сравнимого с горячей водой по однозначности. Секрет, который производители контента охраняют лучше всего звучит так если посмотреть все сериалы на свете не будет ровным счетом ничего. И да, возможно, 18 лет назад можно было по выражению лица узнать, смотрел человек вчерашнюю серию Бригады или нет, но в ситуации сверх-персонализированной матрицы интернет-услуг на утро можно надеяться лишь на способность примерно понять, сколько часов человек спал. Поэтому и возможность представить себе ситуацию существования автоматического кино можно приравнять к возможности вообще ничего не представлять да и победа машин гораздо быстрее произойдет через тикток.

Эта логика, конечно, дает сбои, если воспринимать Нетфликс как машину по производству частностей например, если человек достиг такого уровня организации своей жизни, при котором из телевидения ему необходима только одна серия относительно неплохого комедийного сериала в день, тогда проще уже сейчас заложить Нетфликс в бюджет на всю жизнь. Но если посмотреть на политику Нетфликса или хотя бы его главную страницу, становится очевидно, что компания делает ставку в первую очередь на человека, которому хотелось бы делать выбор отсюда все эксперименты с формированием категорий, тамбнейлов, трейлеров и прочих средств самовыражения в достаточно примитивной модели свободного рынка, созданной при помощи новейших технологий. Объекты каталога Нетфликса находятся в бесконечной конкуренции друг с другом и в целом это все, что нужно знать об устройстве этой платформы точно так же, как и об устройстве многих других.



Да, строго говоря, сериалы не делают человека ни чище, ни умнее, поэтому и производиться они, раз уж в принципе так популярны, должны максимально непыльным образом. Однако умнее и чище человека может сделать принадлежность к определенному сообществу и, если угодно, мораль и тут, на правах культурного продукта, сериалам безусловно есть что сказать в первую очередь потому что есть что сказать их создателям. Уникальность текущей ситуации в том, что этот разговор невероятно ускорился и вырос в масштабах. Но, как мы можем видеть по сравнению с Тиктоком, Нетфликс может не справиться именно с возрастающей скоростью но кто знает, может с ней перестанут справляться и зрители, а проход к тому времени забытого актера из одной части ресторана в другую станет тем, что удержит мир на скорости, комфортной для существования.



Подробнее..

Запускаем свой RTMP сервер для стриминга

15.01.2021 10:11:34 | Автор: admin


Иногда YouTube или Twitch не подходят как стриминговая платформа скажем, если вы пилите портал с вебинарами или контентом 18+, нарушаете авторские права или хотите максимально отгородить свою трансляцию от остального интернета. У них есть много альтернатив как в виде сервисов (те же минусы, недостаток контроля и непредсказуемая политика), так и в виде self-hosted решений. Проблема опенсорсных стриминговых проектов в том, что все они начинаются с крохотной связки из пары технологий, а затем отчаянно пытаются вырасти в сервис, добавляя сложные веб-интерфейсы, чаты, библиотеки стримов и в конечном счёте отдаляясь от исходной цели: дать миру инструмент, который по понятному мануалу позволит запустить свой сервер трансляций. Что с ним будет дальше, в какие системы будет встроена эта картинка это только ваше личное дело, а самописный аналог твича с лагающими и отваливающимися сервисами и периодически валящимся билдом не нужен никому, кроме его разработчиков. Поэтому в этой статье мы разберём минимальную цепочку действий для запуска своего RTMP-сервера с плеером.

Структура




Здесь всё просто: за приём и кодировку потока из OBS отвечает RTMP модуль Nginx'a. Сконвертированный поток он выставляет наружу, где его подбирает HLS (HTTP Live Streaming) клиент в браузере и выдаёт уже готовую картинку в плеере.

Установка


При выборе сервера упор стоит обратить внимание на процессор. Я взял эпичный сервер с двумя ядрами и пробовал наращивать битрейт, чтобы определить граничные условия на 11-12k нагрузка стала болтаться в районе 96-100%, так что для обработки действительно тяжёлого потока лучше взять мощности с запасом:



Нам понадобится Docker для установки контейнеризованного nginx-rtmp с FFmpeg и любой веб-сервер (включая тот же Nginx) для раздачи страницы с плеером. Я ставил на Ubuntu 20.04:

$ sudo apt-get update$ sudo apt-get install \  apt-transport-https \  ca-certificates \  curl \  gnupg-agent \  software-properties-common \  nginx$ curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo apt-key add -$ sudo apt-key fingerprint 0EBFCD88$ sudo add-apt-repository \  "deb [arch=amd64] https://download.docker.com/linux/ubuntu \  $(lsb_release -cs) \  stable"$ sudo apt-get update$ sudo apt-get install docker-ce docker-ce-cli containerd.io


Запускаем контейнер c проброшенными портами:

docker run -d -p 1935:1935 -p 8080:80 --rm alfg/nginx-rtmp


Затем в OBS на клиенте указываем наш сервер с произвольным ключом потока (ключ = индентификатор стрима):



Теперь можно запустить трансляцию и удостовериться что поток пошёл, например, в демке hls.js или в любом другом плеере HLS.

Осталось настроить сервер. В nginx.conf укажите путь до вашей страницы:

location / {                                                      root /var/www/;                                                    index index.htm index.html;                                   autoindex on;                                }


sudo nginx -s reload


В index.html просто скопипастим код из примера hls.js:

  <script src="http://personeltest.ru/aways/cdn.jsdelivr.net/npm/hls.js@latest"></script>  <!-- Or if you want a more recent alpha version -->  <!-- <script src="http://personeltest.ru/aways/cdn.jsdelivr.net/npm/hls.js@alpha"></script> -->  <video id="video"></video>  <script>    var video = document.getElementById('video');    var videoSrc = 'https://test-streams.mux.dev/x36xhzz/x36xhzz.m3u8';    if (Hls.isSupported()) {      var hls = new Hls();      hls.loadSource(videoSrc);      hls.attachMedia(video);      hls.on(Hls.Events.MANIFEST_PARSED, function() {        video.play();      });    }    // hls.js is not supported on platforms that do not have Media Source    // Extensions (MSE) enabled.    //    // When the browser has built-in HLS support (check using `canPlayType`),    // we can provide an HLS manifest (i.e. .m3u8 URL) directly to the video    // element through the `src` property. This is using the built-in support    // of the plain video element, without using hls.js.    //    // Note: it would be more normal to wait on the 'canplay' event below however    // on Safari (where you are most likely to find built-in HLS support) the    // video.src URL must be on the user-driven white-list before a 'canplay'    // event will be emitted; the last video event that can be reliably    // listened-for when the URL is not on the white-list is 'loadedmetadata'.    else if (video.canPlayType('application/vnd.apple.mpegurl')) {      video.src = videoSrc;      video.addEventListener('loadedmetadata', function() {        video.play();      });    }  </script>


Теперь на 8080 порту нашего сервера раздаётся жутковатый мультик про зайца:



Остаётся только изменить путь на http://server_ip:8080/live/stream-key.m3u8 и идти смотреть трансляцию!



Нагрузку в реальном времени можно проверять командой docker stats:



Заключение


Размещая стриминговый клиент на своём сервере важно помнить, что весь трафик со всех зрителей будет проходить прямо через него значит, если одновременный онлайн у вас будет больше 1-2 человек, стоит изучать способы распределения нагрузки (ведь транскодирвоание ощутимо давит и на CPU). Для запуска полноценного кластера есть энтерпрайзное (но опенсорсное) решение SRS aka Simple Realtime Server (GitHub, 10k звёзд, огромная вики, сложная архитектура). В него стоит вникать, если вам стримы нужны для решения настоящих задач, а не чтобы поиграться с приватным видеопотоком.



На правах рекламы


Серверы в аренду для любых задач это про наши эпичные! Все серверы защищены от DDoS-атак, автоматическая установка множества ОС или использование своего образа ISO. Лучше один раз попробовать!

Подробнее..

Как я монетизировал гнездо аистов

26.05.2021 10:15:20 | Автор: admin

Как возникла идея проекта

Аисты жили в нашей деревне давно. Пока работал, было не до них. Просто любовался красивыми птицами и все.

Фото 2012 из семейного архива ДмитрийФото 2012 из семейного архива Дмитрий

Как инженеру-экспериментатору всегда хотелось заглянуть в гнездо и увидеть подробности. Сколько там яиц, как появляется аистенок, чем их кормят. Логично, что надо установить видеонаблюдение. Времени для этого не было, знаний тоже и это откладывалось из года в год.

И только с выходом на пенсию появилось время для реализации этой идеи.

Было решено закрепить камеру наблюдения над гнездом и вывести сигнал на видеорегистратор.

Был сварен Z-образный кронштейн и аналоговая камера в апреле месяце 2020 стала фиксировать все, что происходит на высоте 9 метров в гнезде.

Видеорегистратор, через роутер и мобильный интернет был подключен к приложению на смартфоне. И я смог наблюдать, делать фото и записывать короткие видео прямо в телефоне.

Тем временем прилетели аисты и начали откладывать яйца.

Я несмотря на 64 года вполне комфортно чувствую себя в соцсетях поэтому для продвижения проекта завел инстаграм @storks40, куда и стал выкладывать фото и видео из гнезда.

Одновременно сделал на тильде мини-сайт, где рассказал историю гнезда и оставил реквизиты для донатов. Никогда так не делал и особо на успех не рассчитывал.

К моему удивлению вскоре на карточку стали поступать деньги. Денег хватило для оплаты мобильного интернета и даже для возмещения расходов на оборудование. А в конце сезона поступил разовый большой взнос на новую камеру к следующему сезону. И я уже решил в новом сезоне обязательно сделать прямые трансляции на YouTube.

Технические моменты.

Я не системный администратор и моя работа не связана с компьютерными сетями. В молодости программировал на Clipper summer87, Access 2.0. Это немного помогло и практически всю нужную информацию нашел в сети.

В первом сезоне сделал ошибку и установил аналоговую камеру. Для вывода ее видео в сеть нужен регистратор. Это лишнее звено в этой цепочке.

За осень и зиму изучил опыт других круглосуточных трансляций на YouTube. С некоторыми организаторами даже удалось встретиться и пообщаться лично. Это были люди с двухгодичным опытом непрерывных прямых трансляций и сотней тысяч подписчиков..

К новому сезону 2021года к дому в деревне был подключен проводной интернет и над гнездом вознеслась новая поворотная IP камера Hikvision с 4-х кратным зумом.

К дому был проведен проводной интернет 80 Mbps получен статический IP адрес. Это обязательное условие для удаленного доступа к камере без танцев с бубнами. Достаточно пробросить порт на роутере.

Камера передает rtsp поток, с которым теперь можно делать потоковое вещание на различные площадки. Иногда вел вещание на Youtube, FB,VK и Twith одновременно.

Для вещания в YouTube и другие сервисы нужен rtmp поток. Можно использовать программу по типу OBS, но мне это не подошло. Я решил работать с утилитой ffmpeg. Это бесплатная программа с широчайшим спектром функций по работе с видео. Не требует установки, запускается в командной строке, работает на всех трех крупных операционных системах.

В сети много ссылок с форматом ключей для обработки rtsp потока с видеокамер. Я использовал такой.

ffmpeg -re -rtsp_transport tcp -i "****rtsp ссылка****" -c:a libmp3lame -ab 128k -ar 44100 -c:v copy -threads 2 -bufsize 4000k -f flv -crf 0 -minrate 4000k -maxrate 5000k -tune zerolatency "rtmp://a.rtmp.youtube.com/live2/*ключ потока**"

Где брать rtsp ссылку? Ее надо искать на сайте производителя камеры. В нее вписывают логин и пароль камеры, номер канала.

Ссылка для Hikvision "rtsp://логин:пароь@IP_адрес_камеры/ISAPI/Streaming/Channels/101"

Прелесть в том, что для вещания в разные сервисы в этой команде нужно только менять в конце rtmp ссылку и ключ потока. Работать с ffmpeg очень удобно, хотя с начала это напрягало. Отвык от окна терминала. Пришлось вспомнить утраченные навыки работы с командной строкой и bat-файлами.

Какой компьютер нужен для круглосуточной трансляции?

Лучше чужой. Свой будет постоянно шуметь, тратить электроэнергию и вообще мешаться под ногами. Я не сразу это понял. Работал над тем, как включать и управлять удаленно компьютером, который установил в деревне.

Это тупиковый путь. Лучше сразу брать в аренду виртуальный сервер, тем более что есть варианты бесплатного доступа на 90 дней от google, amazon и microsoft.

Я подключил виртуальную машину от гугла https://cloud.google.com/ . Никогда раньше не имел дела с VPS, но легко разобрался за полчаса с настройкой по этому видео https://youtu.be/duKOkL1Sjww

Установил сервер c Microsoft, Windows Server, 2012 R2, 4 Гб память,SCSI 50Гб.

Для быстрого запуска ffmpeg cделал bat файл. Потом заметил, что иногда ffmpeg вылетает и трансляция виснет. Тогда в bat файле сделал цикл от 1 до 1000 и проблема исчезла.

При минимальной конфигурации VPS загружен только на 5%.

При регистрации аккаунта в cloud.google надо указывать данные реальной банковской карты. Для этого я завел виртуальную карту в тинькофф банке. Главное не забыть отключить услугу до окончания 90 дневного срока.

Запуск прямой трансляции на ютубе описан во многих видео, поэтому здесь об этом не буду.

Сезон 2021 года. Прямая круглосуточная трансляция на YouTube.

Еще в марте я начал тренировки по запуску прямых эфиров с кормушек для птиц. Во время этих трансляций отработал многие моменты. Проблем хватало. То картинка плохая, то звука нет. Постепенно все наладилось.

К прилету первого аиста его уже ждали в прямом эфире несколько десятков подписчиков канала на YouTube. Их было не больше 40 человек. Я сделал посты в соцсетях и новость о интересной трансляции очень быстро разошлась по местным СМИ. Газеты сделали хорошую рекламу на своих интернет ресурсах , а телеканалы помогли еще больше. (Это для меня было открытием. Люди сидели перед экраном где было только гнездо и просто общались в чате. А просмотры шли и подписчики прибавлялись.)

Трансляции уже велись круглосуточно. При этом я даже не задействовал свой компьютер. Был арендован бесплатный (на 90 дней) виртуальный сервер google, который прекрасно справляется с этой задачей.

Во время трансляции заметил в чате активного пользователя и сделал ее модератором чата. Это было неожиданно для Марины, но она согласилась и стала мне активно помогать в эфире.

К трансляции в чат был подключен бот, который очень удачно вписался в нашу маленькую команду. После несложной настройки бот рассказывал зрителям подробности об аистах, давал нужные ссылки, следил за спамом и предлагал подписаться и сделать донат.

Все это помогло меньше чем за месяц собрать 1000 подписчиков и 4000 минут просмотров. YouTube - дал добро на монетизацию.

Неочевидные плюсы прямых трансляций из гнезда аистов.

  • Не надо постоянно монтировать новые видео. Видео делает сама жизнь.

  • Круглосуточные трансляции дают много просмотров. Доход от рекламы растет.

  • Прямо во время трансляции можно делать подборку интересных кадров и тут же публиковать на канале. Это функция ютуба явно мало кому известна. Я так сделал очень много интересных видео.

  • Чат трансляций очень способствует просмотрам. Люди приходят на канал, как в клуб по интересам. Дают аистам имена, переживают за птенцов, ждут возращения взрослых на ночевку

  • Это очень познавательно. Хорошая камера дает возможность рассмотреть все подробности жизни. Увидеть как вылупляется птенец, чем их кормят. Разрушаются многие мифы о аистах.

  • Все это помогает развитию канала и росту просмотров.

Заставка к очередной трансляции Так Заставка к очередной трансляции Так

Через полтора месяца с начала трансляций уже каждый день приносил по 140 -210 рублей в день за счет рекламы. И эта цифра продолжает расти. А донаты полностью покрыли расходы и осталось на развитие проекта.

статистика на 26 мая 2021статистика на 26 мая 2021

Сумма не ахти какая большая, но мне, как пенсионеру это плюс еще одна пенсия и отличный опыт. В мире таких трансляций становится все больше и они пользуются неизменным интересом. Например, на аналогичных западных трансляциях из гнезд аистов одновременно присутствуют 200-300 зрителей.

Есть куда развиваться. Канал постоянно набирает просмотры и подписчиков. На 25 мая 2061подписчиков. А еще недавно в соседней речке завелись бобры и я уже строю планы по видеотрансляции из хатки бобров)

Ссылка на канал https://www.youtube.com/channel/UCwgh6pJpiVlVObWaXKLjGqw

Я бы никогда не стал публиковать это на хабре, если бы не получил приглашение от замредактора сайта

Сначала хотел больше остановиться на технических моментах прямых трансляций. Потом увидел здесь статью, где автор подробно рассказал о технологии круглосуточных трансляций. Но похоже раскрутить канал он не смог, т.к. ссылка в его статье на видео недоступна. Поэтому больше говорил о способах привлечения зрителей.

Подробнее..

Как организовать качественное видеомикширование источников во время онлайн трансляций?

20.11.2020 12:14:59 | Автор: admin
Кто сегодня не слышал про вебинары реалии сегодняшнего дня. Вебинары уже лет пять назад начали стремительно набирать обороты, а уж сегодня так это массово используемый прием обучения, продаж, маркетинговых исследований, представлений и так далее. Организации знают, чтобы оставаться на рынке, нужно постоянно генерировать новый контент и светиться на рынке. Значит контент должен выходить на свет все более качественный, приятный глазу и слушателю, удерживая его фокус внимания на нужных вещах.



Поэтому одна встроенная камера в ноутбук и сама презентация уже никого не удивляет. Люди прибегают к использованию нескольких камер с качественной оптикой, возможностью приближения, различными углами съемки, выносными микрофонами и так далее. Больше источников аудио и видео сигналов, плюс дополнительные требования к видеообработке, свету, микшированию сигналов, а также онлайн стриминг сразу в сеть просто вынуждают компании предлагать рынку готовые устройства все в одном потоковые видеокоммутаторы.

Популярность веб-конференций и направления коммутирования сигналов


Потоковое или живое видео всегда интереснее записи. Здесь все по-настоящему, есть ведущий, есть зрители и трансляции в таком формате проходят буквально тет-а-тет, достигается практическое живое общение, вплоть до озвученных вопросов от участников и такие же ответы ведущих. Соответственно для создания приятного глазу и слуху видео-контента требуется уровень камеры и звука чуть выше, чем от привычных стандартных встроенных устройств.

Хорошо, если камера может выдавать сигнал по USB, тогда не потребуются карты видеозахвата, но если использовать несколько камер уже будут сложности. Та же история со звуком отдельный микрофон-петличка, значит на приемной стороне будет аудио-кабель. Можно сразу и в компьютер, если есть микрофонный вход. А если микрофонов несколько тогда дополнительный микшер.

В итоге, пути расходятся либо в аппаратную, либо в программную обработку сигналов. Микширование на аппаратных устройствах будет быстрее и с меньшим шансом в отказе работы. Программное, соответственно, возможно в некоторых случаях, с правильным подходом и умениями, более функциональное, но со своими особенностями.



Аппаратные устройства


Первый приходящий вопрос в голове: а кто чаще работает с живым сигналом, если не люди из броадкастинга?. С другой стороны, компании, разрабатывающие AV оборудование для эффективного обмена аудио и видео информацией высокого качестве в разных проектах, также имеют в своем арсенале качественные коммутаторы видео сигналов. Но здесь внимание уделяется качеству, дальности передачи и переключению сигналов, нежели эффектным переходам.

Дополнительный сильный толчок за счет произошедшей ситуации во всем мире с начала 2020 года позволил компаниям перестроить подход используемого оборудования под новые нужды. Таким образом, появился некоторый новый сегмент рынка, объединивший функционал работы с живым видео, работой с цифровыми сигналами, одновременно интегрировав микширование аудио и видео, упаковав все это в одном устройстве, приукрасив возможностью потоковой трансляции, что стало привычным для большинства компаний на сегодняшний день.

Никто не спорит, что видеомикшеры были и раньше, но речь идет про микшеры с уклоном в бытовые, если их можно так сказать, сигналы. Так еще с добавлением функций стриминга.

То бишь такое устройство, с которым может разобраться не только профессионал, но и любой пользователь. В итоге на рынке, на сегодняшний день, уже более десяти различных компактных устройств микширования и стриминга, укомплектованных в едином корпусе, от зарекомендовавших себя производителей AV-оборудования. Есть достойные модели, подходящие под студийные мероприятия, а также средние и базовые модели, которые можно использовать в офисах во время вебинаров, в домашних условиях или брать с собой для проведения выездных мероприятий.

В этой статье пойдет речь только о микшерах с интегрированным функционалом потокового стриминга, потому что углубляться в отдельный мир микшеров видео сигналов без встроенной функции потоковой передачи не имеет смысла, так как модельный ряд в этом случае различен и огромен. Нас интересуют устройства компактных размеров, с основными входами/выходами HDMI (чаще используемые в массах), с микшированием аудио сигналов (в том числе микрофонов), с подключением микрофонов, стримингом в сеть или USB, а также возможностью проведения веб-конференций без профессиональной режиссерской подготовки.

Потоковые видеокоммутаторы


Первая компания, о которой пойдет речь, берет свое начала в стране восходящего солнца Японии, в 1972 году. Основное направление производство электронных музыкальных инструментов и программного обеспечения к ним. Богатая история компании, зарекомендовав себя среди музыкальной индустрии, с 2010-х годов расширяет сферу влияния в области видео сигналов, итогом чего являются как раз компактные потоковые видеомикшеры.

Roland Corporation предлагает широкую линейку оборудования видеомикшеров, которая успевает двигаться в ногу со временем, поддерживая стандарты 4К качества, однако в роли потоковых микшеров выступают лишь три модели на конец 2020 года.
Модель VR-1HD VR-4HD VR-50HD MK II
Краткое описание Вещательная студия формата подключил и работай. Полноценная студия стандарта HD в формате компактного устройства. Расширенная модель, вобравшая мощный функционал студийного микшера с возможностью потоковой трансляции.
Входные интерфейсы 3х HDMI 4х HDMI 4х HDMI, 4х SDI
Выходные интерфейсы MAIN: 1х HDMI;
MONITOR: 1х HDMI;
THRU connector: 1х HDMI (from HDMI 3rd);
USB: 1x USB (type B);
MAIN: 1x HDMI or
RGB/COMPONENT;
PREVIEW: 1x HDMI;
USB: 1x USB (type B);
2x SDI (PGM OUT, AUX OUT);
3x HDMI OUT (PGM OUT, AUX OUT, MULTI-VIEW OUT);
2x Analog RGB/HD-Component (PGM OUT, AUX OUT);
USB: 1x USB (type B);
Микрофонные входы 2 XLR/TRS 4 комбо-разъема XLR/TRS 6 комбо-разъемов XLR/TRS
Линейные входы 1 стереофонический RCA 1 стереофонический RCA + 1 стереофонический миниразъем 2 стереоджековых 1/4" + 2 стереофонических RCA
Дополнительные возможности Выход USB 3.0 для онлайн трансляции, захвата и выдачи аудио-сигналов Выход USB 3.0 для онлайн трансляции, захвата и выдачи аудио-сигналов Выход USB 3.0 для онлайн трансляции, захвата и выдачи аудио-сигналов
Стоимость РРЦ (конец 2020 года) 105'500 руб 224'800 руб 528'900 руб
Помимо основных характеристик, микшеры поддерживают различные функции в числе которых присутствует бесплатное программное обеспечение, позволяющее записывать видео и аудио сигналы по USB сразу на жесткий диск компьютера.



Есть возможность использовать пульт удаленного управления в видео софта на компьютере (поддерживает Mac и Windows), который полностью повторяет функционал самого микшера. Эта функция становится удобной, когда микшер устанавливается непосредственно в студии, а управление идет из операторской или удаленной комнаты, обычно с хорошей звукоизоляцией.



imageВидеомикшеры поддерживают функции хромакея, и уже в младшей версии устройства имеется возможность объединения трех источников в единый видеопоток, без необходимости дополнительного оборудования.

imageДалее, начиная с базовой модели, присутствует возможность создания готовых пресетов, вызывая которые во время эфира или подстраиваясь на ходу, можно объединять картинку в картинке, применять совмещение или разбиение экрана (split screen).


Имеется возможность подвязки микрофонного входа ко входному видео источнику, соответственно облегчая автоматическое переключение видео-камер, в зависимости от выступающего. Присутствует функция изменения голоса выступающих где любой участник может говорить голосами других людей или не людей вовсе, создавая различные эффекты во время презентации.

И самое главное, что здесь есть это встроенная возможность подключения и трансляции аудио-видеосигнала по USB 3.0 на компьютер, а далее на любые платформы. При этом, помимо извлечения эмбедированного (внедренного) аудио сигнала из видеоисточников HDMI, можно микшировать аудио сигнал с порта USB во время звонков по программному ВКС (Skype, Zoom, Teams и так далее). Разработчики не забыли интегрировать функцию Echo Cancelation для предотвращения возникновения обратной связи с компьютерным аудио.



В более старшей модели VR-4HD видимыми различиями является встроенный сенсорный экран, на котором можно выводить multiview режим, а также информацию меню управления.

Есть поддержка функции DSK (Downstream Key) для накладывания титров, текстов песен или логотипов на видеосигналы источников, которые могут меняться.

imageА в расширенной модели VR-50HD MK II уже есть удаленное управление подключенными PTZ камерами, позволяя управлять шестью PTZ камерами одновременно по сети. Выходных интерфейсов три Program, Multiview, а также AUX, позволяя перенаправлять любой подключенный сигнал на данный выход, который работает независимо от основного программного выхода.

Итогом получаем компактное устройство, которое с одной стороны позволяет коммутировать видео-источники, с другой обеспечивает простое управление аудио сигналами. При этом все управление рассчитано на одного оператора, не требуя наличия специализированных знаний.

Другая компания, которая была основана лишь в 2002 году и является австралийским производителем электронного оборудования, в основном разработанного для вещания и видеопроизводства, достаточно быстра стала популярной в сфере вещательного телевидения. А уже в 2020 году представила линейки компактных видеомикшеров с возможностью потокового вещания, отвечающие сегодняшним тенденциям АВ-рынка.

Blackmagic предлагает три варианта видеомикшеров для создания многокамерного контента на вещательном уровне.



Вся линейка микшеров лишена излишек, компактный дизайн, минимальные размеры, здесь учтено лишь только то, что нужно. Похоже на то, что разрабатывалось это устройство именно как дополнение для веб-трансляций и не более.
Модель ATEM Mini ATEM Mini Pro ATEM Mini Pro ISO
Краткое описание Модель имеет 4хHDMI входа, выходы 1хHDMI и 1хUSB, а также 2х микрофонных входа. В дополнении к модели mini, модель Pro имеет возможности записи в H.264 на флеш-диски USB, обеспечивать потоковую трансляцию через Ethernet. Имеется многооконный режим (до 4х источников). В дополнении к модели Pro, модель ISO позволяет вести запись до 5ти отдельных видеопотоков в H.264. Сохранять проектный файл DaVinci Resolve для дальнейшего монтажа.
Видео входы 4х HDMI 4х HDMI 4х HDMI
Видео выходы 1хHDMI
1xUSB
1хHDMI
1xUSB
1хHDMI
1xUSB
Разрешения Up to 1080p60 Up to 1080p60 Up to 1080p60
*support input standards up to 1080i/p60
**поддерживают автоматическое преобразование форматов на всех входах HDMI
Аудио входы 2х (mic) 3.5mm miniJack (stereo) 2х (mic) 3.5mm miniJack (stereo) 2х (mic) 3.5mm miniJack (stereo)
Multiview - + +
Стриминг С помощью бесплатного ПО Через Ethernet порт Через Ethernet порт
Запись на USB-флеш диски - + +
Стоимость РРЦ (конец 2020 года) 34'790 руб 59'900 руб 91'990 руб
Концепция данных устройств позиционируется именно как устройство для стриминга с функциями видеомикшера, поэтому здесь всего один выход HDMI, USB и LAN. В зависимости от модели, можно либо осуществить трансляцию через бесплатное ПО с компьютера через USB подключение (ATEM mini), либо непосредственно через Ethernet порт, а USB-интерфейс использовать для записи на USB-флеш накопитель (ATEM mini Pro и ISO).

imageВсе компактные микшеры данного производителя поддерживают эффектные переходы, возможность наложения титров, бесплатное программное обеспечение ATEM Software Control для удаленного управления с компьютера, плюсом имеется возможность разрабатывать собственные продукты с помощью пакета SDK.

Различия имеются лишь в потоковом вещании и записи сигналов для пост-обработки.

Базовая модель mini является мини-микшером с возможностью эффектного переключения 4-х входных сигналов и вывод любого из них через HMDI интерфейс. Если требуется стриминг тогда потребуется USB подключение к компьютеру с установленным ПО (бесплатным от производителя). А Ethernet порт в этой модели используется только для удаленного управления.

imageСредняя модель Pro имеет все характеристики базовой версии, но уже обладает возможностью стриминга непосредственно в H.264 через Ethernet порт. Порт HDMI в данном случае используется для режима multiview, на котором можно отобразить: сигналы preview, program, каждый входной сигнал, медиаплеер с выбранной графикой, состояние записи, трансляции и аудиоблока.

Получается, что для потокового вещания компьютер не нужен, а управление можно настроить хоть с телефона (ПО присутствует), подключив микшер и телефон к точке доступа wi-fi.

imageА расширенная модель Pro ISO позволяет производить запись пяти сигналов программного и чистых сигналов с входов для дальнейшего монтажа.


В итоге компания представляет три варианта, от самого простого, где требуется дополнительный ПК для трансляции, средний вариант который имеет уже полный функционал для микширования каналов, записи на внешние диски и главное, трансляцию. И топовый вариант для тех, кому больше необходима пост-обработка в дополнении к основному функционалу.


imageЕще одна компания, основанная в 1979 году в Тайвани, идущая с девизом просто лучшие соединения позиционируется на рынке как производитель коммутационного оборудования. В дополнении к уже существующему оборудованию, представила удивительно-компактный видеомикшер, чтобы не отставать от тенденций развития потокового контента на рынке.

ATEN UC9020 является микшером, у которого встроенного экрана нет. Поэтому, чтобы просматривать дополнительную информацию (а она нужна), придется приобрести планшет от не менее известной американской компании Apple. А чтобы планшет в неудобный момент времени не разрядился понадобится еще один разветвитель для питания.
Модель UС9020, UС-9020
Краткое описание Портативное устройства для микширование многоканального видео и звука с возможностью потоковой трансляции.
Видео входы 1x HDMI (до 4K@60Гц);
2x HDMI (до 1080@60Гц, переключаемые)
Видео выходы 1x Loop-Thru HDMI (до 4K@60Гц);
1 x HDMI (PGM) (до 1080@60Гц);
USB 3.0
HDCP Не поддерживается
Аудио входы Деэмбедирование из HDMI;
1x микрофонный вход, 6,5 мм (dual mono);
1x линейный вход, RCA
Аудио выходы Эмбедирование в HDMI;
1x разъем линейного выхода, 3,5 мм (стерео)
Запись на USB-флеш диски Через USB-порт
Стоимость РРЦ (конец 2020 года) 136'030 руб
Устройство без дополнительного планшета, выполняющего роль экрана, работать будет, но настроить будет невозможно. Микрофонный вход только один, хотя при этом присутствует захват 3х источников видео, один из которых поддерживает разрешение 4К и имеет свой проходной выход. Но максимальное выходное разрешение только fullHD.

Идеология устройства в том, что программное обеспечение, как и ПК не требуется, подразумевается работа в формате plug-n-roll. Заложенный функционал позволяет осуществлять предварительный просмотр и мониторинг через приложение на планшете, менять пресеты с выбором: полноэкранный режим, изображение рядом, картинка в картинке, позволяет накладывать текст и субтитры. Сама трансляция идет непосредственно через Ethernet порт, что удобно.

В итоге получается очень компактное устройство, где особенностью сразу выступает дополнительно приобретаемый планшет, если таковой отсутствует. Данный видеомикшер позволяет захватывать звук непосредственно только с одного микрофона, а значит, при таком наборе характеристик, устройство больше подходит для трансляции с одним участником, чем для проведения каких бы то дискуссий и обсуждений.

Еще один тайваньский производитель DataVideo, основанный в 1985 году, в основном специализирующийся на разработке и производстве оборудования для вещательного рынка, также выпустил микшерный пульт с возможностью потоковой трансляции в корпусе с основным 14 сенсорным экраном и дополнительными элементами управления.
Модель KMU-200
Краткое описание Устройство все в одном, позволяет переключать, микшировать звук, вести запись и потоковую трансляцию.
Видео входы 1x HDMI 2.0 (up to 3840x2160p@60);
1x HDMI 1.4 with Loop through (up to 1920x1080p@60)
Видео выходы 2x HDMI 1.4 (PGM, AUX) (up to 1920x1080p/i@60)
HDCP Не поддерживается
Аудио входы 2x XLR(Mic);
2x RCA
Аудио выходы 2x Unbalanced RCA
Запись на SD-карты Присутствует
Стоимость РРЦ (конец 2020 года) 359'325 руб

imageИтак, идеология устройства позволяет захватывать видео сигнал с двух физических интерфейсов, один из которых поддерживает 4K-разрешения, а другой (с доп. проходным выходом) только fullHD разрешения. При этом суть поддержки камер с разрешение 4K в том, чтобы можно было сделать 4 вырезки кадров из одного потока, тем самым получив 4 различных картинки (как будто у вас 4 входных видео потока).

Плюс остается общий вид и возможность подложить заранее подготовленную картинку. Итого шесть дорожек видео контента и шесть физических клавиш для переключения этих источников.

imageВидеомикшер позволяет как транслировать потоковый контент в H.264 по сети через Ethernet, так и записывать этот контент на SD-карту, разъем которого предусмотрен на лицевой части видеомикшера.

imageОсобенностью данного микшера является возможность съемки, обработки и трансляции видео контента не только в привычном landscape режиме, но и в портретном, что популярно для съемки или просмотра со смартфонов.

Соответственно, второй вход на микшере может использоваться для захвата презентационного материала с ПК. Два микрофонных входа с дополнительным входом интерфейсом RCA и таким же выходом. И в итоге получается достаточно интересный видеомикшер, который с одной стороны может вырезать 4 сцены из одного потока, второй вход с меньшим разрешением может использоваться для презентационного контента, захватывать звук с двух микрофонов и при этом поддерживать одновременный стриминг. Все это вместе создает компактное устройство.

Заключительный микшер, который уже достаточно давно продается на рынке, но не имеет такой популярности, как предыдущие. Разработан известной японской компанией, основанной в 1946 году представила еще в конце 2016 года микшер Sony MXC-500.
Модель MXC-500
Краткое описание Микшер с возможностями работы с различными камерами, использовать как 5-и канальный аудиомикшер. Стримить, вести запись на карты SD. И все это в удобном едином корпусе.
Видео входы 4x SDI;
2x HDMI (up to 1920х1080i/p);
Видео выходы 1x SDI (PGM);
2x HDMI (PGM, multiview) (1920x1080i/p);
HDCP Не поддерживается
Аудио входы Деэмбедирование из SDI, HDMI;
2x XLR/TRS;
Аудио выходы Эмбедирование в SDI, HDMI;
2x LINE L и R;
Запись на SD-карты Присутствует
Стоимость РРЦ (конец 2020 года) 220'000 руб
Видеомикшер позволяет вести микширование сразу нескольких входящих видеосигналов (до 4-х одновременных), есть несколько входных аудио-интерфейсов для подключения 2-х микрофонов, а также дэембедировать аудио сигнал из видео потока. Присутствуют возможности наложения титров, различные схемы наложения контента (например, PinP) и небольшое количество эффектных переходов. По выходам имеются два интерфейса: мультивью и программный выход.

А также встроенная запись на внешние SD-карты, заменяющая отдельный рекордер и одновременный стриминг в H.264. И все это в одном флаконе компактный мини-микшер.

Заключение


Каждый производитель стремится успевать в ногу со временем, отвечая требованиям сегодняшнего дня. А именно реализовывать компактное устройство все в одном, с возможностью коммутирования входных источников, микрофонов простыми пользователями, а также обеспечивать потоковое вещание на большинство современных платформ для возможности увеличения своей аудитории. При этом, каждое устройство обладает хоть и похожим, но все же различными функциями и фишками. Одни разрабатывают удобный фейдер смены кадров, другие берут пользователей компактным размером, третьи за счет огромного сенсорного экран и так далее. Все эти навороты создают расширенный модельный ряд, а значит позволяют подобрать оптимальное решение под каждую задачу.
Подробнее..

Категории

Последние комментарии

  • Имя: Макс
    24.08.2022 | 11:28
    Я разраб в IT компании, работаю на арбитражную команду. Мы работаем с приламы и сайтами, при работе замечаются постоянные баны и лаги. Пацаны посоветовали сервис по анализу исходного кода,https://app Подробнее..
  • Имя: 9055410337
    20.08.2022 | 17:41
    поможем пишите в телеграм Подробнее..
  • Имя: sabbat
    17.08.2022 | 20:42
    Охренеть.. это просто шикарная статья, феноменально круто. Большое спасибо за разбор! Надеюсь как-нибудь с тобой связаться для обсуждений чего-либо) Подробнее..
  • Имя: Мария
    09.08.2022 | 14:44
    Добрый день. Если обладаете такой информацией, то подскажите, пожалуйста, где можно найти много-много материала по Yggdrasil и его уязвимостях для написания диплома? Благодарю. Подробнее..
© 2006-2024, personeltest.ru