В августе шли жаркие дискуссии о запрете TikTok в США. В немалой степени на это повлияло решение Индии запретить сервис. Сейчас идут споры между приверженцами и противниками запрета TikTok, и разногласия уже вышли за рамки обычных размышлений о технологиях, культурных ценностях и национальной безопасности.

Аналоговый мир

Понять аналоговый мир через призму цифрового весьма непросто. В разработке продуктов зачастую используют шаблоны, под которые плохо подходит изобретенное ранее. И только спустя время разработчикам удается совместить одно с другим.

Хороший пример - печатные издания, которые монетизировались за счет рекламы рядом с новостными блоками. Аналогично пытались монетизировать и первые веб-сайты. Это работало, но не слишком эффективно. Печатные издания по-прежнему приносили наибольшую прибыль, в то время как их электронные аналоги несколько долларов, а мобильные лишь копейки. Разумеется, интернет привлекал много внимания, но монетизировался не слишком хорошо.

Однако формат подачи информации со временем менялся благодаря внедрению цифровых технологий. Прежде чем газета будет доступна в киоске, нужно подготовить материал, напечатать его и оформить в виде печатного издания, в то время как новостная лента веб-сайта может легко адаптироваться под конкретного человека на лету, включая и саму рекламу. Внезапно печатные издания обесценились, а вот интернет и мобильные технологии в целом стали дорожать, превзойдя по этому критерию обычные газеты.

Несмотря на то, что доходы от продаж газет росли во второй половине прошлого столетия, тираж начинал падать. То же самое происходило и с количеством рекламы, размещаемой в газетах.

Если предположить, что прибыль от рекламы напрямую зависит от количества внимания, уделяемого читателями, то можно сделать вывод, что людям больше нравятся изображения, чем текст, особенно анимированные изображения. Вот почему веб-страницы стали показывать динамический контент. Когда Facebook запустил свою ленту, представители компании поняли, что людям больше нравится просматривать фотографии. Из этого следовало, что Instagram, быстро развивающаяся социальная сеть, где делятся фотоснимками, представляла серьезную угрозу для Facebook (а после ее покупки дала широкие возможности).

Спустя четыре года именно Instagram стал эффективным оружием Facebook в борьбе против Snapchat Stories. Суть идеи состояла не в том, чтобы захватить часть аудитории Snapchat, а в том, чтобы пользователи Instagram даже не думали пользоваться Snapchat. И эту идею успешно воплотили в жизнь.

Восхождение TikTok

Рост TikTok говорит о том, что в Facebook так и не поняли, какой угрозой был Snapchat на самом деле. Привлекательность Snapchat была в том, что пользователи могли создавать внутри приложения новую сеть, которая основывалась на чате и пролистываемых изображениях, что делало пользовательский опыт похожим на взаимодействие с видеороликами. Из этого следовало, что Facebook нужно было сосредоточить внимание подобном функционале.

Разумеется, Facebook вложил немало денег чтобы заставить видеоролики отображаться в его ленте. Используя средства, поступающие от отображаемой рекламы в своей ленте, компания меняла одно направление за другим, решив привлечь создателей профессионального видеоконтента использовать Facebook вместо YouTube. Это была очевидная ошибка, которую обнаружили уже после - мощь этой социальной сети всегда заключалась в том, что самый ценный контент создавали именно ее пользователи. Но Facebook сделал ставку на сторонние компании для создания видеороликов.

Пользователи могут легко создавать текстовый контент, а теперь, с развитием мобильных технологий они легко делают фотографии, но создавать видеоконтент всегда сложно. До недавнего времени, способности смартфонов создавать снимки были куда лучше, чем снимать видео. Но, что более важно, для создания качественного видеоконтента требуются определенные навыки. Вероятность того, что рядовой пользователь Facebook имеет штат личных видеопоператоров, крайне мала. Кроме того, владельцы аккаунтов Facebook могут демонстрировать личный контент только тем, кто состоит в списке их друзей. Это было сделано потому, что Facebook оштрафовали за попытку сделать личные сообщения общедоступными.

Все сказанное выше объясняет почему TikTok стал таким популярным. Во-первых, люди любят смотреть видеоролики. Во-вторых, TikTok предлагает более простые и интересные инструменты для создания видео, которыми могут пользоваться даже непрофессионалы. Единственный, но крайне важный недостаток TikTok он не является социальной сетью.

Компания ByteDance и используемые алгоритмы

Начнем с истории ByteDance, китайской компании, известной как владелец TikTok. Ее новостное приложение TouTiao выглядело как новаторский продукт. Если Facebook перерос из социальной сети в ленту, TouTiao всегда являлся новостной лентой, основанной на специальных алгоритмах. Открыв это приложение впервые, пользователь увидит в целом общие новости. Однако, приложение отслеживает каждое действие пользователя, анализирует его и предлагает релевантный контент.

TouTiao использует мощную технологию машинного обучения для обработки огромных массивов данных. Фактически он проводит A/B-тестирование миллиарды раз в день, сравнивая получаемые данные с уже имеющимися. Это приложение стало незаменимым помощником для многих, так как оно способно показывать новости, которые интересуют конкретного пользователя. Это конкурентное отличие TouTiao в Китае, где любая информационная служба подвергается открытой правительственной цензуре. Лучше сосредоточить контроль над контентом, который может видеть конечный пользователь, в своих руках, чем предоставить подписчикам рекомендовать друг другу что-либо.

Douyin (китайский праотец TikTok), запущенный в 2016 году, наглядно продемонстрировал еще одно преимущество использования этого мощного алгоритма для анализа данных. Благодаря расширению библиотеки видео от роликов внутри частной сети до любых видео, созданных кем-либо внутри онлайн-сервиса, Douyin/TikTok полагается на собственные алгоритмы и создает еще более привлекательный контент чем тот, который могли бы сделать профессионалы, и гарантирует то, что пользователям будут доступны только самые лучшие ролики.

Если взглянуть на киноиндустрию, то телевидение и кинотеатры в своей деятельности всегда делали ставку на дефицит. Фильммейкеры снимали такое количество фильмов, которых было бы достаточно чтобы заполнить определенное число мест в кинотеатрах и 24-часовой телеэфир. Из этого следует, что для достижения успеха нужно еще до момента начала съемок понимать, какая кинолента станет хитом, прежде чем инвестировать в ее производство. По такому принципу работал продюсер Джеффри Катценберг и его команда из Голливуда на протяжении нескольких десятилетий. Катценберг считал, что эту формулу можно применить и по отношению к мобильным устройствам.

Но мобильность определяется самим интернетом, а именно изобилием. Таков же принцип работы TikTok и любого другого приложения, работающего с пользовательским контентом. Цель здесь не в отборе хитов, а в том, чтобы заполучить как можно больше контента, а затем, полагаясь на умные алгоритмы, отобрать то, что будет пользоваться спросом. Катценберг был отчасти прав в своих высказываниях о YouTube с точки зрения видеоконтента для мобильных устройств, так как этот сервис был создан для настольных ПК. TikTok, как и Quibi, является приложением, созданным исключительно для мобильных устройств. Однако, в отличие от Quibi, TikTok использует не голливудскую гипотезу о дефицитности контента, а гипотезу интернета об изобилии, описанную выше.

Из всего вышесказанного можно сделать следующие выводы:

• Видеоконтент является наиболее предпочтительным для пользователей в отличие от текста и даже фотографий;

• TikTok обеспечил простой процесс создания видеоконтента (даже низкого качества) и беспрепятственный доступ к нему;

• TikTok использует встроенные алгоритмы отбора привлекательного контента и не ограничивается рамками социальных сетей.

Все это объясняет успех TikTok и то, почему американцы так его боятся.

Китайская война

После ввода ограничений на продажи компонентов для китайской компании Huawei со стороны правительства США в 2019 году, некоторые специалисты констатировали начало технологической холодной войны. Китай пошел в наступление, и уже сравнительно давно. На протяжении десятков лет Китай не впускал в свой внутренний рынок американские компании, работающие в сфере предоставления услуг. И это несмотря на то, что альтернатива (китайские компании) использовала продукты, произведенные в США, и, скорее всего, даже интеллектуальную собственность США.

Нет оснований полагать, что Китай был мотивирован исключительно протекционизмом, по крайней мере в экономическом смысле. На самом деле, для правящей партии коммунистов куда более важной задачей было удерживать контроль над информационными потоками. В то же время, с узкой экономической точки зрения, Китай препятствовал экономическому росту США значительно больше, чем наоборот.

Одна из важных ошибок, которую допускают многие граждане США, состоит в том, что их взгляд на американо-китайские отношения является слишком эгоцентричным. Они полагают, что здесь все зависит от слов и действий со стороны только США, а Китай рассматривают как неуправляемого игрока. На самом деле, это оскорбительно для Китая, великой страны с гораздо более богатой историей, чем США.

В связи с этим, нужно задуматься о том, что думает Китай о своих взаимоотношениях с США и Западом в целом. Китай вынужден покончить с унизительным отношением, которое продолжалось более века, и вернуть свое доминирующее положение в мире. Однако далеко не все западные умы осознают, что Коммунистическая партия Китая верит в то, что марксизм является единственным правильным инструментом достижения этой цели, а западные либеральные ценности это серьезное препятствие.

Си Цзиньпин объяснил причину распада СССР наличием жесткой конкуренции в идеологической сфере. Руководство Коммунистической партии Китая твердо намерено избежать ошибки, допущенной Советским Союзом. Во внутрипартийной директиве 2013 года, которая случайно оказалась общедоступной, описана вполне реальная угроза западных антикитайских сил и попытки вестернизации Китая. Согласно этой директиве, существует несколько идей, которые угрожают Китаю серьезными беспорядками, среди которых: разделение власти, независимая судебная система, универсальные права человека, западные свободы, гражданский устрой общества, экономический либерализм и прочие. Также выделены такие факторы угрозы, как тотальная приватизация, свобода СМИ и свободные информационные потоки в интернете. Даже если китайский народ лишь задумается над перечисленными концепциями, это может подорвать социальную основу Коммунистической партии и поставит под угрозу стремление партии построить современное социалистическое будущее.

Жители стран Запада стали задумываться о конкуренции с Китаем, но до недавнего времени их было меньшинство, поскольку многие представляют Китай как либерализованную экономическую интеграцию, и смотрят на все это через геополитические либо военные линзы. Но китайские коммунисты считают, что величайшая угроза безопасности их партии, стабильности их страны, мешающая возвращению Китая на его законное место (в центр цивилизации), является идеологической. Им не нравятся военные машины, которые выстроило против них командование Тихоокеанскими Войсками США. Но в большей степени их пугает не американское оружие и солдаты, а враждебные идеи, которые, по их мнению, Америка встроила в дискурс и институты мирового порядка. Бывший генеральный секретарь КПК Цзян Цзэминь более десяти лет назад предупреждал о том, что международные враждебные силы стремятся вестернезировать и расколоть Китай. Поэтому старый экономический и политический мировой уклад должен быть в корне изменен. Только таким способом можно обеспечить дальнейший рост Китая. Си Цзиньпин поддержал эту точку зрения, заявив, что после окончания холодной войны страны, затронутые западными ценностями, были охвачены хаосом и ввязались в войну. Если мы адаптируем нашу практику к западным ценностям Последствия будут иметь разрушительный характер.

Исходя из вышесказанного, для Китая недостаточно просто заблокировать западные соцсети, такие как Facebook или Twitter. Он также считает необходимым, чтобы соответствующие органы США контролировали контент, размещаемый в Twitter и прочих социальных сетях. Проблема Запада состоит в том, что многие политические фигуры, такие как Клинтон, считают, что связи между двумя государствами будут развиваться в едином направлении в сторону политической свободы. На самом деле, Китай не только противостоит западным идеалам, но и стремится навязать свои собственные.

Это объясняет причину ограничения свобод, которые имели место в Гонконге совсем недавно. Идеология Коммунистической партии Китая является диаметрально противоположной идеям либерализма. Одна страна две системы это заблуждение, которое способствует росту Китая и триумфу марксизма. По мере осознания всего этого, отношение к Китаю становится все более серьезным.

TikTok и данные

Но западные СМИ продолжают игнорировать очевидное. Подтверждением является свежая заметка в New York Times:

В пятницу компания Amazon выступила с просьбой к своим сотрудникам удалить китайское приложение TikTok со своих смартфонов, в связи с чем технологический гигант оказался в эпицентре увеличивающейся паранойи касательно этого приложения. Спустя почти пять часов Amazon заявила, что письма сотрудникам с просьбой удалить приложение были отправлены по ошибке.

В первоначальном письме, которое попало к сотрудникам издания, представители Amazon заявляли, что из-за рисков безопасности сотрудникам следует удалить приложение со всех своих устройств, у которых есть доступ к электронной почте компании. В итоге сотрудникам пришлось удалить это приложение к пятнице чтобы получить доступ к электронной почте Amazon со своих мобильных устройств.

Если на ПК или Mac приложения имеют полный доступ к данным, хранящимся на компьютере (включая электронную почту), в современных мобильных устройствах приложения хранятся изолированно от пользовательских данных. Они могут использовать только собственные данные и ограниченный набор внешней информации (если пользователь предоставит соответствующее разрешение). Другими словами, блокировка TikTok по причине, что это приложение якобы тайно крадет данные электронной почты, является абсолютно бессмысленной с технической точки зрения.

Но это вовсе не значит, что TikTok не собирает данные. Приложения стремится получить столько информации, сколько это возможно, включая IP, контакты, местоположение и пр. По мнению защитников TikTok, то же самое делает и Facebook.

Хотя это правда, существуют некоторые принципиальные отличия. Во-первых, Facebook это американская компания. Хотя TikTok утверждает, что не зависит от ByteDance и хранит все данные на серверах в США и Сингапуре, в одном из пунктов его политики конфиденциальности указано следующее: Мы можем передавать ваши персональные данные материнской, дочерней и партнерским компаниям, входящим в состав нашей корпоративной группы.

Из этого следует, что TikTok может отправлять данные в Китай, и он это бы делал в любом случае, даже если бы не было соответствующего признания в его политике конфиденциальности. Все китайские компании, предоставляющие услуги через интернет, обязаны передавать любые данные по требованию правительственных органов в соответствии с требованием Закона о национальной разведке, и это требование распространяется даже за границы Китая. Кроме того, такие запросы на предоставление данных не регулируются судебными и другими организациями в отличие от США, где запросы правительства на получение данных Facebook могут быть удовлетворены только по решению суда. Китайское правительство вполне могло запустить собственные алгоритмы сбора данных параллельно с теми, которые использует компания ByteDance.

Во всяком случае, это было бы удивительным, если бы правительство Китая не сделало так. Одной из важных особенностей в тысячелетней истории Китая является бюрократия, сосредоточенная на сборе информации обо всех и обо всем. Примеры этого можно легко проследить в Тайване, где повсюду установлены камеры видеонаблюдения, а мобильные данные используют как инструмент для борьбы с пандемией коронавируса. И это демократическое государство, основанное на либеральных ценностях. В Китае эта традиционная бюрократия сочетается с тоталитарным правительством, поэтому здесь используют сбор данных на максимум. Здесь повсеместно используют технологию распознавания лиц, практически все транзакции являются цифровыми, а социальные сети, например, WeChat, находятся в открытом доступе как для Tencent, так и правительственных органов. В соответствии с текущей политикой, правительство имеет доступ к данным даже персональных компьютеров. С учетом этих реалий, беспокойство о данных TikTok является вполне обоснованным.

Но риск доступа к персональным данным является не самой главной проблемой. Американцев в большей степени должны беспокоить алгоритмы, используемые TikTok.

Алгоритмы TikTok

В прошлом месяце, когда Дональд Трамп провел митинг в свою поддержку в Талсе, он не увидел такое количество людей, на которое рассчитывал. Издание New York Times выдвинуло предположения, что TikTok в той или иной мере является причастным к этому.

Пользователи TikTok, являющиеся почитателями корейской поп-музыки, утверждали, что они в шутку зарегистрировали сотни тысяч билетов на митинг Трампа. После публикации твита 11 июня на официальном аккаунте кампании Трампа @TeamTrump с просьбой к своим сторонникам пройти регистрацию через мобильное устройство для получения бесплатных билетов на митинг, фанаты K-pop стали делиться видеороликами в TikTok, призывающими зарегистрироваться на участие в митинге, а затем не явиться на него.

Точно не установлено, является ли причиной низкой явки на митинг эта кампания в TikTok или пандемия коронавируса, это движение использующее приложение для реализации поставленной цели, действительно было. Несмотря на то, в какой степени TikTok действительно повлиял на явку, это приложение должно вызвать страх у людей с любыми политическими убеждениями.

В конечном итоге, это далеко не первый случай, когда TikTok оказывает влияние на политическую сферу. Сервис подверг цензуре #BlackLivesMatter и #GeorgeFloyd, заблокировал подростка, осуждавшего геноцид Китая в Синьцзяне, а также заблокировал видео с Tank Man. Согласно публикации издания Guardian, TikTok подвергает цензуре площадь Тяньаньмэнь, независимость Тибета и Фалуньгун, протесты в Гонконге и баскетбольную команду Houston Rockets.

Но дело не только в цензуре, а и в обратном явлении пропаганде. Алгоритмы TikTok не ограничены какими-либо правилами, установленными социальной сетью или профессиональными создателями контента, поэтому могут предлагать любые видеоролики. TikTok может продвигать конкретного кандидата или освещать определенную проблему в конкретном регионе, при этом сам кандидат может даже не подозревать о том, что он теперь в долгу у китайской компании. Хотя многие могут отнестись к этому с долей скепсиса, Китай уже показал свою готовность подвергать цензуре речь на платформе, которая запрещена в этой стране. Наивно полагать, что партия, приверженная идеологическому господству, не воспользуется возможностью достучаться до ума и сердец миллионов американцев.

Именно в этом плане следует отнестись к Китаю с максимальной серьезностью: партия всеми своими действиями, в частности, созданием огромного файрвола, продемонстрировала свою веру в силу информации и идеи. В бесчисленных выступления председателя идет речь о том, что партия ведет идеологическую войну с либерализмом в целом и США в частности. Поэтому следует отнестись к китайцам с уважением и начать верить в то, что они заявляют, отказавшись при этом от своего солипсизма по отношению к Китаю.

Необходимые меры

К сожалению, свободному и динамично развивающемуся Гонконгу пришел конец. Стало ясно, что Китай решил отвоевать этот город, который безусловно является китайским и подчиняется китайским законам. Несомненно, происходящее с уйгурами в Синьцзяне является недопустимым, однако США не стоит вмешиваться в это.

Все более очевидным является тот факт, что настойчивое требование Китая о том, чтобы Запад не вмешивался во внутренние дела государства, является невзаимным сантиментом. Существует огромный перечень западных компаний, которые терпят издевательства со стороны Китая за распространение западного контента. Поднебесная наводняет Facebook и Twitter пропагандисткой информацией о пандемии коронавируса и распространяет дезинформацию о китайской диаспоре через WeChat.

Пришло время начать воспринимать Китай серьезно и буквально, учитывая тот факт, что Коммунистическая партия не только идеологически противостоит либеральным ценностям, а и считает, что только марксизм позволит преодолеть либерализм. С этой целью правительство Китая уже более 20 лет контролирует информационные потоки в пределах своих границ, а последние несколько лет этот контроль стал распространяться и на другие страны. Пришло время для ответной реакции со стороны США, как на правительственном, так и корпоративном уровне.

Во-первых, проблема безопасности данных вызывает обоснованную озабоченность. Поэтому, все компании, которые имеют доступ к ценной информации или интеллектуальной собственности, а также данным, имеющим отношение к национальной безопасности, должны запретить своим сотрудникам использовать WeChat, чтобы устранить возможность даже случайных утечек данных. Кроме того, тем же компаниям и правительственным органам следует отказаться от использования Zoom до тех пор, пока американская компания не вернет большую часть своих разработок из Китая в США и не продемонстрирует более высокий уровень корпоративного контроля.

Однако в идеологической войне наибольшее значение имеет влияние. По этой причине TikTok не должен принадлежать ByteDance. Было бы правильным, если бы ByteDance продал TikTok некитайской компании или некитайским инвесторам, но не Facebook. TikTok - это не только великолепное приложение для просмотра видеороликов. Он представляет серьезную угрозу для Facebook в плане удержания внимания пользователей и может стать причиной утраты позиций на рынке рекламы в долгосрочной перспективе. Простой запрет TikTok лишь откроет новые возможности для Instagram Reels, клона TikTok от Facebook.

Однако если ByteDance не пожелает продать свой продукт, правительство США должно быть готовым к адекватным действиям. Одним из возможных вариантов решения является приобретение Musical.ly Комитетом по иностранным инвестициям в США либо применение Закона о международных чрезвычайных экономических полномочиях, что потребовало бы объявления чрезвычайного положения в стране. Примечательно, что пока App Store и Google Play контролируют большую часть трафика, необходимость в файрволе уровня ISP отсутствует. Apple и Google могут удалить приложение TikTok из магазина приложений, а также заблокировать уже установленное приложение на устройствах пользователей.

Разумеется, это не самый лучший выход из сложившейся ситуации. США это не Китай, который на протяжении многих лет блокирует американские социальные сети. Но войны ведут не потому, что человечество жаждет вступить в борьбу, а потому что люди стремятся к миру. Поскольку Китай наступает на либерализм не только в своих собственных границах, а и за их пределами, в интересах либерализма избавиться от направления, которое пустило свои корни только лишь потому, что оно блестяще продумано, чтобы давать людям именно то, что они хотят получить.

Одно из самых ужасных заблуждений, связанное со спорами о TikTok, является то, что все это может привести к расколу интернета. Это стирает в порошок историю Великого китайского файрвола, который был создан 23 года назад. Именно он отрезал рынок Китая от западных поставщиков услуг. Тот факт, что США наконец могут ответить тем же, является отражением уже существующей реальности, а не созданием новой.

Но действительно новой тенденцией является раскол глобальной сети за пределами Китая: предложенная США модель по-прежнему используется в большинстве стран мира, однако государства ЕС и Индия все чаще выбирают свой собственный путь.

Американская модель

Модель глобальной сети, используемая США, не предполагает вмешательство в личную жизнь, поэтому ее эффективность сложно оспорить. Экономика США бурно развивается на протяжении многих лет не только благодаря мощному технологическому сектору. Американские интернет-компании доминируют в большинстве регионов мира, используя так называемую мягкую силу США в виде фастфуда и голливудских блокбастеров. Такой подход имеет как сильные, так и слабые стороны: отсутствие трений в интернете приводит к доминированию агрегаторов, что в свою очередь приводит к формированию как хороших, так и плохих пользовательских групп.

Однако мы фокусируем внимание на экономическом аспекте в первую очередь, и с учетом этого выделим победителей и проигравших от подхода, используемого США.

Стороны-победители:

• Крупные американские технологические компании могут свободно работать в США, имея огромную и прибыльную пользовательскую базу, которая обеспечивает достаточное финансирование для зарубежной экспансии.

• Новые технологические компании в США не сталкиваются с серьезными препятствиями для входа на рынок, особенно с точки зрения регулирования контента и сбора данных.

• Подавляющее большинство поступлений в казну США это налоги, которые платят эти компании, в том числе с их доходов, получаемых за рубежом. При этом, правительство США получает общее видение мира через эти технологические компании, а также доступ к данным пользователей, не являющихся гражданами США.

• Гражданам США обеспечены довольно широкие свободы на времяпровождение в интернете. Однако, частные компании сталкиваются с некоторыми ограничениями на сбор данных пользователей всемирной паутины.

• Пользователи интернета, не являющиеся гражданами США, также имеют большие свободы для использования интернета. При этом частные компании и правительство США также сталкиваются с некоторыми ограничениями на сбор данных этих пользователей, не являющихся гражданами США.

• Компании, зарегистрированные за пределами США, могут свободно работать на рынке США без каких-либо серьезных ограничений, а также в других странах, использующих концепцию США.

Проигравшие стороны:

• Неамериканские правительства имеют ограниченный контроль над деятельностью технологических компаний США, а также ограниченный доступ к их доходам. И, что не менее важно, они имеют ограниченный контроль над распространением информации.

Вероятнее всего, многие согласятся с тем, что подход США является самым лучшим. Разумеется, можно оспорить влияние на новые компании, так как агрегаторы всегда стремятся доминировать на своих рынках, в то время как прочие участники сосредоточены на сборе данных. Но настоящее беспокойство вызывает то, что предлагаемые варианты решения проблемы приносят еще больше вреда, особенно если учесть преимущества фабрик данных для конечных потребителей. Тем не менее, Суд ЕС предоставил вполне убедительные доводы касательно того, что способность правительства США собирать данные пользователей, не являющихся гражданами США, представляет собой серьезную угрозу конфиденциальности информации.

Но все эти придирки лишь подчеркивают проблему, с которой нельзя не согласиться: правительства многих стран имеют все законные основания для жалоб на гегемонию технологических компаний США.

Китайская модель

Контроль над распространением информации основополагающая сила китайской модели. Об этом свидетельствует не только то, что Китай установил контроль доступа к западным сервисам на сетевом уровне, а и то, что правительство Поднебесной использует огромное количество цензоров для китайского сегмента глобальной сети. Кроме того, местное правительство ожидает от китайских компаний, таких как Tencent или ByteDance, что они будут использовать тысячи собственных цензоров.

В то же время, сложно отрицать, что китайский подход приносит определенную экономическую выгоду для этого государства. Китай является единственной державой, которая способна соперничать с США по размеру и распространенности своих интернет-компаний благодаря сочетанию огромного рынка и отсутствию конкуренции. Более того, это способствует всевозможным инновациям, так как стремление Китая к мобильности избавило его от предрассудков, связанных с бизнес-моделью онлайн маркетинга, завязанной на использовании персональных компьютеров, которая все еще ограничивает возможности многих американских компаний.

Однако встает вопрос: насколько воспроизводимой является китайская модель? Ряд более мелких стран, таких как Иран, аналогичным способом ограничивают возможности американских технологических компаний. Но без такого крупного рынка, которым располагает Китай, использовать экономический потенциал Великого файрвола куда сложнее. И, следует заметить, что китайская модель обладает преимуществами далеко не для всех участников, в том числе для самих граждан Китая.

Европейская модель

Посредством GDRP и Copyright Directive, а также по решению Европейского суда, принятого совсем недавно, которое отменяет рамки, накладываемые Privacy Shield и согласованные Европейской Комиссией совместно с Управлением международной торговли США (а также предыдущего решения, которое отменяет принципы конфиденциальности, установленные Safe Harbor), Европа фактически сформировала свой собственный сегмент интернета.

Но, такой интернет кажется наихудшим вариантом из всех возможных. Крупные технологические компании США вышли победителями (по крайней мере, в сравнении со всеми остальными участниками): несмотря на рост расходов, связанных с нормативной волокитой (и снижение дохода в случае таргетинговой рекламы), американские компании только расширили свое влияние на потенциальных конкурентов.

С другой стороны, преимуществом для граждан Евросоюза является то, что их данные теперь будут более защищенными от правительства США. Однако, прочие меры защиты вряд ли окажутся эффективными и смогут перевесить всеобщую раздраженность и потерю актуальности, обусловленные бесконечными спорами касательно разрешающих прав и нерелевантного контента. Более того, число конкурентов на рынке для существующих операторов значительно снизится, особенно в сравнении с компаниями США.

Весьма маловероятно, что этот пробел смогут заполнить европейские конкуренты. Любая компания, желающая достичь широких масштабов, вначале должна добиться этого на внутреннем рынке, прежде чем начинать свою экспансию за рубеж. Вероятнее всего, Европа будет выступать в качестве вторичного рынка для компаний, которые проделали всю грязную работу по обработке данных и созданию продуктов, соответствующих требованиям рынков, которые более открыты для экспериментов и не заставляют нести тяжелое регуляторное бремя. Если компания готова на более высокие затраты, значит она имеет более серьезные ожидания того, что успех будет достигнут. Такой подход требует использования проверенной модели вместо спекулятивной.

Худшим является то (по крайней мере, с точки зрения стран ЕС), что данный подход не предоставляет никаких преимуществ для правительств европейских стран. Акцент на регулировании обуславливает следующее правило: если компания не делает ставку на собственный рост, для нее значительно сложнее создавать беспроигрышные ситуации.

Индийская модель

Индийский рынок всегда был уникальным в сравнении с другими: в то время как зарубежные компании никогда не были заложниками цифровых продуктов (что способствовало получению огромной пользовательской аудитории у таких американских компаний, как Google и Facebook, или у китайского TikTok), Индия сохранила более жесткую привязку к физическим технологиям. Из этого вытекают более высокие цены на электронику и запрет на прямые иностранные инвестиции в такие сферы, как электронная коммерция. Более того, Индия всегда являлась самым непростым рынком с точки зрения доступа в интернет и логистики.

В то же время, индийский рынок всегда являлся одним из самых привлекательных для американских и китайских компаний, господствующих на своих внутренних рынках. Это приводило к постоянным баталиям между иностранными технологическими компаниями и индийскими регуляторами: попытки Facebook внедрить Free Basics, платежная система WhatsApp, жесткие ограничения на операции, проводимые с использованием сервисов Amazon и Flipkart, а также недавно введенный полный запрет TikTok, обусловленный угрозой национальной безопасности.

Однако, в последние несколько месяцев был найден очевидный способ преодоления этих проблем, в частности, для американских технологических компаний, и все это предвещает создание четвертого интернета инвестирование в платформы Jio.

Ставка на платформы Jio

Jio это телекоммуникационная сеть, доминирующая на рынке Индии. Jio является прекрасным примером того, какую выгоду может принести ставка на технологический прорыв. Суть этой ставки, сделанной Макешем Амбани, одним из самых богатых предпринимателей в Индии, состоит в том, что он построил свою сеть для передачи данных, в частности на сетях 4G, в то время как все остальные индийские провайдеры мобильной связи, как и операторы других стран, основывают свою работу на обеспечении голосовых вызовов в первую очередь. Вот несколько важных особенностей такого подхода:

• В отличие от 2G и 3G, сети 4G не поддерживают традиционные услуги телефонии с коммутацией каналов связи. Вместо этого, все голосовые вызовы обрабатываются таким же способом, как и данные другого типа.

• Поскольку в сети 4G все является данными, для построения сетей используют стандартное оборудование, которое неприменимо для реализации сетей 2G или 3G.

• Поскольку платформа Jio предлагает сеть передачи данных, голосовые вызовы ввиду невысоких требований к пропускной способности являются самым дешевым типом услуг (а пропускная способность 4G фактически стремится к бесконечности).

Говоря проще, Jio делает ставку на нулевые предельные издержки, ну или как минимум, на более низкие предельные издержки, чем у любых конкурентов. Из этого следует, что оптимальной стратегией являлось потратить огромную сумму заранее, а затем стремиться заполучить как можно более крупную аудиторию клиентов, чтобы извлечь максимальную выгоду из этих инвестиций.

Именно это и было сделано: Jio потратила 32 млрд долларов на построение сети, охватывающую всю Индию, привлекла клиентов, предложив возможность совершать голосовые звонки абсолютно бесплатно на протяжении первых трех месяцев, а затем сохранила статус бесплатной услуги для голосовых вызовов. При этом компания взимает небольшую плату (всего несколько долларов за 1 ГБ) за передачу данных. Это соответствует классической стратегии, используемой стартапами из Кремниевой долины: сначала потратить деньги, а затем восполнить их благодаря использованию превосходной структуры затрат, обеспеченной нулевой маржей, характерной для цифровых продуктов.

Все это выглядит еще более убедительным благодаря контрасту на фоне аргументов Facebook в пользу Free Basics. По словам Цукерберга, конечная цель состоит в том, чтобы подключить сотни миллионов индийцев, проживающих в бедных районах страны, к интернету. Однако, в отличие от Free Basics, это должен быть мировой интернет.

Это явная недооценка того, насколько Jio является более полезным для жителей Индии, чем Free Basics. Цукерберг не стремился менять старый уклад в сфере мобильной связи, согласно которому провайдеры сосредоточили наибольшие инвестиции в крупнейших городах и вели борьбу за самых обеспеченных клиентов. Бедные слои индийского сообщества могли бы получить доступ к Facebook, но не более, поскольку компании, не сотрудничающие с Free Basics, не видят стимулов для инвестирования. Вместо этого, Jio не только обеспечивает доступ ко всему интернету, а и привлекает внимание индийских, китайских и даже американских компаний, которые соперничают друг с другом за право сотрудничать с этой платформой. Так, Facebook потратил 5,7 млрд долларов на покупку 10% акций Jio. Как оазалось, это лишь первая из множества инвестиций в эту компанию:

• В мае 2020 года сразу несколько компаний инвестировали в Jio: Silver Lake Partners, General Atlantic и KKR 790 млн долларов на приобретение 1,15% акций, 930 млн долларов на покупку 1,34% акций и 1,6 млрд долларов на получение 2,32% акций соответственно.

• В июне 2020 года суверенные фонды Mubadala и Adia в ОАЭ и суверенный фонд Саудовской Аравии инвестировали 1,3 млрд долларов за 1,85% акций, 800 млн долларов за 1,16% и 1,6 млрд долларов за 2,32% акций соответственно. Кроме того, Silver Lake Partners приобрели еще 2,08% акций за 640 млн долларов, TPG купили 0,93% акций за те же 640 млн долларов, Catterton внесли 270 млн долларов чтобы получить 0,39% акций. Intel также не пожалели 253 млн долларов чтобы приобрести 0,39% акций.

• В июле 2020 года компания Qualcomm инвестировала 97 млн долларов в покупку 0,15% акций, в то время как Google выделил 4,7 млрд долларов на приобретение 7,7% акций.

Благодаря этой сумасшедшей скупке акций компании, Reliance смог выплатить многомиллиардную задолженность, образовавшуюся в связи с займом средств на построение платформы Jio. Но уже стало очевидным то, что компания имеет амбиции, которые выходят далеко за рамки простого оператора мобильной связи.

Видение компании Jio

После объявления о крупных инвестициях Google в платформы Jio, на ежегодном общем собрании Reliance Industries, Амбани заявил следующее:

Вначале я хочу вам рассказать о философии, которая вдохновляет все текущие и последующие инициативы Jio. Цифровая революция знаменует величайшую трансформацию в истории человечества, которая сопоставима с самим фактом появления людей, обладавших интеллектуальными способностями, что произошло примерно 50 тыс. лет назад. Эти вещи сопоставимы по той причине, что сейчас люди начинают менять мир вокруг себя, формируя разум, обладающий практически безграничными возможностями.

Сегодняшний день это начальный этап эволюции разумной планеты. В отличие от предыдущих, эта эволюция будет продвигаться со скоростью, характерной для революции. Всего за восемь оставшихся столетий XXI века наш мир изменится настолько, насколько он не менялся на протяжении предыдущих 20 веков. Впервые в истории человечество получило возможность исправить глобальные проблемы, которые оно унаследовало из прошлого. Это способствует созданию прекрасного, счастливого и процветающего мира для каждого. Для достижения этого, мы снабдим всех наших сотрудников и все наши предприятия необходимыми технологическими и инфраструктурными возможностями. В этом и заключаются цели и амбиции Jio.

Друзья, заполучив самую крупную клиентскую базу и обеспечивая крупнейший трафик данных и голосовых вызовов, а также используя широкополосную сеть передачи данных нового поколения, охватывающую всю страну, Jio является бесспорным лидером на рынке Индии. Видение Jio остается неизменным, и оно основано на двух важных составляющих: цифровая связь и цифровые платформы.

Говоря проще, Jio полон решимости осуществить мечту, которая казалась недостижимой для всех поставщиков телекоммуникационных услуг в других странах, - выполнить переход от инфраструктуры с фиксированной стоимостью к услугам с высокой маржей.

Jio имеет несколько принципиальных отличий от телекоммуникационных компаний, работающих на других рынках:

• Во-первых, Jio сформировала огромную часть собственного целевого рынка, в то время как Verizon в США или NTT DoCoMo в Японии стремились предоставлять свои услуги в качестве дополнения к конкурентному рынку телекоммуникаций. Jio это единственный вариант для огромного числа жителей Индии (и даже если не является единственным, то значительно более дешевым вариантом благодаря развитой IP-сети, которая может себе позволить дополнительные затраты).

• Во-вторых, вместо попытки узурпировать такие крупные компании, как Google или Facebook, которым уже принадлежат огромные доли рынка в Индии, Jio сотрудничает с ними.

• В-третьих, Jio позиционирует себя как беспрецедентный лидер на рынке Индии, и как стержень индийской модели.

Обратите внимание на то, как Амбани анонсировал планы Jio по внедрению 5G:

Глобальная сеть 4G Jio состоит из оптоволоконных каналов, аппаратных и программных решений, созданных молодыми специалистами Jio прямо здесь, в Индии. Все эти технологии и ноу-хау, созданные нашими сотрудниками, позволяют Jio находиться в непосредственной близости к еще одному захватывающему рубежу технологии 5G.

Друзья, сегодня я с гордостью заявляю о том, что команда Jio разработала и спроектировала с нуля полноценное решение в области сетей 5G. Благодаря этому, мы сможем запустить в Индии услугу передачи данных в сетях 5G мирового класса на основе отечественных технологий и решений. Разработанная в Индии технология 5G будет готова к испытаниям и к дальнейшему развертыванию в следующем году. Благодаря конвергентной сетевой архитектуре, которая полностью основана на IP-сети, мы сможем легко обновить нашу существующую сеть 4G до 5G.

Как только 5G сеть компании Jio будет испытана в масштабах Индии, платформы Jio получат хорошие возможности для предоставления собственных решений в области сетей 5G для операторов других стран мира в виде полноценной управляемой услуги. Я посвящаю нашу технологию 5G видению Атманирхбхара Бхарата нашего премьер-министра Шри Нарендры Моди.

Друзья, задуманная с этим видением развития оригинальной интеллектуальной собственности, платформа Jio дает нам возможность продемонстрировать преобразующую силу технологий во многих отраслях, сначала в нашей стране, а затем предлагать созданные в Индии высокотехнологические решения всему миру.

Не стоит заблуждаться, что сеть Jio и работа компании над 5G, занимавшая годы, была мотивирована фразой премьер-министра, которую он впервые произнес всего пару месяцев назад. Скорее всего, самоотверженный Амбани намекнул на то, какую роль в развитии Jio сыграли инвесторы, такие как Google и Facebook, а также на их ожидания от этих инвестиций:

• Jio использует собственные инвестиции чтобы фактически стать монополистом на рынке телекоммуникационных услуг Индии.

• Jio становится единственным рычагом правительства для контроля интернета и сбора своей доли доходов с рынка.

• Jio становится надежной инфраструктурой для привлечения иностранных инвестиций. Несомненно, зарубежным компаниям придется делить свои доходы с Jio, однако Jio устранит все нормативные и инфраструктурные препятствия, которые мешали входу зарубежных компаний на рынок Индии на протяжении многих лет.

Удивительно, что такой подход делает неоднозначным список выигравших и проигравших сторон. С одной стороны, миллионы граждан Индии получили доступ к интернету, и выгода от этого будет только расти по мере предоставления услуг и заключения партнерских соглашений с Jio. С другой стороны, стремление играть роль монополиста, особенно в контексте правительства, которое демонстрирует стремление к контролю над потоками информации, является серьезным недостатком.

Экономические результаты также не являются очевидными. Монополии всегда терпят убытки. Например, если эффективный рынок означает, что вся прибыль устремится в Кремниевую долину, тогда зачем Индии заботиться об обеспечении эффективности? На рынке, опосредованном Jio, именно американские технологические компании получают меньшую прибыль, чем могли бы. И не только Индия собирает огромные налоги. Стремление Jio стать лидером не только на отечественном, а и зарубежных рынках, может привести к огромной победе Индии в долгосрочной перспективе.

Индийский противовес

В последнее время представляется все менее возможным (по крайней мере, неправильным) давать оценку технологической отрасли и ее крупнейшим игрокам без учета геополитических проблем. С точки зрения США, не только неразумно, а и неуважительно ожидать, что Индия согласится на роль государства-вассала. Однако, было бы неплохо иметь противовес Китаю с точки зрения географии, и противовес развивающимся странам. Jio рассматривает многие проблемные области, о которых технологические компании США зачастую не осведомлены, что важно не только для Индии, а для большинства других стран мира.

Тем не менее, таким компаниям, как Facebook, Google, Intel, Qualcomm, следует быть на чеку, поскольку фактически они являются средством достижения цели для компании и государства в целом, которые выбрали свой собственный путь развития. Нельзя сказать, что все эти инвестиции были плохой идеей, но путь Индии может оказаться более популистским и националистическим, чем предпочли бы многие американцы. Тем не менее, Индия настроена менее враждебно по отношению к западному либерализму, чем Коммунистическая партия Китая. К тому же она является важным противовесом.

Остается лишь вопрос: куда движется Европа? Судя по всему, ЕС выбрал не лучший вариант дальнейшего развития. Европейский интернет отличается от видения США, Китая и Индии как раз отсутствием этого видения. Не предпринимая каких-либо действий кроме введения постоянных запретов, ЕС напоминает бледную имитацию имитации статуса-кво, когда деньги играют значительно большую роль, чем инновации.

1. Facebook установил запрет на публикацию контента, который отрицает факт Холокоста. Примечательно, что компания длительное время не запрещала публикацию подобных материалов и на протяжении более десяти лет подвергалась критике за нежелание устанавливать запрет на публикации антисемитского контента.

2. По данным последних исследований, популярность дезинформирующего контента, публикуемого на страницах Facebook, возросла в 4 раза по сравнению с предыдущей президентской гонкой (выборы президента США 2016 года). Согласно новому отчету German Marshall Fund Digital, количество жалоб на вебсайты, содержащие вводящий в заблуждение контент, возросло на 242% с третьего квартала 2016 года по третий квартал 2020 года.

3. По заявлению представителей компании Microsoft, им удалось нейтрализовать сеть ботов, в той или иной степени оказывающих влияние на инфраструктуру для проведения президентских выборов. Компания также ограничила работу серверов, обеспечивавших работу ботнета Trickbot, который занимается распространением вредоносного ПО.

4. Штат Висконсин ответил отказом Apple на предоставление его крупнейшему поставщику льготных условий после того, как компания отказалась от строительства завода, который мог бы обеспечить рабочими местами тысяч жителей штата. Компания Foxconn заключила сделку с правительственными органами в 2017 году, пообещав построить завод по производству крупных телевизионных дисплеев, предоставив тем самым 13000 новых рабочих мест.

5. Суперзвезда НФЛ Малкольм Дженкинс создал фонд венчурного капитала, направленный на расширение прав и возможностей темнокожих учредителей и инвесторов. На текущий момент Broad Street Ventures уже инвестировала в такие известные стартапы, как Airbnb и Epic Games. Долгосрочная цель компании инвестиции в черный и коричневый бизнес, который традиционно игнорирует венчурная индустрия.

6. Несмотря на то, что Facebook заблокировал возможность распространять контент, связанный с теорией заговора QAnon, генеральный директор YouTube не собирается убирать его со своей платформы. По словам Сьюзен Воджицки, YouTube и так удалил сотни тысяч видеороликов связанных с QAnon и внес изменения в алгоритмы рекомендации видеоконтента.

7. Серена Уильямс, владеющая собственной фирмой венчурного капитала, удалила любые упоминания о Coinbase со своего вебсайта несмотря на то, что инвестировала в эту платформу в 2018 году. Coinbase захлестнула волна разногласий после письма генерального директора Брайана Армстронга, в котором он призвал сотрудников оставить политику и социальные интересы за дверью.

8. Неделю назад в Китае появилось специальное приложение, которое позволяло жителям Китая получать доступ к Facebook и Google, но спустя время оно было удалено. Приложение представляет собой мобильный браузер Tuber, созданный китайским разработчиком, который является дочерней компанией Qihoo 360.

9. Некоторые источники утверждают, что законодательные органы ЕС составляют специальный список компаний для ввода ограничений с целью обуздать власть Кремниевой долины. Всего список будет состоять из 20 позиций и включать таких технологических гигантов, как Facebook и Apple.

10. Triller, приложение похожее на TikTok, рассматривает возможность первичного размещения ценных бумаг (IPO), так как количество его пользователей стремительно растет. По данным агентства Reuters, представители Triller ведут переговоры с инвестиционным банком Farvahar Partners о потенциальном слиянии и последующем IPO.

Привет, меня зовут Маша, я работаю маркетинговым аналитиком в Ozon. Наша команда "питонит" и "эскьюэлит" во все руки и ноги во благо всего маркетинга компании. Одной из моих обязанностей является поддержка аналитики для команды медийной рекламы Ozon.

Медийная реклама Ozon представлена на разных площадках: Facebook, Google, MyTarget, TikTok и другие. Для эффективной работы любой рекламной кампании необходима оперативная аналитика. В данной статье речь пойдет о моём опыте сбора рекламных данных с площадки TikTok без посредников и лишних заморочек.

Задача на сбор статистики: вводные

У команды медийной рекламы Ozon есть бизнес-аккаунт TikTok, в котором они управляют всей рекламой на этой площадке. Они долго терпели, сами собирали данные из рекламных кабинетов, но всё-таки настало время, когда терпеть уже больше было нельзя. Так у меня появилась задача на автоматизацию сбора статистики из TikTok.

У нас в базах уже были данные о заказах по кампаниям из TikTok, для эффективной аналитики не хватало данных о расходах.

Итак, весь процесс от "нам нужны данные по расходам из TikTok" до "у нас есть данные по расходам из TikTok" разделился для нас на следующие этапы:

1. регистрация аккаунта разработчика,

2. создание приложения,

3. авторизация бизнес-аккаунта в приложении,

4. запрос, получение, обработка и загрузка данных.

Рассмотрим каждый из этапов подробнее.

Регистрация разработчика

Мы зарегестрировали аккаунт разработчика на нашего бизнес-менеджера. Перешли на портал TikTok Marketing API, нажали на "My Apps", далее кликнули на "Become a Developer", и началась череда заполнения форм.

TikTok не Facebook, у нас ничего ни разу не отклонял, но всё равно мы были очень внимательны при заполнении полей и не добавляли то, что нам не нужно прямо сейчас. Например, в поле "What services do you provide?" добавили только "Reporting".

Последним пунктом был "Create App". Процесс создания аккаунта разработчика и приложения в первый раз происходит вместе.

Создание приложения

Заполняем имя и описание приложение, callback-address. Далее нужно выбрать разрешения, которые приложение будет запрашивать у авторизирующегося в нем аккаунта. Так же, как и при заполнении полей для аккаунта разработчика, выбрали только пункт "Reporting". Указали ID рекламного аккаунта. После этого отправили приложение на проверку.

Как сообщает TikTok в своей документации, проверка может занять от двух до трех рабочих дней. Мы отправили приложение на проверку в пятницу, в понедельник с утра у нас уже было одобренное приложение и можно было продолжить работу.

К сожалению, у меня нет для вас советов на тот случай, если ваше приложение не одобрили. Главное, о чём нужно помнить это правильно заполнять все обязательные поля и запрашивать разрешения только на то, что действительно необходимо: ни больше, ни меньше.

Авторизация бизнес-аккаунта в приложении

Из всей рутинной работы по заполнению форм, эта часть оказалось самой интересной. У нас не было web-приложения, которое бы отлавливало редирект с авторизационным кодом, поэтому автоматическую авторизацию бизнес-аккаунта сделать не получилось. Но мы оперативно потыкали в кнопки и получили заветный Access Token, с помощью которого собираем данные всех рекламных аккаунтов нашего бизнес-менеджера.

Итак, по порядку, что мы делали не имея сайта, который бы отлавливал callback с авторизационным кодом.

1. Зашли в приложение и указали Callback Address https://www.ozon.ru.

2. Скопировали Authorized URL, перешли по нему, авторизовались под аккаунтом бизнес-менеджера.

3. Согласились на предоставление разрешений для приложения, нажали "Confirm".

4. Далее нас перекинуло на сайт Ozon, но с дополнительными аргументами в url. Получилось наподобие такого https://www.ozon.ru/?auth_code=XXXXXXXXXXX.

5. Скопировали значение auth_code, в приложении скопировали secret и app_id и отправили запрос к TikTok на получение long-term Access Token.

curl -H "Content-Type:application/json" -X POST \-d '{    "secret": "SECRET",     "app_id": "APP_ID",     "auth_code": "AUTH_CODE"}' \https://ads.tiktok.com/open_api/v1.2/oauth2/access_token

Получили ответ такого вида:

{    "message": "OK",     "code": 0,     "data": {        "access_token": "XXXXXXXXXXXXXXXXXXXX",         "scope": [4],         "advertiser_ids": [            1111111111111111111,             2222222222222222222]    },     "request_id": "XXXXXXXXXXXXXXX"}

Важно было успеть отправить запрос на получение long-term Access Token как можно быстрее, после редиректа на сайт Ozon. Связано это с временем жизни auth_code 10 минут.

Из полученного ответа необходимо сохранить значения access_token, его нужно использовать при каждом запросе. Если access_token будет потерян или, того хуже, скомпрометирован, нужно будет заново выполнять все пункты по аваторизации аккаунта бизнес-менеджера.

Так же при запросах нам понадобиться список advertiser_ids, но его не обязательно сахранять прямо сейчас список ID аккаунтов всегда можно посмотреть в аккаунте бизнес-менеджера.

Всё, мы готовы писать запросы!

Получение статистики

Когда мы только начинали собирать данные из TikTok, я пользовалась методом, который сейчас depricated, поэтому сразу расскажу о новом.

Итак, у нас есть всё необходимое для получения данных, а именно:

• access_token,

• список advertiser_ids.

В результате нужно получить расходы по кампаниям, в группировке до названия рекламного объявления.

Значение media source всегда неизменно, так как источник один TikTok. По остальным параметрам можно запросить данные из API TikTok.

Теперь нужно было решить, с какой детализацией по времени будем тянуть данные. TikTok позволяет загружать детализацию по часу и дню. Если выгружать детализацию по часу, то, максимум, за один запрос можно получить данные только за один день; если запрашивать детализацию по дням максимум, на один запрос мы получим 30 дней. Конверсии в покупки анализируются за целый день, поэтому и расходы решили собирать за день.

В новом методе получения данных добавили фильтр по типу размещения рекламы: AUCTION и RESERVATION. Ozon использует только AUCTION в своей стратегии ведения кампаний.

Кроме расходов мы собирали также и другую рекламную статистику по кампаниям: просмотры, клики, количество уникальных пользователей смотревших рекламу и другое. В итоге получился такой список метрик:

METRICS = [    "campaign_name", # название кампании    "adgroup_name", # название группы объявлений    "ad_name", # название объявления    "spend", # потраченные деньги (валюта задаётся в рекламном кабинете)    "impressions", # просмотры    "clicks", # клики    "reach", # количество уникальных пользователей, смотревших рекламу    "video_views_p25", # количество просмотров 25% видео    "video_views_p50", # количество просмотров 50% видео    "video_views_p75", # количество просмотров 75% видео    "video_views_p100", # количество просмотров 100% видео    "frequency" # среднее количество просмотра рекламы каждым пользователем]

В документации TikTok для каждого метода API описан пример на языках Java, Python, PHP и также curl-запрос. Я использовала пример на Python с небольшими изменениями.

В примерах из документации TikTok используются две дополнительные библиотеки:

pip install requestspip install six

Библиотека requests необходима для удобной отправки get-запросов. Библиотека six используется для генерации url-адреса запроса.

И еще две библиотеки, которые я уже добавила сама для того, чтобы записать данные в базу:

pip install pandaspip install sqlalchemy

В нашей компании для хранения данных используются SQL-подобные хранилища, поэтому я использую pandas для преобразования данных в DataFrame и sqlalchemy для записи DataFrame в базу.

Я использовала функции из примера в документации TikTok для генерации url и отправки запроса.

# генерирует url на основе словаря args с аргументами запросаdef build_url(args: dict) -> str:    query_string = urlencode({k: v if isinstance(v, string_types) else json.dumps(v) for k, v in args.items()})    scheme = "https"    netloc = "ads.tiktok.com"    path = "/open_api/v1.1/reports/integrated/get/"    return urlunparse((scheme, netloc, path, "", query_string, ""))# отправляет запрос к TikTok Marketing API,# возвращает результат в виде преобразованного json в словарьdef get(args: dict, access_token: str) -> dict:    url = build_url(args)    headers = {        "Access-Token": access_token,    }    rsp = requests.get(url, headers=headers)    return rsp.json()

На вход функции get нужно передать список аргументов и access token. Список аргументов под наши цели выглядит следующим образом:

args = {    "metrics": METRICS, # список метрик, описанный выше    "data_level": "AUCTION_AD", # тип рекламы    "start_date": 'YYYY-MM-DD', # начальный день запроса    "end_date": 'YYYY-MM-DD', # конечный день запроса    "page_size": 1000, # размер страницы - количество объектов, которое возвращается за один запрос     "page": 1, # порядковый номер страницы (если данные не поместились в один запрос, аргумент инкрементируется)    "advertiser_id": advertiser_id, # один из ID из advertiser_ids, который мы получили при генерации access token    "report_type": "BASIC", # тип отчета    "dimensions": ["ad_id", "stat_time_day"] # аргументы группировки, вплоть до объявления и за целый день} 

Подробнее про page_size: ответ на запрос может содержать большое количество информации и загружать всё это за один раз не эффективно. Поэтому у TikTok есть ограничение на максимальное количество объектов в ответе 1000. Чтобы получить следующую порцию данных, нужно отправить запрос с теми же входными аргументами на следующую страницу. Подробнее о постраничных запросах ниже.

В ответ на запуск функции get получаем словарь подобного вида.

{       # маркер успешности ответа    "message": "OK",    "code": 0,    "data": {        # информация о странице данных        "page_info": {            # общее количество объектов            "total_number": 3000,            # текущая страница            "page": 1,            # количество объектов на одной странице ответа            "page_size": 1000,            # общее количество страниц            "total_page": 3        },        # массив объектов        "list": [            # первый объект            {                # метрики                "metrics": {                    "video_views_p25": "0",                    "video_views_p100": "0",                    "adgroup_name": "adgroup_name",                    "reach": "0",                    "spend": "0.0",                    "frequency": "0.0",                    "video_views_p75": "0",                    "video_views_p50": "0",                    "ad_name": "ad_name",                    "campaign_name": "campaign_name",                    "impressions": "0",                    "clicks": "0"                },                # измерения (по каким параметрам группируем результаты)                "dimensions": {                    "stat_time_day": "YYYY-MM-DD HH: mm: ss",                    "ad_id": 111111111111111                }            },...        ]    },    # id ответа    "request_id": "11111111111111111111111"}

Как я описывала выше, если в ответе получается более 1000 объектов, ответ будет разбит на несколько страниц. В данном случае поле total_page говорит о том, что для получения полного набора данных по указанным параметрам, нужны будут три страницы. Следовательно, запускаем и коллекционируем ответы пока не выгрузим все страницы.

page = 1 # сначала всегда получаем данные по первой страницеresult_dict = {} # словарь, в который будем записывать ответыresult = get(args, access_token) # первый запросresult_dict[advertiser_id] = result['data']['list'] # сохраняем ответ на запрос к первой странице# пока текущая полученная страница page меньше # чем общее количество страниц в последнем ответе resultwhile page < result['data']['page_info']['total_page']:    # увеличиваем значение страницы на 1    page += 1    # обновляем значение текущей страницы в словаре аргументов запроса    args['page'] = page    # запрашиваем ответ по текущей странице page    result = get(args, access_token)    # накапливаем ответ    result_dict[advertiser_id] += result['data']['list']

Такое необходимо повторить для каждого рекламного аккаунта из списка advertiser_ids.

В результате всех вышеописанных манипуляций мы получили для каждого рекламного аккаунта данные по рекламным метрикам. Осталось только преобразовать словарь в pandas.DataFrame и отправить их в базу.

# результирующий DataFrame, который будем записывать в базуdata_df = pd.DataFrame()# для каждого рекламного аккаунта выполнить преобразованиеfor adv_id in advertiser_ids:    # получаем накопленные разультаты для аккаунта из словаря    adv_input_list = result_dict[adv_id]    # временный список    adv_result_list = []    # для каждого объекта    for adv_input_row in adv_input_list:        # берём словарь метрик        metrics = adv_input_row['metrics']        # насыщаем этот словарь словарём измерений        metrics.update(adv_input_row['dimensions'])        # добавляем полученный объект во временный список        adv_result_list.append(metrics)    # преобразуем временный словарь в DataFrame     result_df = pd.DataFrame(adv_result_list)    # добавляем колонку со значением id аккаунта    result_df['account'] = adv_id    # добавляем получившийся DataFrame в результирующий    data_df = data_df.append(        result_df,         ignore_index=True    )## здесь пропущены некоторые манипуляции # по преобразованию строк в числа## запись данных из результирующего DataFrame в базуdata_df.to_sql(    schema=schema,     name=table,     con=connection,    if_exists = 'append',    index = False)

TikTok утверждает, что исторические данные по статистике не меняеются, а если и меняются, то это должна быть экстроординарная ситуации, наподобие аварии в ЦОД. Но на основе опыта получения данных от Facebook, я решила что всё равно буду перезаписывать семь последних дней (цифра семь появилась эмпирически).

В итоге получился вот такой скрипт, который каждый день обновляется данные по TikTok кампаниям за последние семь дней.

# импорт библиотекimport jsonfrom datetime import datetimefrom datetime import timedeltaimport requestsfrom six import string_typesfrom six.moves.urllib.parse import urlencodefrom six.moves.urllib.parse import urlunparseimport pandas as pdimport sqlalchemy# генерирует url на основе словаря args с аргументами запросаdef build_url(args: dict) -> str:    query_string = urlencode({k: v if isinstance(v, string_types) else json.dumps(v) for k, v in args.items()})    scheme = "https"    netloc = "ads.tiktok.com"    path = "/open_api/v1.1/reports/integrated/get/"    return urlunparse((scheme, netloc, path, "", query_string, ""))# отправляет запрос к TikTok Marketing API,# возвращает результат в виде преобразованного json в словарьdef get(args: dict, access_token: str) -> dict:    url = build_url(args)    headers = {        "Access-Token": access_token,    }    rsp = requests.get(url, headers=headers)    return rsp.json()# обновляет данные в базе за последние семь дней# (или, если указаны start_date и end_date, для периода [start_date, end_date])def update_tiktik_data(    # словарь с доступами к API TikTok    tiktok_conn: dict,    # словарь с доступами к базе данных    db_conn: dict,    # список id рекламных кабинетов    advertiser_ids: list,    # необязательное поле: начало периода    start_date:datetime=None,    # необязательное поле: окончание периода    end_date:datetime=None):    access_token = tiktok_conn['password']    start_date = datetime.now() - timedelta(7) if start_date is None else start_date    end_date = datetime.now() - timedelta(1) if end_date is None else end_date    START_DATE = datetime.strftime(start_date, '%Y-%m-%d')    END_DATE = datetime.strftime(end_date, '%Y-%m-%d')    SCHEMA = "schema"    TABLE = "table"    PAGE_SIZE = 1000    METRICS = [        "campaign_name", # название кампании        "adgroup_name", # название группы объявлений        "ad_name", # название объявления        "spend", # потраченные деньги (валюта задаётся в рекламном кабинете)        "impressions", # просмотры        "clicks", # клики        "reach", # количество уникальных пользователей, смотревших рекламу        "video_views_p25", # количество просмотров 25% видео        "video_views_p50", # количество просмотров 50% видео        "video_views_p75", # количество просмотров 75% видео        "video_views_p100", # количество просмотров 100% видео        "frequency" # среднее количество просмотра рекламы каждым пользователем    ]    result_dict = {} # словарь, в который будем записывать ответы    for advertiser_id in advertiser_ids:        page = 1 # сначала всегда получаем данные по первой странице        args = {            "metrics": METRICS, # список метрик, описанный выше            "data_level": "AUCTION_AD", # тип рекламы            "start_date": START_DATE, # начальный день запроса            "end_date": END_DATE, # конечный день запроса            "page_size": PAGE_SIZE, # размер страницы - количество объектов, которое возвращается за один запрос             "page": 1, # порядковый номер страницы (если данные не поместились в один запрос, аргумент инкрементируется)            "advertiser_id": advertiser_id, # один из ID из advertiser_ids, который мы получили при генерации access token            "report_type": "BASIC", # тип отчета            "dimensions": ["ad_id", "stat_time_day"] # аргументы группировки, вплоть до объявления и за целый день        }        result = get(args, access_token) # первый запрос        result_dict[advertiser_id] = result['data']['list'] # сохраняем ответ на запрос к первой странице        # пока текущая полученная страница page меньше,         # чем общее количество страниц в последнем ответе result        while page < result['data']['page_info']['total_page']:            # увеличиваем значение страницы на 1            page += 1            # обновляем значение текущей страницы в словаре аргументов запроса            args['page'] = page            # запрашиваем ответ по текущей странице page            result = get(args, access_token)            # накапливаем ответ            result_dict[advertiser_id] += result['data']['list']    # результирующий DataFrame, который будем записывать в базу    data_df = pd.DataFrame()    # для каждого рекламного аккаунта выполнить преобразование    for adv_id in advertiser_ids:        # получаем накопленные разультаты для аккаунта из словаря        adv_input_list = result_dict[adv_id]        # временный список        adv_result_list = []        # для каждого объекта        for adv_input_row in adv_input_list:            # берем словарь метрик            metrics = adv_input_row['metrics']            # насыщаем этот словарь словарём измерений            metrics.update(adv_input_row['dimensions'])            # добавляем полученный объект во временный список            adv_result_list.append(metrics)        # преобразуем временный словарь в DataFrame         result_df = pd.DataFrame(adv_result_list)        # добавляем колонку со значением id аккаунта        result_df['account'] = adv_id        # добавляем получившийся DataFrame в результирующий        data_df = data_df.append(            result_df,             ignore_index=True        )    #    # здесь пропущены некоторые манипуляции     # по преобразованию строк в числа    #        # создание подключения к базе    connection = sqlalchemy.create_engine(        '{db_type}://{user}:{pswd}@{host}:{port}/{path}'.format(            db_type=db_conn['db_type'],             user=db_conn['user'],             pswd=db_conn['password'],            host=db_conn['host'],            port=db_conn['port'],            path=db_conn['path']         )    )    # удаление последних семи дней из базы    with connection.connect() as conn:        conn.execute(f"""delete from {SCHEMA}.{TABLE}         where date >= '{START_DATE}' and date <= '{END_DATE}'""")    # запись данных из результирующего DataFrame в базу    data_df.to_sql(        schema=SCHEMA,         name=TABLE,         con=connection,        if_exists = 'append',        index = False    )

Миссия выполнена!

Подведем итоги

Итого, на всевышеописанные действия было потрачено менее одного рабочего дня (не считая времени, которое приложение было на проверке). Надеюсь, мне удалось показать, что уровень вхождения в API TikTok достаточно низкий, и для настройки автоматического сбора данных не нужно обязательно привлекать разработчика или блуждать по лабиринтам документации и запутанной логики.

К слову о лабиринтах, в Facebook тот же самый один рабочий день уходит на то, чтобы создать аккаунт разработчика, протыкать все галочки о политике конфидециальности и условий использования, создать приложение, настроить его и т.д. И в итоге к концу дня у тебя не работающий ETL по сбору данных, а очередной Permission Denied и распухшая голова, в которой крутится только одна мысль "что я делаю не так".

Конечно, сравнивать Facebook и TikTok не очень правильно: второй ещё относительно молод и ему еще только предстоит быть обвешанным хитрыми условиями, запретами и всеми возможными сложностями. Но сейчас всего этого пока нет, так что пользоваться TikTok Marketing API крайне удобно. Надеюсь, моя статья вам немного в этом поможет.

Полезные ссылки

• TikTok Marketing API: официальная документация;

• Пример запроса статистики с официальной документации TikTok;

• Библиотека request: официальная документация;

• Библиотека six: официальная документация;

• Библиотека pandas: официальная документация;

• Библиотека sqlalchemy: официальная документация.

Ранее в нашем блоге мы уже писали о хитросплетениях сделки вокруг TikTok. В итоге она была согласована американский бизнес владельца TikTok, компании ByteDance, продадут конгломерату Oralce и Walmart. Это должно позволить компании избежать блокировки соцсети на территории США.

Ранее обеспокоенность тем, что персональные данные американцев хранятся за пределами страны высказывал президент США. Он заявлял о том, что если ByteDance не продаст американскую часть бизнеса, то соцсеть будет заблокирована. Китайские власти также включились в борьбу вокруг TikTok, и их участие в какой-то момент обвалило акции Walmart и Microsoft еще одной компании, желавшей поучаствовать в покупке соцсети.

Что случилось

Когда возможные проблемы TikTok и сделка по продажи американской части сервиса начали широко обсуждаться в августе 2020 года, в один из торговых дней на бирже акции Walmart и Microsoft начали ощутимо терять в цене, снизившись на пару процентов за торговую сессию.

Это было вызвано новостями из Китая власти этой страны объявили о намерении ужесточить правила экспорта технологий. В список технологий, экспорт которых подлежит ограничению, попали инструменты для анализа текста, рекомендаций контента, моделирование речи и распознавание голоса. Согласно новым правилам экспортировать эти технологии нельзя без лицензии местных китайских властей.

Все это внесло новые сложности в и так непростые переговоры между ByteDance и потенциальными покупателями.

Что смущало покупателей TikTok

Издание The Wall Street Journal выяснило, что камнем преткновения в переговорах стали алгоритмы приложения.

Алгоритмы, которые определяют, какие видео показываются пользователям, считаются главным технологическим ноу-хау TikTok. Вплоть до последнего момента покупатели считали, что алгоритмы войдут в сделку. Однако из-за введенных китайскими властями новых ограничений на экспорт технологий искусственного интеллекта сталонепонятно, затронут ли эти ограничения алгоритмы TikTok.

Для покупателей сделка с TikTok, которая не будет включать сами алгоритмы, благодаря которым вовлеченность пользователей держится на крайне высоком уровне, выглядела далеко не так привлекательно.

Как сделка будет выглядеть в итоге

До сих пор финального одобрения сделки со стороны властей США и Китая не последовало. СМИ активно обсуждают ее детали, которым нет официального подтверждения. В частности, сообщалось, что ByteDance не планирует передавать покупателям алгоритмы и технологии TikTok, они получат лишь возможность изучений исходного кода самого приложения.

Кроме того, американская часть бизнеса TikTok будет выделена в новую компанию TikTok Global, и до сих пор непонятно, будет ли ByteDance иметь к ней отношение. Представители китайской компании заявляли о том, что у них останется до 80% доли в новом юрлице. При этом, вице-президент Oracle Кен Глек (Ken Glueck) заявлял о том, что американские инвесторы будут владеть большей частью компании, а у ByteDance не будет доли в TikTok Global.

Источники The Wall Street Journal сообщали, что технически заявления топ-менеджера Oracle корректны ByteDance не будет технически иметь отношения к TikTok Global, но акции получат американские инвесторы самой ByteDance около 40% компании принадлежит венчурным компаниям из США.

Президент Дональд Трамп уже высказался по теме:

У них [Orale и Walmart] будет контрольный пакет. Все перенесут в созданное Oracle облако его будет полностью контролировать Oracle, заявил президент в интервью Fox News. Если мы узнаем, что у них нет тотального контроля, то не одобрим сделку.

В России акции Microsoft и других американских компаний можно купить на Санкт-Петербургской бирже. Для этого не нужно открывать счет у иностранного брокера, достаточно будет российского счета. Открыть его можно онлайн.

Читайте обзоры, аналитику рынков и инвестидеи в Telegram-канале ITI Capital

Полезные ссылки по теме инвестиций и биржевой торговли:

• Открыть брокерский счет онлайн

• Тестовый счет с виртуальными деньгами

• Софт для торговли на бирже: торговый терминал, мобильные приложения

• Структурные продукты

• Модельные портфели

Сделка по покупке корпорацией Microsoft американской части бизнеса соцсети TikTok стала одной из главных саг последнего месяца. На протяжении всего времени переговоров с владеющей сервисом китайской компанией ByteDance серьезное влияние на их ход оказывали высказывания президента США Дональда Трампа.

В нашей новой статье разбираемся с тем, на какой стадии сделка находится сейчас, что смущает покупателей, и как на все это реагируют в самом Китае.

Влияние президента США

В начале августа Дональд Трамп заявил, что планирует запретить TikTok на территории США, чтобы компания не передавала данные американских пользователей в Китай. Единственным способом избежать бана Трамп назвал продажу американской компании до 15 сентября.

Свои намерения президент США закрепил двумя указами, запрещающими гражданам США осуществлять сделки и проводить транзакциями с китайскими компаниями ByteDance и Tencent и связанными с ними юрлицами.

Кто хочет купить TikTok

Главным претендентом на покупку американского бизнеса TikTok является Microsoft, также поучаствовать в сделке решила Wal-Mart, отдельную заявку также подала Oracle. По данным инсайдеров, обсуждаемая цена сделки находится в пределах от $10 до $30 млрд все зависит от того, какая именно часть компании и в какой форме будет продана.

Что может пойти не так

По данным CNBC, ByteDance нашла покупателей не только на американский сегмент TikTok, но и на часть бизнеса в Новой Зеландии и Австралии. При этом, в ByteDance заявляли, что просто так провести сделку не удастся ее должно согласовать правительство Китая. И здесь начинаются главные трудности.

Несмотря на то, что журналисты прогнозировали закрытие сделки уже первого сентября 2020 года, этого не произошло. Издание The Wall Street Journal выяснило, что камнем преткновения в переговорах стали алгоритмы приложения.

Алгоритмы, которые определяют, какие видео показываются пользователям, считаются главным технологическим ноу-хау TikTok. Вплоть до последнего момента покупатели считали, что алгоритмы войдут в сделку. Однако впоследствии китайское правительство опубликовало новые ограничения на экспорт технологий искусственного интеллекта. Теперь до конца непонятно, затронут ли эти ограничения алгоритмы TikTok.

Для покупателей сделка с TikTok, которая не будет включать сами алгоритмы, благодаря которым вовлеченность пользователей держится на крайне высоком уровне, выглядит далеко не так привлекательно.

При этом, инсайдеры заявляют о том, что существует вероятность покупки только пользовательской базы приложения без алгоритмов тогда покупателям придется разработать их заново.

Почему всем так нужны алгоритмы TikTok

Успех TikTok во многом обусловлен качеством алгоритмов персонализации, использующимися в приложении. С помощью технологий ИИ и машинного обучения, ByteDance смогла научить приложение показывать пользователям те видео, которые с наибольшей вероятностью привлекут их внимание все это на основе данных о предыдущих взаимодействиях с продуктом.

В итоге пользователи активно залипают в приложении, а их число растет. В начале 2018 года их было около 11 млн, а сейчас месячная аудитория TikTok превышает 100 млн человек.

Заключение

По словам источников, знакомых с ходом обсуждений, китайское правительство внесло новые ограничения в качестве ответа на активность президента США, который вынуждал китайскую компанию продать популярную технологию. Две страны уже достаточно давно находятся в состоянии торговой войны, которая затрагивает все больше ИТ-компаний.

В России акции Microsoft и других американских компаний можно купить на Санкт-Петербургской бирже. Для этого не нужно открывать счет у иностранного брокера, достаточно будет российского счета. Открыть его можно онлайн.

Читайте обзоры, аналитику рынков и инвестидеи в Telegram-канале ITI Capital

Полезные ссылки по теме инвестиций и биржевой торговли:

• Открыть брокерский счет онлайн

• Тестовый счет с виртуальными деньгами

• Софт для торговли на бирже: торговый терминал, мобильные приложения

• Структурные продукты

• Модельные портфели