Сегодня хочу поговорить о том, сколько места занимает Ютуб на серверах Гугла и возможна ли ситуация, что Ютуба станет настолько большим, что свободное место для новых видео закончится?
Таймкоды
00:00:00 Загрузка видео на YouTube
- Каждую минуту на YouTube загружают 500 часов видео.
- За сутки загружается столько видео, что для их просмотра одному человеку понадобится 82 года жизни.
- Серверами YouTube управляет Google, который имеет значительные ресурсы для хранения данных.
00:00:48 История YouTube
- В начале 2000-х видео на сайтах загружались через ссылки, а не через онлайн-плееры.
- YouTube появился в 2005 году и совершил революцию, позволив быстро смотреть видео онлайн.
- До 2006 года на YouTube можно было загружать видео любой длительности, но с 2006 года начали соблюдаться авторские права.
00:02:24 Проблемы с хостингом
- С 2005 по 2006 годы контент YouTube размещался на стороннем хостинге Server Beach.
- К 2007 году объём трафика на YouTube равнялся всему трафику интернета в 2000 году.
- Использование чужого хостинга становилось всё труднее и дороже.
00:03:58 Покупка YouTube Google
- В октябре 2006 года Google купил YouTube за 1,6 миллиарда долларов.
- До недавнего времени YouTube не приносил Google прибыли, тратя больше, чем зарабатывал на рекламе.
00:05:57 Сжатие данных
- YouTube использует сжатие данных для уменьшения размера видеофайлов.
- Сжатие может приводить к потере качества, как показано в эксперименте Маркеса Брауни.
- ТикТок имеет менее актуальную проблему хранения данных из-за меньшего размера коротких видео.
00:07:18 Резервные копии и закон Мура
- YouTube хранит копии видео в нескольких разрешениях и резервные копии.
- Закон Мура обещает технический прогресс, который позволит хранить больше данных.
- Хранилища Google измеряются в эксабайтах, и технический прогресс обеспечивает стабильность.
00:10:50 Будущее хранения данных
- Закон Мура может перестать работать, когда потребуются слишком маленькие транзисторы.
- Возможные будущие технологии хранения данных включают жёсткие диски из ДНК и квантовые системы.
- Технический прогресс обеспечивает стабильность YouTube в ближайшие годы.
Таймкоды в нейросети https://300.ya.ru/v_qHgKmwtn/
В этом видео
0:00
каждую минуту на YouTube загружают 500
0:02
часов видео за сутки загружается столько
0:04
видео что для их просмотра вам одному
0:07
понадобится 82 года жизни это
0:10
колоссальные объёмы представить которые
0:12
также трудно как и бесконечность
0:14
Вселенной Но что будет если место где
0:16
хранятся все эти видео когда-нибудь
0:18
закончится Да сейчас серверами туба
0:21
занимается Google крупнейшая и
0:23
богатейшая it компания в мире которая
0:25
умеет хранить данные когда-то они даже
0:27
баловались с целыми кораблями наполнен
0:30
серверами Однако позже эксперимент
0:32
прикрыли но в день на YouTube
0:33
загружается более 3 млн видео и
0:36
свободное место под них пожалуй Одно из
0:39
самых главных конкурентных преимуществ
0:41
туба потому что мало кто в мире может
0:43
предоставить такой гигантский объём
0:46
свободного пространства на серверах из
0:48
ближайших конкурентов сразу же
0:49
вспоминается VK или tiktok Но первый
0:52
актуальный только для России а вот с
0:53
tiktok есть нюанс Но об этом чуть позже
Каким было видео в раннем интернете
0:56
Давайте сначала вспомним с чего всё
0:58
начиналось ведь в начале годов видео на
1:01
сайтах практически никто не смотрел
1:03
сайты отдавали вам только ссылку на
1:05
видеофайл по ней вы качали с сервера
1:07
ролик конечно же приличного содержания и
1:10
наслаждались им у себя на компьютере
1:12
никаких вам онлайн видеоплееров это
1:15
работало в обе стороны То есть если вы
1:17
хотели не скачать а загрузить в интернет
1:20
своё видео и сохранить его там делиться
1:22
с друзьями и прочее то перед вами стояла
1:25
ровно такая же задача закинуть видео на
1:27
сервер и дать ссылку друзьям через
1:30
которую происходила весьма долгая для
1:33
тех времён загрузка Диалаб нае модемы и
1:35
всё такое поэтому YouTube который
1:36
появился в 2005 году совершил в хорошем
1:39
смысле революцию кто-то один раз
1:41
загружает видео на YouTube а остальные
1:43
люди десятки тысячи и даже миллионы
1:45
Могут просто и быстро посмотреть этот
1:47
ролик на сайте если у них установлено
1:49
Adobe шп Но что немаловажно YouTube
1:52
видео можно смотреть Не только на ютубер
1:55
дали возможность взять и встроить код
1:57
видео на свои сайты тем самым не
1:59
нагружая собственные сервера а
2:01
пользоваться мощностями туба и в это
2:03
сейчас трудно поверить но в первый год
2:05
после открытия то есть до 2006 года на
2:08
YouTube можно было загружать в плане
2:09
видео вообще всё что угодно но
2:12
длительностью до 10 минут потому что
2:14
только в 2006 году они начали Понемногу
2:17
соблюдать авторские права примерно в то
2:19
же время появились и другие
2:21
видеохостинги например vimeo или Del M
2:24
но как вы знаете история расставила всё
2:26
по местам и YouTube В итоге стал
2:27
монополистом в этой сфере мы говори
2:30
посмотри видео и почти всегда
2:32
подразумеваем под этим YouTube Однако
Как Ютуб справлялся с нагрузками
2:34
вот вопрос уже в сентябре 2005 у юба
2:37
появилась первая видео набравшее 1 млн
2:39
просмотров как я уже сказал YouTube
2:41
набирал популярность среди зрителей
2:43
практически не имел ограничений на
2:45
загрузку так как же YouTube справлялся с
2:47
такой нагрузкой будучи стартапом
2:49
сделанным буквально в гараже тремя
2:51
простыми но одарёнными парнями ответ
2:54
такой что никак никак они не справлялись
2:58
и речь тут даже не знаменитую заморозку
3:00
в 301 просмотр которую YouTube
3:02
использовал аж до 2015 года чтобы
3:05
проверять реальность просмотров на
3:07
быстро растущих видео Нет дело в том что
3:09
с 2005 по 2006 годы контент юба
3:12
размещался на стороннем хостинге север
3:14
Beach Что в переводе означает сервер
3:16
пляж на тот момент у хостинга была акция
3:19
суть которая сводилась к тому что Они
3:21
давали своим клиентам неограниченную
3:23
пропускную способность Если те
3:25
оплачивали хостинг на какое-то время
3:27
вперёд но акция Севе Beach была бы
3:29
рассчитана на обычные сайты по сути
3:32
маркетинговая Уловка чтобы заплатить
3:34
чуть побольше прямо сейчас Но зато потом
3:36
не париться с какими-то ограничениями
3:38
портящий жизнь людям заходящим на сайт
3:40
вот только YouTube не был обычным сайтом
3:43
просто Представьте что к 2007 году объём
3:45
трафика который крутился только на
3:47
ютубера внял всему трафику который
3:50
потреблял весь интернет во всём мире в
3:53
2000 году Поэтому пользоваться чужим
3:55
хостингом становилось всё труднее и
3:57
дороже и дороже – это весь важное
Сколько стоит Ютуб
4:00
замечание потому что на тот момент
4:02
потенциальная цена туба на рынке росла
4:04
компания по расчётам аналитиков стоила
4:06
очень много но у них при этом было очень
4:09
мало реальных денег дело тут в том что
4:11
концепция юту была очень привлекательной
4:13
для зрителей Но не для инвесторов
4:15
которые считали каждый доллар и Да в
4:18
самом начале YouTube получил так
4:19
называемый венчурный капитал но это была
4:21
капля в море аппетиты серверов росли и
4:24
денег от рекламы было недостаточно для
4:26
покрытия расходов и будущее юба на 99%
4:29
моя начала где-то На горизонте под
4:31
названием крах и банкротство но в
4:33
октябре 2006 Google купил YouTube за 1,6
4:37
млрд долларов и тут нужно понимать их
4:40
купил Google компания которая имела
4:43
такие большие деньги и компания которая
4:45
в том числе специализировалась на
4:48
правильно хранении данных пользователей
4:50
Однако самое удивительное заключалось в
4:52
том что YouTube до недавнего времени то
4:54
есть буквально Больше 15 лет не приносил
4:57
Гуглу прибыли как минимум же всё что
5:00
заработал на рекламе как максимум съедая
5:03
больше чем заработал в маркетинге это
5:05
называется товар приманка или убыточный
5:07
Лидер когда компания продаёт товар по
5:09
сниженной цене себе в убыток с расчётом
5:12
на то что покупатель из-за этой акции
5:14
потом ещё вернётся и совершит вторую
5:16
попытку но уже в плюс поэтому то что в
5:19
данный момент YouTube так агрессивно
5:21
начал зарабатывать на рекламе на платных
5:23
сервисах бороться с блокировщика рекламы
5:25
и прочее это просто потому что наступил
5:28
момент отложенной выгоды Они могли бы
5:30
это сделать и раньше но развивались до
5:32
такого уровня чтобы в конце концов
5:34
пришло время собирать урожай Однако Как
Сжатие данных
5:36
вы понимаете YouTube с каждым днём
5:38
потребляет всё больше и больше трафика
5:41
сжирает
5:43
они будут зарабатывать тем больше они
5:46
будут тратить на сервера Казалось бы это
5:48
замкнутый круг Если бы не Google и его
5:51
Волшебная научная магия под названием
5:54
сжатия данных благодаря чему можно
5:56
сделать вот что смотрите одно из
5:58
последних моих видео не листай вверх в
6:00
кодаке m2t весит 2,5 ГБ После загрузки
6:04
на YouTube оно обрабатывается сжимается
6:07
их кодеком с потерей качества если я его
6:09
скачаю обратно то видео будет уже весить
6:12
17 Мб Вау тут важно понимать что есть
6:16
сжатие с потерей качества и без потери
6:19
качества без потери – это когда вы
6:20
например
6:25
разбираетесь А с потерей качества – это
6:27
когда вы разбираетесь
6:29
и кладёте в коробку только сидушку и вот
6:32
этот поршень А крестовину все болты
6:35
подлокотники и колёсики записываете на
6:38
бумажке в список так чтобы перед
6:40
повторной сборкой их нужно было бы
6:42
распечатать на 3D принтере или купить в
6:44
ближайшем магазине К сожалению как бы не
6:46
старался YouTube его кодекс сжатия
6:49
болтики теряет что видно в эксперименте
6:52
маркеса Брауни который 1.000 раз скачал
6:55
загрузил снова скачал и снова загрузил
6:57
одно и то же видео на YouTube поэтому
6:59
самое время вспомнить что в самом начале
7:01
ролика я упоминал tiktok так вот для них
7:04
проблема хранения данных менее актуальна
7:06
потому что изначальный размер коротких
7:09
вертикальных видео сильно меньше поэтому
7:11
tiktok по сути выбрал более выгодную во
7:14
всех смыслах экономическую модель как же
7:16
происходит сжатие Самый распространённый
7:19
способ – это снизить битрейт снижение
7:21
этого показателя может Здорово уменьшить
7:23
вес конечного файла при этом видео мало
7:25
заметно теряет в качестве Однако это
7:28
очень плохо работает на роли где очень
7:30
много мелких движущихся объектов и тем
7:32
не менее сжатие с одной стороны решает
7:34
проблему хранения данных Но с другой
Копирование видео
7:36
стороны за сжатием всегда стоят копии
7:39
ведь YouTube хранит копии одного видео в
7:42
нескольких разрешениях и при этом у него
7:44
есть ещё и резервные копии со слов
7:46
сотрудников юту у каждого видео имеется
7:49
с десяток резервных копий это сделано
7:52
для того чтобы зрителям во-первых
7:54
быстрее отдавалось видео в зависимости
7:56
от их местонахождения во-вторых чтобы
7:58
видео не исчезать Да когда из строя
8:00
выходят жёсткие диски то же самое
8:02
касается и осознанно якобы удалённых
8:05
видео да когда вы нажимаете кнопку
8:07
удалить то YouTube предупреждает вас что
8:09
все эти изменения будут безвозвратным и
8:12
отмене не подлежат Однако такое уже не
8:14
раз случалось на практике когда крупные
8:16
каналы взламывали с хакерами и с них
8:17
удалялись ролики Но YouTube их потом
8:19
восстанавливал Так что давайте с новыми
Сколько места нужно Ютубу
8:22
знаниями вернёмся снова к началу нашего
8:24
ролика и прикинем в день на YouTube
8:26
загружают более 3 млн видеороликов при
8:28
этом YouTube их сжимает но одновременно
8:30
с этим множить на копии фактически
8:32
создавая примерно 12 млн видеофайлов как
8:35
минимум я напомню Это цифра растёт
8:38
прогрессирует каждый день Поэтому
8:40
возникает вопрос а достигнет ли YouTube
8:42
когда-нибудь своего физического предела
8:44
не произойдёт ли ситуация что сервера
8:46
закончатся не успевая докупать Скорее
8:50
всего нет Потому что есть закон Мура он
8:53
звучит так количество транзисторов
8:55
размещённых на кристалле интегральной
8:57
схемы удваивается каждые 24 месяца для
9:00
гуманитариев звучит как бред согласен и
9:02
для технарей тоже потому что закон Мура
9:05
относится к вычислительным мощностям не
9:07
к жёстким дискам но смысл заключается в
9:10
том что каждые 2 года реально происходит
9:12
Прогресс благодаря которому хранилище
9:14
данных уменьшаются в размерах становятся
9:17
дешевле но при этом вмещают в себя
9:19
больше данных тем более не стоит
9:21
забывать что скорее всего Google
9:22
использует многоуровневую систему
9:24
хранения в которой наиболее
9:25
востребованные видео лежат на быстрых
9:28
SSD а редкие никогда не используемый на
9:30
HDD этот закон довольно-таки легко
9:33
увидеть на примере флешки Сегодня я могу
9:35
купить флешку на 1 ТБ за 1.000 руб а 2
9:38
или 4 года назад это было невозможно
9:41
представить но YouTube весит не
9:43
терабайты хранилище Гугла измеряются в
9:45
кбайтах предполагается что их размер
9:48
около 10 эксабайт 1 эксабайт – это 1
9:52
млрд гиб если предположить что одно
9:55
среднее видео весит 1 ГБ то для загрузки
9:58
3 млн каждый день для их временного
10:01
хранения обработки создания резервных
10:04
копий и так далее Гуглу требуется новое
10:06
место по 3 пита байта данных 1 пиб
10:09
равняется
10:10
1024 ТБ Поэтому если продолжать
10:13
тенденцию по загрузка Такими темпами 10
10:16
эксабайт хранилища Гугла YouTube может
10:18
всё-таки забить за 7 лет но Согласно
10:20
закону мура и техническому прогрессу
10:23
каждые 2 года происходит техническая
10:26
революция И как вы понимаете за 7 лет
10:28
многое может Измени мени Так что какими
10:30
бы астрономическими не казались нам эти
10:32
цифры по крайней мере на данный момент
10:34
технический прогресс обеспечивает Ютубу
10:36
стабильность в хранении данных и в
10:38
ближайшие годы ничего страшного не
Главное ограничение
10:40
случится но есть проблема закон Мура –
10:43
это не закон а просто логические выводы
10:46
которые упираются в физические
10:49
ограничения нашего мира например закон
10:51
Мура перестанет работать когда
10:53
понадобятся транзисторы настолько
10:55
маленькие что их производство будет
10:57
невозможным точно также с хранилищами
11:00
данных и вот
11:02
тогда но наверное не стоит напоминать
11:05
вам про жёсткий диск из ДНК или хранение
11:08
данных в квантовой системе тем
11:10
интереснее жить тем интереснее это всё
11:12
увидеть Живите свободно пока и не
11:15
забывайте переходить на мой Telegram
11:16
канал там всё о
