Автор |
Сообщение |
Maximus ®
Вольный стрелок Uploader 100+
Стаж: 17 лет 5 мес.
Сообщений: 5046
Ratio: 25.177
Поблагодарили: 13176
100%
|
Amazon построила одну из крупнейших в мире компьютерных сетей, однако предложенный ею способ передачи данных вызывает удивление. В ходе ежегодной конференции для клиентов в Лас-Вегасе представители компании сообщили о планах использовать для доставки информации из дата-центров в свое облачное хранилище грузовики.
Как считают в Amazon, скорость передачи данных по интернету недостаточно высокая, и быстрее будет воспользоваться грузовой машиной. Непосредственно в выставочном зале, где проходила конференция, был представлен специальный грузовик Snowmobile, способный вместить 5 петабайт информации.
Машина будет подъезжать к офисам клиентов, забирать данные и отвозить их прямиком в Amazon, где они будут загружаться в облачное хранилище Amazon Web Services (AWS). Весь процесс займет намного меньше времени, чем если бы информация передавалась с помощью интернета, сообщает The Wall Street Journal. Десять Snowmobile смогут перевезти один эксабайт информации меньше, чем за 6 месяцев. Передача такого количества данных с помощью Сети заняла бы около 26 лет.
Стоимость грузовиков не раскрывается. Тем не менее, по словам главы AWS Энди Джесси (Andy Jassy), в распоряжении компании уже есть несколько Snowmobile, используемых клиентами.Источник |
_________________ «Если ты ненавидишь, значит тебя победили» – Конфуций
|
|
|
Nkek
Стаж: 9 лет 10 мес.
Сообщений: 1191
Ratio: 10.835
Поблагодарили: 150
100%
|
Скоро в РФ будут тысячи таких грузовиков по пакету Яровой работать. Целыми колоннами ездить от провайдеров прямиком в Кремль. Главное никого из правообладателей не волнует, что все их лицензионные фильмы будут в скором времени фактически национализированы государством. |
|
|
|
md40vip
Стаж: 7 лет 8 мес.
Сообщений: 649
Ratio: 23.024
100%
|
Omega448 писал(а): | что то сомнительная идея, а время потраченное на закачку инфы в грузовики? |
А вы думаете что информация будет переносится всего лишь 1ним интерфейсом на весь массив дисков информации и в какие-нибудь сраные 100 гигабит в секунду? Стоит задуматься,о том что люди организовавшие такую махину как Amazon однозначно не дураки,то первое в голову что приходит,что интерфейсов будет много,второе это будут интерфейсы передачи данных самые высокоскоростные,которые есть на данный момент для дисковых массивов. Для таких объемов данных нет смысла дисковый массив преобразовывать в трафик для сети чтоб потом опять его записать на диск. Единственное,что не понятно,кто и для чего оперирует такими объемами данных. Одно дело архив складировать,другое,когда такие данные надо собирать из ЦОД регулярно. |
|
|
|
Nkek
Стаж: 9 лет 10 мес.
Сообщений: 1191
Ratio: 10.835
Поблагодарили: 150
100%
|
md40vip Единственные клиенты это киностудии заливающие свои фильмы в Амазон Видео. Но я не вижу никаких проблем передать по сети готовый 5Гб WEB_DL файл на сервер, даже если это делать на постоянной основе. |
|
|
|
666MAXIMUS999
Uploader 300+
Стаж: 13 лет
Сообщений: 1076
Ratio: 10K
Поблагодарили: 1965
100%
|
md40vip писал(а): | Omega448 писал(а): | что то сомнительная идея, а время потраченное на закачку инфы в грузовики? |
Единственное,что не понятно,кто и для чего оперирует такими объемами данных. Одно дело архив складировать,другое,когда такие данные надо собирать из ЦОД регулярно. |
Вот именно тут куча странностей, скорее под прикрытием перевозки данных эти грузовику будут возить нечто иное. Смысл скачивать данные их ЦОД, перевозить и закачивать в другой ЦОЦ, когда за это время часть данных изменится, данные должны передаваться в оба направления, и постоянно обновляться. Один эксабайт это не так то и много, = 1048576 Тб, даже при передачи по одному стандартному оптоволоконному каналу на 100 гбит/с = 8388608 секунд, или 139810,1333 минут, 2330,168889 часов, или 97 дней, или 3 месяца, что уже намного быстрее заявленных 6 месяцев. Но есть уже в эксплуатации каналы и на 400 гбит/с, где даже по одному каналу 1 эксабайт будет передан всего за 24 дня. Самая же быстрая опытный линии на 255 Тбит/сек, т.е. 32 Тб/сек, по которой 1 эксабайт будет передан всего за 9 часов. Так что эти грузовики полный бред, надо развивать оптоволоконные каналы передачи данных и протоколы передачи. 5Пб- вместимость одной машины, даже по 100 гбит каналу передаётся всего за 11 часов. |
|
|
|
sqwerti
Стаж: 13 лет 8 мес.
Сообщений: 65
Ratio: 2.236
100%
Откуда: карибы
|
здрасте можно мне фуру на 100петабайт. |
|
|
|
md40vip
Стаж: 7 лет 8 мес.
Сообщений: 649
Ratio: 23.024
100%
|
Речь ведется даже не о терабайтахне говоря уже о гигабайтах. На трекере есть люди которые раздают почти терабайт за сутки. Если это может делать 1 человек,что говорить об Amazon и тем более о правообладателе с фильмом пускай даже на 100 с лишним гигабайт. Если зайдете в даркнет,найдете там сообщения о регулярной продаже не отпарсеных логов снятых троянами. Объемы и кол-во логов просто поражают. Там столько этого добра,что оно продается почти за копейки и что обрабатывать весь этот хлам,просто нет компьютерных мощностей у тех кто собирает эти логи. Я так думаю что это и будет основное назначание таких грузовиков. Со множества источников будут регулярно сливаться логи в облако Амазон,а потом эти логи поедут на грузовике в суперкомпьютер на обработку и дальнейшую укладку в базу данных,от куда готовые сформированные проиндексированные таблицы,такие же огромные,но уже меньшего маштаба поедут уже в другое место. |
|
|
|
GezoeSloog
Стаж: 11 лет 11 мес.
Сообщений: 25
Ratio: 1044.515
Раздал: 305.2 TB
100%
|
666MAXIMUS999 писал(а): | Один эксабайт ... на 100 гбит/с ... 97 дней |
google.ru/search?q=2%5E60*8%2F(100*10%5E9)%2F24%2F60%2F60 ~3 года |
|
|
|
md40vip
Стаж: 7 лет 8 мес.
Сообщений: 649
Ratio: 23.024
100%
|
За математику ЗАЧЕТ. Теперь о реальной жизни. 100Gbit это как правило магистральные каналы и клиенту увы такие далеко не всегда нужны из-за высокой стоимости обслуживания. Тот же Amazon для крупного клиента может и построить хорошую оптико-волоконную сеть,но...Сколько лет будет окупаться эта сеть?А стоимость грузовика даже со всеми дисковыми массивами в любом случае выгоднее чем строить каждому такому клиенту хорошую сеть. Откройте одного из крупных нидерландских хостеров и посмотрите его расценки на подключение арендованного оборудования к гигабитным каналам. Если учесть важность передаваемых данных и их постоянство - строительство оптического канала оправдано полностью. В случае например с пользовательскими данными снятыми ботами и троянами,это в огромной доле хлам и мусор,непонятно пригодится когда или нет,строить сеть под такие данные и тем более привязываться к какому-то одному облаку не совсем целесообразно. От сюда и получается,что как бы ни казалась бредовой идея возить данные в грузовиках,она для определенных направлений более чем себя оправдывает. |
|
|
|
Woktor56
Стаж: 7 лет 7 мес.
Сообщений: 464
Ratio: 31.887
29.41%
|
Я сам HDD провайдерам иногда отсылаю, перекачивать 2+ Тб муторнее, чем послать диск |
|
|
|
miksto
Стаж: 9 лет 2 мес.
Сообщений: 485
Ratio: 8.303
0.54%
|
Так все верно. Большие данные реально так быстрее перевозить. Действительно большие данные по сети можно месяцами передавать. Это может быть как быстрее, так и намного дешевле. |
|
|
|
spec61
Стаж: 13 лет 9 мес.
Сообщений: 7
Ratio: 16.38
9.76%
|
Omega448 писал(а): | что то сомнительная идея, а время потраченное на закачку инфы в грузовики? |
возможно они оригиналы данных повезут а не копии? |
|
|
|
irinius
Стаж: 7 лет 10 мес.
Сообщений: 90
Ratio: 1.024
100%
|
По мне еще лучше делать копии в процессе, а потом отвозить и тупо жесткие втыкать в сервак. |
|
|
|
se-mir
Стаж: 11 лет 6 мес.
Сообщений: 258
Ratio: 21.499
100%
Откуда: Україна
|
Как обычно умиляет количество спецов в комментах Если вы такие умные - почему до сих пор бедные? Ибо будь вы людьми обеспеченными - не сидели бы на пиратском контенте. |
|
|
|
Седьмой
Стаж: 12 лет 7 мес.
Сообщений: 410
Ratio: 6.442
Раздал: 3.39 TB
Поблагодарили: 595
100%
Откуда: Хабаровск
|
Omega448 писал(а): | что то сомнительная идея, а время потраченное на закачку инфы в грузовики? |
зависит от интерфейса через который будут закачивать в грузовик. И вряд ли это будет sata3. Скорее всего что то наподобие pci в многоканальном режиме с райдо подобной системой передачи. |
|
|
|
moraksX
Стаж: 9 лет 9 мес.
Сообщений: 154
Ratio: 75.903
Раздал: 30.43 TB
Поблагодарили: 1035
100%
Откуда: Алтай
|
Не знаю как у Amazon. Но у меня встречается особая каста клиентов, которые высылают по 300+ страниц сканов распечатанных черно-белых сканов в BMP в 600dpi на электронную почту. К ним лучше с флешкой съездить и даже самому отсканировать... |
|
|
|
|
|