Классический форум-трекер
canvas not supported
Нас вместе: 4 232 008

Amazon будет перевозить данные клиентов в грузовиках


Страницы:   Пред.  1, 2, 3  След. 
 
RSS
Начать новую тему   Ответить на тему    Торрент-трекер NNM-Club -> Поговорим -> Новости
Автор Сообщение
Maximus ®
Вольный стрелок
Uploader 100+
Стаж: 17 лет 5 мес.
Сообщений: 5046
Ratio: 25.177
Поблагодарили: 13176
100%
nnm-club.gif
Amazon построила одну из крупнейших в мире компьютерных сетей, однако предложенный ею способ передачи данных вызывает удивление. В ходе ежегодной конференции для клиентов в Лас-Вегасе представители компании сообщили о планах использовать для доставки информации из дата-центров в свое облачное хранилище грузовики.

Как считают в Amazon, скорость передачи данных по интернету недостаточно высокая, и быстрее будет воспользоваться грузовой машиной. Непосредственно в выставочном зале, где проходила конференция, был представлен специальный грузовик Snowmobile, способный вместить 5 петабайт информации.

Машина будет подъезжать к офисам клиентов, забирать данные и отвозить их прямиком в Amazon, где они будут загружаться в облачное хранилище Amazon Web Services (AWS). Весь процесс займет намного меньше времени, чем если бы информация передавалась с помощью интернета, сообщает The Wall Street Journal. Десять Snowmobile смогут перевезти один эксабайт информации меньше, чем за 6 месяцев. Передача такого количества данных с помощью Сети заняла бы около 26 лет.

Стоимость грузовиков не раскрывается. Тем не менее, по словам главы AWS Энди Джесси (Andy Jassy), в распоряжении компании уже есть несколько Snowmobile, используемых клиентами.


Источник

_________________
«Если ты ненавидишь, значит тебя победили» – Конфуций
Nkek
Стаж: 9 лет 10 мес.
Сообщений: 1191
Ratio: 10.835
Поблагодарили: 150
100%
Скоро в РФ будут тысячи таких грузовиков по пакету Яровой работать. Целыми колоннами ездить от провайдеров прямиком в Кремль. Главное никого из правообладателей не волнует, что все их лицензионные фильмы будут в скором времени фактически национализированы государством.
md40vip
Стаж: 7 лет 8 мес.
Сообщений: 649
Ratio: 23.024
100%
honduras.gif
Omega448 писал(а): Перейти к сообщению
что то сомнительная идея, а время потраченное на закачку инфы в грузовики?


А вы думаете что информация будет переносится всего лишь 1ним интерфейсом на весь массив дисков информации и в какие-нибудь сраные 100 гигабит в секунду?
Стоит задуматься,о том что люди организовавшие такую махину как Amazon однозначно не дураки,то первое в голову что приходит,что интерфейсов будет много,второе это будут интерфейсы передачи данных самые высокоскоростные,которые есть на данный момент для дисковых массивов.
Для таких объемов данных нет смысла дисковый массив преобразовывать в трафик для сети чтоб потом опять его записать на диск.
Единственное,что не понятно,кто и для чего оперирует такими объемами данных.
Одно дело архив складировать,другое,когда такие данные надо собирать из ЦОД регулярно.
Nkek
Стаж: 9 лет 10 мес.
Сообщений: 1191
Ratio: 10.835
Поблагодарили: 150
100%
md40vip
Единственные клиенты это киностудии заливающие свои фильмы в Амазон Видео. Но я не вижу никаких проблем передать по сети готовый 5Гб WEB_DL файл на сервер, даже если это делать на постоянной основе.
666MAXIMUS999
Uploader 300+
Стаж: 13 лет
Сообщений: 1076
Ratio: 10K
Поблагодарили: 1965
100%
nnm-club.gif
md40vip писал(а): Перейти к сообщению
Omega448 писал(а): Перейти к сообщению
что то сомнительная идея, а время потраченное на закачку инфы в грузовики?

Единственное,что не понятно,кто и для чего оперирует такими объемами данных.
Одно дело архив складировать,другое,когда такие данные надо собирать из ЦОД регулярно.

Вот именно тут куча странностей, скорее под прикрытием перевозки данных эти грузовику будут возить нечто иное.
Смысл скачивать данные их ЦОД, перевозить и закачивать в другой ЦОЦ, когда за это время часть данных изменится, данные должны передаваться в оба направления, и постоянно обновляться.

Один эксабайт это не так то и много, = 1048576 Тб, даже при передачи по одному стандартному оптоволоконному каналу на 100 гбит/с = 8388608 секунд, или 139810,1333 минут, 2330,168889 часов, или 97 дней, или 3 месяца, что уже намного быстрее заявленных 6 месяцев.

Но есть уже в эксплуатации каналы и на 400 гбит/с, где даже по одному каналу 1 эксабайт будет передан всего за 24 дня.

Самая же быстрая опытный линии на 255 Тбит/сек, т.е. 32 Тб/сек, по которой 1 эксабайт будет передан всего за 9 часов.

Так что эти грузовики полный бред, надо развивать оптоволоконные каналы передачи данных и протоколы передачи.

5Пб- вместимость одной машины, даже по 100 гбит каналу передаётся всего за 11 часов.
sqwerti
Стаж: 13 лет 8 мес.
Сообщений: 65
Ratio: 2.236
100%
Откуда: карибы
pirates.png
здрасте можно мне фуру на 100петабайт.
md40vip
Стаж: 7 лет 8 мес.
Сообщений: 649
Ratio: 23.024
100%
honduras.gif
Цитата:
Nkek

Речь ведется даже не о терабайтахне говоря уже о гигабайтах.
На трекере есть люди которые раздают почти терабайт за сутки.
Если это может делать 1 человек,что говорить об Amazon и тем более о правообладателе с фильмом пускай даже на 100 с лишним гигабайт.

Если зайдете в даркнет,найдете там сообщения о регулярной продаже не отпарсеных логов снятых троянами.
Объемы и кол-во логов просто поражают.
Там столько этого добра,что оно продается почти за копейки и что обрабатывать весь этот хлам,просто нет компьютерных мощностей у тех кто собирает эти логи.

Я так думаю что это и будет основное назначание таких грузовиков.
Со множества источников будут регулярно сливаться логи в облако Амазон,а потом эти логи поедут на грузовике в суперкомпьютер на обработку и дальнейшую укладку в базу данных,от куда готовые сформированные проиндексированные таблицы,такие же огромные,но уже меньшего маштаба поедут уже в другое место.
GezoeSloog
Стаж: 11 лет 11 мес.
Сообщений: 25
Ratio: 1044.515
Раздал: 305.2 TB
100%
russia.gif
666MAXIMUS999 писал(а): Перейти к сообщению
Один эксабайт
...
на 100 гбит/с
...
97 дней

google.ru/search?q=2%5E60*8%2F(100*10%5E9)%2F24%2F60%2F60

~3 года :подмигивание:
md40vip
Стаж: 7 лет 8 мес.
Сообщений: 649
Ratio: 23.024
100%
honduras.gif
Цитата:
666MA​XIMUS​999​

За математику ЗАЧЕТ.
Теперь о реальной жизни.
100Gbit это как правило магистральные каналы и клиенту увы такие далеко не всегда нужны из-за высокой стоимости обслуживания.
Тот же Amazon для крупного клиента может и построить хорошую оптико-волоконную сеть,но...Сколько лет будет окупаться эта сеть?А стоимость грузовика даже со всеми дисковыми массивами в любом случае выгоднее чем строить каждому такому клиенту хорошую сеть.
Откройте одного из крупных нидерландских хостеров и посмотрите его расценки на подключение арендованного оборудования к гигабитным каналам.
Если учесть важность передаваемых данных и их постоянство - строительство оптического канала оправдано полностью.
В случае например с пользовательскими данными снятыми ботами и троянами,это в огромной доле хлам и мусор,непонятно пригодится когда или нет,строить сеть под такие данные и тем более привязываться к какому-то одному облаку не совсем целесообразно.
От сюда и получается,что как бы ни казалась бредовой идея возить данные в грузовиках,она для определенных направлений более чем себя оправдывает.
Woktor56
Стаж: 7 лет 7 мес.
Сообщений: 464
Ratio: 31.887
29.41%
Я сам HDD провайдерам иногда отсылаю, перекачивать 2+ Тб муторнее, чем послать диск
miksto
Стаж: 9 лет 2 мес.
Сообщений: 485
Ratio: 8.303
0.54%
Так все верно. Большие данные реально так быстрее перевозить. Действительно большие данные по сети можно месяцами передавать. Это может быть как быстрее, так и намного дешевле.
spec61
Стаж: 13 лет 9 мес.
Сообщений: 7
Ratio: 16.38
9.76%
russia.gif
Omega448 писал(а): Перейти к сообщению
что то сомнительная идея, а время потраченное на закачку инфы в грузовики?

возможно они оригиналы данных повезут а не копии?
irinius
Стаж: 7 лет 10 мес.
Сообщений: 90
Ratio: 1.024
100%
По мне еще лучше делать копии в процессе, а потом отвозить и тупо жесткие втыкать в сервак.
se-mir
Стаж: 11 лет 6 мес.
Сообщений: 258
Ratio: 21.499
100%
Откуда: Україна
ukraine.gif
Как обычно умиляет количество спецов в комментах :) Если вы такие умные - почему до сих пор бедные? Ибо будь вы людьми обеспеченными - не сидели бы на пиратском контенте.
Седьмой
Стаж: 12 лет 7 мес.
Сообщений: 410
Ratio: 6.442
Раздал: 3.39 TB
Поблагодарили: 595
100%
Откуда: Хабаровск
russia.gif
Omega448 писал(а): Перейти к сообщению
что то сомнительная идея, а время потраченное на закачку инфы в грузовики?


зависит от интерфейса через который будут закачивать в грузовик. И вряд ли это будет sata3. Скорее всего что то наподобие pci в многоканальном режиме с райдо подобной системой передачи.
moraksX
 
Стаж: 9 лет 9 мес.
Сообщений: 154
Ratio: 75.903
Раздал: 30.43 TB
Поблагодарили: 1035
100%
Откуда: Алтай
ussr.gif
Не знаю как у Amazon. Но у меня встречается особая каста клиентов, которые высылают по 300+ страниц сканов распечатанных черно-белых сканов в BMP в 600dpi на электронную почту. К ним лучше с флешкой съездить и даже самому отсканировать...
Показать сообщения:   
Начать новую тему   Ответить на тему    Торрент-трекер NNM-Club -> Поговорим -> Новости Часовой пояс: GMT + 3
Страницы:   Пред.  1, 2, 3  След.
Страница 2 из 3