Войти в систему

Home
    - Создать дневник
    - Написать в дневник
       - Подробный режим

LJ.Rossia.org
    - Новости сайта
    - Общие настройки
    - Sitemap
    - Оплата
    - ljr-fif

Редактировать...
    - Настройки
    - Список друзей
    - Дневник
    - Картинки
    - Пароль
    - Вид дневника

Сообщества

Настроить S2

Помощь
    - Забыли пароль?
    - FAQ
    - Тех. поддержка



Пишет dibr ([info]dibr)
@ 2012-08-23 21:25:00


Previous Entry  Add to memories!  Tell a Friend!  Next Entry
amazon glacier
     Прочитал у avva.
     Амазон сделали новый сервис - хранение данных в облаке на долгий срок с редким скачиванием (читай "бэкап") - Amazon Glacier.
     Цены, по сравнению с обычными "хранилищами" очень низкие, при этом есть отдельная плата (тоже очень небольшая) за загрузку-выгрузку, и "пенальти" за слишком быстрое удаление файла (явно для того, чтобы сервисом не пытались пользоваться как обычным "дропбоксом", только дешевым), а ещё есть заметная задержка между "запросом на скачивание данных" и собственно скачивание. Судя по этому - данные хранятся "на ленточках": "ленточки", в отличие от работающего HDD, электричества не жрут, порт не занимают, не изнашиваются, просто лежат себе в ячейке и внимания требуют мало (отсюда столь низкие цены), но чтобы отдать данные - ленточку надо достать из ячейки и прочитать (отсюда задержки).

     Интересная штука. Прямо хоть и правда заюзать для бэкапа...


(Добавить комментарий)


[info]moonofnovember@lj
2012-08-23 14:32 (ссылка)
Со скачиванием не все просто (и дешево):
You can retrieve up to 5% of your average monthly storage (pro-rated daily) for free each month. If you choose to retrieve more than this amount of data in a month, you are charged a retrieval fee starting at $0.01 per gigabyte.
вот это самое 'starting at' означает что скачав 10 гиг за час заплатишь баксов 70.

(Ответить) (Ветвь дискуссии)


[info]dibr@lj
2012-08-23 14:40 (ссылка)
> скачав 10 гиг за час заплатишь баксов 70

> Up to 10 TB / month $0.120 per GB

Не понимаю, как можно умножить 10 на $0.12 и получить $70? У меня упорно получается $1.2.

(Ответить) (Уровень выше) (Ветвь дискуссии)


[info]blacklion@lj
2012-08-23 14:53 (ссылка)
А ты почитай не про Data Transfer OUT а про Request Pricing

(Ответить) (Уровень выше)


[info]blacklion@lj
2012-08-23 14:55 (ссылка)
Data Transfer Out — это после того, как они тебе с лент в S3 прочли. И тут ты правильно считаешь. Но чтение с лент стоит дополнительных денег и бесплатно — 5% от хранимого в месяц, а дальше за приличные деньги.

(Ответить) (Уровень выше) (Ветвь дискуссии)


[info]dibr@lj
2012-08-23 15:04 (ссылка)
Ааааа. О как. Путано оно у них как-то.
Но всё равно $70 за 10 гиг у меня не получается.

(Ответить) (Уровень выше) (Ветвь дискуссии)


[info]blacklion@lj
2012-08-23 15:06 (ссылка)
Там всё как-то очень мутно, считается какая-то среднемесячная скорость и платишь за весь месяц или как-то так, я сам запутался, но примеры расчётов в сети огорчают — достать всё становится золотым предприятеим еслиу тебя тер (я туда вот тер хотел положить).
Т.е. если там лежит 20 терабайт и доставать надо 1 — всё дёшево. А если лежит 1 и достать его надо быстро (накрылся винт, восстанавливаем из бэкапа) тот там чуть не тысячи баксов выходят.

(Ответить) (Уровень выше) (Ветвь дискуссии)


[info]david_m@lj
2012-08-23 15:23 (ссылка)
Залить тер данных и 19 теров нулей?:)

(Ответить) (Уровень выше) (Ветвь дискуссии)


[info]blacklion@lj
2012-08-23 15:24 (ссылка)
И платить за хранение этих нулей по центу за гиг?...

(Ответить) (Уровень выше)


[info]akm_nn@lj
2012-08-23 18:48 (ссылка)
хмм, а если хранить 30 ежедневных копий, а восстанавливать в случае дисастера одну (последнюю)?

(Ответить) (Уровень выше) (Ветвь дискуссии)


[info]blacklion@lj
2012-08-23 19:44 (ссылка)
Да можно и нулей налить, но ведь за хранение платить придётся.

(Ответить) (Уровень выше)


[info]blacklion@lj
2012-08-23 15:22 (ссылка)
An Amazon spokesperson says “For a single request the billable peak rate is the size of the archive, divided by four hours, minus the pro-rated 5% free tier.”

(Ответить) (Уровень выше)


[info]blacklion@lj
2012-08-23 15:35 (ссылка)
У меня получается что зараз вылить 100 гиг из 100 гиг — больше 2 тысяч долларов.

(Ответить) (Уровень выше)


[info]moonofnovember@lj
2012-08-23 16:00 (ссылка)
нашел обсуждение ледника от амазона с расчетом http://habrahabr.ru/post/149942/#comment_5075638

(Ответить) (Уровень выше) (Ветвь дискуссии)


[info]blacklion@lj
2012-08-23 19:50 (ссылка)
Да таких расчётов по всему интернету навалом и все считают своё, потому что пока нет официального разъяснения что такое Retrivial speed по которому идёт расчёт. Вообще, уже есть полу-официальное заявление. что считается 4 часа на запрос не зависимо от его размера.
Т.е. если попросить их достать 1 мегабайт это 0.25MB/час а если 1 терабайт — 250MB/час, из этого вычитается 1/720 из 5% (1 час из месяца), остальное умножается на рэйт (адский) и на 720 обратно, потому что платишь за целый месяц своей максимальной скорости (даже если это был единственный запрос за месяц). Это выглядит как полный бред и цены получаются не сотни а тысячи и десятки тысяч долларов за единицы терабайт (если мы выкачиваем 100% нажитого и 5% бесплатных становятся погрешностью измерения). Но, повторю, официального разъяснения пока не было, Амазон жуёт сопли и обещает разъяснение на следующей неделе (!). Т.е. такое впечатление, что они сами пока не поняли, что хотели сказать (и на сколько осмысленно то, что сказали).

(Ответить) (Уровень выше)


[info]starcat13@lj
2012-08-23 14:35 (ссылка)
и пока еще проблема, каким софтом бекапиться

(Ответить) (Ветвь дискуссии)


[info]dibr@lj
2012-08-23 14:43 (ссылка)
"Ихним". Учитывая, что это для нечастых бэкапов (частые хорошо делать локально, а вот если локальный накрылся - придётся лезть в удалённый, и он может быть уже и относительно старым, поскольку предназначен для (редких) случаев, когда локальный уже не помог) - можно и ручками раз в месяц программу запустить.

Впрочем, думаю, "пригодный для автоматизации" софт у них тоже есть. Хотя бы уровня "положить файлики куда надо, запустить софтину, она сама сделает".

(Ответить) (Уровень выше)


[info]akm_nn@lj
2012-08-23 18:44 (ссылка)
хмм, когда на прошлой работе мы смотрели на ленточки как на хранилище для бэкапа - они проигрывали хардам, даже в виде стоек хардов.
ленты же тупо значительно дороже, а в режиме "много бэкапов почти рандомного чтения/записи" - должны быть сильно дороже, в чем я ошибаюсь?

(Ответить) (Ветвь дискуссии)


[info]dibr@lj
2012-08-23 18:59 (ссылка)
Подозреваю, что при изменении масштаба соотношения цен тоже изменятся: ленту легко намотать в БОЛЬШУЮ кассету (цена растёт медленнее, чем объём), харды же придётся именно что собирать в стойку, цена при этом растёт быстрее, чем объём. Но главный прикол - винты не предназначены для их вставления/вынимания, винты должны стоять в стойке и работать (жрать электричество и изнашиваться) - а ленточки именно что предназначены для вставления/вынимания: записал, отправил в архив на полку, она лежит себе, и кроме места на полке (и немного кондиционирования) ресурсов не расходует. Архивы такие автоматизированы, поэтому ёмкость достижима большая, стоимость же хранения при реально большом количестве ленточек - много меньше, чем для HDD.

А "почти рандомности чтения/записи" там особо нет: информацию надо заранее "заказывать", и готова она будет через сколько-то часов - как раз чтобы достать и прочитать ленточку, за "раннее удаление файла" там штрафуют - потому что они его только на ленточку записали, а ты его удалил :-)

(Ответить) (Уровень выше) (Ветвь дискуссии)


[info]starcat13@lj
2012-08-23 19:00 (ссылка)
к обсуждению роботов-библиотек магнитных лент :)

(Ответить) (Уровень выше)

Re: Ответ на ваш комментарий к записи "amazon glacier"
[info]akm_nn@lj
2012-08-23 19:10 (ссылка)

там масштаб доходил до того что надо было порядка 200кв.м. под стойки с полками набитыми только дисками, только для хранения минимально обязательного объема данных, плюс были нормативы на скорость поиска, весьма жесткие

(Ответить) (Уровень выше) (Ветвь дискуссии)


[info]dibr@lj
2012-08-23 19:14 (ссылка)
> плюс были нормативы на скорость поиска, весьма жесткие

О! А у ленточек доступ как раз медленный. При этом с ленточкой можно увеличивать количество ленточки на один читатель-писатель - цена хранения/обслуживания терабайта будет несколько снижаться, но и скорость тоже. В амазоне, видимо, работают близко к тому пределу, когда "ещё чуть-чуть, и вообще не будем успевать читать" :-)

(Ответить) (Уровень выше)


(Анонимно)
2012-08-26 21:27 (ссылка)
Кто мешает винтам стоять в стойке, но не жрать и не изнашиваться? Команда остановки шпинделя вроде бы имеется, и даже стандартизирована, например.
К тому же можно и принципиально отмонтировать винт от ОС, и отрубить питание вообще, изготовив соответствующую приблуду.
Когда забьются все винты хоста, можно и его самого погасить до первой надобности. Включить другой и заливать на него. Короче, те же ленточки, но механически транспортировать ничего не надо, всё стоит на полках и уже объединено в сеть.
Интересно, кто-нибудь додумался уже? Интересно, какие плюсы-минусы-подводные камни будут в "макроэкономическом" смысле (например, вероятность отказа стоящего диска vs постоянно работающего вхолостую)?

(Ответить) (Уровень выше) (Ветвь дискуссии)


[info]dibr@lj
2012-08-28 05:46 (ссылка)
Отключить диск/стойку можно, вероятность отказа стоящего диска, я думаю, небольшая (вполне покроется небольшой избыточностью при раскидывании по дискам)... но мне кажется, что основная причина использования ленточек - цена собственно ленточки (и плотность упаковки информации). В НЖМД на единицу объема и на один комплект прецезионной механики и электроники помещается довольно небольшая площадь поверхности записи - поскольку "блины" имеют заметную толщину, а между ними надо ещё расположить головки, при этом удельная стоимость площади поверхности относительно большая. "Ленточка" же в пересчёте на единицу площади существенно дешевле (технология проще), в тот же объём намотать её можно этак в сто раз больше (за счёт толщины), "прецезионной механики" тоже нужно мало - один ридер на шкаф с ленточками, сама кассета простая и дешевая. В результате даже учитывая, что плотность записи на ленточку намного ниже, чем на поверхность блина НЖМД, это всё равно будет дешевле и компактнее. Да и "механическая транспортировка" по сравнению с электрической коммутацией отключаемых "стоек с винтами" тоже вполне вероятно будет и дешевле (одна "механическая рука", сто метров рельсов, и пластиковые стеллажи против напичканых электроникой стоек с винтами и кучей проводов с контактами), и надёжнее (в пределах надёжности механики). Хотя намного медленнее, да.

(Ответить) (Уровень выше)


[info]ilya_314@lj
2012-08-28 15:42 (ссылка)
Яндекс с самсунгом акцию проводят - купишь ноут, получишь 250 гиг яндекс диска. Это уже неплохо.
http://help.yandex.ru/disk/?id=1127014

(Ответить) (Ветвь дискуссии)


[info]ilya_314@lj
2012-08-29 08:14 (ссылка)
Посмотрел на skydrive - за 100 гиг 1500 руб в год, вобщем терпимо. Еще предлагают 20 и 50 гиг, больше нет вариантов.

(Ответить) (Уровень выше)