В Яндексе мы храним очень много данных в том числе пользовательских.
И мы очень не хотим эти данные терять.
Но когда речь идёт о хранилище размером хотя бы в несколько петабайт встаёт вопрос об эффективности и стоимости хранения данных.
Мы расскажем как удалось подружить коды избыточности с нашим хранилищем размещённым в нескольких дата центрах.
Страница встречи на сайте Событий Яндекса:
Статьи об инфраструктуре Яндекса:
- YT: зачем Яндексу своя MapReduce-система и как она устроена:
- Как писать меньше кода для MR или Зачем миру ещё один язык запросов? История Yandex Query Language:
- Как применение кодов избыточности в SDS помогает Яндексу дёшево и надёжно хранить данные:
- Яндекс открывает ClickHouse:
Источник: rutube.ru