Есть несколько идентичных серверов (4 ноды) на Amazon EC2. Каждый генерирует и хранит у себя на диске кэш, который хотелось бы синхронизировать. Но простой rsync тут не подойдет — файлов несколько миллиардов, nfs — слишком медлителен, и т. д. Полный список рассмотренных вариантов с пояснениями ниже.

К тому же, время от времени нужно удалять устаревшие файлы сразу на всех серверах, что пока делается вручную и занимает несколько суток. Вопрос наиболее быстрой для такого Use Case файловой системы планирую описать позже. Оговорюсь только, что по нескольким причинам была выбрана XFS.

После теста нескольких кластерных технологий и файловых систем, по совету старшего товарища, решили использовать тот же rsync, но в связке с inotify. Немного поискав в интернете готовое такое решение, дабы не изобретать велосипед, наткнулся на csyncd, inosync и lsyncd. На хабре уже была статья о csyncd, но он тут не подходит, т.к. хранит список файлов в базе SQLite, которая вряд-ли сможет сносно работать даже с миллионом записей. Да и лишнее звено при таких объемах ни к чему. А вот lsyncd оказался именно тем, что нам и было нужно.

Скажу честно, давно мечтал сделать мероприятие про мэшапы для разработчиков и наконец появилась возможность! Приглашаю всех веб-разработчиков принять участие 16-17 июля в SumIT API Hackathon. В течении 1,5 дней вам необходимо будет создать интересный мэшап объемом не более 5Кб c использование только JavaScript, HTML5 и API популярных веб-сервисов (Facebook, Twitter, Amazon, Google, Yahoo, Foursquare, Flickr, Vkontakte и другие). По итогам будет выбран самый интересный мэшап, который получит приз планшетный компьютер Acer ICONIA TAB A500.



Какой мэшап замутить? Обсудим ниже, но ограничением является только ваше воображение! Дерзайте. Также лучшие программисты получат возможность присоединиться к лучшим стартап-командам или продолжить развивать свой проект в течении месяца. В августе все проекты SumIT после того как разработают прототипы смогут пообщаться с инвесторами.

Регистрация на Hackathon: http://www.sumit.ru/hackathon_reg

Давайте обсудим идеи мэшапов и разрешенные библиотеки.

Всё это, к сожалению, «US Only». Так что путь немного кривоват, но тем, что получилось, я доволен.

Что будет в итоге:
— Симпатичный облачный/локальный плеер для Android (с возможностью закачивать свою музыку)
— 5 Гб. Амазоновского облака
— Одно бесплатное приложение/Одна бесплатная песня в день :)

Итак, регистрируемся. При регистрации указываем в качестве адреса что то типа:

Groz-Beckert USA, Inc.
3480 Lakemont Blvd.
Fort Mill, SC 29708-9243
United States of America
Mailing Address
P.O.Box 7131
Charlotte NC 28217
United States of America
Phone: +1 803 548 4769
Fax: +1 803 548 3544

У кого нет кредитки — вполне подходят тестовые.

Далее:

1. Скачиваем Amazon App Story (кстати, там каждый день бесплатная программа, вчера, например, радовали PEWPEW 2): www.amazon.com/gp/mas/get-appstore/android
2. Находим там Amazon MP3. Почему не просто в маркете? Потому как для России его там нет.
3. Если после установки нет значка «Amazon MP3» — меняем язык системы на англ.
4. В Amazon MP3 переключаемся в режим «Store» — правый верхний угол.
5. «Покупаем» бесплатную песню. Там каждый день новая бесплатная песня.
6. После покупки предлагается скачать или закинуть на cloud drive, выбираем второе и всё, cloud drive создан.

Ссылки:
Веб Cloud Player: www.amazon.com/cloudplayer
Cloud Drive: www.amazon.com/clouddrive

А вроде серьёзная компания.

Согласно конституции эти названия равнозначны, но это же не повод показывать оба.

А вроде серьёзная компания.

Согласно конституции эти названия равнозначны, но это же не повод показывать оба.