• Ищем замену Digital Ocean среди отечественных хостинговых компаний
    –2
    Вообще ты пишешь какую-то дичь, и про техподдержку (которая в тикетах работает круглосуточно), и про даунтаймы от 5 до 60 минут ежемесячно. Потому что у нас за весь 2016 суммарный даунтайм по сети минут 40, этим может похвататься редкий хостер, причем не только в России. Наша сеть это наша гордость. Так что вариант тут только один — долбоебы те, кто настраивал вам мониторинг.
  • Ищем замену Digital Ocean среди отечественных хостинговых компаний
    –2
    Нет у нас проблем с сетью, у нас связность и сетевой аптайм — одни из лучших в России среди хостеров. Если эти слова вам знакомы :)
  • Как запустить ClickHouse своими силами и выиграть джекпот
    0
    А как писали парсер языка запросов Clickhouse для GUI?
    Вижу что там используется ACE, в каком формате ему подсовывали грамматику?
  • Как запустить ClickHouse своими силами и выиграть джекпот
    0
    Ну что ж, посмотрим какой она будет в случае SSD :)
  • Как запустить ClickHouse своими силами и выиграть джекпот
    +1
    Данные хранятся на 6 серверах SX131 от Hetzner с 3 шардами по 2 реплики.

    Вроде же это конфиги без SSD, или SSD все же есть?
    Насколько в них есть необходимость, можно ли обойтись обычными крутящимися дисками?
  • За и против: Когда стоит и не стоит использовать MongoDB
    0
    Я говорю о всем множестве «особенностей» mongo.

    1. Про write concern, когда терялись записанные и ACK'нутые данные в самом строгом режиме записи. В середине 2013 (меньше 3 лет назад) он, насколько я вижу, был еще актуален. База к тому времени существовала 4 года (и видимо эти 4 года не гарантировала совсем ничего в смысле целостности данных). 3 года это вообще не срок, у иных традиционных БД аптайм больше.

    2. Проблема eventual consistency в том, что это самое eventual может не наступить никогда. Я не зря спрашиваю про кейсы использования. По большому счету сценариев где можно взять и потерять часть данных — не так уж много. Я практически уверен, что существенная часть пользователей mongo плохо понимает этот ньюанс.

    3. Отсутствие вменяемого, доказанного алгоритма согласования данных при передаче лидерства. Даже несмотря на то, что есть определенные проблески в виде мажорити и выбора лидера. Почему написал «не гарантировала» — потому что сейчас там Tokutek то ли пишет, то ли уже написал имплементацию движка, основанную на Raft, и дела пожалуй станут несколько лучше.

    Вот хорошая ссылка по делу: https://aphyr.com/posts/284-jepsen-mongodb
  • За и против: Когда стоит и не стоит использовать MongoDB
    +3
    Как качественно бомбит у сторонников Mongo. Господа, не стесняйтесь, расскажите что у вас за кейсы где вы можете потерять часть данных и это не повлечет последствий.
  • За и против: Когда стоит и не стоит использовать MongoDB
    –3
    MongoDB использовать не стоит хотя бы по той причине, что до недавнего времени она не гарантировала strong consistency. База данных, которая возвращает клиенту ACK на запись, но при этом не гарантирует то, что эта запись на деле персистентна — это мусор, о ней нельзя говорить всерьез.
  • Кружок «Очумелые ручки»: 4 лайфхака про то, как рационально заполнить сервер дисками
    +2
    А вот как можно ту же задачу решить несколько более цивилизованно: https://www.startech.com/HDD/Mobile-Racks/25in-SATA-Removable-Hard-Drive-Bay-for-PC-Expansion-Slot~S25SLOTR
  • Как Stripe превратился в PayPal мобильной эпохи
    +2
    К чести Payonline — на все претензии в итоге отреагировали и меры приняли. Жаль, что пришлось делать историю публичной, но полагаю это в итоге оказалось полезным для всех сторон. Спасибо за реакцию.
  • CEPH-кластер: хронология работ по апгрейду нашего файлового хранилища на новую архитектуру (56Gb/s IB)
    0
    Мужики, куда делась история про тачбанк и потерю данных? Была ветка и нет ветки.
  • CEPH-кластер: хронология работ по апгрейду нашего файлового хранилища на новую архитектуру (56Gb/s IB)
    0
    Да они там охренели RF=2 использовать :)
  • CEPH-кластер: хронология работ по апгрейду нашего файлового хранилища на новую архитектуру (56Gb/s IB)
    0
    Разработчики Ceph'a не отличаются выверенными релизами, постоянно в рассылке какое-то нытье про потерянные данные. Да и наработанная «практика» других пользователей (sourceforge, cloudmouse) показывает, что в случае ceph бэкапы лишними не бывают.
  • CEPH-кластер: хронология работ по апгрейду нашего файлового хранилища на новую архитектуру (56Gb/s IB)
    +1
    Почаще делайте бэкапы ;)
  • CEPH-кластер: хронология работ по апгрейду нашего файлового хранилища на новую архитектуру (56Gb/s IB)
    +1
    А какой релиз Ceph используете?
  • Как Stripe превратился в PayPal мобильной эпохи
    +8
    Нас (MID 69930) спросить забыли — не было ни писем, ни звонков. Это хорошо, что ваши риск-менеджеры могут позволить себе отдохнуть в период с 19 часов черной пятницы по 10 утра кибер-понедельника. Подозреваю что сотрудники Stripe и многих других IPSP в период распродаж такой роскоши себе позволить не могут.
  • Как Stripe превратился в PayPal мобильной эпохи
    +21
    Вам в PayOnline, раз уж вы равняетесь на американский Stripe, следует знать что такое американская «черная пятница», и готовиться к ней заранее.

    Потому что пару месяцев назад вы фактически провалили нам «черную пятницу», все выходные уводя в деклайн существенную часть транзакций из-за слишком параноидального фильтра на суточное количество продаж.

    Потом вы облажались еще раз, когда в воскресенье (через день после черной пятницы) мы заметили проблему и сообщили о ней, а аккаунт-менеджер сослался на невозможность ее решить и предложил подождать до понедельника (хорошо что у нас на тот момент было резервное подключение к Платрону).

    А потом, когда мы попросили разделить потери и снизить платежную комиссию 2.8% на определенное время, чтобы мы компенсировали издержки, вы обосрались еще раз и отказались это делать, сказав что мы сами виноваты в том, что не предупредили о распродаже.

    Так что вы молодцы, что изучаете зарубежный опыт и переводите статьи. Ждем статьей по ключевым словам Customer Care, Conflict Resolution и Black Friday. Возможно в процессе перевода вы почерпнете из них что-нибудь полезное.
  • Эра NoSQL позади
    0
    А в чем разница Софии относительно LevelDB/RocksDB? Она работает поверх сырого блочного устройства или тоже поверх файловой системы?
  • Как бороться с OutOfMemoryError на практике, или ох уж мне эти базы данных
    +2
    // Хозяйке на заметку
    С помощью ключа -XX:OnOutOfMemoryError=«kill -9 %p» можно повесить на OutOfMemory ошибку определенные действия, например jstack, jsmap и kill, упакованные в shell-скрипт.

    Кавычки конечно должны быть не елочки, а самые обыкновенные :)
  • Изобретая серверы — Open Compute Project
    0
    Формально конфиг будет тем же. Реально — будут некоторые скрытые «компромиссы» в инфраструктуре / избыточности / оверселле :) Ну и не будет гигабитной сети.
  • Изобретая серверы — Open Compute Project
    0
    Ну, по мне так DO это просто сервис с нормальной экономикой без демпинга. Все что ниже (особенно в России) — это в той или иной мере кроилово и демпинг. Это сейчас про коммерцию, если делать для себя — безусловно можно сделать и дешевле. Впрочем тема не для этого топика :)
  • Изобретая серверы — Open Compute Project
    0
    Это я к тому, что в Европе уже и не дешевле вроде как.
  • Изобретая серверы — Open Compute Project
    0
    Ну, есть все таки и в России те, кто находит деньги на демпинг даже в условиях кризиса. Правда не очень понятно чем эти люди руководствуются, выставляя цены в два-три бакса за конфиг который стоит у DigitalOcean пять :) Видимо на трекшон и ретеншон, или как там это называется :)
  • Изобретая серверы — Open Compute Project
    +1
    Спасибо за подробности.
  • Изобретая серверы — Open Compute Project
    0
    А в России просто не ставили такую цель перед собой или лизинг/кредитование совсем мертвые?
  • Изобретая серверы — Open Compute Project
    –1
    А как так выходит, что в России кредитование и лизинг вам недоступны, а в Нидерландах — да?
  • Захват пакетов в Linux на скорости десятки миллионов пакетов в секунду без использования сторонних библиотек
    0
    Приятно видеть живого человека, имеющего компетенции в OVS и OpenFlow, да еще и пишущего на русском :)

    OVS не подходит, так как нет поддержки chained groups, и впилить архитектурно трудновыполнимо

    Так вроде у них были реализованы группы, но они в итоге их отломали их относительно недавно из-за некоторого бага с дедлоками. Трудновыполним именно фикс этого бага?

    Также там некоторые проблемы с meters, select algs и т.п. Не реализованы dpdk bond и т.д.

    А что за проблемы с meters и select algs? Год назад когда смотрел на meters — они вообще не были реализованы.
  • Эволюция сетей — новый стандарт 25/50/100 GbE
    +2
    К вопросу о совместимости софта под ARMы — из нескольких протестированных моделей (среди которых Marvell и еще одна серверная модель) ни на одной линуксовый AIO не работает так, как работает на x86 (включая Atom). Тесты, которые на Atom'е съедают 10-15% CPU, все без исключения ARMы уводят в глубокий iowait в 60-80%.

    Это в принципе все что нужно знать о зрелости армовой экосистемы.
  • Эволюция сетей — новый стандарт 25/50/100 GbE
    +2
    Нет никакой разницы ровно до того момента, пока не возникнет необходимость поставить там что-нибудь свое, например какое-нибудь свое приложение на Java и нативные JNI-либы прицепом.

    Главный плюс Atom'a именно в том, что это дешевый и слабый, но тем не менее x86 процессор. И разработчикам не нужно думать, как там кросс-компилить софт и как потом все это дело отлаживать.

  • HP OpenStack Helion – первое знакомство
    0
    Имплементация Openflow в OVS при правильно вставленных руках отлично работает и решает свои задачи. Что конечно не отменяет факта что кое-кто на Openflow хорошо погрелся, а нормальных коммерческих реализаций в железе до сих пор не появилось.
  • Новый алгоритм синхронизации Яндекс.Диска: как не подавиться 900 000 файлов
    0
    Это заблуждение. Основное требование к криптографическим функциям — сложность поиска коллизий к хешу, к дедупликации это требование никакого отношения не имеет. Хотя zfs использует sha256, да. Вот тут хороший ответ о выборе хеш-функции.
  • Комментарий из публикации, перенесённой в черновики.
  • Комментарий из публикации, перенесённой в черновики.
  • Комментарий из публикации, перенесённой в черновики.
  • Комментарий из публикации, перенесённой в черновики.
  • Не спешите выкидывать старые серверы, из них можно собрать быструю Ethernet-СХД за час
    0
    Это не достижение, это индикатор. Ну и мне банки не докладывают о своей инфраструктуре, один — это то, о чем знаю наверняка. А могли бы купить NetApp или EMC, да.
  • Не спешите выкидывать старые серверы, из них можно собрать быструю Ethernet-СХД за час
    0
    Я когда вижу такую реакцию у представителей корпоративно-внедренческого сектора — сразу вспоминаю классическую цепочку Отрицание-Гнев-Торг-Депрессия-Принятие :) В общем, чтобы не было этих спекуляций про 2 года багов в продакшене, даю хронологию:

    Два года назад Ceph подкупил нас своими впечатляющими возможностями

    Это май 2012, когда мы начали разработку.

    Например, сразу после публичного релиза год назад мы обнаружили, что перестроение кластера влияет на его отзывчивость больше, чем хотелось бы

    Это февраль 2013, когда мы выкатили это на публику.

    В последующие месяцы мы столкнулись с рядом проблем, доставивших нам немало неприятных минут

    Это до сентября 2014, когда мы эти баги окончательно устранили.

    Итого да, 6-8 месяцев мы фиксили проблемы (скачки латенси при перестроениях), которые вскрылись лишь на реальной нагрузке. Доставили ли они нам неприятностей? Да. Были ли они фатальны в наших условиях? Нет. Не жалеем ли мы о выборе? Точно нет, достаточно сравнить функциональность и цены у нас и тех, кто выбрал «надежные решения от серьезных вендоров».

    Это кстати все было 2 версии назад (релиз bobtail), сейчас мы используем версию ceph dumpling, в которой все эти проблемы решены и все стабильно работает «из коробки», приятно осознавать, что и мы чуть-чуть приложили к этому руку тоже.

    Недавно узнал про один российский банк, который перевез инфраструктуру в Ceph ;)
  • Комментарий из публикации, перенесённой в черновики.
  • Комментарий из публикации, перенесённой в черновики.
  • Комментарий из публикации, перенесённой в черновики.