• Яндекс открывает ClickHouse
    0
    Но если данные не индексировать, то зачем их хранить в ES?.. Выборки по ним делать нельзя. Если для того чтобы просто доставать — лучше монгу взять.

    В этом случае идея заключается в другом: часть полей индексируется, по которым проходит агрегация и сама критерия при запросе, а некоторые поля — это данные, которые нужно получить в довесок. Вы ведь в базе данных тоже индексы не на все поля создаёте.

    Отдельный вопрос — поля метрик. Не знаю, влияет ли отключение их индексирования на производительность аггрегаций по ним? Какие-то агрегаты для индексов насчитываются, что будет если для метрик выключить индексирование? Да и иногда по метрикам тоже выборки хочется делать.

    К сожалению или к счастью не приходилось с этим сталкиваться, да и более интересных экспериментов и ресёрча хватает. Но если я правильно вас понял, то метрики — это в основном числовые значения. Почему вы их не индексируете? Они не так уж много места занимают.
  • Яндекс открывает ClickHouse
    0
    Но какой смысл в эластике, если не индексировать поля? Как хранилище он не эффективен, проще монгу взять.

    На основе какого опыта вы пришли к такому выводу?
    Работаю активно с данным инструментарием(и с mongodb, и c elasticsearch) каждый день на достаточно больших данных и выводы могу сделать противоположные вашим.
    Динамика данных: ~3.5млрд активных записей, средний размер 3КБ, с ежедневным замещением ~110млн (поступление новых, удаление старых). И на таких объемах у меня получилось следующее:
    * монга хороша для очень быстрого доступа к данным (в том числе холодным), в этом плане она сильно выигрывает у эластика, и лучше держит резкие всплески нагрузки.
    * эластик хорош для агрегации (она функциональнее и быстрее, нежели у монги), сэмпловой выборки по всем данным, а также для выполнения сложных запросов — делает это гораздо быстрее монги.

    Основное, в чем эластик менее эффективен относительно монги — это объем хранимых данных и объем индексов, но, взвешивая профит работы с данными, по большинству критериев выигрывает эластик.
  • Яндекс открывает ClickHouse
    0
    С одной оговоркой: field is indexed by default, но это отключаемо. В маппинге полю можно проставить параметр
    index: "no"

    Это, конечно, в случае, если известны все возможные поля, но не при абсолютном анархичном schema-less.
  • 100 лет спустя: заполненные пропуски в записях Рамануджана
    0
    Бетховен, простите, что? Вы если с композитором и его биографией плохо знакомы, так хоть не судите о нем, тем более в таком негативном виде.
    Если желаете подчеркнуть Рамануджана, это и делайте, но не за счёт занижения других личностей, пожалуйста.
  • Unreal Engine 4 для развития своих способностей
    0
    Да, можно.
  • Был получен несанкционированный доступ к более чем 20 000 камерам видео-наблюдения Москвы (теперь вы тоже)
    +5
    А если немного подкорректировать, то получится правда (ох уж эти сми):
    что он получил якобы нелегальный доступ к 20 тысячам камер

    Хотя, честно говоря, я сомневаюсь, что это действительно был открытый эксперимент, несмотря на то, что ЕЦХД это утверждают.
  • Был получен несанкционированный доступ к более чем 20 000 камерам видео-наблюдения Москвы (теперь вы тоже)
    +3
    «Вести» как всегда решили приукрасить :)
    … появилось сообщение одного из пользователей о том, что он якобы получил нелегальный доступ к 200 тысячам камер ...
  • Обходим запрет Yota раздавать интернет с телефона
    –1
    Не рекламы ради, перепробовав многих провайдеров и кабельного и мобильного интернета остановился на билайне и там и сям (да, да, корбина). Во-первых они делают скидку на кабельный, если у тебя мобильный оператор Билайн, а во-вторых это стабильный и не разбавленный интернет. Дома через роутер всегда выдает стабильно ~95 мбит/сек. На мобильном до 5 мбит/сек 3g в зависимости от уровня сигнала.
    Теперь я сильно сомневаюсь в своем желании перейти на yota, так как мобильный в качестве точки использую каждый день в силу нашей профессии. Проще тогда подорожать пользоваться их аккумуляторным wifi-роутером.

    Кстати, разъясните, пожалуйста: действительное покрытие мобильной йоты такое же как на карте 4g или все же лучше? Использует ли она вышки мегафона при выезде в другие города, где нет покрытия йоты?
  • Нужна помощь: пропал Алексей Червоненкис
    +19
    Люди звереют и звереют. Человек, напрямую связанный с тематикой ресурса, пропал, попросили помощи у людей, которые действительно могут быть заинтересованы в поисках, так как человек не безызвестный. Советораздаватели, уважаемые.
  • Олимпийские виджеты для вашего сайта: прямая трансляция из соцмедиа
    –1
    Хоть что-то хорошее, связанное с олимпиадой!
    Напоминает всякие реалтайм рубрики на новостных порталах по срочным новостям, только тут в виде виджета, на любую тематику и без ручной работы.

    Вопрос-уточнение:
    для виджета выбирается случайным образом не более 15 сообщений в минуту,

    Совсем случайным или используется какое-либо ранжирование/приоритетность от полнотекстового поиска?
  • Google анонсировал пять игр для Google Glass
    –1
    Тогда уж 1/8 города, если мы говорим о здоровом человеке.
  • Вышел Linux-дистрибутив ROSA Desktop Fresh GNOME R2
    +1
    Узнал про этот дистрибутив совершенно случайно, когда искал чем записать iso на флешку и наткнулся на ROSA Image Writer, до сих пор ей пользуюсь для заливки всевозможных образов на флешки.

    Про саму систему ничего сказать не могу, их уже столько, что в глазах рябит.
    Для себя выбрал Windows 8.1 для дома и Scientific Linux 6.4 (с древним гномом) для работы.
  • Twister: Децентрализованный, P2P аналог Twitter'a
    0
    А еще можно будет сделать пулы, как для майнинга, тогда можно будет не ставить клиент локально.
  • Что значит быть junior-разработчиком
    +1
    Всё верно. Главное — это всегда знать и помнить, что есть куда расти и есть к чему стремиться, иметь кумиров и недостижимые цели, ибо это и есть двигатель нашего развития!
  • Динамическое освещение и неограниченное количество источников произвольной формы в 2D
    +2
    Лава — это нечто, напомнило видео.
    Но в 2D такое поведение частиц смотрится так круто!
  • Базовая станция у вас на столе: домашний LAN/Wi-Fi/Femto 3G
    +4
    Многие техники понимают, что под мегабайтами обычно подразумевают мибибайты, но не используют этот термин там, где это не играет критическую роль.
  • Что быстрее while (true) или for (;;)?
    0
    Простите, виноват, не правильно выразился.
    Фразой «Всё есть 1 и 0.» я не имел ввиду природу значений boolean в си.
    Это был ответ на ваш комментарий, что Вы сразу даёте конечное значение. Как бы параллель с бинарными данными: все, что мы пишем в любом случае становится бинарными данными, но ведь мы не пишем прямо бинарные данные.
    Так и boolean значения — их же ввели в язык, значит там, где нужно использовать boolean, сугубо по моему мнению стоит использовать true/false, а не 1/0.
    Я ни в коем случае не подразумеваю, что только так нужно делать, это уже выбор каждого.
  • Что быстрее while (true) или for (;;)?
    0
    Всё есть 1 и 0. Это же не значит, что нужно писать бинарные данные.
    На самом деле, писать while(1) или while(true) или for(;;) — дело принятого форматирования и каждый выбирает для себя свой удобный вариант.
    Главное, чтобы в пределах одного проекта использовалась везде идентичное использованиенаписание.

    UPD: масло масленное
  • Что быстрее while (true) или for (;;)?
    –4
    Привыкать к автоматическому приведению типов — не есть хорошо.
  • Билайн — новое слово в безлимите мобильного интернета?
    +6
    EkaterinaTurtseva,
    Мы не подключаем доп услугу — мы меняем параметры тарифа и даем возможность вернуться к прежним условиям

    Цитирую из вашей новости:
    при исчерпании скоростного трафика будет подключаться дополнительный пакет 200 мегабайт на высокой скорости за 20 руб.

    Я правильно понимаю, что по-вашему дополнительный пакет за дополнительную плату в 20 руб. — это не подключение услуги, а изменение параметров тарифа?

    P.S.
    У услуги НЕТ абонентской платы.
    Еще бы вы подключали платную услугу с абонентской платой, у вас бы клиентов не осталось тогда.

    UPD: выделил важное
  • Билайн — новое слово в безлимите мобильного интернета?
    0
    Солидарен, спасибо, что Вы понимаете о чем я.
    У меня, видимо, такой же тариф, как и у Вас. «Всё включено XXL», подняли абонентку недавно на 20%.
  • Билайн — новое слово в безлимите мобильного интернета?
    0
    Да уж, беда, но на сколько помню, когда использовал модем от Билайна, была возможность читать и отправлять смс-ки прямо на компьютере. Через роутер это уже недоступно?
  • Билайн — новое слово в безлимите мобильного интернета?
    +4
    Возможность отключения — это прекрасно, но где я соглашался на подключение платной услуги?

    Являюсь вашим абонентом с незапамятных времен (не с самого начала, конечно, но когда коробки были синие, а интернет на мобильном был только черно-белый и через dial-up aka CSD). И припоминаю переодические попытки навязать пользователям платные услуги без их фактического согласия, и с каждым таким случаем всё больше сомневаюсь, стоит ли остаться вашим клиентом, особенно, учитывая закон, который скоро вступит в силу, с возможностью смены оператора без изменения номера.
  • Новая «девятка» Samsung
    0
    Не пугайте народ, там эффективное разрешение эквивалентно 1440x900.

    UPD: Поправлюсь, стандартно разрешение настроено на эквивалент 1440х900. Можно, конечно, и нативное 2880х1800 использовать, но не встречал таких ни разу.
  • Mail.Ru Group оштрафовали за соблюдение Конституции РФ
    +2
    У меня 6000+ полезных писем во входящих. Ненужные удаляю, часть в спаме, огромная часть улетает по фильтрам и т.д.
    Но мне действительно часто приходится искать письма присланные чуть ли не сразу после начала пользования ящиком.

    Смысл коллекционировать? Нужно будет что-то конкретное, потом сложнее будет найти, даже с поиском.

    Познайте силу меток, папок, фильтров и/или тегов. Это очень сильно ускоряет и облегчает поиск.
  • Mail.Ru Group оштрафовали за соблюдение Конституции РФ
    +3
    Как же любят у нас всем злоупотреблять, дай немного власти, так они высосут из неё всё до капли для своей выгоды.
  • Mail.Ru Group оштрафовали за соблюдение Конституции РФ
    0
    30 августа 2013 года Федеральная служба по финансовым рынкам России (с 1 сентября 2013 года её полномочия переданы Банку России)


    Не знаю есть ли права у Федеральной службы по финансовым рынкам России такие права, Банк России не как Банк России, видимо, вынес решение, а как ФС по фин.рынкам РФ
  • Как правильно приготовить HDD
    0
    Надо брать WD Enterprise!

    P.S. У меня Green сдох за полгода, Red и Black работают 2 и 4 соответственно.
  • Процедурное аудио
    0
    Все к этому и идет, думаю, почти уже научились синтезировать человеко-подобную речь, вот скоро и синтезом музыки начнут заниматься.
    А потом роботы станут композиторами.
  • Сервис Google Play Music наконец доступен в России
    0
    Я не пользуюсь и не пользовался прокси в принципе никогда, не было повода.
    Помню только, что можно было запросить доступ в бета-тестирование и что он пришел через несколько дней. Незадолго до этого я так же участвовал в бета-тестировании тогда еще не открывшегося GoogleWave.
  • Сервис Google Play Music наконец доступен в России
    0
    Я этого не делал, точно, в почте нашел
    письмо

  • За видео ВКонтакте — 5 суток административного ареста
    0
    Ваш комментарий с намеком на унижение россиян, штраф скоро придет, дело уже завели.
  • Сервис Google Play Music наконец доступен в России
    +1
    Так и не понял критерия, по которому они давали доступ пару лет назад.
    Пользуюсь сервисом с 2011 года, на территории США не был и в личных данных подобной информации не указывал.
  • Вам не нужен Hadoop — у вас просто нет столько данных
    0
    Я описывал пример мап-редьюса в принципе.
    Ваш пример не описывает что это за строки и как к ним получается доступ, потому что основной посыл в моем предыдущем комментарии про доступ к данным, а не только про их обработку.

    А последнее про то, что иногда для конкретных задач маленькие записи выгоднее, ну естественно, кто же спорит? Но…
    то чем больше слов в одной записи, тем дольше будет выполняться вся работа.

    То, что Вы описали похоже только на оптимизацию работы одной ноды, а где же сам map-reduce? Чем меньше работы у одной ноды, тем больше будет у мастера и наоборот (это только в вашем случае, для моего примера это не играет роли).
  • vrAse: превращаем смартфон в очки для виртуальной реальности
    0
    Ух ты! Это очень простой и правильный способ!
    Но, есть одно «но», результат будет всё же еще зависеть от частоты обновления экрана, а, соответственно, от производителя и его микроконтроллеров монитора.

    Я бы предположил, что можно попробовать снять на видео с высоким числом кадров в секунду, думаю, даже на 120 можно уже отловить разницу, если просматривать покадрово.
  • vrAse: превращаем смартфон в очки для виртуальной реальности
    +1
    А вы пробовали использовать Splashtop? На что Вы основываетесь в своем высказывании?

    По личному опыту, используя Splashtop, делал хитрость: стационарный комп ощутимо мощнее ноутбука, я на нем запускал всемизвестный командный шутер от первого лица, а играл с ноутбука, сидя в другой комнате (по кабелю, не по wi-fi), я забывал о том, что это Splashtop и игра запущена на другом пк, и на геймплее никак не отражалось.

    P.S. Я не знаю как им удалось добиться таких высоких показателей, но факт есть факт.
  • Вам не нужен Hadoop — у вас просто нет столько данных
    0
    Передвижение данных тут не при чем. Чтобы с данными что-то сделать, провести какую-то обработку, треубется доступ к этим данным, и доступ к 1млрд записей общим объемом 1ТБ будет занимать больше времени, нежели 1млн того же объема.

    Для наглядности могу привести такой
    пример абстрактной задачки со смешными цифрами
    Есть 10 серверов, общий объем полезных данных ~74ГБ и 10млрд записей равномерно распределенные по этим серверам.
    В каждой записи есть 64-битный Integer(т.е. запись занимает 8 байт).
    Вам нужно высчитать среднее по всем записям. Каждый юнит в таком случае высчитывает среднее из 1млрд записей, после чего сливаются воедино 10 записей и из них высчитывается среднее.

    Теперь возьмем эту же задачу, только данных будет не 10млрд, а 80млрд, и будет не Int64, а Byte(т.е. занимает, не 8 байт, а 1). Теперь при том же общем объеме данных каждый юнит должен высчитать среднее не из 1млрд записей, а из 8млрд записей.


    Скажите, пожалуйста, теперь мне удалось объяснить разницу?
  • Вам не нужен Hadoop — у вас просто нет столько данных
    +11
    Возможности улучшения производительности в разрезе «этой» машины — это вертикальное масштабирование.
  • Вам не нужен Hadoop — у вас просто нет столько данных
    0
    Я понял Вашу мысль.
    Но, если есть еще в запасе неиспользуемые ядра, которые можно использовать(вы не описали в примере обратное), то почему их не использовать и почему они не были использованы сразу? Сомневаюсь, что это можно отнести к горизонтальному масштабированию, это просто подгонка под свободные ресурсы в разрезе одного сервера. Иначе, исходя из Вашего комментария можно отнести к горизонтальному масштабированию увеличение количества воркеров какого-нибудь гирмана для одной очереди.

    И тем не менее это ведь не исключает высказывание olku
  • vrAse: превращаем смартфон в очки для виртуальной реальности
    0
    У Oculus Rift пишут вполне логичные и правдоподобные выводы, которые ничем не должны отличаться для vrAse:

    oculus-rift.ru/faq/:
    Будет ли появляться вредная для зрения усталость глаз после долгого использования Oculus Rift

    Одна из замечательных особенностей Oculus Rift, — это то, что он практически не вызывает усталости глаз. Глаза в Oculus Rift устают гораздо меньше, чем от обычных дисплеев или очков виртуальной реальности.

    Усталость глаз возникает, когда вы смотрите на монитор и ваши глаза сфокусированы все время на одном и том же расстоянии. В Oculus Rift такого эффекта нет. Ваши глаза будут все время фокусироваться на разных точках: иногда вы будете вглядываться в даль, а иногда смотреть на что-то поближе. Ваши зрачки будет постоянно работать, как в естественной среде, поэтому глаза не устанут и вреда здоровью не будет.