7 августа 2014

Пятничная колонка №53. Синтетические тесты против здравого смысла

Синтетические тесты и здравый смысл или почему бенчмарки имеют мало отношения к реальному опыту использования.

Введение

Изначально, я просто хотел поделиться своим мнением о различных тестах автономной работы, но затем понял, что есть еще несколько моментов, о которых стоило рассказать в рамках этой статьи.

Тестирование автономной работы

Когда я только начинал работать на Mobile-Review, то считал, что самым объективным показателем автономной работы являются синтетические тесты, например прогнать видео по кругу, поставить автолистание книги или крутить одну и ту же песню, пока смартфон не разрядится. Приводя все устройства к общему знаменателю, в теории мы должны получать объективную ситуацию по автономной работе. На деле же это не совсем так. Думаю понятнее будет на простом примере. Я тестировал Samsung Galaxy Note 3, который в режиме просмотра видео на максимальной яркости может работать до 12 часов, этот тест я проводил собственноручно. Также для сравнения возьмем Lenovo Vibe Z, который в режиме просмотра фильмов разряжается за восемь часов. Если брать эти результаты, то получается, что Note 3 должен работать на 25% дольше, чем Vibe Z. Однако на практике это не так. В режиме повседневного использования Note 3 разряжался у меня за один день, а Vibe Z за два дня, и это при очень активном использовании. Именно разница при повседневном использовании и важна для конечного пользователя. И по этому параметру есть три большие категории:

  1. Смартфоны, работающие меньше одного дня,
  2. Смартфоны, работающие один день,
  3. Смартфоны, работающие два дня.

Мы, кстати, как-то обсуждали этот феномен с Романом Белых. Мнение Ромы очень важно для меня, так как он тестирует очень много различных устройств, от бюджетников до топовых флагманов, поэтому у него есть огромнейший опыт по части автономной работы большого количества гаджетов. Роман согласился с тем, что от синтетических тестов толку мало, порой они только запутывают пользователя, видящего большие показатели в одном из них.

Самый важный параметр автономной работы это повседневное использование. Сколько при повседневном использовании смартфон живет? День или два? А может даже до вечера не доживает? Именно этот показатель и интересует потенциальных покупателей. Что толку от 12 часов просмотра видео, если гаджет всё равно разряжается за день?

Конечно было бы здорово, если бы появился бенчмарк, оценивающий время работы при обычном использовании, но это очень трудно реализуемая функция. Что добавить в такой бенчмарк? Нагрузку на сотовые сети? GPS? Как часто включать экран? А на какой яркости? Единых критериев нет, поэтому мы и используем комплексное тестирование. Это же одна из причин, по которой с каждым устройством наши авторы проводят как минимум неделю перед написанием обзора (на флагманы мы берем больший тайм-аут, разумеется).

Antutu, 3DMark и т.д.

И хотя в обзорах мы по-прежнему публикуем результаты синтетических тестов, практической ценности от них почти нет. Какая разница сколько баллов у смартфона в Antutu если любимая игрушка на нем не идет, а рабочие столы перелистываются с подтормаживаниями? Расскажу вам замечательный случай, произошедший со мной несколько недель назад.

Мне нужно было забрать смартфон для тестирования из одного магазина, с которым мы изредка сотрудничаем. Это большая сеть, поэтому мы договорились, что я подойду в ближайшее отделение и заберу смартфон в сервисном отделе. Пока я дожидался аппарата, разговорился с одним из сотрудников. Узнав кем я работаю, он решил проконсультироваться со мной по поводу выбора смартфона. При бюджете в 12-13 тысяч рублей человек хотел взять Highscreen Thor, мотивируя свою покупку хорошим экраном и восьмиядерным процессором. Я конечно же пытался отговорить его от Thor в пользу Nexus 5, учитывая, что это устройства совершенно разного уровня (преимущество на стороне Nexus 5). Он сказал (!): «Фуу, это LG, я им не доверяю». Как оказалось, Samsung и Apple человека тоже не устраивали. Он мне рассказывал о том, какой Thor мощный, ведь там восемь ядер и т.д. Махнув на попытки переубедить человека, я получил свой смартфон и ушел.

Даже сейчас, когда прошло уже много времени, я не перестаю удивляться тому, как маркетинг и заветная цифра «восемь» промывают мозги обычному потребителю. Никакие доводы логики и здравого смысла здесь не помогают. Поэтому я призываю вас оценивать производительность не с точки зрения ядер и бенчмарков, а по повседневному использованию (и как вариант, поведению в играх).

Тестирование экрана

Иногда читатели просят нас тестировать экраны смартфонов с помощью колориметра, но его по сути также можно назвать «бенчмарком» и той же попыткой свести все показатели экрана к общему знаменателю. По своему опыту скажу, что мне гораздо понятнее, когда автор обычным языком рассказывает о сильных и слабых сторонах экрана (углы обзора, пикселизация, яркость, поведение на солнце и в темноте), вместо сложных графиков с колориметра.

Серые и белые цены

Последний пример, о котором я хотел бы поговорить, это указание цены устройства. Мы традиционно берем цену официальной розницы, но ряд комментаторов постоянно пишет нам, что мол «я за такие деньги возьму «серый» гаджет гораздо лучшего качества». В последнее время к этим комментариям добавились фразы «я лучше из Китая закажу!» К сожалению, такие пользователи забывают о том, что наш сайт читают не только гики, большое количество обычных покупателей приходят на Mobile-Review просто чтобы почитать статью и купить понравившийся аппарат в ближайшем Связном. У них нет времени или желания связываться с «серыми» магазинами, а уж тем более ждать посылку из Китая.

Конечно, в исключительных случаях мы указываем и «серые» цены (например, для флагманов или моделей, у которых разница уж слишком значительна), но это скорее исключение, чем правило. Также важно помнить, что в регионах поставщиков «серых» товаров значительно меньше.

Заключение

В этой статье я хотел немного прояснить причины того, почему мы тестируем смартфоны и планшеты именно так, а не иначе. Возможно, в дальнейшем я буду ссылаться на эту статью при диалоге с некоторыми комментаторами, чтобы лишний раз не приводить им те же аргументы другими словами.

Читайте также

110 комментариев на «“Пятничная колонка №53. Синтетические тесты против здравого смысла”»

  1. Max Nartov:

    «…большое количество обычных покупателей приходят на Mobile-Review просто чтобы почитать статью и купить понравившийся аппарат в ближайшем Связном…»
    Мне кажется, что тут явная ошибка в оценке типичной аудитории ресурса.
    Те люди, которые читают обзоры и следят за техникой не пойдут в Связной за телефоном, а те, которые купят в ближайшем Связном(либо аналогичном магазине) не читают обзоры, им это не нужно.

    • Алексей:

      Вот я могу отнести себя к гикам, т.к. активно интересуют новостями мира ИТ и мобильников в частности, уже больше 5 лет читаю МР и 4pda, но иногда телефоны покупаю в связном (при условии что их цена там ниже, чем в другим местах). В последнее время серый рынок очень сильно сдал, и особого выбора нет, а заказывать телефоны по почте из-за границы с полной предоплатой, считаю нецелесообразно, т.к. экономия в 2-5 тысяч рублей, при цене девайса в 30 000 рублей, не сопоставима с рисками при транспортировке и отсутствием российской гарантии.

      • Дмитрий Приходько:

        согласен с Вами. не редко бывает, что купить определённые телефоны в связном (а в последнее время в Мегафоне) выгоднее, чем заказывать серый. или ждать месячную посылку с китая.

      • Mihael Zolototukhin:

        а что делать,если некоторых телефонов просто нет в продаже в белую? Мото ,хаиоми и тд?

        • Великий кукурузо:

          Ну тогда вопрос выбора «белый или серый» же не стоит.

          • Max Nartov:

            Не надо извращать мои слова. Мне кажется, что всем понятно, что Связной указан здесь, как один из наиболее распространенных магазинов мобильной техники. Да, в Мегафоне и иже с ними бывают низкие, задемпингованные товарные позиции(продукция ASUS сейчас, например), но это единичные случаи.

      • Илья Смирнов:

        Вообще-то из Китая телефоны заказывают не те люди, которые готовы переплачивать втрое за шильдик. Да и здесь бОльшая часть обзоров тех же недорогих китайских телефонов только с марками российских перепродавцов и по двойной цене.

    • Beegoner:

      Вы напрасно пытаетесь свести всех под одну гребенку, ну или под две. Люди разные, их взгляды разные, они живут в разных городах и странах, разными путями они приходят на MR и по разным причинам остаются. И телефоны они покупают исходя из личных предпочтений и вкусов, НЕ ЗАБЫВАЯ О ЦЕНЕ!!!

      • Max Nartov:

        Ну раз телефоны они ВЫБИРЮТ, то они явно не будут покупать его в ближайшем магазине, забыв о цене.

        • Beegoner:

          Я недаром про цену в последнюю очередь вспомнил — вот пришёл покупатель, пощупал то, потрогал сё, повертел это. Ему что-то понравилось и он такой: «А вот я щас на Маркете найду дешевле!». Ну может пару раз прокатит. А по факту: тут нет, здесь информация устарела, а там только по акции с фигнёй в нагрузку. Да туда ещё ехать надо по пробкам, расходовать время, которого и так нет. Вокруг меня преимущественно такие люди. Да, они придут и спросят или сами почитают, покивают головой, а по факту купят что-нибудь левое, на что глаз упал и что в этой точке продавалось.
          Телефоны они как шмотки стали: отличаются фасоном, ценой и размером. Внутри однофигственный Android с разным уровнем рюшей и свистелок-заманух. А потому его надо мерить, рассматривать и т.д. И продаются они потому в местах шопинга, как трусы, колготки и ботинки.

    • Zee:

      Не вижу ничего плохого в том, чтобы купить телефон в Связном. В нашем городе альтернатива только одна — DNS. Где цена ниже, а товар не только с витрины, там и покупаю. Сперва стараюсь почитать обзор здесь, на MR.

      • Max Nartov:

        Я тоже не вижу в этом ничего плохого, говорю с позиции жителя крупного города, где достаточно широкий выбор, а в наиболее распространенных магазинах чаще всего цены выше, это плата за то, что магазинов много и они очень часто стоят у метро.

    • tamtam:

      Основная аудитория любого ресурса, это люди пришедшие на него через поиск перед покупкой нового аппарата. А постоянных читателей значительно меньше. Конкретно про m-r не скажу, но по многим так. Так что про Связной весьма справедливо.
      Я уж не говорю, что писать о серых устройствах, на более менее приличном ресурсе, как-то странно. Все таки это не совсем законное действие.

    • Простой пример.
      Я не могу назвать себя человеком, разбирающимся в бытовой технике. Но перед покупкой стиральной машины или чего-то подобного всегда захожу на профильный ресурс и читаю обзор понравившихся моделей.
      Так и тут.

    • Алексей Ромашин:

      Я, например покупаю технику в обычных магазинах, но читаю обзоры.
      Вы не представляете сколько людей идут за покупками в оффлайновые магазины.Есть людb которым удобство покупки и отсутствие проблем при возврате и или обмене, а главное экономия личного времени важнее экономии небольшого количества денег.
      Так же учтите что за пределами Москвы не возможно пойти и купить серую технику, только с доставкой транспортной компанией, экспресс почтой и т.п. Что делает покупку серого товара вообще бессмысленной.
      Те кто готов заморачиваться и ждать идут на 4PDA, там много обсуждений различных путей покупки. На IXBT тоже много пишут про неофициальные телефоны. Но должен же быть ресурс который смотрит на телефоны с точки зрения обычного покупателя, который идёт в магазин и выбирает из того что видит на витрине, так что у мобайлревью правильный подход.

      • Serge:

        Глупости, проблемы с обменом и возвратом зависят отнюдь не от того, онлайн или оффлайн, а от самого магазина. Помнится, я так и не смог получить деньги за бракованный блюрэй в медиамаркт, только после продолжительной нервотрепки удалось кое-как его им сдать и взять другой, более дорогой товар. Вместе с тем неделю назад в течении нескольких минут, спокойно и без проблем заменил оказавшуюся бракованной мультиварку, купленную в интернет-магазине.

    • Алексей:

      Да ладно. Я всегда читаю обзоры. И почти все свои телефоны покупал именно в Связном.

    • >> Те люди, которые читают обзоры и следят за техникой не пойдут в Связной за телефоном, а те, которые купят в ближайшем Связном(либо аналогичном магазине)

      То-то все отсюда бежали в ближайший Мегафон за Note 3.

    • drugello:

      ну неправда…я мр читаю давно, трубок было немало, иногда установкой кастомных прошивок, да и работаю в IT сфере, но желания купить что-то, но дешевле из китая(или ещё откуда) не возникало-не люблю всей возни этой, мне действительно проще заплатить больше, но купить без проблем и ожиданий сразу в официальной рознице.

  2. Shlomo Levi:

    где то так. попугаи относятся к науке, а там любой результат всегда зависит от исследвание. например в иследовании гипертонии в западной медицине золотым стандартом был Framingham study. когда целый город соответственно

    Framingham, Massachusetts а именно целых 2 поколения жителей в течании пару десятков лет обследовались(вспомнте советскую диспансеризацию) дык вот этот непререкаемый авторитет в конце концофф был убит одной фразой «wrong statistical model»)) а уж попугаи послабее будут

    • Alexandr.Noskov:

      Да при чём ту гипертония, если у тебя iPhone и Blackberry? Вопрос только один, зачем для них пишут тесты?

    • tamtam:

      Только давайте не будем подменять понятие исследование ничего не значащим набором цифр.

      • Shlomo Levi:

        я как раз именно про науку, милиардами финансируемую, с кучей авторитетов, котрую вдруг начали пересчитывать и пшык. ….

  3. Aleyster Crowley:

    Полностью согласен с автором насчёт того что реальная модель использования аппарата и бенчмарк сильно отличаются по результатам. Но из этого следует лишь один вывод — методики бенчмарков должны стать более разноплановыми, изощрёнными и приближенными к действительности. А вот мысль о том, что только реальная работа является показателем является по крайней мере сомнительной. Реальные условия у каждого свои. — одному будет интересно звонить, дркгой преимущественно будет играть, третий надолго зависнет в инстаграмчике. К тому же при равенстве условий модель использования конкретного аппарата будет зависить от многого: винфон заведомо имеет шансы проработать дольше, т.к. он более скуден в интерфейсе и программном обеспечении… Это всё прводит к мысли о необходимости стандартизации оценики. Пусть самый изощрённый стандартный тест не покажет нам истинной автономности, но по крайней мере он даст чёткую сравнительную характеристику с другими аппаратами, а это уже пища для размышлений при выборе аппарата. Тестирование же ручками и на глазок крайне субъективно как минимум, а как максимум может быть ангажированным. Очень на то похоже, учитывая какой акцент делается, к примеру, на автономности Vibe Z, хотя этот аппарат при всех своих позитивных свойствах типичный середнячок по автономности…

  4. Alexandr.Noskov:

    Восемь ядер от МТК это чисто маркетинговый ход. В повседневном использовании Вы не заметите насколько слаб этот чипсет. Но стоит только запустить GTA SA или Xcom и сразу поймёте, как жёстко Вас ̶н̶а̶е обманули!

    • Юрій Андрашко:

      Ну здесь как и на ПК:в играх все решает видеокарта, о которой найти информацию ( хотя бы то же количество шедевров) очень сложно

      • Великий кукурузо:

        >все решает видеокарта, о которой найти информацию ( хотя бы то же количество шедевров)
        Автозамена жжёт напалмом )

      • Alexandr.Noskov:

        Юрий я бы сказал, что в Линуксе (Андроид), как и в Windows, в большинстве случаев всё решает производительность одного ядра. А МТК это как большой самолёт, которому вместо двух мощных турбореактивных двигателей повесили на крылья кучу мопедных двигателей. Летает то он летает, только не высоко и не быстро XD

        • Юрій Андрашко:

          В целом да, 2 быстрые ядра в 99% лучше 3,4,…100 медленных.

          • Vombatus Dobreyshiy:

            Дело даже не в том, что лучше, а в том что чудесные 8 ядер похоже только бенчмарки умеют задействовать.

    • Евгений:

      А что с gta не так? Honor 3x — всё работает прекрасно…

    • Илья Смирнов:

      Может вас обманули? У меня всё быстро бегает.

      • Alexandr.Noskov:

        Может конечно вопрос оптимизации ПО значение имеет. Всё равно доверия нет мтк))

  5. Юрій Андрашко:

    А вот лично я всегда смотрю на тесты сколько проигрывает видео, сколько музыку, для полноты картины не хватает тестов разрядки при разговоре, при веб серфинге и при езде по городу с включенным навигатором. Желательно все тесты при минимальной, максимальной и средней яркости. А показатель день или два «активного использования» ну очень субъективны

  6. Даниил:

    Статья интересно написана, прочитал от начала до конца, Но чего то явно в ней не хватает. Написано синтетические тесты против здравого смысла. Но ребят, если флагман любой компании будет продаваться с вдвое меньшими показателями чем у конкурентов многие из-за этого его просто не купят.
    Мне интересно другое, насколько меняется производительность спустя например год использования, начинает ли телефон например с загруженной приложениями оперативной памятью или живыми обоями и тд. медленнее работать или скорость работы устройства остается неизменной или благодаря обновлениям он еще шустрее начинает работать?

    • Юрій Андрашко:

      У почему же, надо просто правильный марткетинг. В духе в Соперника 8 ядер, 4К. Зато наш телефон держит заряд в два раза дольше и ГТА идет без тормозов…

    • Дмитрий Горпинчук:

      Могу вам на примере самсунга сказать, что производительность интерфейса через некоторое время использования меняется сильно: тач виз начинает тупить в самых странных местах, галерея и звонилка запускаться по несколько секунд (хотя они и «из коробки» могут так делать) и т.д.
      В противовес, есть товарищ с нексусом 4, который перезагружает его только, если ставятся обновления системы или внезапно разрядился аккумулятор. Ни разу не делал общий сброс. Аппарат работает также быстро, как и при покупке.

  7. P!:

    Все же считаю что тесты дисплеев с колориметром необходимы, это надёжный общий знаменатель в отличии от бенчмарков производительности, абсолютно достоверный, здесь нет эфемерных попугаев, только сухие и объективные цифры, кому это не нужно просто пролистают до абзаца с субъективным впечатлением, а вот тем кто понимает что значат эти цифры и графики сразу будет видно какого качества ждать от дисплея и не придётся полагаться на взгляд автора, тк всем нравится разная картинка, кто то любит теплее, кто то холоднее, кому то нравятся OLED и тд. Плюс не помешало бы во всех обзорах говорить есть ли у экрана поляризационный фильтр и воздушная прослойка, это тоже очень важно.

    • Саша Кокшин:

      главное- смотреть на суперцветопередачу и качество экрана предлагается на экране своего монитора.

  8. Богус:

    «Самый важный параметр автономной работы это повседневное использование.
    Сколько при повседневном использовании смартфон живет? День или два? А
    может даже до вечера не доживает? Именно этот показатель и интересует
    потенциальных покупателей»
    А повседневное использование у всех разное, я много общаюсь через мессенджеры, звоню очень много по работе, слушаю музыку и тд, и у меня телефон садится очень быстро, с 7 утра до 14 дня у меня живёт одна зарядка, потом заряжаю ещё раз. И тест размытый, совсем, не каждый день одинаковая загружка на телефон ведь, для этого и нужны сравнительные тесты в лабораторных условиях, чтобы понять, какой телефон лучше держит заряд, а потом уже можно добавить отсебятины вроде «мой опыт использования».

    «Иногда читатели просят нас тестировать экраны смартфонов с помощью
    колориметра, но его по сути также можно назвать «бенчмарком» и той же
    попыткой свести все показатели экрана к общему знаменателю. По своему
    опыту скажу, что мне гораздо понятнее, когда автор обычным языком
    рассказывает о сильных и слабых сторонах экрана (углы обзора,
    пикселизация, яркость, поведение на солнце и в темноте), вместо сложных
    графиков с колориметра.»
    Колориметр расскажет о том, насколько честный экран, вот и всё, опять же, насколько он соврёт, а потом уже можно добавить про нгасыщенность цветов (хотя по тесту колориметра и общей дельте всё будет ясно с насыщенностью), про яркость и углы обзора.

    Также, когда тестируете аудиотехнику, тестируйте аудиотехнику, а не гаджет, что за обзоры, где просто расписаны характеристики? Если не с чем сравнить, или нет слуха — не обозревайте наушники и плееры, это просто описание характеристик, которые на коробочке и так написаны, они не интересны, интересно мнение человека, который слушает.

    В тестах устройств нужна доля объективности, вроде тестов колориметра и бенчмарков, и субъективности, вроде как «мой опыт использовани» или «а вот в сравнении с айфоном/самсунгом». а пока полностью субъективные обзоры, по которым можно понять только отношение автора к бренду, выпускающему данный смартфон и всё. Надеюсь, что в будущем, вы будете наконец выравнивать чаши весов.

    • Alex:

      Вообще, на gsmarena довольно корректные тесты — LG G2 в числе лидеров и он действительно живет дольше всех других смартфонов, которыми я пользовался. Nexus 5 показывает плохие результаты и я реально наблюдал, как с него утекает заряд на глазах.

      • Богус:

        ну так мы не о арене говорим, а о ревью, на арене фото субпикселей делают, если что, и тест колориметра, и тесты батареи адекватные, а на ревью всё по мнению автора, то есть объективности ноль, только субъективность впечатления, подпорченное отношением автора к марке производителя

  9. Stone17:

    А почему бы не провести опрос на счет того кто и как покупает телефон? серый или или офиц.
    Покупал порядка 20 телефонов, как себе так и другим. из них всего 1 был куплен в евросети, все остальные серые. и из них всего у одного испортилась плата) разница в цене всегда не меньше чем 20%.

  10. Великий кукурузо:

    С одной стороны да, синтетические тесты не отображают реальность, а с другой сценарии использования у каждого свои и могут отличаться очень и очень сильно. И самое худшее, что они так отличаются и у авторов. Один напишет про модель Nokla x1 что работает она долго, другой, про Nokla x2 что мало. А в итоге всё может оказаться с точностью, да наоборот. Можно, конечно, регламентировать какие функции и на сколько включать, но так мы опять же вернёмся к синтетике. Но с ней хотя бы можно предположить какой из двух телефонов дольше работает, в отличие от личных впечатлений авторов. А вообще хорошо бы совмещать оба подхода в одной статье.

  11. Александр Назаренко:

    уже давно интересуюсь гаджетами, читаю обзоры, общаюсь на форумах, но при это все гаджеты (смартфоны, ноутбук, планшеты) покупал в оффлайне, в частности в связном. ничего зазорного я здесь не вижу — на мой взгляд, возможность пощупать и проверить именно то устройство, которое ты покупаешь, куда ценнее и полезнее, чем экономия в несколько тысяч при покупке кота в мешке из китая.

    по поводу бенчмарков тут все четко — типичный способ помериться половыми органами, популярный у школьников и некоторых гиков. мериться результатами бенчмарков — это из серии мериться мощностью двигателей у тачек, выходной мощностью у аудиотехники, мегапикселями у фотоаппаратов и тд. глупое занятие, даже смешно такое видеть…

    • Сергей:

      если давно следить за этой сферой, то возможность купить кота в мешке очень мала, ну уж если что и правда случилось, то проблему решить можно это лишь вопрос времени

      • Александр Назаренко:

        вот только вопрос в том, насколько это приятное дело — сначала месяц ждать телефон по почте, потом обнаружив, что он бракованный, сначала договариваться о возврате/обмене (не забываем о вероятности динамо или отмазок), потом засылать аппарат обратно и ждать замену (если выбран такой вариант). т.е по сути годный аппарат вы можете получить месяца через 2-3…стоит ли это экономии ну даже 5к — большой вопрос.

        • Сергей:

          вы так сказали. как будто это происходит в большинстве случаев. Это редкий частный случай. Думаете если вы купите телефон в связной а на след день он крякнет, вам его сразу поменяют? вас будут мурыжить еще больше…Стоит переплатить за гарантию этого?

          • Юрій Андрашко:

            Ну смотря какие телфоны: если Мото/Нексус и т.д. то да, там брака мало, но всякие Джаю с Китая — то там 20-30% треша…

          • Александр Назаренко:

            поменяют с куда большей вероятностью и меньшими проблемами, чем два месяца возиться с мутными продавцами со всяких али экспресс.

            а переплачивать стоит не только за это, а еще за возможность пощупать свой будущей аппарат до того, как отдашь деньги, за уже локализованную систему с установленным гугл плеем, русским языком и тд.

            вы сейчас разумеется скажете, что перепрошить, рутануть, настроить — дело пяти минут. да, но если вы в теме и имеете опыт. иначе — надо копать горы всяких форумов, возиться с этим всем. кому как, но лично мне это АБСОЛЮТНО не интересно и нет никакого времени и желания всем этим заниматься.

          • Саша Кокшин:

            ну так лотерея все равно. не знаешь в какой процент попадешь. брат уже второй месяц посылку ждет. до этогодве пришли нормально

            • Сергей:

              сгс 3 — 3 раз по гарантии чинил. MX3 еще не разу. купил его на старте в китае за 12000. на тот момент офф цена была 16999 или 17999(точно не помню). Если что то выйдет из строя, я за деньги починю, дешевле выйдет и еще быстрее

  12. Виталий Ерошов:

    Про серые телефоны в Москве — это отдельная тема для разговоров:) Мой хороший друг заказал в инет магазине самсунг s4, когда ему его привезли, он расчитался с курьером, пошел к себе в кабинет и начал расматривать свою покупку. Через пару минут использования он заметил, что тачскрин то работает, то не работает. Он позвонил снова в этот магазин и сообщил о проблеме, на что получил ответ, несите свой телефон в сервис, к нам можете не обращаться. Друга это зацепило и он начал углубляться в данный вопрос. Он позвонил в поддержку Самсунг и выяснил, что имэй телефона в базе самсунг не числиться. Он поехал в связной и сравнидл свой телефон с витринным. Как потом сказал мне, либо в связном подделка, либо у меня, я на глаз определить не смог. Далее начинается самое интересное. Он едет в тот магазин и пытается вернуть телефон. Менеджер забрал телефон и ушел с ним в соседний кабинет, через 10 мин вернулся и говорит, Вы ударили свой телефон сбоку и поэтому заменить мы его не сможем. Друг опешил, но совладав с собой, на это ответил, что телефон пооделка и это статья, поэтому зовите главного и будем разбираться, после часа переговоров их главный сказал, чтобы их не пугали прокураторуй, потому что у них все схвачено. На что мой друг ответил, что да, решить с прокуратурой такой вопрос реально но не за 12000 рублей, поэтому лучше верните деньги. В конце концов те сдались и вернули деньги. Вывод в чем, друг далеко не бедный человек, но вот решил сэкономить 3000 рублей и попал в такую вот историю.

    • Гарри:

      Хороший друг это вы?

      • Виталий Ерошов:

        я за рст:) хороший друг — это не я:) я не из Москвы

        • Гарри:

          Так подделка же, причем здесь рст?

          • Гарри:

            У меня родственник рст телефон покупал htc salsa в официальном салоне, на следующий день пришел с просьбой поменять из-за проблем с динамиком, отправили в сервисный центр на диагностику проблемы, точно так же менять отказались, так что тут дело даже не в рст а в отношении к клиентам.

            • Xena:

              Похожая ситуция была, покупала планшет в Связном, крутила-вертела-проверяла все что можно — все ок — беру. Итог, зайдя в макдак и решив протестировать вай-вай я понимаю, что у планшета вздута боковушка, экран отходит и в целом задняя крышка имеет некислый такой люфт, люфтище даже.
              Вернувшись в Связной через 45 минут после покупки и поделившись проблемой я внезапно сталкиваюсь с колоссальным негативом, обвинениями в криворукости и одновременным нападением на меня 3 сотрудников вкупе с администратором. Претензия, потом экспертиза, жду результатов. И ладно бы устройство какое-то было невероятное, цена всего 3690. Даже не денег жалко, но удивительно, как меняются люди от добродушно-радушных консультантов до алчных стервятников.

              При том я вспоминаю даже не подобный случай в Мвидео, когда брала телефон, через неделю поняла, что он мне не подходит — мне вернули деньги без вопросов.

              Ну то есть я все к чему — отношение к клиенту очень и очень важно, зачем закидывать друг друга какашками.

              • Сергей:

                Я вот с вами полностью с вами согласен. Расскажу это исходя из своего опыта работы в «связном». Работал с 2011 года по 2014. Раньше поменять такой планшет или телефон было очень просто. Сейчас же на это нужно разрешение от отдела рекламаций, а без него даже руководитель магазина не может это сделать. Если он это сделает — то с него могу снять часть его ЗП, а он на себя не хочет брать такую ответственность. Единственное сто он может сделать что бы быть максимально лоялен к человеку, это предложить сдать товар на 10 дней на экспертизу в 99% случаях ответ на стороне клиента(но я сталкивался и с этими 1%), так же нужно очень грамотно это объяснить человеку. В этой сфере очень много «колхоза» и когда человек приходит в магазин. то он как правило уже сам на негативе, и в ответ от «колхоза» тоже получает негатив. Я могу вам очень много рассказать как руководство относится к своим сотрудникам, а от этого и вытекают такие проблемы с обслуживанием

    • Alex:

      Много лет покупаю почти только серые телефоны. Один раз попался с браком (причем плавающим), через три дня выдали новый без вопросов.
      Просто при покупке нельзя совсем не включать мозг, магазинов много, подходы у всех разные.

  13. ArtemiyNeko:

    Надо сказать, в реалиях Андроида многие скоростные бенчмарки смысл всё же имеют, просто надо заранее делать скидку на накрутку производителя. Разница в пару тысяч антуту конечно заметна не будет (это уровень погрешности измерения вообще), а вот разница в десять скажет о многом. Это не столько даже игрушки, это и плавность интерфейса, и скорость работы хрома, и скорость мультитаскинга… К сожалению Андроид со своими джава-машинами не самая, мягко говоря, оптимизированная система в плане производительности, поэтому попугаи и дают примерное представление о том, чего следует ожидать. С другой стороны, если обзор и так перечислит всё это, то бенчмарк в общем необязателен, не на нас, гиках, мир сходится в конце концов.

    По поводу остальных — батарейки, экран и тому подобное — да, правда всё.

  14. Sergey Tsybulnik:

    С статьей абсолютно согласен. Вообще не понимаю — зачем эти бенчмарки — личный опыт использования намного важнее или обзоры АДЕКВАТНОГО покупателя.

  15. Виталий Ерошов:

    Про серые телефоны в Москве — это отдельная тема для разговоров:) Мой хороший друг заказал в инет магазине самсунг s4, когда ему его привезли, он расчитался с курьером, пошел к себе в кабинет и начал расматривать свою покупку. Через пару минут использования он заметил, что тачскрин то работает, то не работает. Он позвонил снова в этот магазин и сообщил о проблеме, на что получил ответ, несите свой телефон в сервис, к нам можете не обращаться. Друга это зацепило и он начал углубляться в данный вопрос. Он позвонил в поддержку Самсунг и выяснил, что имэй телефона в базе самсунг не числиться. Он поехал в связной и сравнидл свой телефон с витринным. Как потом сказал мне, либо в связном подделка, либо у меня, я на глаз определить не смог. Далее начинается самое интересное. Он едет в тот магазин и пытается вернуть телефон. Менеджер забрал телефон и ушел с ним в соседний кабинет, через 10 мин вернулся и говорит, Вы ударили свой телефон сбоку и поэтому заменить мы его не сможем. Друг опешил, но совладав с собой, на это ответил, что телефон пооделка и это статья, поэтому зовите главного и будем разбираться, после часа переговоров их главный сказал, чтобы их не пугали прокураторуй, потому что у них все схвачено. На что мой друг ответил, что да, решить с прокуратурой такой вопрос реально но не за 12000 рублей, поэтому лучше верните деньги. В конце концов те сдались и вернули деньги. Вывод в чем, друг далеко не бедный человек, но вот решил сэкономить 3000 рублей и попал в такую вот историю.

  16. Капитан неочевидность:

    1. Прогон видео в циклическом режиме не является синтетическим тестом. Естестсенно , что время работы в режиме видео не отражает в целом автономность смарта. Почему мне это понятно, а профессионалу (тут видимо кавычки нужны) Вильдяеву нет?
    2. Колориметр это синтетика? Чего? Вы серьезно? Колориметр замеряет абсолютно объективные параметры. Разумеется, лучше написать «экран хороший, такой яркий и вообще неплохой, чего еще тут скажешь», чем заморочиться покупкой соответствующего оборудования. К тому же нужно еще и понимать, что к чему, а с этим бооольшие проблемы, техническая грамотность на нуле. Можно тысячу раз сказать о опыте , но это фикция.

    3.

    • Удивительно, что при таком отношении к нашей редакции, вы до сих пор продолжаете читать сайт. И комментируете каждую статью.

      • Капитан неочевидность:

        ДАЛЕКО не каждую. И далеко не каждую читаю. Муртазина-не читаю,ибо этот человек сам иногда не знает,что несет,путает диафрагму с выдержкой и рвется при этом что-то мямлить про фото.
        Кузьмина-ну это вообще клиника,информации ноль,там даже попытки изобразить компетенцию не было.
        Захожу только в андроидный раздел,так и тут натыкаюсь на статьи типа «как разблокировать экран,бла-бла-бла,комментируем интересную тему».
        Удивительно,что при таком отрицательном звоне в комментах,вы и пальцем не шевелите,чтобы что-то стало лучше.
        Например,можно было бы поправить вышеупомянутые ляпы,но,естесно,легче изобразить обиду,»опять злые читатели проходу не дают,троллят почем зря» и оставить все как есть.
        Не стыдно быть взрослым и писать на уровне 6 класса?
        Впрочем ,зря спросил,все равно ответа не будет.

  17. baton:

    Бенчмарки это наиболее объективная и наиболее полезная форма получения информации об аппарате без его личного тестирования.

    Взяв стандартный набор бенчмарков, всегда можно сформировать требования к аппарату под ваш личный стиль использования телефона.

    А вот когда кто-то говорит что это фигня, а гораздо более точную информацию дает конкретно мною придуманный стиль использования и верьте мне, потому что я отвечаю всем вашим требованиям. Вот это даже звучит безумно.

    И придумали это не сегодня. Это единственно возможная форма объективного сравнения.
    Возьмите автомобиль. Максимальная скорость, время разгона до сотни.
    Экономичность на шоссе и в городе, или расход на спортивной трассе.
    И т.д. и т.п. Это все аналоги наших бенчмарков.
    Да, они не совершенны. Но они объективны и достижимы.

    Попытка оспорить давно известные истины, это флуд и непрофессионализм.

    • Капитан неочевидность:

      Попытки не будет, всем пофиг

    • Саша Кокшин:

      поэтому и производители затачивают телефоны под бенчмарки. как с евронкапом у авто. если менять условия, то оказывается, что в реальности, а не идеальных условиях аппарат себя ведет по-другому.

    • Александр Назаренко:

      все это звучит хорошо, но когда накоплена уже гора примеров мухлежа производителей на результатах бенчмарков — доверие к ним резко падает.
      а во-вторых смарт может выдавать бешеные тыщи попугаев и банально лагать при пролистывании рабочих столов, открытии файлов или программ и тд…
      конечно как некое мерило производительности смартов бенчи вполне подойдут, но выбирать смарт по очкам в антуту — верх глупости, промытости мозгов и школотовости.

    • «Попытка оспорить давно известные истины, это флуд и непрофессионализм.»

      А когда-то считалось неоспоримой истиной то, что Земля плоская, а Солнце крутится вокруг нее.

  18. Ivan:

    Мдаа, запуск видосика по кругу это не синтетический тест, а практический. «Повседневное использование» это вообще что? Каждый человек использует телефон по разному.

  19. volk0001:

    лично я после мытарств с бракованной нокией на официальной гарантией «белые»телефоны не беру принципиально. Как показывает моя практика, в случае проблем с телефоном можно на с’экономленные при покупке деньги найти на барахолке донора с разбитым экраном, перекинуть с него мать и жить спокойно дальше.

  20. AXH HXA:

    хочется добавить, при мне девушка покупала NOKIA X ребенку 10 лет, продавец ММ уговаривал ее на кетайский андройд на 500р дороже, но нет нокия блин это нокия.
    а андройд был нормальным 720p и какойто MTK. Но фирма была совершенно ноунейм, даже не знал что крупный ритейл активно торгует таким.

    я ей тоже сказал что телефон хлам, но следующий вопрос, а такой есть зелененький и на кассу.

  21. Sergey:

    Предлагаю при описании также учитывать как эрганомику , у Highscreen Thor кнопка блокировки сбоку, что для меня например важно. Так и особенности — 2 sim. Экран визуально такой же как и у htc one , скорость работы сравнима. A сколько он балов набирает неважно. Стандартный пример nokia e51: wifi, 3g, музыка, аська и видио 🙂 что еще надо ?

    • Kainman V.V.:

      Набор балов то дело третье, а вот быстрота работы и запуска приложений это явно не к Тhor(у). Я к примеру при выборе телефона руководствуюсь его быстротой работы, быстротой запуска приложений и четкой работой сенсора и ПО. Терпеть не могу когда телефон/компьютер долго думает — это неприемлемо. Но видимо Вам все равно как это что Вы купили будет в куче эффективно работать.

      • Sergey:

        Наоборот. Суть в том что цена отличается в разы а эффективность одинаковая. Проверено ) а китаец… Все от туда везут. Проверял HTC one и highscreen ice. Любимые игрушки работают плавно. Экраны сравнимы. Зачем переплачивать ? Или если бюджет урезан. Thor стоит на 3 тыр дешевле nexus и это может быть решающим фактором. Не говорю что nexus плох. Это разные устройства. С разной функциональностью.

  22. AirDrop:

    Все-таки, повседневное использование у каждого свое. Читая, что смартфон работает максимум сутки от одно заряда я каждый раз удивляюсь, а потом вспоминаю, что и про мой прошлый смартфон писали то же самое. Учитывая, что почти весь день я провожу за компьютером, мобильная передача данных и wi-fi у меня работают максимум час в день (в сумме). Еще я не слушаю ежедневно со смартфона музыку и не играю в игры, звонков до 15 минут в день. При таком графике мои смартфоны живут по 4-5 дней. Fly IQ4410 на MT6589 однажды протянул 8 дней от одного заряда (минимум звонков, wi-fi до 20 минут в день).
    Старенький LG P500 с корпоративным номером используется только в качестве звонилки (несколько часов разговоров в день) и живет при этом 1-2 дня. Если не звонить, то живет 7-8 дней.
    Описание автономной работы в обзорах что своими впечатлениями, что в виде бенчмарков не дает мне вообще никакого представления, сколько проживет мой очередной смартфон.
    Тут, наверное, везет только тем, кто использует смартфон так же, как обзорщик.

  23. Kainman V.V.:

    Как можно опровергать то, что нексус хуже Thor(а). Лучше нексуса может быть только новый Нексус. А то предвзятое отношение к компании ЛГ которое испытывает «сотрудник» просто необоснованно. ЛГ это только подрядчик! Из деталей от ЛГ там только дислей и возможно модуль камеры. Все остальное — наборное (от других производителей) и что немало важно с топовыми характеристиками. Просто страшно подумать даже что такой консультант будет советовать людям этот «Китай» вместо нормального телефона из-за его надуманных личных убеждений. Жалко людей.

    • Сергей:

      не всем нужен нексус как вы это не понимаете? кому то достаточно большое время работы и качественный дисплей…

      • >> кому то достаточно большое время работы и качественный дисплей…

        У Highscreen Thor? А можно поподробнее на эту тему?

        • Сергей:

          я что то говорил о Thor? просто я немного не согласен с фразой «Лучше нексуса может быть только новый Нексус»
          лучше? что лучше для одного может и не быть лучше для другого. как обладатель MX3 скажу что в теме о владельцах устройства много того кто владел и нексусом и перешел на МХ3, и убежден что МХ3 лучше. Так где правда? что такое лучше?

          • MX3 и Nexus — это флагманы А-брендов (пусть Meizu на MR не считают A, но это уже детали). У каждого есть свои фанаты, но по большому счету это устройства одного уровня. Б-брендам до них очень далеко.

            • Kostyukov Witalyi:

              Не забудем про реализацию алгоритмов камеры у А и Б брендов, насколько вылизаны оболочки от производителя и насколько реализован потенциал железа. У второго эшелона хороший процессор но слабая программная начинка для него, А бренды как правило стараются выжать КПД побольше из предложенного железа. Тор тому доказательство, его не спасают ни 8 ядер ни КЛАССный дисплей, хромая оптимизация софта, драйверов, и программного обеспечения в будущем начисто лишают всех интерессностей аппарата.

      • Sergey:

        Полностью согласен.

  24. Lak:

    Жаль, что лень редакции объясняется благовидными причинами по типу «бенчмарки оторваны от жизни».
    Я соглашусь, что синтетические бенчмарки, выдающие значения в попугаях, оторваны от повседневного использования. Но экран? А тем более батарея?
    Советую обратить свое внимание, как поступают грамотные обзорщики на той же gsmarena, вместо того, чтобы оправдывать свою лень (надеюсь, хоть не некомпетентность).
    Хотя, бесспорно, с такими подходами проще впарить заказуху 🙂

  25. >> Самый важный параметр автономной работы это повседневное использование.

    Самый важный, но не единственный. В самолете или поезде хочется знать, стоит ли посмотреть фильм с телефона или лучше поберечь его.

    • Sergey:

      Только честно, кто смотрит фильмы на смарте ? На ноуте или планете ещё можно понять.

      • Вы когда последний раз ноут в самолете видели? Не в бизнес-классе, а в эконом. В дороге, когда надо занять себе время, вполне можно и на телефоне посмотреть. И не только на смарте. Я три сезона Lost смотрел на Samsung Jet. Очень классно было.

        • Sergey:

          Когда последний раз летал тогда и видел ) а ещё встроенные моники в сидушки ) маленький экран только сажает зрение особенно в поезде.

          • Я летал в июле. Ни туда, ни обратно не видел ни одного ноута. Несколько планшетов, несколько читалок. И много-много телефонов. Понятно, что не все на них смотрели видео, но сама тенденция по использованию устройств — очевидна.

      • rrrrex:

        Да ладно, на 5″ лопате нормально фильмы смотреть.

    • Поэтому мы и делаем тесты в режиме видео.

  26. Sergey:

    А вообще,мне кажется что статья заказная. Для подогрева интереса к highscreen. Мало кто знал что они делают вещи а теперь вон как обсуждают )

  27. Ал Пет:

    У всех свои юзеркейсы использования.

    К примеру я много звоню, вайбер, RSS, читаю книгу по вечерам, игрушек и видео вообще мало.

    Кто-то очень много играет, смотрит видео.

    У кого то просто на столе лежит телефон

    Тут вообще не угадаешь 😉

  28. EBZULINAAAAAAAA11111:

    Капитан Очевидность заглянул в окно видимо. Эти выводы бытовали еще со времен синтетических тестов КПК. сравните время работы макбука при просмотре видео из айтюнса и .avi например.

  29. Андрей Асабин:

    Вот вот, большинство не знает всех этих тестов и не просиживает время на тех.сайтах. просто идут покупают то что внешне понравилось, что пропихнули продавцы, и что могут потратить на телефон. У большинства семьи и не только единым телефоном живы они , но и стиральной машиной и кухонной техникой и тд. И это правильно . А меньшинство тем временем таскает друг друга за волосы доказывая свою правду матку чей телефон лучше. И это неправильно.

  30. Alex_Ins:

    Не совсем понял, к чем тут сравнение Nexus 5 и Тора, который в Китае стоит менее 200$? Устройства разного ценового диапазона…

  31. Alexandr Al:

    «Смартфоны, работающие один день» это примерно как «автомобили, работающие одну неделю на баке»