Galaxy note 7 benchmarks e os nerds que gostam de odiá-los

Apesar de passar por um recall massivo no momento, o Galaxy Note 7 ainda é um dos principais telefones do mercado. E há algo no fundo de todos os nerds de smartphones que brilha toda vez que eles possuem um telefone que alguém com alguma medida de autoridade chama de "o melhor" e defende essa afirmação da maneira que eles concordam.

Os fãs do Note 7 tiveram esse sentimento tirado deles recentemente pelo pessoal inteligente da XDA-Developers. Por meio de uma combinação de testes do mundo real, benchmarks e ferramentas de monitoramento do sistema, os escritores do XDA contaram uma história de desempenho gaguejante que parecia demonstrar que esse novo telefone brilhante não era, de certa forma, merecedor do espaço no topo da pilha. muitos revisores técnicos o colocaram.

É uma leitura divertida, especialmente se você apenas entende o que está lendo. Antes de considerar arremessar seu Note 7 de volta à loja de origem com essa catapulta caseira, há algumas coisas que você deve saber sobre benchmarks e testes do "mundo real".

Aplicativos de referência são inúteis

Se você usar um aplicativo de referência para dizer o desempenho ótimo ou terrível do seu telefone, não estará obtendo nada perto de uma imagem completa. Os aplicativos de referência costumavam ser ótimos para solução de problemas, existindo para que você pudesse ver se houve algum tipo de perda de desempenho ao longo do tempo ou danos ao seu equipamento. Atualmente, muitos fabricantes implementam código especial que força esse hardware a executar acima dos limites típicos quando um aplicativo de benchmark está sendo usado, o que altera irreparavelmente os resultados. Você está medindo uma versão do hardware ao qual seu telefone nunca permite que você tenha acesso; portanto, você ganha apenas uma tentativa de obter a pontuação mais alta ao executar aplicativos de referência hoje.

Se você vir uma Nota 7 executando algo tão suave quanto um Nexus 6P, considere quantas outras coisas a Nota 7 está fazendo.

Essas alterações de software que alteram o desempenho levam a um problema muito maior. Quando você está comparando um Galaxy Note 7 a um Moto Z Droid Edition e um Nexus 6P, está comparando três experiências diferentes que nunca farão a mesma coisa ao mesmo tempo. Samsung e Lenovo têm tarefas em segundo plano que não podem ser replicadas no Nexus 6P. Recursos que não podem ser desativados para obter uma comparação 1: 1 do desempenho do software. Se você vir uma Nota 7 executando algo tão suave quanto um Nexus 6P, considere quantas outras coisas a Nota 7 está fazendo. Melhor ainda, dê uma olhada na revisão Anandtech imensuravelmente mais completa do desempenho do Note 7, em comparação com todos os outros telefones de alto desempenho, e veja como ele ultrapassa regularmente o Nexus 6P.

Há um valor no teste para coisas como quadros perdidos, e o relatório desses quadros perdidos no contexto é uma coisa importante a ser feita quando seu objetivo é educar e informar potenciais compradores. É difícil dizer que foi o que aconteceu com a apresentação do XDA, dada a falta de contexto ou a comparação adequada. A Nota 7 cai mais ou menos quadros que o Galaxy S7 ou S7 Edge? Isso poderia ser um problema exclusivo da variante Snapdragon deste modelo? Isso está acontecendo porque a nova interface do usuário Grace da Samsung foi lançada com pressa e poderia ser corrigida em uma atualização futura? Nenhuma dessas perguntas é respondida, porque o objetivo não era informar.

Colheita de cereja no "mundo real"

Pouco depois de a XDA publicar suas descobertas, um post de Vlad Savov, do The Verge, tentou aplicar alguma realidade à explosão inicial da Internet. Neste Vladitorial, foi apontado que algumas das descobertas no XDA não eram realmente verdadeiras. Especificamente, alegar que uma diferença de 200ms no lançamento de aplicativos era um exemplo de "desempenho embaraçoso" é bobo e não representa como as pessoas realmente usam smartphones. O XDA reagiu com mais dados, tentando fortalecer sua posição. O argumento contrário, segundo o qual um atraso de 200 ms seria adicionado ao longo do tempo ao telefone, de forma que um usuário da Nota 7 pegasse um Nexus 6P e ficaria surpreso com a rapidez com que "sente" ser aplicada pelos GIFs, demonstrando essas diferenças de desempenho.

O que é fascinante nessa demonstração é a escolha da cereja. O software da Samsung está longe de ser perfeito; na verdade, depois de desinstalar 13 aplicativos do meu novo e brilhante Verizon Note 7 e encontrar outros oito que não posso desativar, meio que quero esmagar o meu com um martelo agora. Sentado no telefone ao lado do meu Nexus 6P, recém-preenchido com Nougat, há absolutamente aspectos desta Nota 7 que são comprovadamente mais rápidos. A câmera, por exemplo, inicia rotineiramente um segundo completo mais rápido. Não seria difícil escolher meia dúzia de exemplos, GIF-los e escrever algo que pareça uma evidência de quão superior a Nota 7 é ao Nexus 6P.

O problema é que não é assim que os testes do mundo real funcionam. O objetivo dos testes no mundo real, como o nome sugere, é oferecer exemplos de desempenho de como o telefone inteiro funciona como se um usuário "médio" usasse o telefone. Usar esses dados para comparar uma experiência com outra é complicado, em vez de oferecer uma comparação 1: 1 de software, pois ela oferece uma comparação 1: 1 da experiência, como é o uso dos telefones. Mostrar como um menu de compartilhamento é carregado, especialmente quando esses telefones não estão claramente configurados da mesma maneira com os mesmos aplicativos, não se encaixa nessa descrição. A menos, claro, que você esteja empurrando uma narrativa diferente.

Melhores ferramentas e análise real

A falha real em tudo isso é uma suposição equivocada de que a Nota 7 da Samsung e o Nexus 6P do Google são criados para o mesmo objetivo. Puro e simples, eles não são. A experiência do Google Nexus evoluiu do limpo Developer Kit para uma demonstração do Android Open Source Project com vários extras. Os telefones da Samsung não iniciam com o AOSP há muito tempo, e não há razão para a empresa considerar outro caminho agora.

Os telefones Samsung são baseados no Android, não no Android.

Os telefones Samsung são baseados no Android, não no Android. Como resultado, os telefones Samsung são otimizados da maneira que considerarem mais importante. No momento, essas otimizações são para fornecer recursos exclusivos da Samsung, como a câmera da Samsung, o Samsung Pay e as funções exclusivas da S Pen. Android, com o que quero dizer o sistema operacional, não prioriza essas coisas. Em versões recentes, houve um foco em coisas como consumo de bateria quando você não está usando o telefone, segurança o tempo todo e uma interface de usuário consistente de 60FPS. É difícil argumentar que qualquer uma dessas coisas não é importante, mas nem o Android da Samsung nem o Android do Google priorizam todas essas coisas.

Realmente, o que isso significa é o que você, como usuário, prioriza. Se você quer o telefone mais seguro com uma interface lisa e sem ônus, provavelmente deseja o que o Google e a HTC anunciarão em breve. Se você se preocupa com uma ótima câmera e um software criados para oferecer a você uma tonelada de recursos que você pode ou não usar, o Galaxy Note 7 da Samsung é difícil de superar no momento. Tentar reivindicar a Nota 7 é, de alguma forma, com baixo desempenho, porque ele não se comporta como um telefone que não foi construído para se comportar como é ridículo, não importa o quanto você tente envolver essa narrativa em pontos de referência.