Alterar idioma
Português English Русский Deutsch Español Français Italiano Українська Tiếng Việt Türkçe Bahasa Indonesia हिन्दी 日本語 中文
Menu
Preços
Proxies
TIPOS DE PROXY
Soluções
Recursos

Monitoramento de preços entre mercados: um IP estático por país

Sumário
  1. Por que o mesmo produto custa valores diferentes em mercados diferentes?
  2. Por que manter um endereço fixo por mercado?
  3. Proxy residencial estático para monitoramento de preços: o que conferir
  4. Como é uma rotina simples de monitoramento?
  5. Como ficar dentro das regras do site?
  6. De quantos endereços você precisa?
  7. Quando um proxy é a ferramenta errada para monitorar preços?
  8. Respostas rápidas

Em resumo: Monitorar preços entre mercados é registrar o preço público que uma loja mostra em cada país, em um calendário fixo. Um mesmo produto pode variar por moeda, exibição de imposto, disponibilidade e promoções locais. Para comparar execuções, consulte cada mercado a partir de um único endereço estático nesse país, registre o preço, a moeda, o imposto, o estoque, o horário e o endereço usado, e respeite os termos do site, o robots.txt e uma frequência moderada.

Monitorar preços entre mercados é a rotina de registrar quanto um produto custa em cada país onde é vendido, execução após execução, de modo que uma mudança no registro seja uma mudança na loja. Este guia trata de conferir preços públicos de dentro de cada mercado, a partir de um endereço fixo por país, em um ritmo que o site permita. A ProxyJam vende proxies residenciais estáticos (ISP), o tipo de endereço que a rotina usa, e o trabalho mais amplo de conferir páginas país por país está na nossa página de testes por região. Nossa política editorial explica como artigos como este são fundamentados e corrigidos.

Por que o mesmo produto custa valores diferentes em mercados diferentes?

Porque uma loja define seus preços por mercado, e várias coisas mudam na fronteira. As plataformas de e-commerce já trazem isso embutido. As páginas de ajuda da Shopify descrevem preços definidos por país ou região, ajustes percentuais por mercado e arredondamento depois da conversão de moeda, e catálogos que decidem quais produtos um mercado pode comprar. Quatro diferenças aparecem com mais frequência.

  • Moeda. O valor é convertido ou definido por mercado, e o arredondamento pode levá-lo a um final de preço local. Um cifrão não diz de qual dólar se trata: os preços australianos, canadenses e americanos usam todos o mesmo símbolo. A ISO 4217 dá a cada moeda um código de três letras, como USD ou CAD, e esse código pertence ao registro.
  • Imposto no preço exibido. Na UE, o preço mostrado aos consumidores é o “final price for a unit of the product, or a given quantity of the product, including VAT and all other taxes” (preço final por unidade do produto, ou por uma dada quantidade, incluindo IVA e todos os demais impostos), segundo a Diretiva de Indicação de Preços. Nos Estados Unidos, o imposto sobre vendas costuma ser somado no checkout. As regras do Merchant Center do Google seguem a mesma divisão: sem imposto no preço enviado para os EUA e o Canadá, com IVA ou GST incluído na maioria dos outros países. Ponha um preço alemão ao lado de um americano como exibidos, e você estará comparando um valor com imposto com um valor sem ele.
  • Disponibilidade. Um produto, um tamanho ou um plano pode ser oferecido em um mercado e não existir em outro, ou ser oferecido e estar sem estoque. São fatos diferentes, então precisam de valores diferentes no registro.
  • Promoções. As liquidações variam por mercado e por data. Na UE, a Diretiva Omnibus exige que uma redução anunciada mostre o preço anterior, que ela define como o menor aplicado pelo comerciante durante um período de pelo menos 30 dias antes da redução. Um preço riscado em uma página da UE, portanto, traz uma informação que uma página dos EUA pode não ter.

A tabela Por que um mesmo produto tem preços diferentes associa cada diferença ao campo que a captura. Como um site decide em qual mercado um visitante está, e que outros sinais ele lê, é tratado em como ver o seu site a partir de outro país.

Por que manter um endereço fixo por mercado?

Uma comparação precisa que uma só coisa mude por vez. Se a execução de segunda chegou a uma loja por uma rede e a de quinta por outra, um novo preço pode vir da loja ou de como a loja tratou o segundo endereço, e o registro não consegue dizer qual. Um endereço estático por país mantém o ponto de observação constante, então uma diferença entre duas execuções aponta para a loja. Manter um endereço e tirar de um pool são comparados em proxies ISP ou residenciais.

O tipo de rede também conta. Alguns sites tratam endereços em redes de hospedagem de forma diferente de conexões domésticas, então uma verificação a partir de uma faixa de hospedagem pode mostrar uma página que nenhum comprador do mercado veria. Um proxy ISP é um endereço anunciado pela rede de um provedor de internet e servido de um data center, o mesmo tipo de rede em que está um comprador local.

Um endereço fixo ainda pode se desviar: os bancos de dados de geolocalização são atualizados, e um endereço pode passar a constar em outro país. Abra o Qual é o meu IP pelo proxy antes de cada execução. Se o endereço não geolocaliza mais no mercado que você comprou, a execução feita a partir dele não deve ser arquivada. O endereço não é trocado durante o período que você pagou (seção 2.5 dos Termos de Serviço).

Proxy residencial estático para monitoramento de preços: o que conferir

Um proxy residencial estático é o endereço em que essa rotina se baseia, então teste-o no primeiro dia. Os pagamentos são definitivos, e a Política de Reembolso (seção 1) devolve um IP ao seu saldo somente por um defeito informado em até 24 horas depois do pagamento. Para um endereço estático, esses defeitos são uma velocidade abaixo de 2 Mbit/s, uma conexão recusada e um Fraud Score de 75 ou mais no nosso verificador de IP. Quatro verificações cabem nesse dia.

  • O país. Abra o Qual é o meu IP pelo proxy e compare o país com o mercado que você comprou. Determinamos o país de um endereço pela MaxMind. Outro banco de dados de geolocalização pode situar o mesmo endereço em outro lugar, o que a Política de Reembolso não trata como defeito (seção 2), então anote também o país que a própria loja mostra na primeira página.
  • A rede. A operadora indicada no pedido é a rede que anuncia o endereço. Compare o ASN com essa operadora.
  • A conexão. Conecte-se com o usuário e a senha que o pedido mostra, ou a partir de um IP seu na lista de permissão. Faça um teste de velocidade pelo proxy e guarde uma captura de tela, que uma reclamação de velocidade exige.
  • A primeira resposta da loja. Carregue uma página de produto a partir da configuração do mercado. Um bloqueio do site de destino não é um defeito reembolsável (seção 2), e vê-lo no primeiro dia indica que você deve pedir a essa loja um feed antes de montar um calendário em torno dela.

Quando o endereço passa, ele pode carregar o registro do mercado pelo tempo em que você o mantiver: renovar o pedido mantém o mesmo endereço (Termos de Serviço, seção 2.5).

Como é uma rotina simples de monitoramento?

Escolha os produtos, escolha os mercados, fixe o calendário e registre cada execução do mesmo jeito. Os passos estão listados em Uma execução de monitoramento, mercado a mercado, e os campos em Os campos de um registro. Três hábitos mantêm os registros comparáveis.

  1. Mantenha fixa a configuração de cada mercado. Um perfil de navegador ou configuração de script por país, com o idioma desse mercado e sem cookies salvos, usando o endereço desse mercado. Uma região ou moeda salva em um cookie pode pesar mais do que o endereço.
  2. Escreva os valores primeiro, converta depois. Registre o preço exatamente como exibido, com o código da moeda e se o imposto está incluído. A conversão para uma única moeda e a remoção do imposto vão em colunas separadas, com a taxa de câmbio e a data dela ao lado, para que o registro bruto nunca mude.
  3. Mantenha três estados de disponibilidade. Em estoque, sem estoque e não oferecido no mercado são achados diferentes. Uma célula vazia esconde qual deles era.

Compare cada registro primeiro com a execução anterior do mesmo mercado. Uma comparação entre dois mercados vem depois, quando as colunas convertidas existirem.

Como ficar dentro das regras do site?

Consulte páginas públicas, em um ritmo moderado, dentro dos termos do site e do robots.txt dele. Nossa Política de Uso Aceitável cita a inteligência de preços e de mercado entre os usos que dispensam revisão prévia (seção 2) e permite a inteligência de negócios com informações às quais você tem permissão legal de acesso (seção 1). A seção 3 estabelece o limite que mais importa aqui: a disponibilidade pública dos dados não autoriza, por si só, scraping nem acesso automatizado, e você deve respeitar as regras do site, as restrições contratuais, os limites de taxa e, quando legalmente aplicável, o robots.txt.

  • Somente páginas públicas. Um preço que qualquer visitante do mercado vê sem fazer login é um preço público. Uma loja que mostra seus preços a visitantes de um mercado os publicou ali. Uma loja que recusa visitantes do seu próprio país estabeleceu uma restrição, e a seção 5 da política proíbe acessar um site em violação à disponibilidade regional dele.
  • Os termos do site. Os termos de um site podem proibir ou limitar o acesso automatizado. Leia-os antes da primeira execução e sempre que mudarem. Quando proibirem scripts, peça à loja permissão ou um feed que ela publique.
  • robots.txt. As regras são padronizadas na RFC 9309, que diz “These rules are not a form of access authorization” (essas regras não são uma forma de autorização de acesso), então um caminho que o robots.txt permite continua sujeito aos termos. Um caminho que ele proíbe fica fora de uma execução por script. A RFC também diz que um crawler não deve usar uma cópia em cache por mais de 24 horas, então um script deve ler o arquivo de novo todo dia.
  • Frequência. Ajuste o calendário à decisão: uma revisão semanal de preços pede uma execução semanal, e uma decisão diária de reprecificação, uma diária. Dentro de uma execução, carregue uma página por vez em cada site. Um servidor que responde 429 Too Many Requests está limitando a taxa, e a RFC 6585 permite que ele inclua um cabeçalho Retry-After dizendo quanto tempo esperar. Espere pelo menos esse tempo. Distribuir as requisições por mais endereços para continuar seria agir contra o limite de taxa do site, o que a seção 5 proíbe.

De quantos endereços você precisa?

Um por mercado. Nenhuma contagem serve para todo programa, mas três perguntas resolvem.

  • Quantos mercados? Cada país precisa do seu próprio endereço ali, então três mercados precisam de três endereços. Os países que oferecemos estão listados na página de locais dos proxies, 76 hoje.
  • Com que frequência? A frequência não acrescenta endereços. Uma execução diária e uma por hora usam o mesmo endereço por mercado; só muda o número de visitas.
  • Quanto roda ao mesmo tempo? Várias pessoas ou scripts conferindo o mesmo mercado podem dividir o endereço dele: cada endereço comporta até 100 sessões simultâneas, seja qual for o tráfego (Termos de Serviço, seção 2.4). Uma rotina que carrega uma página por vez em cada site usa uma sessão por site.

Os endereços são precificados por IP por período, como listado na página de preços, e cada um continua seu durante o período que você paga, o que mantém o ponto de observação de um mercado o mesmo da primeira à última execução.

Quando um proxy é a ferramenta errada para monitorar preços?

  • Preços por cidade. O catálogo é vendido por país, então uma diferença entre duas cidades está além do que ele consegue mostrar.
  • Preços ligados ao comprador. Um preço que depende de uma conta de fidelidade, de um carrinho ou de pedidos anteriores é um preço pessoal, e uma verificação sem login vê o público.
  • Muitas amostras independentes ao mesmo tempo. Testar se um site mostra preços diferentes a muitos visitantes diferentes exige muitos endereços em paralelo, o que é trabalho de um pool rotativo, e ainda não vendemos endereços rotativos.
  • Um catálogo inteiro em alta velocidade. Coletar todos os preços de um grande varejista em pouco tempo é uma pergunta para o varejista. Peça um feed de dados ou uma licença; um endereço não resolve isso.

Para um mercado nos Estados Unidos, a página de proxies ISP dos Estados Unidos lista cada operadora identificada, e o catálogo completo está na página de proxies ISP. Comece com um endereço por mercado que você acompanha e acrescente mercados à medida que a lista crescer.

Por que um mesmo produto tem preços diferentes

As linhas seguem a Central de Ajuda da Shopify, as regras de preço do Google Merchant Center, as diretivas europeias de indicação de preços e Omnibus e a ISO 4217, todas listadas em Fontes. Quais delas uma loja específica usa varia de loja para loja; não medimos nenhuma loja.
O que muda entre mercadosO que registrar
MoedaO valor é definido ou convertido por mercado, muitas vezes arredondado para um final de preço localO código ISO 4217 ao lado do valor, já que um mesmo símbolo pode representar várias moedas
Imposto no preço exibidoOs preços ao consumidor na UE incluem IVA; os preços dos EUA e do Canadá em geral somam o imposto no checkoutSe o preço exibido inclui imposto, conforme a página informa
DisponibilidadeUm produto, tamanho ou plano pode ser oferecido em um mercado e não existir em outroEm estoque, sem estoque ou não oferecido, como três valores separados
PromoçõesLiquidações e cupons variam por mercado e por data; na UE, uma redução anunciada mostra o preço anteriorO preço promocional, o preço anterior exibido e o texto da oferta
VitrineUma loja pode enviar cada país para o seu próprio domínio ou subpastaO endereço que você solicitou e o final, depois dos redirecionamentos

Os campos de um registro

Uma execução de monitoramento, mercado a mercado

  1. Confirme o endereço

    Abra o Qual é o meu IP pelo proxy do mercado e anote o endereço, o país e a rede.

  2. Confira as regras

    Antes da primeira execução, e sempre que mudarem, leia os termos do site e o robots.txt. Deixe de fora qualquer página que eles fechem ao acesso automatizado.

  3. Carregue a página

    Abra a página do produto a partir do perfil de navegador ou da configuração de script do próprio mercado, sem login, com o idioma do mercado.

  4. Registre os campos

    Preencha todos os campos de um registro, inclusive os que não mudaram desde a última vez.

  5. Passe para o próximo mercado

    Repita os mesmos passos com o endereço e o perfil desse mercado, uma página por vez em cada site.

  6. Compare coisas equivalentes

    Compare primeiro cada registro com a execução anterior do mesmo mercado, e só compare mercados quando os preços estiverem na mesma moeda e na mesma base de imposto.

Respostas rápidas

É permitido monitorar preços por meio de um proxy?

Segundo a nossa Política de Uso Aceitável, sim, para preços que você pode ver legalmente. A inteligência de preços e de mercado está entre os usos que dispensam revisão prévia (seção 2), e a inteligência de negócios com informações às quais você tem permissão legal de acesso é um uso permitido (seção 1). A seção 3 acrescenta que a disponibilidade pública, por si só, não autoriza scraping, e a seção 5 proíbe scraping sem autorização e acesso que viole os limites de taxa de um site. Os termos do próprio site valem além dos nossos. Política de Uso Aceitável

Com que frequência devo conferir um preço?

Na frequência da decisão que ele alimenta. Uma revisão semanal de preços pede uma execução semanal, e uma decisão diária de reprecificação, uma diária. Um site que responde 429 Too Many Requests já informou o limite dele, e um cabeçalho Retry-After diz quanto tempo esperar.

O endereço deve mudar entre as execuções?

Não. Um endereço fixo por mercado tira o ponto de observação da comparação, então uma mudança entre execuções vem da loja. Trocar de endereço para enviar a um site mais requisições do que o limite dele permite é agir contra o limite de taxa, o que a seção 5 da nossa Política de Uso Aceitável proíbe. ISP ou residencial

Posso comparar preços entre cidades?

Não com a ProxyJam. O catálogo residencial estático é vendido por país e por provedor identificado, e nenhuma oferta nele está ligada a uma cidade ou a uma região. Localizações de proxy

Preciso de um navegador ou um script basta?

Uma requisição simples enxerga um preço escrito no HTML da página. Um preço preenchido por scripts depois que a página carrega exige um navegador. Os dois podem sair pelo mesmo endereço, então seus registros se alinham. Ver de outro país

E os preços atrás de um login?

Preços para profissionais e para membros ficam fora de uma verificação pública. Colete-os somente com uma conta que o site tenha dado a você e conforme os termos dele. A seção 3 da nossa Política de Uso Aceitável lista restrições contratuais e controles de acesso entre as regras que você deve respeitar.

Fontes