Funcionamento dos sites buscape e bondfaro

JavaEvangelist Membro desde: 11/05/2006 12:10:38 Mensagens: 329 Offline

Boa noite galera!!!

Queria saber como os sites buscape e bondfaro conseguem ter acesso aos produtos de inúmeras lojas de comércio eletrônico. Eles consomem o RSS desses e-commerce ou possuem um "Web Crawler" para conseguir os produtos e preços e indexa-los em seu site?

Acho que o mais provável é um RSS ou então os e-commerce liberam um webservice ou algo do tipo para eles terem acesso, mas não tenho certeza, se alguém puder me ajudar com uma idéia ou então falar como eles fazem isso fico grato.

Valeu!!!

Thread.start() Membro desde: 02/09/2009 20:02:48 Mensagens: 48 Offline

As empresas tipo buscapé tem um padrão de XML, que é lido por seu robô. Elas solicitam que as empresas contratantes forneçam seus produtos em um arquivo XML com esse formato. Como as informações, por exemplo, preço de, preço por, link e imagem.

JavaEvangelist Membro desde: 11/05/2006 12:10:38 Mensagens: 329 Offline

certo, bastante estranho isso, achei muito intrusivo obrigar um e-commerce a montar 1 xml no padrão que eles querem para que possam aparecer no site....
ao meu ver sites como buscape e bondfaro dependem dos e-commerce e não o contrario...

acho que um simples RSS já é o suficiente para fazer oq esses sites fazem.

alguem tem esse padrão de xml que eles usam para que eu possa dar uma olhada e entender melhor?

VALEU!!!

GUJ Hacker Membro desde: 26/09/2009 09:18:56 Mensagens: 5750 Offline

mcbarsotti wrote:
ao meu ver sites como buscape e bondfaro dependem dos e-commerce e não o contrario...

Sei. Como você chegou aqui no GUJ? Foi pelo Google ou por um anúncio em jornal?

Virtual Machine Man Membro desde: 23/11/2009 07:15:59 Mensagens: 608 Offline

calminha ai gujeiros

eu acho que o buscape e bondfaro é que dependem do ecomerce e nao o contrario.
por isso nao acho nada que esta historia do xml esteja bem contada.
preciso de algumas provas para poderes defender a tua idea

Vamos la

Sites como Buscapé não criam crowlers para ler promoções em outros sites e, então, agrega-las. Vc se cadastra e define como vai utilizar o site, se vai ter destaques, banners, etc.

Veja aqui
http://www.buscape.com.br/negocios/produtos-solucoes.html#ancora03

Em especial, isto:
3. Cadastre seus produtos (automático ou manual).

Ou seja, automático provavelmente vc vai interagir com um ou mais sistemas que podem ler as suas promoções em JSON ou XML.

Até pq existe o custo por click. Acredito que um click em um link para um notebook vale algo como 1 real. Porém a cada 4 clicks ocorre uma compra, portanto o preço pode ser irrisório.

Muito provavelmente é usado algum engine de busca como FAST ou SOLR nestes sites.

GUJ Master Membro desde: 20/05/2009 11:21:32 Mensagens: 1776 Offline

Tudo isso foi possível pelo software desenvolvido pelos criadores da empresa, chamado spider, que percorre produtos e preços das lojas e traz todas as informações para o banco de dados da empresa periodicamente; dependendo da loja, a informação estará no ar para o consumidor BuscaPé.

http://pt.wikipedia.org/wiki/BuscaPé

JavaTeenager Membro desde: 14/02/2010 22:07:42 Mensagens: 159 Offline

É assim: a maioria dos sites fornecem XML. Outros são criados regrar no spider (perl) q alimenta o BD.

JavaEvangelist Membro desde: 11/05/2006 12:10:38 Mensagens: 329 Offline

entanglement wrote:

mcbarsotti wrote:
ao meu ver sites como buscape e bondfaro dependem dos e-commerce e não o contrario...

Sei. Como você chegou aqui no GUJ? Foi pelo Google ou por um anúncio em jornal?

A melhor resposta que eu posso dar a você é ignora-lo.
"O homem fala, o tolo discute, o sábio escuta."

Boa sorte entanglement

Ao restante do pessoal:

Valeu pelas dicas, estou com algumas idéias e estava em duvida de qual era o método de integração entre esses indexadores e os e-commerce mas com essas informações já da para seguir em frente.

VALEU!!!

Sei que estou meio atrasado para esse aqui... quase 2 anos, mas vamos que vamos.

A medida que essa curiosidade me bateu eu acabei achando como se faz o feed do price grabber

https://partner.pricegrabber.com/mss_main.php?sec=2&ccode=us

Acredito que a técnica não seja muito diferente dos demais concorrentes, de qualquer forma já é um step neh!?

Fiquem com Deus dudes!

Notícias, artigos e o maior fórum brasileiro sobre Java