bufige / mercado-livre

Web Scraping para pegar dados do mercado livre. É bem simples e direto, fácil de modificar para coletar mais dados.

Hi there 👋

• 🔭 I’m currently working as software engineer at Wikimee.
• 🌱 I enjoy coding, i love chess and i am currently learning muay thai. I am very consistent with what i do, i think that's the key for everything in life.
• 📫 How to reach me: Website, Linkedin or email

mercado-livre's Issues

Pegando dados de variação de cor e tamanho de produtos

Alguns produtos tem variações de preço/dados conforme o tamanho ou cor/modelo. E como essas variações são acessadas através de botões na pagina do produto, se eu quiser saber o preço/dados de cada uma delas, meu script precisa fazer um loop nesses botões, pegar o href deles, acessar a pagina dos botoes, e ai sim, pegar os dados da pagina, como preço, quantidade vendida, etc.

O problema :

Existem dois tipo de botoes - o de tamanho e o de modelo/cor. E cada combinação de tamanho+modelo vai gerar dados diferentes. O tamanho 33 de cor branca, vai ter vendido menos que o tamanho 33 de cor vermelha, por exemplo. Então preciso fazer um loop nos tamanhos, e um segundo loop nos modelos, pra acessar cada item especifico e pegar os dados.

For href in modelos:
     for href2 in tamanhos :
            get_data !

Até ai tudo bem
MAS, os botoes de tamanho e modelo são indistinguiveis entre si. Assim como são indistinguiveis de qualquer outro botão da pagina. Então ... Como fazer um loop num conjunto que não consigo delimitar ?

Problema numero 2 : As paginas que apresentam essas variacoes de dados entre modelos e tamanhos, as vezes apresentam os tamanhos em botoens em um drpdown menu, Diferente dos botoens normais, esses eu não consigo achar o href.

Páginas exemplo :
Pagina com botoes infistinguiveis
Outra página com botoes indistinguiveis
Página com dropdown menu