Creating a web crawler

  • Status: Closed
  • Preis: $731
  • Einträge eingereicht: 19
  • Gewinner: hwanghendra

Kurzbeschreibung des Wettbewerbs

I will give three different websites and I want you to create a crawler that goes to two websites and retrieve three different items: Product's name, price and picture from each product in these three websites. The program has to store these items in a database.

Also, the program will be run automatically in a daily basis.
http://www.jarir.com/
http://www.extrastores.com/en-sa/

Empfohlene Fähigkeiten

Feedback vom Arbeitgeber

“we will work together soon.”

Profilbild edeeeeede, Saudi Arabia.

Öffentliche Anschlagtafel

  • njose
    njose
    • 7 Jahre zuvor

    Please see entry #26 - I made it possible to interact with the crawler so that your sure it's retrieving products from the actual source websites you gave us. The entire process will be automated, I want you to be certain of it's functionality #26

    • 7 Jahre zuvor
  • ankurs13
    ankurs13
    • 7 Jahre zuvor

    Hello Sir, I have been able to retrieve all products from the two websites from all categories and the output list is present in my submission as a google sheet link. Please go through it and contact me. My submission is #21

    • 7 Jahre zuvor
  • edeeeeede
    Wettbewerbs-Inhaber
    • 7 Jahre zuvor

    Guys, anyone who is able to retrieve all the products from the two website. He/she has to contact me.

    • 7 Jahre zuvor
    1. yourSalesPitch
      yourSalesPitch
      • 7 Jahre zuvor

      hello Sir

      • 7 Jahre zuvor
    2. yourSalesPitch
      yourSalesPitch
      • 7 Jahre zuvor

      Please Award !!!

      • 7 Jahre zuvor
  • yourSalesPitch
    yourSalesPitch
    • 7 Jahre zuvor

    Please check #11 . I am ready to code it for you. Thanks

    • 7 Jahre zuvor
    1. edeeeeede
      Wettbewerbs-Inhaber
      • 7 Jahre zuvor

      sure, will be checked

      • 7 Jahre zuvor
  • busygayan
    busygayan
    • 7 Jahre zuvor

    Hi,
    Do you require all the products to be extracted or selected categories and pages ?

    • 7 Jahre zuvor
    1. busygayan
      busygayan
      • 7 Jahre zuvor

      Please extend the time, i can write an efficient bot in python, which will go through all the products in the site and collect data.

      • 7 Jahre zuvor
    2. edeeeeede
      Wettbewerbs-Inhaber
      • 7 Jahre zuvor

      Yes, all the products should be extracted from all categories

      • 7 Jahre zuvor
  • edeeeeede
    Wettbewerbs-Inhaber
    • 7 Jahre zuvor

    sure, I will check all your proposal and get back to you guys

    • 7 Jahre zuvor
  • njose
    njose
    • 7 Jahre zuvor

    Please see entry #26 for working demo. It features a well structured, and organised code base. It's highly scalable and easy to maintain. In addition, all actions can be executed from the command line without the interface which simplifies scheduling tasks and is way faster.

    • 7 Jahre zuvor
    1. njose
      njose
      • 7 Jahre zuvor

      If you have any question, please let me know. I will be happy to answer any of them. Best, Njose

      • 7 Jahre zuvor
  • Lauris79
    Lauris79
    • 7 Jahre zuvor

    Just added entry #22 . Will send You live demo URL in chat message.

    • 7 Jahre zuvor
  • ankurs13
    ankurs13
    • 7 Jahre zuvor

    Please check my entry #21 and provide feedback please :)

    • 7 Jahre zuvor
  • njose
    njose
    • 7 Jahre zuvor

    Hi.. I have started working on a fully functional script with an intuitive interface. I will submit my entry before the due date for you to demo. Best, Njose

    • 7 Jahre zuvor
  • yourSalesPitch
    yourSalesPitch
    • 7 Jahre zuvor

    #16 Please

    • 7 Jahre zuvor
  • yourSalesPitch
    yourSalesPitch
    • 7 Jahre zuvor

    #11 Please message me through chat window. I have a demo for you

    • 7 Jahre zuvor
  • yourSalesPitch
    yourSalesPitch
    • 7 Jahre zuvor

    Please message me through chat window. I have a demo for you

    • 7 Jahre zuvor
  • edeeeeede
    Wettbewerbs-Inhaber
    • 7 Jahre zuvor

    I have extended the contest and also increased the amount to 731. NOTE: I am not going to extend the project any more.

    • 7 Jahre zuvor
    1. Lauris79
      Lauris79
      • 7 Jahre zuvor

      Thanks! Next entries and the demo coming soon!

      • 7 Jahre zuvor
  • edeeeeede
    Wettbewerbs-Inhaber
    • 7 Jahre zuvor

    I will try to extend the due date

    • 7 Jahre zuvor
    1. yourSalesPitch
      yourSalesPitch
      • 7 Jahre zuvor

      Hi, please pm me. I'll do it for you

      • 7 Jahre zuvor
  • ankurs13
    ankurs13
    • 7 Jahre zuvor

    #extended please, working on it

    • 7 Jahre zuvor
  • Lauris79
    Lauris79
    • 7 Jahre zuvor

    #extended

    • 7 Jahre zuvor
    1. Lauris79
      Lauris79
      • 7 Jahre zuvor

      If You're interested in live demo code and complete dataset, extend the contest at least 2-3 days

      • 7 Jahre zuvor

Mehr Kommentare zeigen

Einstieg in Wettbewerbe

  • Veröffentlichen Sie Ihren Wettbewerb

    Veröffentlichen Sie Ihren Wettbewerb Schnell und einfach

  • Erhalten Sie zahlreiche Einträge

    Erhalten Sie zahlreiche Einträge aus der ganzen Welt

  • Vergeben Sie die Prämie an den besten Eintrag

    Vergeben Sie die Prämie an den besten Eintrag Laden Sie die Dateien herunter - ganz einfach!

Wettbewerb Veröffentlichen oder registrieren Sie sich heute!