Build dotnet web scraper Jobs

I am seeking a skilled data scraper who can efficiently extract text data from a university information websites. It is called: >> >> The filter is already set to "all universities" list 100 per Page. >> There is a total of 426 data entries. Key tasks for this project will include: - Extracting basic information about the universities (Bundesland, Hochschulort, Trägerschaft, Hochschulleitung) and also specific details from each subsite (mehr erfahren / more information) -> Studierendenzahl, Promotionsrecht, E-Mail, Hausanschrift, Telefon) - Collecting additional text data from sub-sites related to these institutions. Ideal candidates for this project will have: - Proven

... 1. The goal is to get all results for different states in JSON format and forward them to an endpoint. 2. The final format must yield the contact data, name of the company, website and address. 3. Ideally the scraper works for other sites as well such as 4. Ideally the scraper can run locally in a chrome extension to be reusable and avoid being blocked. 5. The scraper is completing at least 50% of emails of the profiles. I am happy to hear about your offer. To confirm you are not a bot and have read the description greet me with: Servus If we award you the project, we expect a solution within 48 hours.

Hallo, ich bin auf der Suche nach einem Scraper welcher die Neueintragungen von dem Handelsregister ausliest und in eine CSV Datei speichert. Es gibt dafür eine API Können Sie sowas programmieren?

...Organized Crime" (actually in German). It describes the various criminal industries (drugs, gambling, loan sharking, prostitution) and the major criminal groups like Mafia, Yakuza, Motorcycle gangs and which strategies they employ to succeed. Target audience: male 25-60, probably college. Cover should display symbols of wealth (yacht, thinly clad/naked females) as well as corporate (board room, sky scraper). Think "Wolf of Wall Street". Must not look cheap. Time for production is not so critical. Title plus text for back is below Titel: Die Mega-Verbrecher Erfolgsstrategien des Organisierten Verbrechens Von Martin Fritsch Back page: Wer von uns hat im Geschäftsleben nicht schon einmal die Verlockung verspürt, eine illegale Abkürzung zu wä...

Brauche ein Programm, welches mir Amazon ASINs in einer CSV Datei speichert, in dem ich über das entsprechende Produkt mit der Maus fahre.

At german lawyers directory the search for lawyer addresses leads to a number of 1 up to 100 hits, depending on the filter. Each hit contains a link to detailed information ("Info" link). We need the following information from the detailed information of all hits in structured form (csv or similar): "Anrede"; "Berufsbez...hits in structured form (csv or similar): "Anrede"; "Berufsbezeichnung"; "Vorname, Name"; "Datum der Zulassung"; "Datum der ersten Zulassung"; "Kammerzugehörigkeit"; "Name der Kanzlei"; "Anschrift der Kanzlei"; "Telefon"; "Telefax"; "E-Mail"; "Internetadresse". Overcoming the captcha on the upstream filter is NOT required. F...

Bitte melde dich an oder Loge dich ein um Details zu sehen.

... - No usage of ImmobilienScout24 API - The software must be able to search all regions and cities of the website (in url context: nordrhein-westfalen is a state, rhein-erft-stadt is a region, bergheim is a city) If necessary this data can be provided by me. - The scraper must be able to be run at least 1 per day. I assume around 400 hits per scrape in the desired sub-sets of regions. - Scraping: the Crawler must extract all texts and values of the fields of the websites. The field names can be provided, example fields class="is24qa-mieteinnahmen-pro-monat grid-item three-fifths" , "is24qa-kaufpreis grid-item three-fifths" - Scraped data shall be stored in .CSV

ÜBERPRÜFT Aufforderung an einen Entwickler, ein Scraping-Tool zum Scrapen von Daten von einer Website zu erstellen. Ich benötige Folgendes von der Website des Lieferanten: 1. Name des Produkts 2. Verfügbare Menge 3. Preis 3. Marke 4. Ist es 'auf Lager' oder 'nicht auf Lager' [Login um URL anzuzeigen] Data Mining PHP Python Softwarearchitektur Web Scraping

Ich benötige einen Crawler für die Website von ImmobilienScout24, Homegate, Newhome (alles Schweizer Immobilien-Plattformen: Nur deutschsprachige Programmierer. Vorgaben: - Der Crawler sollte ich Funktion haben, dass Private Kunden (Keine Makler) angezeigt werden. Wir möchten nur Adressen von Privatkunden inkl. Telefonnummer. - Crawler sollte die Daten nach Download als Excel Liste angezeigt werden. - Es darf kein API genutzt werden - Der Crawler muss alle Seiten crawlen - Alle Seiten müssen mind. 2mal täglich gecrawlt werden - Der komplette Crawler muss an uns übergeben werden. Der Betrieb des Crawlers wird von uns durchgeführt Wichtig: Der Crawler muss unabhängig der Plattform funktionieren. Die Plattformen (, Homegate, ) sollten keine M...

Codieren Sie einen Scraper, um Bilder von einer bestimmten Site zu kratzen.

Benötigt wird ein Web Scraper, der Inserate von Immoscout, Immowelt, Homegate, tutti, Newhome(Schweizer Plattformen) vorgefiltert scapet. Scrawler müsste Immobilienmakler + Unternehmen erkennen, damit diese ausgeschlossen werden. Wir suchen nur Privatpersonen, mit allen Angaben, wie Mail, Telefonnummer usw.)Die gescrapten daten sollen als Excel ausgegeben werden. Bei Rückfragen stehe ich gerne zur Verfügung. Nur deutschsprachige Programmierer bitte Only german speaking developers please

Wir benötigen einen Programmierer, der uns einige Tools für datenbanken usw. zusammenstellen kann. Wir haben eine IT-Projektleitung. Folgende Techniken müssten beherrsch werden: dotnet core Azure Sql Server Azure Services like Logic-Apps, Data Factories, Functions-App, Power Apps Kommunikation wäre über Chat und Videocall. Da wir mit vertraulichen Daten arbeiten, wäre das Unterzeichnung der medizinischen Schweigepflichtserklärung Voraussetzung. Job Start: Ab sofort

Gesucht wird Unterstützung für eine vorhandene Sitemap mittels Web Scraper. Zu finden unter Aufgabe wäre die Erweiterung um folgende Komponenten: a) Möglichkeit der Verwendung von einer beliebigen Anzahl an startUrl darin durch z. B. einen Loop b) Einbau zweier zusätzlicher SelectorTable, auslesen dieser und strukturiertes anfügen an bestehenden Export

I need a scraper parsing URLs such as and writing the data from result lists into a Google spreadsheet. Input: - Column A in the spreadsheet includes all URLs that need to be scraped. It can be up to 50 URLs - These URLs will be scraped 3 times per day Output: - This data needs to be saved into columns: - Per entry also a datestamp (when was this scraped and added to the list) - No duplicates - The list is sorted by the latest entry coming first - The columns behind the columns with the scraped data can be edited (we will put formula in) Also notice this: - User agent that does the scrape shall look like

Gesucht wird ein Freelancer, der den Web Scraper „FlatHunter“ auf unserem Raspberry Pi 4 Model B 4GB installiert. Der Flathunter ist bereits fertig programmiert und unter downloadbar. Er muss nur noch auf dem Raspberry Pi installiert und konfiguriert werden. Dabei bin ich als Raspbian – Einsteiger jedoch an meine Grenzen gestoßen. Der Flathunter durchsucht Portale wie Immobilienscout24 nach neu eingestellten Inseraten und benachrichtigt mich sofort via Telegram - Bot. Den Telegram - Bot inkl. Bot-token und Receiver-ID habe ich schon erstellt. Außerdem stelle ich mir die Frage, was passiert, wenn auf Github eine neue Version von Flathunter angeboten wird, weil beispielsweise durch Änderungen der Portalbetreiber etwas angepasst werden m...

...Company mit Sitz in Zypern. Sie wurde im Januar 2020 mit dem ehrgeizigen Ziel gegründet, jeden einzelnen Schritt im Prozess des Online-Marketings zu automatisieren. Wir haben unseren Sitz in Zypern, arbeiten aber auf der ganzen Welt remote. Wir haben definitiv viel Web Development Arbeit zu erledigen, und wir haben bereits einen Freelancer, der mittlerweile dauerhaft für uns arbeitet. Wenn du also motiviert bist und wir Spaß zusammen haben, ist mehr möglich ;) Hier mehr der Vorteile, mit uns zu arbeiten: Jetzt aber zu deiner Aufgabe, hierbei brauchen wir Hilfe: Wir brauchen dich, um eine API für uns zu erstellen. Wir werden die API selbst auf unseren Servern hosten, indem wir den Code aus einem Bitbucket-Repository ziehen. Die API

Generell geht es um einen Amazon Scraper/Crawler , welcher bestimmte Produktdaten crawlt und diese in eine Datenbank einpflegt. Dies soll mit Hilfe der Amazon MWS API geschehen. Das Programm wird auf einem externen Server laufen und soll selbständig automatisiert einmal am Tag laufen und die Datenbank aktualisieren. Es geht um Datenmengen bis ca. 500.000. Eine genaue Beschreibung der Begriffe, Anforderungen und des Vorgehens ist vorhanden. Vielen Dank

Hey Micha99, habe gesehen, dass du ein Angebot gemacht hattest für einen Scraper für Immoscout, Immowelt und Immonet. Hast du das damals programmiert?

Benötigt wird ein Web Scraper, der Inserate von Immoscout vorgefiltert scapet. Die gescrapten daten sollen als CSV ausgegeben werden. Beispielhafter Ablauf: (0. wähle Kategorie (Wohnung, Kaufen oder Haus, Kaufen)) 1. setze Postleitzahl _ _ _ _ _ _ 2. Wähle Umkreis _ _Km 3. scrape alle existierenden Inserate 4. Ausgabe der gesrapten Contents Bei Rückfragen stehe ich gerne zur Verfügung.

...Saint German - [1] : [0] Beispiel: Abpfiff! - Bayern München - Paris Saint German [End-Punktestand] Discord bietet eine API für Bots an. Desweiteren würde dann der BOT über meinen Server laufen (Windows Server 2016) welches jedoch auch auf dem eigenen Rechner getestet werden kann. Discord API: Bet365 API: Flashscore (Alternativ. falls Oben nicht klappt) API: ggf. muss selber danach gesucht werden, da ich bisher keine Erfahrungen über diese APIs gemacht habe. Die Spiele müssten dann jedoch noch hinzugefügt werden können (am besten einfach Link vom Spiel in der Console eintragen).Hier z.b gibt es einen Musikbot und der Fußball-Bot

...Saint German - [1] : [0] Beispiel: Abpfiff! - Bayern München - Paris Saint German [End-Punktestand] Discord bietet eine API für Bots an. Desweiteren würde dann der BOT über meinen Server laufen (Windows Server 2016) welches jedoch auch auf dem eigenen Rechner getestet werden kann. Discord API: Bet365 API: Flashscore (Alternativ. falls Oben nicht klappt) API: ggf. muss selber danach gesucht werden, da ich bisher keine Erfahrungen über diese APIs gemacht habe. Die Spiele müssten dann jedoch noch hinzugefügt werden können (am besten einfach Link vom Spiel in der Console eintragen).Hier z.b gibt es einen Musikbot und der Fußball-Bot

Einen Scraper Prototypen erstellen, der PDF und/oder html Dokumente von einer Website herunterläd, diese nach bestimmten Parametern (etwa 5) durchsucht und daraus eine weiterverarbeitbare Liste erstellt. Die Besonderheit liegt im wissenschaftlichen Vokabular. Sollte der Prototyp zu einem Projekt führen, ist eine längerfristige (mind. 2 Jahre) Beschäftigung beabsichtigt.

Wir betreiben ein Immobilienportal (Inserate) das wir nun in 4 Ländern (Frankreich, Italien, Österreich, Schweiz) aufschalten möchten. Hierzu benötigen wir einen deutsch sprechenden Profi der uns verschiedene URL Scraper inkl. Datenbanken und Cron Jobs einrichtet. Die gesamte Basis ist bereits in einem CMS von Flynax aufgebaut. Es bestehen bereits 2 Scraper die vervollständigt werden müssen, neu erstellt werden müssen ca. 6 Scraper. Jede Webseite wird auf einem Root Server separat unter einer eigenen Domain gehostet.

Wir betreiben ein Immobilienportal (Inserate) das wir nun in 4 Ländern (Frankreich, Italien, Österreich, Schweiz) aufschalten möchten. Hierzu benötigen wir einen deutsch sprechenden Profi der uns verschiedene URL Scraper inkl. Datenbanken und Cron Jobs einrichtet. Die gesamte Basis ist bereits in einem CMS von Flynax aufgebaut. Es bestehen bereits 2 Scraper die vervollständigt werden müssen, neu erstellt werden müssen ca. 6 Scraper. Jede Webseite wird auf einem Root Server separat unter einer eigenen Domain gehostet.

Wir suchen ein erfahrenen und professionellen Daten Scraper für unsere Zielgruppe(meist Freiberufler - ca. 160.000 Angehörige dieser Berufsgruppe) Folgende Daten werden benötigt: Name Vorname Anschrift Telefon Email ggfs. WebSite

Hi Ich habe gesehen, dass du bereits ähnliche Projekte gemacht hast. Ich suche jemand der ca. 600'000 Adressen aus extrahiert. Es handelt sich um 15 Kategorien in jeweils ca. 50 verschiedenen Städte. Also z.B. alle Hotels in Köln, Bremnen, Hamburg etc. und dann das gleiche mit Kosmetiksalons etc. d.h. ...gemacht hast. Ich suche jemand der ca. 600'000 Adressen aus extrahiert. Es handelt sich um 15 Kategorien in jeweils ca. 50 verschiedenen Städte. Also z.B. alle Hotels in Köln, Bremnen, Hamburg etc. und dann das gleiche mit Kosmetiksalons etc. d.h. 15 Kategorien à 50 Städte = 750 x ca. 800 Adressen = 600'000 Adressen Was denkst du, kannst du dies umsezten? Oder einen passenden Scraper verkaufen? Besten Dank für dein ...

Auf der Site: werden Spielergebnisse und Tabellen veröffentlich...soll auch als <table> gelöst sein (wie im Beispiel). - Aus dem Quelltext müssen alle Formatierungsanweisungen und CSS Klassen entfernt werden (z.B. word-break: keep-all, text-align:right). - Die Spalten Quot., Bälle und Quot. müssen entfernt werden (siehe Datei). - Alle Links müssen aus den Quelltext entfernt werden - Die Seiten auf sind alle gleich aufgebaut. Ich benötige diesen Scraper als PHP Funktion, um ihn dann selbst einsetzen zu können. - Idealtypisch übergeben ich an die zu programmierende Funktion nur die URL auf der die Tabellen und Ergebnis stehen und bekomme dann als Ausgabe zwei Tabellen. - Die Beispielseite habe ich mit Simple HTML DOM progra...

I need a proficient Python expert to scrape recipes from a designated website to an Excel sheet. The project needs to be completed as soon as possible. You can use this open-source working scraper Key requirements: - Scraping recipe information (name, ingredients, cooking instructions, nutrition facts) from a specific website. - Outputting the scraped data in a well-organized Excel sheet. Ideal skills for this project include: - Proficiency in Python for web scraping. - Familiarity with scraping data from websites. - Excellent organizational and data management skills for outputting the data in Excel. If you can deliver this quickly and efficiently, please feel free to bid.

I urgently require a web scraper proficient in extracting data from xing.de. I will provide a file of specific company names, for which I want to obtain the number of employees. Your task will involve: - Gathering accurate and up-to-date data on the number of employees for each company on the list - Formatting the information suitably for my usability. You need to have proven experience in web scraping, particularly on professional platforms such as Xing. Familiarity with German language platforms is beneficial. The deliverable is a neatly formatted file containing company names and their respective employee numbers.

I am seeking an experienced developer to create a website scraper which is capable of collecting various pieces of data. This savvy tool must be designed to extract from () site: - Text content - Images - Product information - Address - Contact details - Videos It is essential for the scraper to perform its task on a daily basis. Yet, there won't be a need for the gathered data to be automatically integrated into a database. Ideal Skills: - Web scraping - Developing scraping bots - Programming knowledge - Manual data mining expertise Please only apply for this job if you have significant experience in creating web scrapers. This project requires a quick turnaround, so the ability to work under time constraints is key. Let's converse about specific...

I'm looking for a web scraper. Your application should include your experience in this field specifically. I'm interested in scraping the following data from a particular website: - Product details - Contact information - Pricing information Please only apply if you have solid experience in web scraping. We will have lots of different webscraping tasks in the following weeks.

I'm seeking an individual who can create a one-time web scraper that can collect text, images, and tables from Website 1. The project involves: - Developing a tool to scrape text, images, and tables from the specified website. - Ensuring the tool can operate efficiently for a one-time scraping process. Key Skills: - Proficiency in web scraping tools and techniques. - Experience in scraping text, images, and tables. - Ability to create a custom scraper for a one-time scraping task.

I need a web scraper to extract specific data from various websites. The project will involve: - Identifying the necessary data to be scraped - Building a scraper to extract this data Ideal skills for this job include: - Proficiency in web scraping tools - Familiarity with web data extraction techniques - Ability to work with and extract data from various websites Please provide your quote for this project.

I'm looking for a skilled web scraper who can extract detailed information regarding the sellers on the Miravia website. Requirements: - Extracting Seller Data: The main purpose of this project is to gather information about the sellers on the Miravia platform (). This includes the shop_id shop_name Ivl1_cate_name product_number avg_price shipping_duration company_location phone_number email_address vat_number company_name shop_rating shipping_on_time % followers comments etc. I require 10,000 entries of data I require the data to be well-structured and organized into a CSV or Excel file for further analysis. Skills and Experience: - Proficiency in Web Scraping: The ideal candidate should have extensive experience in web scraping and data extraction. ...

...a contact "]) In this example, almost all of your code would have been in… "1 of 3 script for scraping and filling in a contact ", and "2 of 3 script for scraping and filling in a contact ", and "3 of 3 script for scraping and filling in a contact " ******* THE NUMBER OF ITERATIONS AND THE LENGTH OF THE PAUSES ******* I don’t want a Google algorithm to ban me for web scraping. Therefore, you will give me a script named, “Trigger main script for scraping and filling in a contact ” which will include something like the following… import subprocess, random, time # Define the Python script file to be executed script_file = "Main script for scraping and filling in a contact " # Define the number of tim...

I am looking for someone experienced in web scraping and data collation. The project will involve scraping blog articles in HTML format and compiling desired information into an Excel file. Key Project Requirements: * The extraction will be from specified URLs, using their individual patterns for efficient and accurate scraping. * For each blog article, I need the title, the full text, and the publish date extracted. * This scraped data must be properly arranged in an Excel file for easy analysis. * List of articles is here: Ideal Candidate Expertise: * Proven experience in web scraping is a must, preferably with full understanding of HTML structures. * Proficiency in Excel and data organization. * Attention to detail to ensure accuracy of the scraped data

Create an executable scraper in Python that can extract the SKU (product) list from the following Indonesian online grocery apps: - Astro - Sayurbox - Segari The scraper must be IP-block tolerant, meaning if the scraper gets blocked, execution can be continued from the point where the last row of data was successfully extracted. Scraper Functions Function: list_category_tree Input: competitor_name(astro | sayurbox | segari), existing_csv (optional - CSV file to append to for continuing execution, if the scraper stopped or got IP blocked) Output: CSV of category tree with the following columns (scrape_date, URL, category name, position index, parent_category (null if top level)) Function: extract_sku Input: competitor_name, location (autocomplete pla...

...tailored opportunities and support. What We Need: We're seeking a talented web scraper who can help us gather specific data on medical professionals with new NPI numbers. Your task will involve targeting individuals in specific states and collecting their information accurately and efficiently. Your Responsibilities: Develop a web scraping solution capable of targeting specific states and names of medical professionals with new NPI numbers. Ensure the accuracy and reliability of the scraped data. Customize the scraper to meet our specific requirements and adapt to any changes or updates in the target websites. Deliver the scraped data in a timely manner, adhering to project deadlines. What We're Looking For: Proficiency in web scraping te...

Bitte melde dich an oder Loge dich ein um Details zu sehen.

...tailored opportunities and support. What We Need: We're seeking a talented web scraper who can help us gather specific data on medical professionals with new NPI numbers. Your task will involve targeting individuals in specific states and collecting their information accurately and efficiently. Your Responsibilities: Develop a web scraping solution capable of targeting specific states and names of medical professionals with new NPI numbers. Ensure the accuracy and reliability of the scraped data. Customize the scraper to meet our specific requirements and adapt to any changes or updates in the target websites. Deliver the scraped data in a timely manner, adhering to project deadlines. What We're Looking For: Proficiency in web scraping te...

...proficient in web scraping with Scrapy to extract product data from This project involves scraping the Category page to retrieve product details including name, price, SKU, URL, breadcrumb, currency, and brand. Targeted webpage: Category page of Required data: Product name, price, SKU, URL, breadcrumb, currency, and brand Experience: Prior experience in scraping product-related information from e-commerce sites is essential, with proficiency in Scrapy being crucial for accurate and efficient data extraction. Data Handling: Ability to ensure accuracy and consistency of extracted data. Familiarity with different data formats is advantageous. Dynamic Scraping: Navigation logic for all categories must be contained within the scraper and be automatic

Join our team as a Python Selenium Web Scraper responsible for developing scraping scripts using Python and Selenium. You'll gather data from diverse websites, utilizing your expertise in web technologies, HTML, CSS, and JavaScript. Key responsibilities include analyzing website structures, extracting and cleaning data, and collaborating with team members to integrate data into existing systems. Ideal candidates possess proficiency in Python, experience with Selenium, and a strong understanding of web technologies. This role offers competitive compensation, flexible work hours, health benefits, and opportunities for career growth in a dynamic, collaborative environment

I'm looking for an experienced web scraper to access and download specific information and images from the Used Inventory section of the White Rock Honda website. Here are the specifics of what I need: - Car make and model - Year of the car - Price of the car For each car listing, I need ALL available images downloaded. Furthermore, I require the images in JPG format. Candidates applying should have successful experience in web scraping, data extraction, and handling myriad images. Efficiency and accuracy are critical for this project.

I need a python scraper that can copy ads from one classified ads website and post it to other website

I need to find a good supplier that can get me all of the buyers and planers from all customers in Asia, Africa, Europe, North America, Central America, South America, Australia. i am in the aircraft industry.

I'm looking for an experienced data scraper. I need someone with excellent knowledge and expertise in web scraping. I will need the following with regards to mid sized collectible stores around the world: Company Name City Country URL Contact person Email address. Ongoing work for the right candidate/s

...images, news in the cities put together - Scrapped content from other pages into fun engaging content that people click on, comment and share, pr tgat we get them to jump to a web landing page. Local news and stories Experience in 2D and 3D animations, as well as motion graphics, is highly desirable. A background in short-form social media content creation will set you apart. Creativity, attentiveness, and a high level of organisation, speed are also crucial for this task. We run 3 big social media sites, and a web site so the core job is to engage and get comments, reach and shares AND jumps from social media out to tge web site. You must be able to research stories, scrape sites with permission if needed, use Ai big time, report on your videos performance. We d...

Available driving test slots scraper with autobook for selected dates

I need a skilled developer to create an automation bot for Telegram Channels. This bot will have the essential functions of: - Auto-joining channels - Extracting basic channel information including the description and links I want the bot to be able to extract the following specific information from the channels it joins: - Channel Name - Channel Desc...information from the channels it joins: - Channel Name - Channel Description - Channel Links - Member Count The frequency of this extraction should be set to a weekly basis. Ideal skills and experience for this job would include proficiency in Python or a similar programming language, previous experience with Telegram's API, and prior experience creating chatbots or automation bots. Expertise in web scraping technologies ...