Lukket

Crawler pour trouver des noms de domaines expirés

J'ai que quelqu'un me développe un outil pour trouver des noms de domaines expirés.

Ce qui me faudrait :

Je donne un mot-clé à l'outil, par exemple "annuaire travaux".

1) L'outil va récupérer les 100 premiers résultats de Google.

2) Pour chaque site, il crawle l'ensemble des pages (comme Xenu).

3) Il checke chaque URL sortante pour savoir si elle est KO (c'est à dire qu'il n'y a pas de code retour de 4xx, 5xx, 2xx).

4) Chaque URL sortante KO est listée dans un fichier.

5) L'outil retourne la liste des NDD sous forme de fichier.

Je suis moi-même développeur est j'ai déjà créé cet outil sous PHP. Le seul souci c'est qu'il est très lent. Je pourrais donc vous donner l'algorithme que j'ai créé et des pistes pour optimiser l'outil

Færdigheder: HTML, Scrapy, SEO, Web Crawling, Web Skrabning

Se mere: sites pour trouver des freelances, site pour trouver des free lancer, site pour trouver des freelance, meilleur site pour trouver des missions freelance, les meilleurs sites pour trouver des freelance, site pour trouver un developpeur d application, trouver des travaille freelance photoshop, trouver des freelance gratuit, site pour trouver des freelancer android, meilleurs site pour trouver un developpeur d application, freelance pour faire des caricature, application pour gestion des tournages, tracker des alias domaines dans analytics, interface pour editer des xml, solution gratuite pour avoir des creditsdans livejasmin

Om arbejdsgiveren:
( 0 bedømmelser ) Spain

Projekt-ID: #15811118

20 freelancers are bidding on average €449 for this job

unibiz365

-------------------We PASSED [url removed, login to view] SEO LEVEL – 3 EXAM WITH NO.1 RANK. ----------------- We do white hat Research based SEO only. Please if possible Message us; I need some information on your project. Please Mere

€250 EUR in 30 dage
(453 bedømmelser)
8.5
pointlogic

Tengo un conocimiento profundo de php, mysql, javascript, jquery, integraciones de paypal, API, css, html, html5, wordpress. Esperaré hablar con usted. Gracias.

€500 EUR in 10 dage
(153 bedømmelser)
7.5
ukroficer

Bonjour, vous avez besoin de créer un outil pour trouver des noms de domaines expirés ou juste besoin du coup de main sur le travail.? Merci

€555 EUR in 10 dage
(82 bedømmelser)
6.9
€350 EUR in 10 dage
(2 bedømmelser)
5.5
Harun1986

Hello, I will provide you active and expire domain and following details. Please let me know if you want a sample? Waiting for your reply. Thank you

€250 EUR in 10 dage
(57 bedømmelser)
5.5
technoweb7

A proposal has not yet been provided

€555 EUR in 10 dage
(6 bedømmelser)
4.7
€555 EUR in 10 dage
(12 bedømmelser)
4.7
yuzhao4989

Hello, I read your job description carefully. I have rich experience of web scraping and crawler. I have ever built the script similar with this project. The project is to crawl urls from Google, Yahoo, Bing, and g Mere

€555 EUR in 10 dage
(3 bedømmelser)
4.2
missexpert7

Hello Sir we provide your website URL for FREE Website Analysis so we will identify SEO technical errors and make the tailored based white hat SEO plan as per new Google Algorithm 2017 for achieving Page #1 Ranking f Mere

€250 EUR in 60 dage
(11 bedømmelser)
4.3
€555 EUR in 10 dage
(9 bedømmelser)
3.9
superman1987417

Greeting I am expert Data Miner and Site Crawler. You can check my skills from work history. I can do it quickly and perfectly. Regards.

€250 EUR in 2 dage
(8 bedømmelser)
3.9
justdotweaks

Hello Sir/mam, As a Web & App development company we have investigate your project and find that we can do this but first i would like to show u my exp. Our specialities: - iOS/Android development - PHP Develope Mere

€555 EUR in 10 dage
(12 bedømmelser)
4.2
pvsysgroupinc

We are Expert Team of Making Crawler I give a keyword to the tool, for example "job directory". 1) The tool will recover the first 100 results from Google. answer : we can 2) For each site, it crawl all Mere

€750 EUR in 30 dage
(1 bedømmelse)
3.0
francima

Ingénieur spécialisé en développement Web et gestion des Données, j'ai dores et déjà développé un crawler de "News" (presse tech & startup) avec Scrapy ainsi que des scrapers qui récupèrent des profils de startups sur Mere

€555 EUR in 10 dage
(0 bedømmelser)
0.0
pankajsaini1989

Hi, I understand that what you exactly want in these 5 points. And I have 7 plus years of experience in all the skills that this job require. I will make that tool fast. As, I am a PHP expert so will definitely Mere

€555 EUR in 10 dage
(0 bedømmelser)
0.0
Codingtech1

Hi, I have gone check your projects descriptions so I can do it perfectly. I have 7 years+ experience with all Software development, Programming’s. I have completed lot of projects with Web scraping, Web crawling, PHP Mere

€250 EUR in 5 dage
(0 bedømmelser)
0.0
slashtechnology

We are a team whose members are very experienced in Graphics Design, Template design,web design,logo design, banner design. Our Key Skills HTML| CSS | JavaScript| PSD Template|  Logo Design, Adobe Photoshop Mere

€555 EUR in 10 dage
(0 bedømmelser)
0.0
IThub06

Hello, I am expert in Web scrapping, Data crawling, Web crawling, PHP, HTML, . I have more than 7 years experience in web scrapping i have successfully completed more than 1000 projects in web scrapping. You will be Mere

€250 EUR in 4 dage
(0 bedømmelser)
0.0
benet6

Sir i understand your requirement, will complete it ASAP. Kindly give a proper brief. where in we can move forward

€333 EUR in 10 dage
(0 bedømmelser)
0.0
AnthonyBstd

Une petite application développé sous Node.js (Javascript) devrait faire le travail correctement et rapidement.

€555 EUR in 10 dage
(0 bedømmelser)
0.0