Fermé

Crawler pour trouver des noms de domaines expirés

J'ai que quelqu'un me développe un outil pour trouver des noms de domaines expirés.

Ce qui me faudrait :

Je donne un mot-clé à l'outil, par exemple "annuaire travaux".

1) L'outil va récupérer les 100 premiers résultats de Google.

2) Pour chaque site, il crawle l'ensemble des pages (comme Xenu).

3) Il checke chaque URL sortante pour savoir si elle est KO (c'est à dire qu'il n'y a pas de code retour de 4xx, 5xx, 2xx).

4) Chaque URL sortante KO est listée dans un fichier.

5) L'outil retourne la liste des NDD sous forme de fichier.

Je suis moi-même développeur est j'ai déjà créé cet outil sous PHP. Le seul souci c'est qu'il est très lent. Je pourrais donc vous donner l'algorithme que j'ai créé et des pistes pour optimiser l'outil

Compétences : HTML, Scrapy, SEO, Web Crawling, Web Scraping

en voir plus : sites pour trouver des freelances, site pour trouver des free lancer, site pour trouver des freelance, meilleur site pour trouver des missions freelance, les meilleurs sites pour trouver des freelance, site pour trouver un developpeur d application, trouver des travaille freelance photoshop, trouver des freelance gratuit, site pour trouver des freelancer android, meilleurs site pour trouver un developpeur d application, freelance pour faire des caricature, application pour gestion des tournages, tracker des alias domaines dans analytics, interface pour editer des xml, solution gratuite pour avoir des creditsdans livejasmin

Concernant l'employeur :
( 0 commentaires ) Spain

Nº du projet : #15811118

14 freelances font une offre moyenne de 469 € pour ce travail

ukroficer

Bonjour, vous avez besoin de créer un outil pour trouver des noms de domaines expirés ou juste besoin du coup de main sur le travail.? Merci

%bids___i_sum_sub_35% %project_currencyDetails_sign_sub_36% EUR en 10 jours
(245 Commentaires)
8.6
unibiz365

-------------------We PASSED FREELANCER.COM SEO LEVEL – 3 EXAM WITH NO.1 RANK. ----------------- We do white hat Research based SEO only. Please if possible Message us; I need some information on your project. Please Plus

%bids___i_sum_sub_35% %project_currencyDetails_sign_sub_36% EUR en 30 jours
(459 Commentaires)
8.5
%bids___i_sum_sub_35% %project_currencyDetails_sign_sub_36% EUR en 10 jours
(146 Commentaires)
7.4
pointlogic

Tengo un conocimiento profundo de php, mysql, javascript, jquery, integraciones de paypal, API, css, html, html5, wordpress. Esperaré hablar con usted. Gracias.

%bids___i_sum_sub_35% %project_currencyDetails_sign_sub_36% EUR en 10 jours
(193 Commentaires)
7.7
technoweb7

A proposal has not yet been provided

%bids___i_sum_sub_35% %project_currencyDetails_sign_sub_36% EUR en 10 jours
(21 Commentaires)
6.1
%bids___i_sum_sub_35% %project_currencyDetails_sign_sub_36% EUR en 10 jours
(8 Commentaires)
6.1
pvsysgroupinc

We are Expert Team of Making Crawler I give a keyword to the tool, for example "job directory". 1) The tool will recover the first 100 results from Google. answer : we can 2) For each site, it crawl all Plus

%bids___i_sum_sub_35% %project_currencyDetails_sign_sub_36% EUR en 30 jours
(21 Commentaires)
6.2
Harun1986

Hello, I will provide you active and expire domain and following details. Please let me know if you want a sample? Waiting for your reply. Thank you

%bids___i_sum_sub_35% %project_currencyDetails_sign_sub_36% EUR en 10 jours
(70 Commentaires)
6.0
missexpert7

Hello Sir we provide your website URL for FREE Website Analysis so we will identify SEO technical errors and make the tailored based white hat SEO plan as per new Google Algorithm 2017 for achieving Page #1 Ranking f Plus

%bids___i_sum_sub_35% %project_currencyDetails_sign_sub_36% EUR en 60 jours
(23 Commentaires)
4.9
justdotweaks

Hello Sir/mam, As a Web & App development company we have investigate your project and find that we can do this but first i would like to show u my exp. Our specialities: - iOS/Android development - PHP Develope Plus

%bids___i_sum_sub_35% %project_currencyDetails_sign_sub_36% EUR en 10 jours
(18 Commentaires)
5.1
pankajsaini1989

Hi, I understand that what you exactly want in these 5 points. And I have 7 plus years of experience in all the skills that this job require. I will make that tool fast. As, I am a PHP expert so will definitely Plus

%bids___i_sum_sub_35% %project_currencyDetails_sign_sub_36% EUR en 10 jours
(1 Évaluation)
4.2
benet6

Sir i understand your requirement, will complete it ASAP. Kindly give a proper brief. where in we can move forward

%bids___i_sum_sub_35% %project_currencyDetails_sign_sub_36% EUR en 10 jours
(0 Commentaires)
0.0
slashtechnology

We are a team whose members are very experienced in Graphics Design, Template design,web design,logo design, banner design. Our Key Skills HTML| CSS | JavaScript| PSD Template|  Logo Design, Adobe Photoshop Plus

%bids___i_sum_sub_35% %project_currencyDetails_sign_sub_36% EUR en 10 jours
(0 Commentaires)
0.0
AnthonyBstd

Une petite application développé sous Node.js (Javascript) devrait faire le travail correctement et rapidement.

%bids___i_sum_sub_35% %project_currencyDetails_sign_sub_36% EUR en 10 jours
(0 Commentaires)
0.0