Perl web crawleremplois
We are looking for a PERL developer to write a plugin for CPANEL () . This involves writing a plugin to Synchronize the DNS zones of our cPanel systems with the POWERDNS DNS infrastructure via the APIs (). Once installed and configured, the plugin immediately propagates all DNS changes to POWERDNS taking into account our overwriting rules.
...avec les développeurs, les chefs de projets et les dev Ops. Vous êtes fortement impliqué et autonome dans vos missions. PROFIL De formation Bac +3 minimum en Administration Système Linux, vous bénéficiez idéalement d'une expérience similaire de 2 ans. Compétences requises : - Maîtrise de l'environnement Linux (Debian et Centos) - Programmation, script et automatisation (perl, php, bash) - Maîtrise de l'environnement Web (Nginx, Apache…) - Maîtrise serveurs de bases de données (MySQL & PgSQL) - Maîtrise de Postfix, Dovcot, Spamassassin, Bind, pureftpd .. - Bonne connaissance des environnements de virtualisation (Lxc, KVM) - Bonne connaissance de panneaux ...
Bonjour, j'ai besoin de crawler le site Dans chaque "modèle d'imprimante Zebra" il y a plusieurs produits correspondants, exemple ici où on a 3 produits => Pour chaque produit correspondant j'ai besoin que l'on récupère : Marque Modele PN La photo du modele de la machine et de la tete d’impression Prix Résultat : fichier Excel exploitable Merci
Nous développons des outils digitaux dans le domaine de la gestion des déchets. Nous avons entre 1,5 et 3 projets à développer/Mois. Je précise que les développements se font avec une équipe complète (infra, graphiste, intégrateur, chef de projet)
...vous avez utilisé pour effectuer cette récupération. Nous l'intègrerons alors à notre base de code pour pouvoir effectuer une veille sur les sites concernés. D'un point de vue pratique, les choses se dérouleront de la manière suivante : - Lorsque nous avons votre email, nous vous ajoutons comme contributeurs au dépôt de code qui contient le code de notre scraper (). - Vous pouvez alors cloner le dépôt. Il est exécutable en local, et vous pouvez ainsi tester le scrapper directement sur votre machine. Le fourni une explication détaillée de comment faire. Vous pourrez ainsi tester, sur le site sur lequel vous devez effectuer des corrections, comment se comporte la version actu...
Le problème consiste à créer un script perl pour calculer la distribution des mots dans une colonne d’un fichier TSV (c’est-à-dire dont les colonnes sont séparées par des caractères de tabulation t ). L’utilisateur doit fournir le nom du fichier et le numéro de colonne (en comptant à partir de 1) qu’il veut analyser. Les mots sont imprimés par décompte décroissant (les mots les plus fréquents en premier). Il est possible de simuler ce script avec de simples commandes bash. Il vaut d’ailleurs mieux commencer par ça pour comprendre ce qu’on veut obtenir. Les instructions détaillées pour la partie bash (terminal Linux) et puis pour le scri...
Bonjour, Je m'occupe d'un site de pronostics sportifs et après une migration de serveur, il y a un souci avec un scraper du site qui ne fonctionne plus. Après migration il y a eu pas plusieurs soucis avec des pare feux qui bloquaient des connexions, mais là apparemment ça bloque aussi... Le scraper est fait en PERL et le site en Angular2. Êtes vous dispo pour cette presta? Merci
Bonjour, Je m'occupe d'un site de pronostics sportifs et après une migration de serveur, il y a un souci avec un scraper du site qui ne fonctionne plus. Après migration il y a eu pas plusieurs soucis avec des pare feux qui bloquaient des connexions, mais là apparemment ça bloque aussi... Le scraper est fait en PERL et le site en Angular2. Êtes vous dispo pour cette presta? Merci
Bonjour Sylvain, Je m'occupe d'un site de pronostics sportifs et après une migration de serveur, il y a un souci avec un scraper qui ne fonctionne plus. Après migration il y a eu pas plusieurs soucis avec des pare feux qui bloquaient des connexions, mais là apparemment ça bloque aussi... Le scraper est fait en PERL et le site en Angular2. Êtes vous dispo pour cette presta? Merci
J'ai besoin d'assistance pour creer et designer et software pour crawler des domaines expires. Ceci inclue back-end et front-end. Vous pouvez vous fiez a l'example suivant: Cependant, ce domain crawler doit etre ultra performant pour les ltds europeens egalement. Vous pouvez me pm pour plus d'informations.
J'ai que quelqu'un me développe un outil pour trouver des noms de domaines expirés. Ce qui me faudrait : Je donne un mot-clé à l'outil, par exemple "annuaire travaux". 1) L'outil va récupérer les 100 premiers résultats de Google. 2) Pour chaque site, il crawle l'ensemble des pages (comme Xenu). 3) Il checke chaque URL sortante pour savoir si elle est KO (c'est à dire qu'il n'y a pas de code retour de 4xx, 5xx, 2xx). 4) Chaque URL sortante KO est listée dans un fichier. 5) L'outil retourne la liste des NDD sous forme de fichier. Je suis moi-même développeur est j'ai déjà créé cet outil sous PHP. Le seul souci c'es...
Dans le cadre d'un projet dans le domaine de l'industrie ferroviaire, nous recherchons un freelance avec les qualifications suivantes: - MDT (Microsoft Deployment Toolkit) sous environnement Windows Server 2016/Windows 10. - Déploiement centralisé pour MDT ou autre logiciel (préférentiellement avec MDT) - Connaissance des contraintes cybersécurité (environnement à contr...recherchons un freelance avec les qualifications suivantes: - MDT (Microsoft Deployment Toolkit) sous environnement Windows Server 2016/Windows 10. - Déploiement centralisé pour MDT ou autre logiciel (préférentiellement avec MDT) - Connaissance des contraintes cybersécurité (environnement à contrainte fort...
Bonjour, Pour le développement du site , nous recherchons un développeur Perl/Angular2/Php qui maitrise le web scrapping. De préférence parlant français et de région parisienne. Merci
besoin d'avoir un script php(perl/lua) pour créer un bridge en freeswitch pour initialiser un appel. si on appelle le script avec un numéro de téléphone alors on crée un appel entre une extension (3000) et le numéro appelé
Bonjour a tous, Je voudrais un programme capable d'ordonner (du plus petit au plus grand) et de représenter sur un graphe des nombres entre 0 et 1 possédant plusieurs dizaine de milliers de décimales. En aucun cas l’écriture des nombres doit être simplifiée. L'ensemble des digits a son importance. L'input sera un fichier .txt possédant une seule colonne avec un nombre variable de nombres dans celle-ci. Vous trouverez en pièce jointe un exemple (avec 36 points). Cette colonne représente la valeur en ordonnée du graphe. La valeur en abscisse sera simplement 1, 2, 3, 4, etc. Merci par avance,
...des charges est actuellement en train d'être mis à jour. Pour des raisons de confidentialités, celui-ci ne sera donné qu'au prestataire sélectionné. Je vais donc donner les grandes lignes du projet ainsi que les fonctionnalités sans rentrer dans les détails. Contexte : Le site web est un site comparable à au niveau fonctionnement global. Les utilisateurs peuvent ajouter du contenu sur celui-ci. (ce n'est pas exactement un wiki mais le fait communautaire est là) Les grandes fonctionnalités : - Crawler - Système d'expérience pour l'utilisateur suivant des actions - Système de succès - Système de création d'avatar (vis...
Bonjour, Nous recherchons un prestataire pouvant s'associer avec un autre développeur pour la finalisation d'un site web. Celui-ci est un mix entre et www.gamekult.com. Des fonctionnalités innovantes sont aussi au rendez-vous. L'intégration html/css est déjà faite ainsi que 30% du projet au niveau du back-end avec le framework laravel. Le projet doit être finalisé pour le 1 novembre maximum. Quelques fonctionnalités : - système d'abonnement, - publication d'articles par les utilisateurs - crawler - système de point, de reward, ...
Construire des programmes, des scripts (php,html,javascript,perl,python,perl) selon vos besoins ou bien faire un design spéciale pour votre site web
La société : Skores () est une société éditant des produits web et mobiles innovants dans le secteur de l’information sportive en temps réel. Nos sites web et applications mobiles natives connaissent un grand succès en France et à l'international. Forte d’une équipe de près de 40 personnes, notre ambition est de devenir l’un des leaders mondiaux de ce secteur. La société bénéficie du statut de Jeune Entreprise Innovante depuis 2010. En pleine croissance, nous devons constamment renforcer notre architecture technique et la faire évoluer pour assurer l’excellence de nos produits. Votre mission en Freelance : En collaboration av...
Bonjour, Pour le développement du site , nous recherchons un développeur Perl/Angular2/Php qui maitrise le web scrapping. De préférence parlant français et de région parisienne. Merci
Mise en place de hacks (crawler, scrapping, etc) pour générer des leads ou des visites sur le site web et les réseaux sociaux ; Optimisation du SEO Mise en place d'une démarche de Data analysis avancée basée notamment sur les analytics web et les données économétriques Réflexion et mise en place d'une démarche d'A/B testing. Facebook Ads Optimisation des campagnes
Bonjour, je suis professeur à l'École de criminologie à l'Université de Montréal et je suis à la recherche d'un consultant pour m'aider dans l'optimisation d'un web crawler et web scraper. Je me demandais s'il serait possible de discuter de mes besoins et des services que vous offrez? Merci, David Décary-Hétu
...Louer du matériel déjà installé dans un Datacenter ? Louer des serveurs dédiés ?...) Vous ne devez pas être trop loin de chez moi. Je suis d’Arras 62000 dans le Pas-De-Calais pour que nous puissions nous rencontrer et travailler ensemble… - Installer (ensemble) un OS (Debian, Ubuntu ou autres systèmes que vous me conseillerez) ; - Installer (ensemble) les serveurs indispensables (mail, web, MySQL, PHP, perl, python) et configurer le tout ; - Sécuriser le serveur ; - Créer un système de sauvegarde (Sauvegarde et restauration automatique des sites. Inclus : backup des bases de données et des fichiers.) ; - Installer un control panel (cPanel ? Plesk ? Autres en Open sources ?...
...Louer du matériel déjà installé dans un Datacenter ? Louer des serveurs dédiés ?...) Vous ne devez pas être trop loin de chez moi. Je suis d’Arras 62000 dans le Pas-De-Calais pour que nous puissions nous rencontrer et travailler ensemble… - Installer (ensemble) un OS (Debian, Ubuntu ou autres systèmes que vous me conseillerez) ; - Installer (ensemble) les serveurs indispensables (mail, web, MySQL, PHP, perl, python) et configurer le tout ; - Sécuriser le serveur ; - Créer un système de sauvegarde - Installer un control panel (cPanel ? Plesk ? Autres en Open sources ? vous me conseillerez une interface de gestion) ; - Contrôle de bande passante et de trafique ; - Bref, to...
...remplacer le texte, le titre et les liens. - surveiller une à deux fois par mois la position du site dans les résultats de recherche - renouveler les différents services utilisé par le site (hébergement, base de données, etc.) Les fonctionnalités à long terme seront discutées au fur et à mesure selon les besoins et pourquoi pas implémentées dans le site. Exemples de futures fonctionnalités : - crawler les liens dans les commentaires pour afficher la vidéo ou l'image dans le commentaire - envoyer des notifications lorsqu'une personne ajoute ou répond à un commentaire - ajouter des nouveaux services L'ajout de nouvelles fonctionnalités n&#...
Mise en route d un serveur complet apache sql phpmyadmin perl virtual server ssh dns apsk panel Toutes les fonctions pour q'un serveur web travaille avec ces bonnes fonctions
création d'un site internet faisant un rapport entre vendeurs et acheteurs à la mesure d'ebay, Amazon..... mais qui sera pour base de langages: PHP,Perl, Mysql et d'autres..
As discussion As discussion As discussion As discussion As discussion As discussion
Recherchons un administrateur système indépendant sur la région TOULOUSAINE (France) pour une mission récurrente de 4 au 10 jours par...pour une mission récurrente de 4 au 10 jours par mois pour une durée indéterminée. La mission proposée s'organisera autour de sujets suivants : réponse support technique (formation prévue), administration de serveurs Linux, support et gestion de serveurs, développement et debug de scripts (shell, perl). Si intéressé et compétences : amélioration d'applications php existantes. Vous avez de l'expérience en administration de systèmes Linux. Vous maîtrisez également le scripting en shell et/ou ...
Recherchons un administrateur système indépendant sur la région TOULOUSAINE (France) pour une mission récurrente de 4 au 10 jours par moi...pour une mission récurrente de 4 au 10 jours par mois pour une durée indéterminée. La mission proposée s'organisera autour de sujets suivants : réponse support technique (formation prévue), administration de serveurs Linux, support et gestion de serveurs, développement et debug de scripts (shell, perl). Si intéressé et compétences : amélioration d'applications php existantes. Vous avez de l'expérience en administration de systèmes Linux. Vous maîtrisez également le scripting en shell et/ou ...
As discussion As discussion As discussion As discussion As discussion As discussion As discussion As discussion As discussion As discussion As discussion As discussion As discussion
I am seeking an expert capable of creating a highly detailed and intricate graphic line art rendition of a lattice boom crawler crane with a luffing jib (two independently controlled booms). This rendition must strictly capture the exterior features of the equipment ( there's a lot). Your focus should also be on all the components that make up the crane. I am open to starting with a more basic line art (outline) and seeing what we need to add. This would be the first design for a construction apparel line You need to have a meticulous eye for detail and at least have a portfolio that showcases any automotive art.
...of creating a customized web crawler for eBay and AliExpress. The primary function for this crawler will be to accept a list of keywords of any length and return specific data about those products. Here's what I need in detail: • Find top hot selling products at any given time • Crawl eBay and AliExpress for specific product data based on entered keywords. • The data retrieved should include product names, quantities sold and locations of sellers, images, • The crawler should be capable of providing this information for a variable timescale, ranging from 1 to 30 days in the past. • The results should be sortable. Php or python preferably The task would best suit a freelancer with previous experience designing similar cr...
I'm looking for a skilled professional who can crop the complete content of a website and save it in a zip file to be deployed on a new server. The website is a small Wordpress with about 41 pages (as per sitemap). Content must not be saved as Wordpress, but static html to be deployed on another server. Key Requirements: - Crop all website content including subpages. - Save the cropped content in a compressed zip file. - The purpose of this cropping is to save the content for future use. - all files must be included, esprecially but not limited to images, js, css, ... - inner paths must be relative paths. If you're confident in your ability to deliver this and can ensure all the content is correctly saved, please bid accordingly. IMPORTANT READ THIS: Auto-generated bids wil...
II. the task #2 (less important but fast to fix) email notifications do not work for some reason (on server with webUI @159.65...) The email sending works with cron there contains 1 task here /var/spool/cron/tabs/root and 4 here as i understand /var/spool/cron/tabs/serg guess user serg is not configured properly(but it is a full disk copy, so not sure) or cron tasks are not active or lunching.. also i see 3 cron procs on old sever (ps-A|grep cron) and only 1 on new server... you can change email in scripts and test (the email sending is working ok tested it with small /root/) p.s. you can check working details on old server @213.168.... I. the most important but could take more time The statistics section do not work at all on the New server here is active clients on OLD server(s)...
I'm looking for an expert to design a web crawler to extract email addresses from specific company websites. The ideal candidate should be experienced both in web crawling and email data extraction. Key Tasks: - Crawl targeted company websites for email data extraction - Ensure the accuracy and integrity of all extracted emails Skills and Experience: - Experience with web crawling and data extraction technologies - Proven track record in email data extraction - Excellent analytical and problem-solving abilities - Familiarity with common web interrogatories for more efficient data capture is an asset - Strong attention to detail in order to capture complete and valid email addresses The successful candidate will deliver a list of valid emails ex...
As the project lead, I'm seeking a highly skilled developer to construct a Scrapy web crawler for multiple sites. Although I omitted website specifics for now, rest assured we will provide the necessary details post-engagement. The ideal candidate is capable of: - Building an optimized web crawler with Scrapy - Extracting text data proficiently from various web pages, accurately and efficiently For the application, please provide: - Detailed project proposals outlining your approach Experience in web crawling design and Scrapy framework are a must for this project. Your technical capacity to generate the explained particulars is critical for success here. This is a golden opportunity to exhibit your proficiencies and contribute to an ex...
I require an IAM role with specific permissions to interact with s3, glue, and Athena on AWS. This role will allow for efficient management of the AWS stack, specifically enabling the creation of a crawler to populate a glue catalog database and tables, and also allowing interaction with an Athena workgroup. What I need: - Read-only access: This permission should allow the IAM role to view S3 bucket contents, view Glue catalog information, and view Athena workgroup details. - Write access: This level of permission should enable the IAM role to create or update tables in the Glue catalog and modify Athena workgroup settings. Ideal Experience and Skills: - Solid understanding of IAM roles and permissions on AWS - Experience with AWS s3, Glue, and Athena - Capability to work on AWS I...
I need an experienced and proficient website crawler who can help me extract Text content from Database Tables on my website. Key requirements: • Acing in finding, fetching, and structuring data. • Proficient in delivering the retrieved data in Plain text format. • Emphasis on fetching Text content from the Database Table, thus understanding of database structures is a must. Ideal skills include web scraping, data mining, and database understanding. It would be best if you had an eye for detail as accuracy is key in this project. With your expertise, you should be able to navigate through complex website layers to get to the desired content.
I'm in need of a skilled freelancer who has expertise in Perl scripting, primarily for file manipulation tasks. Key Requirements: --Gather date from a table in oracle. Based on that date find the records available in a home directory and store it in a .txt file. Skills and Experience: - Proficiency in Perl scripting is a must. - Experience in handling various file formats, specifically .txt and .csv. - Strong understanding of file operations including renaming, formatting, and sorting (although the specific task was skipped). I need the code done within 2 days and willing to pay 3000 which would be double the cost of what is given .
We are in need of a knowledgeable and skillful programmer who can edit on GoLang code. The main task involves Ethereum network crawling. We already have a running code to crawling the Ethereum network. However, we still need to do some changes on GoLang code (designing crawler), such as partition the ID_space into sections, and crawl using multiple crawlers in Ethereum not only single crawler as what we have. In addition, there might be more few changes on the code. The ideal candidate will: - Understand DHT-based network and Kademlia - Knows a little about Ethereum (blockchain) - Have experience in GoLang - Possess a deep understanding of DHT network crawling (p2p) - Have previous experience with crawling networks Your responsibility will be building on top of running code...
I'm currently using PERL 5.10 system and requires a proficient expert to aid in modifying how passwords are hashed in my system. Initially, we employed SHA-256 but we're looking to switch to PBKDF2. Ideal Skills and Experience: - Proficient in PERL 5.10 - Familiarity with SHA-256 and PBKDF2 hashing methods - Prior experience in password re-hashing Task Objectives: - Identify current SHA-256 hashing method in the system - Modify hashing method to use PBKDF2 instead - Validate successful implementation of the PBKDF2 hashing method The project necessitates a strict focus on security and confidentiality given its sensitive nature.
Script Feature: - Login to a list of SSH servers by domain or IP (from text file) - Use a set of usernames + password (can be multiple passwords) to login to the servers. - Run Bash Script on the connected server (which comes from a txt file on the server running the script, not on the connected to server) - Timeout if SSH server did not answer. - Display results at the end of a run (show which servers the script did not run because of errors). Login simultaneously to all available ssh servers. Not server by server.
I need to convert the following Perl code to PHP: The expected output is a PHP class that can convert a docx file into text. The attached zip contains a mockup of such class (with demo code) and a test docx file. The task is straight forward. If you place a bid, expect it to be accepted. If you fail to deliver, you'll be subjected to a bad review. This is to avoid wasting my time with autoposters and people who lowball the bid and then try to ask for more money. You have been warned. Read the brief, check the code and place a bid accordingly.
