Jasper etl hibernateemplois
...Livreur, Chaussures pour une Infirmière). D. Système de Rémunération (Data-to-Cash) Gain : 1,00 par facture / 1,50 par contrat soumis. But : Rémunérer l'utilisateur pour alimenter la base de données. 3. Le Volet B2B : Altro Insight (La Plateforme Data) Objectif : Une usine automatisée de vente de données (SaaS + E-commerce). A. Le Moteur de Traitement (L'Usine Interne) Nettoyage Automatisé (ETL) : Chaque donnée entrante est nettoyée, standardisée et anonymisée avant d'être stockée. Organisation : Les données sont classées par tags : Tranche d'âge, Genre, Métier, Région, Salaire, Employeur. B. Le Mod&egrav...
...organique (vérifié via Semrush/Ahrefs). • Contacter les éditeurs pour leur proposer des articles invités à forte valeur ajoutée. • Critère strict : Pas de sites morts, pas de fermes à liens (PBN), uniquement des sites vivants avec une vraie audience. 2. Production de Contenu (Le Levier) • Rédiger les articles destinés aux partenaires. • Outils : Vous êtes libre d'utiliser l'IA (ChatGPT, Claude, Jasper...) pour la productivité, MAIS le rendu doit être impeccable. • Exigence : Le texte doit être relu, humanisé, fact-checké et indétectable comme étant de l'IA brute. Le but est de satisfaire l'éditeur du site po...
...Microsoft Dynamics 365. • Une expérience en environnement Sales, Marketing ou Customer Insights est un plus. Compétences clés • Excellente maîtrise de Microsoft Dynamics 365 CRM (Sales, Customer Insights, Marketing, Service). • Connaissances solides des environnements Power Platform (Power BI, Power Automate, Dataverse). • Bonne compréhension des architectures d’intégration (API, Azure, middleware, ETL). • Méthodologie projet : Agile / Waterfall hybride, gestion de backlog et gouvernance. • Compétences rédactionnelles et sens du reporting. • Une expérience de Microsoft Dynamics 365 F&O ou Business Central, ainsi que finance / achats est un plus Soft Skills • Le...
...Fonctionnelles : • Connaissance approfondie des processus industriels (supply chain, production, logistique, maintenance) • Maîtrise des méthodologies AMOA / gestion de projet (cycle en V, Agile, Prince2, PMP…) • Capacité à modéliser des processus (BPMN, UML…) Techniques : • Connaissance des ERP industriels (SAP, Sage X3, Microsoft, etc.) • Notions de base en architecture SI et interfaces (API, ETL, base de données) • Bonne compréhension des outils MES, Ordonnancement, GMAO ou PLM Transverses : • Excellentes capacités d’analyse et de synthèse • Aisance relationnelle, écoute, pédagogie, sens de l’organisation et autonomie • Rigueur dans...
...blog. Formule : 50 € × (DA ÷ 100). Exemple : Pour un blog avec un DA de 60, vous recevrez 30 € pour un échange de backlink (50 € × 0,6). Exemple : Pour un blog avec un DA de 45, vous recevrez 22,50 € (50 € × 0,45). Paiement immédiat après validation du troc. Compétences recherchées : Expérience en SEO, acquisition de backlinks, ou prospection commerciale. Connaissance des outils d’IA (ChatGPT, Jasper) pour optimiser les scripts et les relances. Excellentes compétences en communication écrite et orale en français. Capacité à travailler de manière autonome et atteindre des objectifs chiffrés. Durée de la mission : Collaboration in...
...blog. Formule : 50 € × (DA ÷ 100). Exemple : Pour un blog avec un DA de 60, vous recevrez 30 € pour un échange de backlink (50 € × 0,6). Exemple : Pour un blog avec un DA de 45, vous recevrez 22,50 € (50 € × 0,45). Paiement immédiat après validation du troc. Compétences recherchées : Expérience en SEO, acquisition de backlinks, ou prospection commerciale. Connaissance des outils d’IA (ChatGPT, Jasper) pour optimiser les scripts et les relances. Excellentes compétences en communication écrite et orale en français. Capacité à travailler de manière autonome et atteindre des objectifs chiffrés. Durée de la mission : Collaboration in...
Base de données Oracle, ETL Pentaho Présentiel sur Beaune (21) + Télétravail
Technical Experience – Front-End Mandatory - Angular 2+ - HTML / CSS / JavaScript (ES6) - Use of REST Services Preferable - Sass - Bootstrap - NgRx - Frontend Security topics Technical Experience – Back-end Mandatory - Java 8 - Spring framework - REST Services - SQL Preferable - Hibernate - Backend Security topics Business Experience Mandatory - Agile (SCRUM) development Preferable - Web development - Financial affinity
...formation BAC +5, vous justifiez d'une expérience de > 5 ans sur des projets SI avec de forts impacts métier. Vous justifiez d'une expérience significative en intégration de données complexes, depuis les phases de recueil de besoin, jusqu’à la conception et la réalisation. Vous avez une expérience sur les langages de la data : Python, Java, SQL, Elasticsearch ainsi que sur les outils de collectes ETL (Talend, Datastage, Informatica...) et de traitement de flux de données : Kinesis Kafka, Spark... Vous avez des connaissances dans les solutions Cloud : AWS, Azure, Google et des outils de déploiement d’infrastructure du type « Terraform » et de gestion de version type GitLa...
OBLIGATOIREMNT AU MAROC Nous cherchons des developpeurs Full stack JAVA/JEE en freelance, avec une maitrise de REACT-JS Redux comme framwork Front-end, et Spring, JPA/Hibernate, Spring Boot en Back-end. pour une mission de freelance de longue durée à Casablanca. Expérience demandée : de 2ans à 5 ans. Nombre de poste : 8
Nous développons un logiciel de comptabilité adapté à un système comptable particulier. Deux personnes ont déjà débuté le projet depuis début o...personnes ont déjà débuté le projet depuis début octobre (dont une jeune sénior). L'objectif est d'obtenir une première version fonctionnelle à la mi décembre. Nous recherchons pour compléter l'équipe, un développeur SENIOR en Java connaissant les technologies suivantes: Langage : Java EE – Oracle JDK 11 Framework de développement : Spring Boot 2 [+ Spring 5 ] Accès aux données : Spring Data [+Hibernate] SGBD : MariaDB / Oracle / PostgreS...
Bonjour RamziTRA, j'ai remarqué votre profil et je voudrais vous poser une question : Quels sont vos skills sur TALEND (ETL) nous sommes mon associé et moi à la recherche d'une compétence TALEND pour le besoin d'un projet. Merci d'avance pour votre retour.
...puissant (CPU 4 coeurs minimum et RAM 8 GO minimum) <= OBLIGATOIRE – Un statut Freelance ou Auto Entrepreneur sera exigé afin d’établir un contrat de prestation <= OBLIGATOIRE – Méthodologie de travail : Scrum (Daily Scrum, Sprint Planning, Sprints de 15 jours, Scrum Board) Pré-requis Technologiques : – Apache Tomcat <= OBLIGATOIRE : minimum 3 ans – Java J2EE <= OBLIGATOIRE : minimum 3 ans – Hibernate <= OBLIGATOIRE : minimum 3 ans – JSF2 <= OBLIGATOIRE : minimum 3 ans – GIT <= OBLIGATOIRE : minimum 1 an – Maven <= OBLIGATOIRE : minimum 1 an – Communication texte, audio et vid&...
Je recherche un développeur Java pour une web application existante pour une mission ponctuelle qui pourrait aboutir sur un projet permanent. Il s'agit d'une application logiciel de caisse , inventaire , vente , spécialisé pour des boutiques. Je dois finaliser la mise de la certification NF525 pour cette application . Compétences : Java, Spring MVC et Hibernate , connaître la nouvelle norme pour les logiciels de caisse NF 525 et le principe de signature électronique
Hello, this is a short job for translation. Need very good english quality! Here is the text: Produits les plus populaires en stock. Nos LED sont disponibles en blanc chaud, blanc neutre et blanc froid. Tous nos produits sont certifiés cUL ou ETL .. Voir schémas de raccordement Un rêve, une passion... LedDesign c'est le fruit de 10 années d'expérience en contrôle de la qualité et en importation internationale. Nous sommes fier de vous présenter des produits de qualités, fiables et solides. De la fabrication, à la certification, jusqu'au tests qualités notre équipe est l'à ! Expédition au Canada en 24 à 48h Nous savons que chaque projet et pr...
*Creation d'une site web e-commerce de vente en ligne. Mot clés:CMS prestashop, PHP, My SQL, OVH, FileZilla. *Etude fonctionnelle des sites; *Choix des technologies et serveurs de travail; *Administration de serveur de travail; *Creation d'une application; *Administration de base ...de faire le calcul inversé de la paie . *Une application web qui traite la gestion de paie des clients . *Une application mobile qui permet aux clients de contacter la société et d'utiliser le calculateur de paie . Technologie : PHP5 , HTML5 , CSS3, jQuery, Android . *Conception et Développement d’une application de réservation et de payement des services touristiques. Mots clé : JAVA, J2EE, HIBERNATE, MYSQL, EJB3, Web Service, SOAP, ...
*Creation d'une site web e-commerce de vente en ligne. Mot clés:CMS prestashop, PHP, My SQL, OVH, FileZilla. *Etude fonctionnelle des sites; *Choix des technologies et serveurs de travail; *Administration de serveur de travail; *Creation d'une application; *Administration de base ...de faire le calcul inversé de la paie . *Une application web qui traite la gestion de paie des clients . *Une application mobile qui permet aux clients de contacter la société et d'utiliser le calculateur de paie . Technologie : PHP5 , HTML5 , CSS3, jQuery, Android . *Conception et Développement d’une application de réservation et de payement des services touristiques. Mots clé : JAVA, J2EE, HIBERNATE, MYSQL, EJB3, Web Service, SOAP, ...
*Creation d'une site web e-commerce de vente en ligne. Mot clés:CMS prestashop, PHP, My SQL, OVH, FileZilla. *Etude fonctionnelle des sites; *Choix des technologies et serveurs de travail; *Administration de serveur de travail; *Creation d'une application; *Administratio...faire le calcul inversé de la paie . *Une application web qui traite la gestion de paie des clients . *Une application mobile qui permet aux clients de contacter la société et d'utiliser le calculateur de paie . Technologie : PHP5 , HTML5 , CSS3, jQuery, Android . *Conception et Développement d’une application de réservation et de payement des services touristiques. Mots clé : JAVA, J2EE, HIBERNATE, MYSQL, EJB3, Web Service, SOAP, M...
...générale et les fonctionalités du site Internet afin de prendre en compte les dernières demandes d'évolution et d'ajout. Contexte Le site Internet de notre client repose sur une technologie Java/J2ee associée à - Java - JSF (MyFaces) - Spring - Hibernate - JQuery - Oracle Objet Assistance à la maîtrise d'oeuvre (conception, développement et maintenance d’application java/j2ee) pour travailler sur le site Internet de notre client. Profil Le profil demandé est le suivant : - Très bonne connaissance de Java, J2ee, Hibernate et Spring - Bonne connaissance de JavaServer Faces, HTML, CSS et SQL - Autre connaissances souhaitées : Apache M...
Objectif Notre client cherche une assistance à maitrise d’oeuvre dans le domaine du développement web en Java afin de part...Internet afin de mieux répondre aux besoins des personnes handicapées - Améliorer le formulaire de plainte en ligne - Améliorer l'ergonomie générale et les fonctionalités du site Internet afin de prendre en compte les dernières demandes d'évolution et d'ajout. Contexte Le site Internet de notre client repose sur une technologie Java/J2ee associée à - Java - JSF (MyFaces) - Spring - Hibernate - JQuery - Oracle Objet Assistance à la maîtrise d'oeuvre (conception, développement et maintenance d&rsqu...
correction des erreurs jpa hibernate mapping correction des erreurs jpa hibernate mapping correction des erreurs jpa hibernate mapping
Nous recherchons pour une mission chez l’un de nos cli...- Déployer dans les différents environnements - Etre en support en cas d'incident en production Votre profil ************* Compétences indispensables : - 5 ans minimum d’expérience en tant que développeur java/JEE dans des environnements web à forte audience et volumétrie - Maitrise de l'environnement java/JEE/J2EE et les différents frameworks associés (Struts2, SpringMVC, Spring, Hibernate, CXF,...) - Connaissance des environnements en intégration continue (Jenkins, etc...) Démarrage de la mission : asap Savoir-être indispensable : Rigoureux, autonome, sens du service Pragmatique, force de propositions ...
je maîtrise bien le monde du relationnel (Oracle,sqlserver) et je suis tres ambicieux par le mapping Objet relationel.....et notamment la technologie JAVA ee
je maîtrise bien le monde du relationnel (Oracle,sqlserver) et je suis tres ambicieux par le mapping Objet relationel.....et notamment la technologie JAVA ee
...contemporain qui se veut libre et individualiste. La corne de boeuf est l'une des matières naturelles les plus difficiles à travailler. Elle réclame un soin particulier et de la patience. Le bois, de cèdre ou d'acajou, est la seconde matière utilisée pour agrémenter certains accessoires. Viennent ensuite pour certaines collections limitées, l'ajout de pierres fines telles que la turquoise, le jasper, la malaquite et même des perles...... Pourquoi les bijoux et non autre chose? Car un bijou peut à lui seul métamorphoser quiconque le porte au bon moment. La corne de boeuf est admise partout, dans les bureaux, les grands cocktails, les messes, etc.... Cette ligne a discrètement pr...
Gagner plus de 600$ ==>Crée une Application de gestion pour une établissement public (l'application sera en mode Client server c'est a dire par le réseau avec une base de données bien stable ... la connaissance de Hibernate et jsf outils et un peu de XHTML et PrimeFaces est nécessaires ...et gagner plus de 500$ avec nous !! plus d'autres primes sur les solutions proposées. ===> 600$
...our treasury platform. I am comfortable sharing a sample dataset so you can map the fields, clean anomalies, and transform the numbers. Ideally the workflow is automated—SQL or Python for the heavy lifting and Excel, Power BI or Tableau for the final dashboards and printable summaries—but I am open to whichever stack you can justify as robust and maintainable. Acceptance criteria • A scripted ETL routine that I can run on new deal files without rewriting code. • Interactive dashboards plus a one-page PDF summary highlighting ROI, volume trends, and daily P&L. • Brief hand-off notes so my team can adjust data paths or field names in future. If you have questions about the data structure or need a quick walkthrough of the treasury trading ...
Title: Senior dMRV / Carbon Data Engineer (Verra + – Palm Oil / Biochar) Scope: We are an agentic + Web3 dMRV platform. We need a freelancer to assist prepare our data and calculations. Your tasks: Review historical data of POME SCADA exports. Map SCADA fields to Verra VCS POME/biogas methodology requirements and, at a high level, to biochar requirements. Build Python/SQL ETL scripts to clean and structure the data (handle gaps, outliers, units). Implement preliminary carbon calculations (CH₄ avoided / destroyed, EFB→biochar tCO₂e stored) using standard factors. Deliver a short technical memo (10–15 pages) describing data, assumptions, and methods that we can later refine with VVB. Must‑have experience: Hands‑on data work (Python + SQL) with time‑series /...
The Workday technical consultant will design and implement scalable Workday data ingestion pipelines and provide recommendations on best practices for extracting and integrating Workday data across hyperscaler environments (Azure, AWS, or GCP). Integration Approaches Under Evalu...(Workday Query Language) RaaS has been the traditional approach but is not preferred for future implementations. Key Requirements 5+ years of Workday technical experience (integrations, reporting, or data extraction). Proven experience implementing Workday data ingestion to cloud data platforms. Strong understanding of REST/SOAP APIs, RaaS, and WQL. Experience working with modern data platforms and ETL/ELT pipelines. Ability to recommend optimal ingestion strategies based on scalability, performance, and g...
I need an experienced AWS data engineer to design and build production-ready ETL pipelines in AWS Glue. The work centres on moving and transforming data from several source systems—relational databases (e.g., PostgreSQL, MySQL), NoSQL stores, real-time streams coming through Kafka/Kinesis, and a handful of internal/external REST APIs—into a clean, query-friendly layout in S3 and, ultimately, Redshift. Requirements: Strong AWS data engineering experiences with various aws services Experience building end-to-end data pipelines (schema discovery, ingestion, transformation, orchestration, monitoring) Experience working with relational databases like Oracle, MySQL, and SQL Server etc Experience with data ingestion from on-prem systems to cloud Experience with streaming pl...
...images • build website Based on the task, the website should recommend relevant tools. ⸻ 4. Tool Submission System Create a submission form where users can submit their AI tools. Submission fields: • Tool name • Website URL • Description • Category • Contact email All submissions must require admin approval before publishing. ⸻ 5. Tool Comparison Pages Example comparison pages: • ChatGPT vs Jasper • Midjourney vs DALL-E • vs Writesonic These pages should include comparison tables and explanations. ⸻ 6. AI Workflow Guides Create guides explaining how to complete tasks using AI tools. Examples: • How to create a YouTube video with AI • How to write blog posts with AI • How to generate images with AI Each gu...
...cleaning • remove duplicates • normalize titles • unify IDs 4. ETL pipeline • scripts to refresh the dataset monthly 5. Matching keys • imdb_id • tmdb_id Database Size Expectations Movies: 600k + TV Series 200k + Technical Requirements Preferred stack: • Python • Pandas • PostgreSQL or SQLite • API integration • ETL scripting Important Constraints Do NOT scrape IMDb pages. Use official datasets and APIs only. Goal of the Project The database will be used to: • compare against a personal movie rating history • calculate similarity between titles • generate predicted ratings • identify highly compatible unseen movies Accuracy of metadata is critical. Ideal Candidate Experie...
Custom ETL pipeline with postgress DB
...any schema changes made - Collaborate async with backend and product teams to align on timelines and minimize disruption You Bring: - Proven experience migrating large MySQL databases to PostgreSQL - Hands-on experience with Supabase (must-have) - Strong SQL skills across both MySQL and PostgreSQL dialects - Understanding of schema design, indexing, and relational data modeling - Experience with ETL pipelines and data transformation tooling - Ability to identify and resolve data quality issues during migration - Strong attention to detail and a zero-tolerance approach to data loss Bonus: - Experience with pgloader, AWS DMS, or similar migration tools - Familiarity with Row Level Security (RLS) in Supabase - Experience working within SaaS or product environments - Scripting expe...
...an accomplished Senior Data Engineer to sit in on our technical interviews for roughly two hours each day. The role is purely evaluative: you will craft probing questions, join live video calls, and quickly score each candidate’s depth of knowledge across Python, Scala and SQL. Our stack centres on Azure and Databricks, so practical insight into large-scale Spark/PySpark jobs, data-model design, ETL orchestration and cloud performance tuning is essential. Candidates frequently discuss streaming, optimisation strategies and modern AI/ML add-ons, so any hands-on exposure to libraries such as PyTorch, NumPy, SciPy or TensorFlow will help you challenge them at the right level, though it is not mandatory. Availability is limited to two focused hours per weekday; I will sha...
I need a compact proof-of-concept that automatically extracts Documents from an Azure Blob container, captures their accompanying metadata, and lands both in a SharePoint Online document library. Only files classed as “Documents” (e.g., PDF, DOCX, XLSX) are in scope—no images or videos. The PoC must demonstrate that file contents arrive intact, their metadata is mapped to the correct SharePoint columns, and the process can be triggered on demand or on a simple schedule. You are free to choose the most suitable approach—Azure Data Factory, Logic Apps, Power Automate, an Azure Function, or a lightweight script in C# or Python using the Azure SDK and Microsoft Graph/SharePoint REST API are all acceptable. The key is clarity and repeatability; hard-coded secrets or one...
...Responsibilities Automation Architecture: Design and deploy high-concurrency automation clusters using Node.js (TypeScript) and headless browser frameworks (Playwright/Puppeteer). Stateful Flow Simulation: Develop sophisticated scripts to simulate complex user journeys, including geo-localized session management and extraction of landed costs (Price + Tax + Freight). Neural Data Normalization: Architect ETL pipelines to transform unstructured web data into our Internal Universal Material Schema using advanced regex and LLM-assisted parsing. Perceptual Indexing: Implement pHash (Perceptual Hashing) logic to identify and de-duplicate identical physical products across the national market. Infrastructure Management: Manage auto-scaling containerized workloads on AWS (Fargate/EC...
...datasets. --- ## B. Predictive Models AI must provide: * Cash flow forecasting * Inventory restocking prediction * Revenue forecasting * Fraud risk detection * Expense anomaly detection * Tax anomaly detection * Slow-moving inventory alerts * Client financial risk scoring --- ## C. Architecture Requirements The developer must propose: * Separate AI microservice OR data warehouse model * ETL pipeline from client databases * Secure API-based data access * Scheduled model retraining * Explainable outputs * Dashboard integration into firm admin portal --- # 9. Security (Non-Negotiable) The system must follow zero-trust principles. ## Administrative Access * All admin access must be SSH-only via: * VPN or Zero-Trust Gateway * Bastion host * Key-based SSH authenticati...
I’m migrating an older Java backend—built on legacy Spring and Hibernate—into a fresh Spring Boot 3 project so the stack is fully modern and future-proof. The focus is code refactoring: untangling dated patterns, replacing XML configuration with annotations, adopting Spring Data JPA, and cleaning up any deprecated API usage. No new features are needed right now; the goal is pure code modernization. You’ll receive a private Git repo containing the current application and a lightweight skeleton for the new one. Work incrementally, push frequent commits, and raise pull requests so the migration stays transparent and reviewable. GitHub Actions is already wired, so every PR should keep the build green. Deliverables • A runnable Spring Boot 3.x application t...
...forward-looking section on where the field is heading. The subjects span the entire spectrum of engineering—mechanical, electrical, civil and, whenever it suits the prompt I send you, any interdisciplinary angle that makes the story stronger. I will supply a short prompt or working title for every video so you know the exact focus before you begin. From there, feel free to lean on AI tools such as ChatGPT, Jasper, or your own fine-tuned models to generate copy, but be prepared to polish manually for clarity, natural flow, and originality; I run every script through plagiarism and style checks. Deliverables • 140 individual scripts in a shareable text format (Google Doc, Word, or Markdown) • Minimum length: 1 500 words each • Consistent structure: Intr...
...covers the entire pipeline: extracting data from the current MySQL instance, scrubbing and de-duplicating it, mapping old structures to the target schema, and applying significant transformations to fit new business rules. Solid SQL is obviously essential, and you should already feel at home with large tables, indexes, constraints, and performance tuning. Experience scripting in Python or using ETL utilities (e.g., Talend, Pentaho, custom shell/Python pipelines) will make life easier because several transformation rules are complex. I will provide full access to the existing database schema, sample data, and the target data model on day one. Throughout the month you will collaborate with our in-house QA team to validate row counts, referential integrity, and transformation accur...
I am setting up a new service and require an experienced Java Backend Developer to design and develop the server-side application from scratch. The technology stack will be based on...successfully and the health-check endpoint responds correctly. All APIs function properly via Postman with correct authentication, validation, and database persistence. Sandbox payment and notification workflows execute successfully with expected callbacks. Provided tests and performance benchmarks run successfully with documented results. Required Skills Java 17+ Spring Boot & Spring Security JPA / Hibernate REST API Development MySQL Maven or Gradle Microservices Architecture Docker & CI/CD practices Strong coding standards, scalability awareness, and performance optimization experience are...
The task centres on moving content that currently lives in Azure Blob Storage into two destinations—SharePoint Online and a third-party cloud repository that we will finalise together. The source consists of mixed-format files: Word documents, images, CSVs and a few other common types. I need a lightweight yet robust ETL solution that can: • automatically detect new or updated blobs, • perform any required transformations (basic metadata enrichment, naming conventions, optional compression where helpful), and • deliver the output to the target platforms with solid error handling and retry logic. An Azure-native approach—Azure Data Factory, Logic Apps, Functions, or a combination—will fit best, but I’m open to other suggestions so lo...
...Advanced filtering UI Data grid with pagination & lazy loading Infrastructure Kubernetes / Docker Load balancing CDN Caching (Redis) Object storage for raw data Required Features ================ Advanced Search Engine Full-text search Multi-filter query builder Auto-suggestions Fuzzy matching Aggregations (sum, count, trends) Data Handling ============ Bulk data ingestion pipelines ETL processing Schema optimization Index optimization Performance Requirements ====================== Query response in seconds Pagination with deep offset handling Parallel query execution Caching for repeated queries Security & Access =============== User authentication Role-based access Paid subscription model (optional phase 2) Dataset Details ============= 10+ TB...
Hi Jasper V., I noticed your profile and would like to offer you my project. We can discuss any details over chat.
...with Spring Boot at an intermediate level. The core tasks will revolve around crafting clean, maintainable Java code on the back-end while also tying in the front-end layers so the entire flow feels seamless to the user. Key elements you’ll handle • Setting up and extending a Spring Boot framework that connects to a relational database; I already have tables sketched out, so efficient JPA/Hibernate mapping will be important. • Wiring the service layer to a message-queue solution (RabbitMQ or Kafka—open to whichever you prefer) so events are published and consumed reliably. • Implementing the usual full-stack glue—controllers, DTOs, and any lightweight front-end touches—so features can be demonstrated in a browser without extra hand-ho...
I have several CSV and JSON files arriving on a regular schedule, and I need a reliable ETL pipeline that ingests these flat files, cleans the raw data, and validates every record before loading it into my environment. The core of the job is to: • Read multiple flat-file formats (mainly CSV, with the occasional JSON). • Apply thorough data-cleansing rules—removing duplicates, enforcing data types, flagging out-of-range values, and normalising text fields. • Run validation checks so that only clean, schema-compliant rows proceed to the load step. I’m happy for you to choose the stack you are most efficient with—Python (pandas, PySpark), Talend, or another ETL tool—as long as the final solution is reproducible and can be trigge...
I have direct access to our e-commerce sale...connections or scheduled refresh against the database. I’ll provide the connection string and a sample export; you’ll propose the data model, set up the transformations, and surface the insights in clean, intuitive visuals. Exact metrics and calculated fields can be finalised together once the framework is in place. Deliverables • Secure connection to the sales database, including any necessary ETL or query optimisation • Fully-interactive dashboard with filter panels, drill-through views, and export options • Clear hand-off documentation covering data model, refresh schedules, and how to extend the report Please outline the tool you prefer, the timeline you need, and one example of a similar dashboar...
For my data‐management course homework, I must build a complete ETL workflow with any free or open-source tool such as Talend Open Studio, Apache NiFi, or Pentaho. The task starts with extracting a small, publicly available sample data set (CSV, JSON, or a simple relational dump), then cleaning and transforming it—deduplicating records, resolving missing or inconsistent values, and normalising key fields where needed. Once the data is tidy, it has to be loaded twice: first into a staging target (a plain relational table or file storage) and then into a basic star- or snowflake-style data-warehouse schema so I can run simple analytical queries afterward. I will need the full project files, transformation jobs, and a concise write-up that walks through each step, explains the...
I want to spend one focused week mastering end-to-end data-engineering pipelines on Google Cloud. The heart of the bootcamp is hands-on practice: together we will build, deploy, monitor and troubleshoot real ETL flows until I can run them solo with confidence. Primary learning goal My priority is data ingestion, extraction, transformation and storage. We will start with the full ingestion toolkit—DataFlow, Pub/Sub and Cloud Storage—then chain that work into the wider GCP ecosystem: • Storage layers: BigQuery, Bigtable, Cloud Spanner, Cloud SQL, Datastore / Firestore • Transformation & orchestration: DataFusion, DataProc, Cloud Composer, Cloud Scheduler, Cloud Functions • Data quality & cataloging: DataPrep, Data Catalog • Visualisati...
