Data Engineer | Data Engineer | Ingénieur de données Job in Canada Recruiting by Real Matters

Job Title: Data Engineer

Job Category: Exempt

Department: Technology

Company URL: http://www.real matters.com

About the Role

We’re seeking a Data Engineer who will play a crucial role building and maintaining data pipelines, integrating to 3^rd parties, and evolving our platform as we modernize with cloud technologies. The successful candidate will function in a multi-faceted role collaborating on product solutions, analysis, developing technical specs and implementing enhancements. You will work with a world class technology team developing reports critical to serving our customers, performing data transformations and provide data standard to the team. This role offers the opportunity for career growth, intellectual stimulation, creative problem solving, and the opportunity of working on great stuff with a great team.

Our Tech Stack

• GoLang and Java/J2EE on the Backend
• ReactJS and JSF on the front end
• MySQL and Couchbase as our datastore
• Deployed as monolith and Docker micro-services in GCP

Responsibilities

• Collaborate with internal team members to understand business goals & objectives
• Build, operate, and support data applications, keeping our ETL pipelines and data applications optimized for scale
• Act as a reviewer for new data models, make data architectural decision, and provide coaching on data modeling, data standards and best practices for optimal execution
• With our Architecture team, shape and plan out modernization projects as we migrate existing components and introduce new technologies
• Enhance and maintain existing Jasper reports
• Analyze and diagnose complex business problems and identify their root cause using data using your incredible query skills
• Define and document data solutions mindful of performance, scalability and platform re-usability in collaboration with our Application Architects
• Understand data sets, both business & technical, generating specifications that entail source and target mapping
• Provide task estimates adjusted for complexity
• Investigate and resolve system issues
• Collaborate with the team to prioritize and solution requirements
• Contributes to QA efforts where needed
• Contribute to a team culture of ownership, accountability, respect, and partnership
• Recommend improvements to streamline processes regarding data flow and data quality to improve data accuracy, usability and value

Skills and Expertise

• Minimum of 5+ years of hands on experience creating specifications and developing data transformations using Pentaho ETL (or commensurate) with an orchestration service such as Airflow, Cloud Composer, etc
• Expert resource when it comes to your use of XSLT
• Strong query skills using MySQL, BigQuery and NoSQL databases (e.g. MongoDB) and implementing reports with JasperReports & BI tools (e.g. Looker)
• Experience working with Index Search tools such as Solr, Elasticsearch
• MySQL database administration such as data tuning and schema optimization
• Experience in all stages of the software development lifecycle, with a desire for durable high quality output in what you code
• Strong communication, client facing and presentation skills
• Able to work under pressure and meet deadlines remaining flexible and responsive to rapid change when needed
• Hands-on experience in Linux/Unix environment
• Experience working with DevOps practices, including continuous integration and continuous delivery using Jenkins and Github.
• Experience developing applications with Python, R, Java or GoLang
• Strong knowledge of statistical methods, and particularly in the areas of modeling and business analytics
• Developing applications related in the real estate, mortgage / financial industry
• Experience with Google’s GenAI suite (e.g. Vertex)
• University Degree in Computer Science, Computer Engineering or equivalent knowledge/experience
• 2+ years of experience in a data analyst or science role, involving some of the following: data analysis, data mining, ETL, predictive modelling
• 1+ years of experience building applications with Java / Spring Boot
• Additional technical and/or business certifications are an asset

The above statements are intended to describe the general nature and level of the work being performed by people assigned to this job. They are not intended to be an exhaustive list of responsibilities, duties, and skills required.

About Real Matters

Real Matters is a leading network management services provider for the mortgage lending and insurance industries. Real Matters’ platform combines its proprietary technology and network management capabilities with tens of thousands of independent qualified field professionals to create an efficient marketplace for the provision of mortgage lending and insurance industry services. Our clients include top 100 mortgage lenders in the U.S. and some of the largest banks and insurance companies in North America. We are a leading independent provider of residential real estate appraisals to the mortgage market and a leading independent provider of title services in the U.S. Headquartered in Markham (ON), Real Matters has principal offices in Buffalo (NY) and Middletown (RI). Real Matters is listed on the Toronto Stock Exchange under the symbol REAL. For more information, visit .

Equal Opportunity Employer

Real Matters is an equal opportunity employer; applicants are considered for all roles without regard to race, national or ethnic origin, colour, religion, age, sex, sexual orientation, gender identity or expression, marital status, family status, genetic characteristics, disability, or any other status protected by appropriate law. All employment is decided based on qualifications, merit, and business need. Please advise us at any point during the recruitment and selection process if you require accommodation. Real Matters is committed to compliance with all applicable legislation, including providing accommodation for applicants with disabilities.

Titre du poste : Ingénieur de données

Catégorie d'emploi : Exonéré

Département : Technologie

URL de l'entreprise : Matters.com

À propos du rôle

Nous recherchons un ingénieur de données qui jouera un rôle crucial dans la création et la maintenance de pipelines de données, l'intégration à des tiers et l'évolution de notre plate-forme à mesure que nous nous modernisons avec les technologies cloud. Le candidat retenu assumera un rôle à multiples facettes en collaborant sur des solutions de produits, des analyses, l'élaboration de spécifications techniques et la mise en œuvre d'améliorations. Vous travaillerez avec une équipe technologique de classe mondiale développant des rapports essentiels pour servir nos clients, effectuer des transformations de données et fournir des normes de données à l'équipe. Ce rôle offre des opportunités d'évolution de carrière, de stimulation intellectuelle, de résolution créative de problèmes et la possibilité de travailler sur des choses formidables avec une équipe formidable.

Notre pile technologique

• GoLang et Java/J2EE sur le backend

• ReactJSand JSF sur le front-end

• MySQL et Couchbase comme notre banque de données

• Déployé en tant que micro-services monolithiques et Docker dans GCP

Responsabilités

• Collaborer avec les membres de l'équipe interne pour comprendre les buts et objectifs de l'entreprise.

• Créer, exploiter et prendre en charge des applications de données, en gardant nos pipelines ETL et nos applications de données optimisés pour l'évolutivité.

• Agir en tant qu'examinateur des nouveaux modèles de données, prendre des décisions en matière d'architecture de données et fournir un encadrement sur la modélisation des données, les normes de données et les meilleures pratiques pour une exécution optimale.

• Avec notre équipe d'architecture, façonner et planifier des projets de modernisation à mesure que nous migrons les composants existants et introduisons de nouvelles technologies.

• Améliorer et maintenir les rapports Jasper existants

• Analyser et diagnostiquer des problèmes commerciaux complexes et identifier leur cause profonde à l'aide de données en utilisant vos incroyables compétences en matière de requêtes.

• Définir et documenter des solutions de données soucieuses de performances, d'évolutivité et de réutilisation de la plateforme en collaboration avec nos architectes d'applications.

• Comprendre les ensembles de données, à la fois commerciaux et techniques, en générant des spécifications qui impliquent un mappage source et cible.

• Fournir des estimations de tâches ajustées en fonction de la complexité

• Enquêter et résoudre les problèmes du système

• Collaborer avec l'équipe pour prioriser et répondre aux exigences

• Contribue aux efforts d'assurance qualité si nécessaire

• Contribuer à une culture d'équipe axée sur l'appropriation, la responsabilité, le respect et le partenariat.

• Recommander des améliorations pour rationaliser les processus concernant le flux de données et la qualité des données afin d'améliorer l'exactitude, la convivialité et la valeur des données.

Compétences et expertise

• Au moins 5 années d'expérience pratique dans la création de spécifications et le développement de transformations de données à l'aide de Pentaho ETL (ou équivalent) avec un service d'orchestration tel qu'Airflow, Cloud Composer, etc.

• Ressource experte en ce qui concerne votre utilisation de XSLT

• Solides compétences en matière de requêtes utilisant les bases de données MySQL, BigQuery et NoSQL (par exemple MongoDB) et mise en œuvre de rapports avec les outils JasperReports et BI (par exemple Looker)

• Expérience de travail avec des outils de recherche d'index tels que Solr, Elasticsearch

• Administration de base de données MySQL telle que le réglage des données et l'optimisation des schémas

• Expérience dans toutes les étapes du cycle de vie du développement logiciel, avec un désir d'obtenir un résultat durable de haute qualité dans ce que vous codez

• Solides compétences en communication, en contact avec les clients et en présentation

• Capable de travailler sous pression et de respecter les délais en restant flexible et réactif aux changements rapides en cas de besoin.

• Expérience pratique dans l'environnement Linux/Unix

• Expérience de travail avec les pratiques DevOps, y compris l'intégration continue et la livraison continue à l'aide de Jenkins et Github.

• Expérience en développement d'applications avec Python, R, Java ou GoLang

• Solide connaissance des méthodes statistiques, et particulièrement dans les domaines de la modélisation et de l'analyse commerciale

• Développer des applications liées au secteur immobilier, hypothécaire/financier

• Expérience avec la suite GenAI de Google (par exemple Vertex)

• Diplôme universitaire en informatique, en génie informatique ou connaissances/expérience équivalentes

• Au moins 2 ans d'expérience dans un rôle d'analyste de données ou scientifique, impliquant certains des domaines suivants : analyse de données, exploration de données, ETL, modélisation prédictive.

• Plus d'un an d'expérience dans la création d'applications avec Java/Spring Boot

• Des certifications techniques et/ou commerciales supplémentaires sont un atout

Les énoncés ci-dessus visent à décrire la nature générale et le niveau du travail effectué par les personnes affectées à ce poste. Ils ne constituent pas une liste exhaustive des responsabilités, des tâches et des compétences requises.

À propos des questions réelles

Real Matters est l'un des principaux fournisseurs de services de gestion de réseau pour les secteurs du prêt hypothécaire et de l'assurance. La plateforme de Real Matters combine sa technologie exclusive et ses capacités de gestion de réseau avec des dizaines de milliers de professionnels de terrain qualifiés et indépendants pour créer un marché efficace pour la fourniture de services dans le secteur des prêts hypothécaires et des assurances. Nos clients comprennent les 100 plus grands prêteurs hypothécaires des États-Unis et certaines des plus grandes banques et compagnies d'assurance d'Amérique du Nord. Nous sommes l'un des principaux fournisseurs indépendants d'évaluations immobilières résidentielles sur le marché hypothécaire et l'un des principaux fournisseurs indépendants de services de titres aux États-Unis. Basé à Markham (ON), Real Matters possède des bureaux principaux à Buffalo (NY) et Middletown (RI). Real Matters est coté à la Bourse de Toronto sous le symbole REAL. Pour plus d’informations, visitez .

Employeur d'égalité des chances

Real Matters est un employeur garantissant l'égalité des chances ; les candidats sont considérés pour tous les rôles sans égard à la race, à l'origine nationale ou ethnique, à la couleur, à la religion, à l'âge, au sexe, à l'orientation sexuelle, à l'identité ou à l'expression de genre, à l'état civil, à la situation familiale, aux caractéristiques génétiques, au handicap ou à tout autre statut protégé par les dispositions appropriées. loi. Tout emploi est décidé en fonction des qualifications, du mérite et des besoins de l'entreprise. Veuillez nous informer à tout moment du processus de recrutement et de sélection si vous avez besoin d'accommodements. Real Matters s'engage à respecter toutes les lois applicables, y compris en fournissant des aménagements aux candidats handicapés.