Skyline Scientific Inc
iCapital
Leitender Python Engineer und Entwickler - Vice President
Über die Rolle
iCapital sucht einen erfahrenen Python Entwickler mit Expertise in Web Scraping, automatisierten Portalinteraktionen und Cloud-nativen Deployments mittels AWS. Der ideale Kandidat verfügt über praktische Erfahrung mit Playwright für Browser-Automatisierung, der Verwaltung von Multi-Faktor-Authentifizierungs-Flows (MFA) und der Bereitstellung skalierbarer Scraping-Aufgaben über AWS Lambda und zugehörige Dienste. Diese Rolle unterstützt bei der Architektur und dem Aufbau robuster, sicherer und skalierbarer Scraping-Lösungen, die mit komplexen Webanwendungen und gesicherten Portalen interagieren.
Aufgaben
- Unterstützung bei Design und Implementierung fortschrittlicher Scraping-Lösungen mittels Python, Playwright und AWS-Diensten.
- Automatisierung von Interaktionen mit JavaScript-intensiven und authentifizierungsgesicherten Websites, einschließlich der Handhabung von MFA, CAPTCHAs und Login-Flows basierend auf Sitzungen oder Tokens.
- Architektur von Scraping-Pipelines unter Verwendung serverloser AWS-Komponenten wie Lambda, Step Functions, S3, CloudWatch und Secrets Manager.
- Aufbau von Systemen, die skalierbar sind, um hohe Datenextraktionsvolumen mit Fehlertoleranz, Wiederholungsversuchen und intelligenter Protokollierung zu unterstützen.
- Integration und Verwaltung komplexer Workflows über mehrere Portale, APIs und Datenquellen hinweg.
- Beitrag zu Architekturentscheidungen, Werkzeugen und Best Practices.
Qualifikationen
- Bachelor- oder Master-Abschluss in Informatik, Software-Engineering oder verwandtem Bereich, oder gleichwertige Berufserfahrung
- 10+ Jahre Erfahrung in der Python-Entwicklung mit starkem Fokus auf Automatisierung und Datenextraktion
- Nachgewiesene Expertise im Web Scraping mit Tools wie Playwright, Selenium, Scrapy, BeautifulSoup und requests
- Tiefgehende Erfahrung in der Handhabung von Multi-Step-Authentifizierungs-Flows, einschließlich Multi-Faktor-Authentifizierung (MFA), CAPTCHA-Lösung und Sitzungs- oder Cookie-Management
- Fundierte Kenntnisse in der Bereitstellung und Verwaltung von Scraping-Workloads in AWS, insbesondere Lambda, S3, IAM, CloudWatch und Secrets Manager
- Erfahrung mit asynchroner Programmierung, Headless-Browsern und JavaScript-gerenderten Inhalten
- Solides Verständnis von Webprotokollen (d. h. HTTP, HTTPS, Cookies, Header) und die Fähigkeit, Netzwerkanfragen und Authentifizierungsmechanismen zu reverse-engineeren
- Sicherer Umgang mit APIs, JSON/XML und Datentransformation
- Erfahrung mit CI/CD-Pipelines, Docker und Infrastructure as Code (d. h. CloudFormation, Terraform)
- Vertrautheit mit Data-Pipeline-Orchestrierungstools wie Apache Airflow oder AWS Step Functions
- Vorerfahrung im Scraping von sicheren Portalen auf Unternehmensebene (d. h. Finanz-, Gesundheits-, Rechtswesen)
- Kenntnisse von Python-Testframeworks und Schreiben von Unit- oder Integrationstests
- Hintergrund in Data Engineering oder ETL-Workflows ist von Vorteil
Leistungen
Die Gehaltsspanne für diese Position liegt zwischen 150.000 $ und 180.000 $. iCapital bietet ein Vergütungspaket, das Gehalt, Aktienoptionen für alle Vollzeitmitarbeiter und einen jährlichen Leistungsbonus beinhaltet. Mitarbeiter erhalten außerdem ein umfassendes Leistungspaket, das einen Arbeitgeber-bezuschussten Altersvorsorgeplan, eine großzügig subventionierte Krankenversicherung mit 100% Arbeitgeber-finanziertem Dental-, Augen- und Telemedizin- sowie virtuellen psychologischen Beratungsangeboten, Elternurlaub und unbegrenzte bezahlte Urlaubszeit (PTO) umfasst.
Wir glauben, dass die besten Ideen und Innovationen entstehen, wenn wir zusammen sind. Mitarbeiter in dieser Rolle arbeiten Montag bis Donnerstag im Büro, mit der Flexibilität, am Freitag remote zu arbeiten.
Weitere Informationen über iCapital finden Sie unter icapitalnetwork.com/about-us Twitter: @icapitalnetwork | LinkedIn: linkedin.com/company/icapital-network-inc | Auszeichnungen Haftungsausschluss: icapitalnetwork.com/about-us/recognition/ nam02.safelinks.protection.outlook.com/?url=https%3A%2F%2Fwww.icapitalnetwork.com%2Fabout-us%2Frecognition%2F&data=05%7C01%7Ckturlis%40icapitalnetwork.com%7C7f07161790634b9fc3fc08da748bec16%7C0ac51d2823c34b35a9fbe1a17aa9eff1%7C0%7C0%7C637950441561507201%7CUnknown%7CTWFpbGZsb3d8eyJWIjoiMC4wLjAwMDAiLCJQIjoiV2luMzIiLCJBTiI6Ik1haWwiLCJXVCI6Mn0%3D%7C3000%7C%7C%7C&sdata=HAZm4uhhP8r6HVKnBqOMq5jbXmgOrHlsPCur9U4JRis%3D&reserved=0
iCapital ist stolz darauf, ein Arbeitgeber zu sein, der Chancengleichheit und positive Diskriminierung (Equal Employment Opportunity and Affirmative Action) fördert. Wir diskriminieren nicht aufgrund von Rasse, Religion, Hautfarbe, nationaler Herkunft, Geschlecht, sexueller Orientierung, Geschlechtsidentität, Alter, Status als geschützter Veteran, Status als Person mit Behinderung oder anderen rechtlich geschützten Merkmalen.
