Estados Unidos
Roku
iCapital
Engenheiro(a) e Desenvolvedor(a) Líder de Python - Vice-Presidente
Estados Unidos
Stamford, Connecticut, United States
JavaScriptPythonAWSDockerTerraform
Tradução automática. Consulte o original.
Sobre a Vaga
iCapital está contratando um(a) Desenvolvedor(a) Python experiente com especialização em web scraping, interações automatizadas de portais e implantação nativa na nuvem usando AWS. O(a) candidato(a) ideal terá experiência prática trabalhando com Playwright para automação de navegadores, gerenciando fluxos de autenticação multifator (MFA) e implantando tarefas de scraping escaláveis via AWS Lambda e serviços relacionados. Esta função auxiliará na arquitetura e construção de soluções de scraping robustas, seguras e escaláveis que interagem com aplicações web complexas e portais protegidos.
Responsabilidades
- Auxiliar no projeto e implementação de soluções avançadas de scraping usando Python, Playwright e serviços AWS.
- Automatizar interações com sites protegidos por autenticação e com alto uso de JavaScript, incluindo o tratamento de MFA, CAPTCHAs e fluxos de login baseados em sessão ou token.
- Arquitetar pipelines de scraping usando componentes serverless AWS como Lambda, Step Functions, S3, CloudWatch e Secrets Manager.
- Construir sistemas que escalam para suportar altos volumes de extração de dados com tolerância a falhas, retentativas e logging inteligente.
- Integrar e gerenciar fluxos de trabalho complexos entre múltiplos portais, APIs e fontes de dados.
- Contribuir para decisões de arquitetura, ferramentas e melhores práticas.
Qualificações
- Bacharelado ou mestrado em ciência da computação, engenharia de software ou área relacionada, ou experiência profissional equivalente
- 10+ anos de experiência em desenvolvimento Python, com forte foco em automação e extração de dados
- Experiência comprovada em web scraping usando ferramentas como Playwright, Selenium, Scrapy, BeautifulSoup e requests
- Experiência aprofundada no tratamento de fluxos de autenticação de múltiplas etapas, incluindo autenticação multifator (MFA), resolução de CAPTCHA e gerenciamento de sessão ou cookie
- Proficiência na implantação e gerenciamento de cargas de trabalho de scraping em AWS, particularmente Lambda, S3, IAM, CloudWatch e Secrets Manager
- Experiência com programação assíncrona, navegadores headless e conteúdo renderizado por JavaScript
- Sólido entendimento de protocolos web (ou seja, HTTP, HTTPS, cookies, headers), e a capacidade de fazer engenharia reversa de chamadas de rede e mecanismos de autenticação
- Confortável trabalhando com APIs, JSON/XML e transformação de dados
- Experiência com pipelines de CI ou CD, Docker e infraestrutura como código (ou seja, CloudFormation, Terraform)
- Familiaridade com ferramentas de orquestração de pipeline de dados como Apache Airflow ou AWS Step Functions
- Experiência prévia em scraping de portais seguros ou de nível empresarial (ou seja, financeiros, de saúde, jurídicos)
- Exposição a frameworks de teste Python e escrita de testes unitários ou de integração
- Experiência em engenharia de dados ou fluxos de trabalho ETL é um diferencial
Benefícios
A faixa salarial base para esta função é de US$150,000 a US$180,000. iCapital oferece um pacote de remuneração que inclui salário, participação acionária para todos os funcionários em tempo integral e um bônus anual de desempenho. Os funcionários também recebem um pacote abrangente de benefícios que inclui plano de aposentadoria com contrapartida do empregador, assistência médica generosamente subsidiada com 100% de cobertura do empregador para odontologia, oftalmologia, telemedicina e aconselhamento virtual de saúde mental, licença parental e dias de folga remunerados ilimitados (PTO).
Acreditamos que as melhores ideias e inovações surgem quando estamos juntos. Os funcionários nesta função trabalharão no escritório de segunda a quinta-feira, com a flexibilidade de trabalhar remotamente às sextas-feiras.
Para informações adicionais sobre a iCapital, visite icapitalnetwork.com/about-us Twitter: @icapitalnetwork | LinkedIn: linkedin.com/company/icapital-network-inc | Aviso de Prêmios: icapitalnetwork.com/about-us/recognition/ nam02.safelinks.protection.outlook.com/?url=https%3A%2F%2Fwww.icapitalnetwork.com%2Fabout-us%2Frecognition%2F&data=05%7C01%7Ckturlis%40icapitalnetwork.com%7C7f07161790634b9fc3fc08da748bec16%7C0ac51d2823c34b35a9fbe1a17aa9eff1%7C0%7C0%7C637950441561507201%7CUnknown%7CTWFpbGZsb3d8eyJWIjoiMC4wLjAwMDAiLCJQIjoiV2luMzIiLCJBTiI6Ik1haWwiLCJXVCI6Mn0%3D%7C3000%7C%7C%7C&sdata=HAZm4uhhP8r6HVKnBqOMq5jbXmgOrHlsPCur9U4JRis%3D&reserved=0
iCapital orgulha-se de ser um Empregador de Igualdade de Oportunidades e Ação Afirmativa. Não discriminamos com base em raça, religião, cor, origem nacional, gênero, orientação sexual, identidade de gênero, idade, status de veterano protegido, status de indivíduo com deficiência ou outras características legalmente protegidas aplicáveis.
Mais oportunidades com um só perfil
Quer aparecer para várias vagas sem repetir todo o processo? Crie seu perfil e seja encontrado pelas empresas que usam a Nort.
Criar meu perfil