AWS - Web Crawling

Desenvolvimento de API própria com base em banco de dados relacional (mysql) utilizando minha conta da Amazon Web Services (e vm).
Eu possuo todos os links das fontes, bastando ao programador desenvolver o sistema de web crawling dos dados que eu apontar.
O projeto consiste em desenvolver sistema de scraping histórico e diário de dados das empresas da Bolsa de valores Brasileira E Americana dos principais sites e fontes (************, statusinvest, API B3, Infomoney, Tesouro Direto...)
O desenvolvedor deverá disponibilizar integralmente o código e o sistema pronto para meu uso (pessoal). CONHECIMENTO AWS e LAMBDA ALTAMENTE RECOMENDÁVEL.
O sistema deverá realizar a extração de dados diariamente em horário programado.
Informações para a base de dados e a CRIAÇÃO DE API PRÓPRIA:
- Cadastro das empresas (ticker, nome, setor, subsetor...)
- Dados e indicadores fundamentalistas das ações brasileiras e americanas.
- Dados financeiros (balanço, DRE...)
- Análise Técnica (************ oferece Dia, mês e Ano)
- Dados econômicos (Títulos do Tesouro, Taxa De Juros DI e Selic (e juros americano), títulos e juros americanos, commodities (uma a uma), Inflação, Resultados das bolsas mundiais, Moedas, Índices Setoriais).
Basicamente o scraping deverá apontar para uma base de dados sql no aws (amazon web service) e realizar a rotina de scrap diário de atualização de dados (após alimentar o banco de dados com os dados históricos).
Todas essas tabelas deverão formar uma API (desenvolvedor deverá saber providenciar o endpoint e chave da api e como gerar chaves para terceiros).
O propósito deste projeto é particular.

Este é um projeto inicial de muito mais a se fazer futuramente (espero). O desenvolvedor terá que criar a estrutura dos dados e tabelas na minha conta AWS (Conhecimento de configurações e funcionamento da AWS (Amazon Web Services) é mandatório), em seguida promover o script (robo) de scraping (web crawler) que também deverá ser armazenado o código na minha máquina virtual da aws para funcionamento autonomo do sistema, sem intervencao do desenvolvedor. Depois do scrap dos dados históricos, o script deverá promover a alimentação diária e rotineira de toda base de dados. É Basicamente o desenvolvimento de uma base de dados e de um robo de alimentação de dados, e converter isso em uma API (com endpoint e chave de acesso).