DataEngineeringWithPython:与数据工程相关的各种Python项目 源码

使用Python进行数据工程 此仓库包含使用Python语言以及不同SQL&NoSQL数据库(例如PostgreSQL,Apache Cassandra,SQlite3)的不同项目。 该项目的主要重点是根据项目的性质和用例从不同来源获取数据并将其加载到某些数据库中。 我们将使用一些API连接到数据,并使用Python库和函数对数据进行转换。 使用诸如S3,Redshift,IAM,Glue,EMR之类的AWS服务。 将模式从3NF转换为星形模式,以简化查询并提高优化程度。