Bu projede 3 dakikada bir websitesinden çektiğimiz dataları EC2 ile S3 bucket'a yolladık. Daha sonra RDS üzerinde sql sorguları ile Tanker ve Cargo gemilerini çekerek veri temizleme, veri önişleme aşamalarından sonra KNN ve Random Forest Regressor algoritmaları ile SageMaker'da train ettik. SageMaker'da predict edilen data S3 bucket'a geri atıldı ve daha sonra lambda fonksiyonu ile S3 Bucket trigger oluşturduk ve verileri RDS'e insert ettik. Statik websitesi oluşturup S3 bucket'a yükledik ve yayınladık. RDS'teki verileri alabilmek için de bir lambda fonksiyonu yazdık. RDS'teki verileri alıp statik websitesinde gösterimini yaptık. Böylece Cargo ve Tanker gemileri için bir rota optimizasyonu oluşturmuş olduk.
-
Notifications
You must be signed in to change notification settings - Fork 0
Big Data Query with Mongodb, Data Understanding, Data Visualization, Data PreProcessing(Outlier Detection, LOF, Normalization, Label Encoder), Feature Extraction, Train-Test Split, Model Selection, Parameter Optimization(GridSearchCV), Visualization of the Model Result and Making Predictions
elifftosunn/Ship-Route-Optimization-with-AWS
Folders and files
Name | Name | Last commit message | Last commit date | |
---|---|---|---|---|
Repository files navigation
About
Big Data Query with Mongodb, Data Understanding, Data Visualization, Data PreProcessing(Outlier Detection, LOF, Normalization, Label Encoder), Feature Extraction, Train-Test Split, Model Selection, Parameter Optimization(GridSearchCV), Visualization of the Model Result and Making Predictions
Resources
Stars
Watchers
Forks
Releases
No releases published
Packages 0
No packages published