#!/bin/bash
set -e

# Uwierzytelnianie w Kaggle API za pomocą zmiennych środowiskowych
export KAGGLE_USERNAME=$KAGGLE_USERNAME
export KAGGLE_KEY=$KAGGLE_KEY

# Pobieranie i rozpakowywanie danych
kaggle datasets download -d iabhishekofficial/mobile-price-classification
unzip -o mobile-price-classification.zip

# Przetwarzanie danych
cut -f $CUT --complement -d, train.csv > mobile-price-classification.csv

# Tworzenie zbioru danych z uwzględnieniem parametru CUTOFF
python3 create_dataset.py $CUTOFF mobile-price-classification.csv > dataset_with_cutoff.csv

# Kompresowanie pliku wynikowego
gzip -c dataset_with_cutoff.csv > output.txt.gz