Word2Vec implemetation
This commit is contained in:
parent
0cf206db5c
commit
ae98c5d9a3
4
.gitignore
vendored
Normal file
4
.gitignore
vendored
Normal file
@ -0,0 +1,4 @@
|
||||
fasttext_100_3_polish.bin*
|
||||
dev-0/out.tsv
|
||||
test-A/out.tsv
|
||||
test-A/expected.tsv
|
||||
558
Word2Vec.ipynb
Normal file
558
Word2Vec.ipynb
Normal file
@ -0,0 +1,558 @@
|
||||
{
|
||||
"cells": [
|
||||
{
|
||||
"cell_type": "markdown",
|
||||
"metadata": {},
|
||||
"source": [
|
||||
"# Word2Vec"
|
||||
]
|
||||
},
|
||||
{
|
||||
"cell_type": "markdown",
|
||||
"metadata": {},
|
||||
"source": [
|
||||
"### Import bibliotek"
|
||||
]
|
||||
},
|
||||
{
|
||||
"cell_type": "code",
|
||||
"execution_count": 28,
|
||||
"metadata": {},
|
||||
"outputs": [],
|
||||
"source": [
|
||||
"from gensim.models import KeyedVectors\n",
|
||||
"from gensim.utils import simple_preprocess\n",
|
||||
"import pandas as pd\n",
|
||||
"import numpy as np\n",
|
||||
"from keras.models import Sequential\n",
|
||||
"from keras.layers import Dense\n",
|
||||
"from sklearn.preprocessing import LabelEncoder"
|
||||
]
|
||||
},
|
||||
{
|
||||
"cell_type": "markdown",
|
||||
"metadata": {},
|
||||
"source": [
|
||||
"### Wczytanie danych"
|
||||
]
|
||||
},
|
||||
{
|
||||
"cell_type": "code",
|
||||
"execution_count": 29,
|
||||
"metadata": {},
|
||||
"outputs": [
|
||||
{
|
||||
"data": {
|
||||
"text/html": [
|
||||
"<div>\n",
|
||||
"<style scoped>\n",
|
||||
" .dataframe tbody tr th:only-of-type {\n",
|
||||
" vertical-align: middle;\n",
|
||||
" }\n",
|
||||
"\n",
|
||||
" .dataframe tbody tr th {\n",
|
||||
" vertical-align: top;\n",
|
||||
" }\n",
|
||||
"\n",
|
||||
" .dataframe thead th {\n",
|
||||
" text-align: right;\n",
|
||||
" }\n",
|
||||
"</style>\n",
|
||||
"<table border=\"1\" class=\"dataframe\">\n",
|
||||
" <thead>\n",
|
||||
" <tr style=\"text-align: right;\">\n",
|
||||
" <th></th>\n",
|
||||
" <th>Text</th>\n",
|
||||
" </tr>\n",
|
||||
" </thead>\n",
|
||||
" <tbody>\n",
|
||||
" <tr>\n",
|
||||
" <th>0</th>\n",
|
||||
" <td>Mindaugas Budzinauskas wierzy w odbudowę formy...</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>1</th>\n",
|
||||
" <td>Przyjmujący reprezentacji Polski wrócił do PGE...</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>2</th>\n",
|
||||
" <td>FEN 9: Zapowiedź walki Róża Gumienna vs Katarz...</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>3</th>\n",
|
||||
" <td>Aleksander Filipiak: Czuję się dobrze w nowym ...</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>4</th>\n",
|
||||
" <td>Victoria Carl i Aleksiej Czerwotkin mistrzami ...</td>\n",
|
||||
" </tr>\n",
|
||||
" </tbody>\n",
|
||||
"</table>\n",
|
||||
"</div>"
|
||||
],
|
||||
"text/plain": [
|
||||
" Text\n",
|
||||
"0 Mindaugas Budzinauskas wierzy w odbudowę formy...\n",
|
||||
"1 Przyjmujący reprezentacji Polski wrócił do PGE...\n",
|
||||
"2 FEN 9: Zapowiedź walki Róża Gumienna vs Katarz...\n",
|
||||
"3 Aleksander Filipiak: Czuję się dobrze w nowym ...\n",
|
||||
"4 Victoria Carl i Aleksiej Czerwotkin mistrzami ..."
|
||||
]
|
||||
},
|
||||
"metadata": {},
|
||||
"output_type": "display_data"
|
||||
},
|
||||
{
|
||||
"data": {
|
||||
"text/html": [
|
||||
"<div>\n",
|
||||
"<style scoped>\n",
|
||||
" .dataframe tbody tr th:only-of-type {\n",
|
||||
" vertical-align: middle;\n",
|
||||
" }\n",
|
||||
"\n",
|
||||
" .dataframe tbody tr th {\n",
|
||||
" vertical-align: top;\n",
|
||||
" }\n",
|
||||
"\n",
|
||||
" .dataframe thead th {\n",
|
||||
" text-align: right;\n",
|
||||
" }\n",
|
||||
"</style>\n",
|
||||
"<table border=\"1\" class=\"dataframe\">\n",
|
||||
" <thead>\n",
|
||||
" <tr style=\"text-align: right;\">\n",
|
||||
" <th></th>\n",
|
||||
" <th>Text</th>\n",
|
||||
" </tr>\n",
|
||||
" </thead>\n",
|
||||
" <tbody>\n",
|
||||
" <tr>\n",
|
||||
" <th>0</th>\n",
|
||||
" <td>ATP Sztokholm: Juergen Zopp wykorzystał szansę...</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>1</th>\n",
|
||||
" <td>Krowicki z reprezentacją kobiet aż do igrzysk ...</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>2</th>\n",
|
||||
" <td>Wielki powrót Łukasza Kubota Odradza się zawsz...</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>3</th>\n",
|
||||
" <td>Marcel Hirscher wygrał ostatni slalom gigant m...</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>4</th>\n",
|
||||
" <td>Polki do Czarnogóry z pełnią zaangażowania. Sy...</td>\n",
|
||||
" </tr>\n",
|
||||
" </tbody>\n",
|
||||
"</table>\n",
|
||||
"</div>"
|
||||
],
|
||||
"text/plain": [
|
||||
" Text\n",
|
||||
"0 ATP Sztokholm: Juergen Zopp wykorzystał szansę...\n",
|
||||
"1 Krowicki z reprezentacją kobiet aż do igrzysk ...\n",
|
||||
"2 Wielki powrót Łukasza Kubota Odradza się zawsz...\n",
|
||||
"3 Marcel Hirscher wygrał ostatni slalom gigant m...\n",
|
||||
"4 Polki do Czarnogóry z pełnią zaangażowania. Sy..."
|
||||
]
|
||||
},
|
||||
"metadata": {},
|
||||
"output_type": "display_data"
|
||||
},
|
||||
{
|
||||
"data": {
|
||||
"text/html": [
|
||||
"<div>\n",
|
||||
"<style scoped>\n",
|
||||
" .dataframe tbody tr th:only-of-type {\n",
|
||||
" vertical-align: middle;\n",
|
||||
" }\n",
|
||||
"\n",
|
||||
" .dataframe tbody tr th {\n",
|
||||
" vertical-align: top;\n",
|
||||
" }\n",
|
||||
"\n",
|
||||
" .dataframe thead th {\n",
|
||||
" text-align: right;\n",
|
||||
" }\n",
|
||||
"</style>\n",
|
||||
"<table border=\"1\" class=\"dataframe\">\n",
|
||||
" <thead>\n",
|
||||
" <tr style=\"text-align: right;\">\n",
|
||||
" <th></th>\n",
|
||||
" <th>Text</th>\n",
|
||||
" </tr>\n",
|
||||
" </thead>\n",
|
||||
" <tbody>\n",
|
||||
" <tr>\n",
|
||||
" <th>0</th>\n",
|
||||
" <td>Mundial 2018. Były reprezentant Anglii trenere...</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>1</th>\n",
|
||||
" <td>Liga Mistrzyń: Podopieczne Kima Rasmussena bli...</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>2</th>\n",
|
||||
" <td>Wyczerpujące treningi biegowe Justyny Kowalczy...</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>3</th>\n",
|
||||
" <td>Mundial 2018. Zagraniczne media zareagowały na...</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>4</th>\n",
|
||||
" <td>BCL. Artur Gronek: Musimy grać twardziej. Pope...</td>\n",
|
||||
" </tr>\n",
|
||||
" </tbody>\n",
|
||||
"</table>\n",
|
||||
"</div>"
|
||||
],
|
||||
"text/plain": [
|
||||
" Text\n",
|
||||
"0 Mundial 2018. Były reprezentant Anglii trenere...\n",
|
||||
"1 Liga Mistrzyń: Podopieczne Kima Rasmussena bli...\n",
|
||||
"2 Wyczerpujące treningi biegowe Justyny Kowalczy...\n",
|
||||
"3 Mundial 2018. Zagraniczne media zareagowały na...\n",
|
||||
"4 BCL. Artur Gronek: Musimy grać twardziej. Pope..."
|
||||
]
|
||||
},
|
||||
"metadata": {},
|
||||
"output_type": "display_data"
|
||||
},
|
||||
{
|
||||
"data": {
|
||||
"text/html": [
|
||||
"<div>\n",
|
||||
"<style scoped>\n",
|
||||
" .dataframe tbody tr th:only-of-type {\n",
|
||||
" vertical-align: middle;\n",
|
||||
" }\n",
|
||||
"\n",
|
||||
" .dataframe tbody tr th {\n",
|
||||
" vertical-align: top;\n",
|
||||
" }\n",
|
||||
"\n",
|
||||
" .dataframe thead th {\n",
|
||||
" text-align: right;\n",
|
||||
" }\n",
|
||||
"</style>\n",
|
||||
"<table border=\"1\" class=\"dataframe\">\n",
|
||||
" <thead>\n",
|
||||
" <tr style=\"text-align: right;\">\n",
|
||||
" <th></th>\n",
|
||||
" <th>Label</th>\n",
|
||||
" </tr>\n",
|
||||
" </thead>\n",
|
||||
" <tbody>\n",
|
||||
" <tr>\n",
|
||||
" <th>0</th>\n",
|
||||
" <td>1</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>1</th>\n",
|
||||
" <td>1</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>2</th>\n",
|
||||
" <td>0</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>3</th>\n",
|
||||
" <td>1</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>4</th>\n",
|
||||
" <td>0</td>\n",
|
||||
" </tr>\n",
|
||||
" </tbody>\n",
|
||||
"</table>\n",
|
||||
"</div>"
|
||||
],
|
||||
"text/plain": [
|
||||
" Label\n",
|
||||
"0 1\n",
|
||||
"1 1\n",
|
||||
"2 0\n",
|
||||
"3 1\n",
|
||||
"4 0"
|
||||
]
|
||||
},
|
||||
"metadata": {},
|
||||
"output_type": "display_data"
|
||||
},
|
||||
{
|
||||
"data": {
|
||||
"text/html": [
|
||||
"<div>\n",
|
||||
"<style scoped>\n",
|
||||
" .dataframe tbody tr th:only-of-type {\n",
|
||||
" vertical-align: middle;\n",
|
||||
" }\n",
|
||||
"\n",
|
||||
" .dataframe tbody tr th {\n",
|
||||
" vertical-align: top;\n",
|
||||
" }\n",
|
||||
"\n",
|
||||
" .dataframe thead th {\n",
|
||||
" text-align: right;\n",
|
||||
" }\n",
|
||||
"</style>\n",
|
||||
"<table border=\"1\" class=\"dataframe\">\n",
|
||||
" <thead>\n",
|
||||
" <tr style=\"text-align: right;\">\n",
|
||||
" <th></th>\n",
|
||||
" <th>Label</th>\n",
|
||||
" </tr>\n",
|
||||
" </thead>\n",
|
||||
" <tbody>\n",
|
||||
" <tr>\n",
|
||||
" <th>0</th>\n",
|
||||
" <td>1</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>1</th>\n",
|
||||
" <td>1</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>2</th>\n",
|
||||
" <td>0</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>3</th>\n",
|
||||
" <td>1</td>\n",
|
||||
" </tr>\n",
|
||||
" <tr>\n",
|
||||
" <th>4</th>\n",
|
||||
" <td>1</td>\n",
|
||||
" </tr>\n",
|
||||
" </tbody>\n",
|
||||
"</table>\n",
|
||||
"</div>"
|
||||
],
|
||||
"text/plain": [
|
||||
" Label\n",
|
||||
"0 1\n",
|
||||
"1 1\n",
|
||||
"2 0\n",
|
||||
"3 1\n",
|
||||
"4 1"
|
||||
]
|
||||
},
|
||||
"metadata": {},
|
||||
"output_type": "display_data"
|
||||
}
|
||||
],
|
||||
"source": [
|
||||
"data_train = pd.read_csv('train/train.tsv', sep=\"\\t\", names=[\"Text\"], usecols=[1])\n",
|
||||
"data_test = pd.read_csv('test-A/in.tsv', sep=\"\\t\", names=[\"Text\"])\n",
|
||||
"data_dev = pd.read_csv('dev-0/in.tsv', sep=\"\\t\", names=[\"Text\"])\n",
|
||||
"\n",
|
||||
"labels_train = pd.read_csv('train/train.tsv', sep='\\t', header=None, names=['Label'], usecols=[0])\n",
|
||||
"labels_dev = pd.read_csv('dev-0/expected.tsv', sep='\\t', header=None, names=['Label'])\n",
|
||||
"\n",
|
||||
"display(data_train.head())\n",
|
||||
"display(data_test.head())\n",
|
||||
"display(data_dev.head())\n",
|
||||
"display(labels_train.head())\n",
|
||||
"display(labels_dev.head())"
|
||||
]
|
||||
},
|
||||
{
|
||||
"cell_type": "markdown",
|
||||
"metadata": {},
|
||||
"source": [
|
||||
"### Załadowanie wektorów Word2Vec"
|
||||
]
|
||||
},
|
||||
{
|
||||
"cell_type": "code",
|
||||
"execution_count": 30,
|
||||
"metadata": {},
|
||||
"outputs": [],
|
||||
"source": [
|
||||
"W2V_model = KeyedVectors.load('fasttext_100_3_polish.bin')"
|
||||
]
|
||||
},
|
||||
{
|
||||
"cell_type": "markdown",
|
||||
"metadata": {},
|
||||
"source": [
|
||||
"### Funkcja przekształcania tekstu na wektory"
|
||||
]
|
||||
},
|
||||
{
|
||||
"cell_type": "code",
|
||||
"execution_count": 31,
|
||||
"metadata": {},
|
||||
"outputs": [],
|
||||
"source": [
|
||||
"def text_to_vector(text, word2vec, vector_size):\n",
|
||||
" words = simple_preprocess(text)\n",
|
||||
" text_vector = np.zeros(vector_size)\n",
|
||||
" word_count = 0\n",
|
||||
" for word in words:\n",
|
||||
" if word in word2vec.wv:\n",
|
||||
" text_vector += word2vec.wv[word]\n",
|
||||
" word_count += 1\n",
|
||||
" if word_count > 0:\n",
|
||||
" text_vector /= word_count\n",
|
||||
" return text_vector"
|
||||
]
|
||||
},
|
||||
{
|
||||
"cell_type": "markdown",
|
||||
"metadata": {},
|
||||
"source": [
|
||||
"### Dostosowanie formatu danych do modelu"
|
||||
]
|
||||
},
|
||||
{
|
||||
"cell_type": "code",
|
||||
"execution_count": 32,
|
||||
"metadata": {},
|
||||
"outputs": [],
|
||||
"source": [
|
||||
"# Zamiana tekstów na wektory\n",
|
||||
"train_vectors = np.array([text_to_vector(text, W2V_model, 100) for text in data_train['Text']])\n",
|
||||
"dev_vectors = np.array([text_to_vector(text, W2V_model, 100) for text in data_dev['Text']])\n",
|
||||
"test_vectors = np.array([text_to_vector(text, W2V_model, 100) for text in data_test['Text']])\n",
|
||||
"\n",
|
||||
"# Zamiana etykiet na liczby\n",
|
||||
"label_encoder = LabelEncoder()\n",
|
||||
"train_labels_enc = label_encoder.fit_transform(labels_train['Label'])\n",
|
||||
"dev_labels_enc = label_encoder.transform(labels_dev['Label'])"
|
||||
]
|
||||
},
|
||||
{
|
||||
"cell_type": "markdown",
|
||||
"metadata": {},
|
||||
"source": [
|
||||
"### Stworzenie modelu"
|
||||
]
|
||||
},
|
||||
{
|
||||
"cell_type": "code",
|
||||
"execution_count": 33,
|
||||
"metadata": {},
|
||||
"outputs": [
|
||||
{
|
||||
"name": "stderr",
|
||||
"output_type": "stream",
|
||||
"text": [
|
||||
"C:\\Users\\nkaro\\AppData\\Roaming\\Python\\Python311\\site-packages\\keras\\src\\layers\\core\\dense.py:86: UserWarning: Do not pass an `input_shape`/`input_dim` argument to a layer. When using Sequential models, prefer using an `Input(shape)` object as the first layer in the model instead.\n",
|
||||
" super().__init__(activity_regularizer=activity_regularizer, **kwargs)\n"
|
||||
]
|
||||
},
|
||||
{
|
||||
"name": "stdout",
|
||||
"output_type": "stream",
|
||||
"text": [
|
||||
"Epoch 1/10\n",
|
||||
"\u001b[1m3067/3067\u001b[0m \u001b[32m━━━━━━━━━━━━━━━━━━━━\u001b[0m\u001b[37m\u001b[0m \u001b[1m4s\u001b[0m 897us/step - accuracy: 0.9072 - loss: 0.2176 - val_accuracy: 0.9563 - val_loss: 0.1158\n",
|
||||
"Epoch 2/10\n",
|
||||
"\u001b[1m3067/3067\u001b[0m \u001b[32m━━━━━━━━━━━━━━━━━━━━\u001b[0m\u001b[37m\u001b[0m \u001b[1m3s\u001b[0m 847us/step - accuracy: 0.9524 - loss: 0.1215 - val_accuracy: 0.9574 - val_loss: 0.1047\n",
|
||||
"Epoch 3/10\n",
|
||||
"\u001b[1m3067/3067\u001b[0m \u001b[32m━━━━━━━━━━━━━━━━━━━━\u001b[0m\u001b[37m\u001b[0m \u001b[1m3s\u001b[0m 858us/step - accuracy: 0.9581 - loss: 0.1080 - val_accuracy: 0.9618 - val_loss: 0.0956\n",
|
||||
"Epoch 4/10\n",
|
||||
"\u001b[1m3067/3067\u001b[0m \u001b[32m━━━━━━━━━━━━━━━━━━━━\u001b[0m\u001b[37m\u001b[0m \u001b[1m3s\u001b[0m 839us/step - accuracy: 0.9610 - loss: 0.1008 - val_accuracy: 0.9648 - val_loss: 0.0949\n",
|
||||
"Epoch 5/10\n",
|
||||
"\u001b[1m3067/3067\u001b[0m \u001b[32m━━━━━━━━━━━━━━━━━━━━\u001b[0m\u001b[37m\u001b[0m \u001b[1m3s\u001b[0m 850us/step - accuracy: 0.9640 - loss: 0.0951 - val_accuracy: 0.9547 - val_loss: 0.1071\n",
|
||||
"Epoch 6/10\n",
|
||||
"\u001b[1m3067/3067\u001b[0m \u001b[32m━━━━━━━━━━━━━━━━━━━━\u001b[0m\u001b[37m\u001b[0m \u001b[1m3s\u001b[0m 872us/step - accuracy: 0.9643 - loss: 0.0928 - val_accuracy: 0.9631 - val_loss: 0.0913\n",
|
||||
"Epoch 7/10\n",
|
||||
"\u001b[1m3067/3067\u001b[0m \u001b[32m━━━━━━━━━━━━━━━━━━━━\u001b[0m\u001b[37m\u001b[0m \u001b[1m3s\u001b[0m 845us/step - accuracy: 0.9654 - loss: 0.0886 - val_accuracy: 0.9659 - val_loss: 0.0911\n",
|
||||
"Epoch 8/10\n",
|
||||
"\u001b[1m3067/3067\u001b[0m \u001b[32m━━━━━━━━━━━━━━━━━━━━\u001b[0m\u001b[37m\u001b[0m \u001b[1m3s\u001b[0m 841us/step - accuracy: 0.9669 - loss: 0.0860 - val_accuracy: 0.9642 - val_loss: 0.0889\n",
|
||||
"Epoch 9/10\n",
|
||||
"\u001b[1m3067/3067\u001b[0m \u001b[32m━━━━━━━━━━━━━━━━━━━━\u001b[0m\u001b[37m\u001b[0m \u001b[1m3s\u001b[0m 853us/step - accuracy: 0.9666 - loss: 0.0856 - val_accuracy: 0.9642 - val_loss: 0.0855\n",
|
||||
"Epoch 10/10\n",
|
||||
"\u001b[1m3067/3067\u001b[0m \u001b[32m━━━━━━━━━━━━━━━━━━━━\u001b[0m\u001b[37m\u001b[0m \u001b[1m3s\u001b[0m 841us/step - accuracy: 0.9676 - loss: 0.0821 - val_accuracy: 0.9666 - val_loss: 0.0883\n"
|
||||
]
|
||||
},
|
||||
{
|
||||
"data": {
|
||||
"text/plain": [
|
||||
"<keras.src.callbacks.history.History at 0x1d1185b4b50>"
|
||||
]
|
||||
},
|
||||
"execution_count": 33,
|
||||
"metadata": {},
|
||||
"output_type": "execute_result"
|
||||
}
|
||||
],
|
||||
"source": [
|
||||
"# Stworzenie modelu\n",
|
||||
"model = Sequential()\n",
|
||||
"model.add(Dense(128, input_dim=100, activation='relu'))\n",
|
||||
"model.add(Dense(64, activation='relu'))\n",
|
||||
"model.add(Dense(1, activation='sigmoid'))\n",
|
||||
"\n",
|
||||
"model.compile(loss='binary_crossentropy', optimizer='adam', metrics=['accuracy'])\n",
|
||||
"\n",
|
||||
"# Trening modelu\n",
|
||||
"model.fit(train_vectors, train_labels_enc, epochs=10, batch_size=32, validation_data=(dev_vectors, dev_labels_enc))"
|
||||
]
|
||||
},
|
||||
{
|
||||
"cell_type": "markdown",
|
||||
"metadata": {},
|
||||
"source": [
|
||||
"### Predykcja i zapis danych wyjścowych"
|
||||
]
|
||||
},
|
||||
{
|
||||
"cell_type": "code",
|
||||
"execution_count": 34,
|
||||
"metadata": {},
|
||||
"outputs": [
|
||||
{
|
||||
"name": "stdout",
|
||||
"output_type": "stream",
|
||||
"text": [
|
||||
"\u001b[1m171/171\u001b[0m \u001b[32m━━━━━━━━━━━━━━━━━━━━\u001b[0m\u001b[37m\u001b[0m \u001b[1m1s\u001b[0m 4ms/step\n",
|
||||
"\u001b[1m171/171\u001b[0m \u001b[32m━━━━━━━━━━━━━━━━━━━━\u001b[0m\u001b[37m\u001b[0m \u001b[1m0s\u001b[0m 638us/step\n"
|
||||
]
|
||||
}
|
||||
],
|
||||
"source": [
|
||||
"# Predykcje dla danych walidacyjnych\n",
|
||||
"dev_predictions = model.predict(dev_vectors)\n",
|
||||
"dev_predictions = (dev_predictions > 0.5).astype(int)\n",
|
||||
"\n",
|
||||
"# Predykcje dla danych testowych\n",
|
||||
"test_predictions = model.predict(test_vectors)\n",
|
||||
"test_predictions = (test_predictions > 0.5).astype(int)\n",
|
||||
"\n",
|
||||
"# Zapisanie wyników do plików\n",
|
||||
"pd.DataFrame(dev_predictions).to_csv('dev-0/out.tsv', sep='\\t', index=False, header=False)\n",
|
||||
"pd.DataFrame(test_predictions).to_csv('test-A/out.tsv', sep='\\t', index=False, header=False)"
|
||||
]
|
||||
}
|
||||
],
|
||||
"metadata": {
|
||||
"kernelspec": {
|
||||
"display_name": "Python 3",
|
||||
"language": "python",
|
||||
"name": "python3"
|
||||
},
|
||||
"language_info": {
|
||||
"codemirror_mode": {
|
||||
"name": "ipython",
|
||||
"version": 3
|
||||
},
|
||||
"file_extension": ".py",
|
||||
"mimetype": "text/x-python",
|
||||
"name": "python",
|
||||
"nbconvert_exporter": "python",
|
||||
"pygments_lexer": "ipython3",
|
||||
"version": "3.11.2"
|
||||
}
|
||||
},
|
||||
"nbformat": 4,
|
||||
"nbformat_minor": 2
|
||||
}
|
||||
5452
dev-0/out.tsv
5452
dev-0/out.tsv
File diff suppressed because it is too large
Load Diff
@ -1980,7 +1980,7 @@ Piotrcovia rozpoczęła od dwóch wygranych Szczypiornistki Piotrcovii odniosły
|
||||
Primera Division: sześć goli Realu Madryt. Był efektowny i bezlitosny dla Celty Vigo Real Madryt odniósł zwycięstwo 6:0 z Celtą Vigo w przedostatniej kolejce Primera Division. Pomimo nieobecności Cristiano Ronaldo finalista Ligi Mistrzów poradził sobie bez problemu z przeciwnikiem.
|
||||
Akcja ratunkowa pod Nanga Parbat zakończona. Wielicki: Ratownicy są w Skardu Uratowali Elisabeth Revol, nie udało się pomóc Tomaszowi Mackiewiczowi. Wiemy już, że polscy himalaiści, którzy dokonali niebywałego wyczynu w ostatnich dniach, wrócili już do bazy pod K2.
|
||||
Symbol Stali odchodzi. Michał Chodara pożegna się z Mielcem Dobiegła końca ośmioletnia przygoda Michała Chodary ze Stalą Mielec. Były reprezentant Polski nie zagra w zespole w sezonie 2018/2019.
|
||||
Charles Leclerc odrzuca pochwały. "Staram się ich nie słuchać" Od początku sezonu wielu ekspertów chwali jazdę Charlesa Leclerca. Młody \ Monakijczyk spokojnie podchodzi do takich opinii. - Staram się ich nie słuchać - twierdzi kierowca Alfa Romeo Sauber.
|
||||
Charles Leclerc odrzuca pochwały. "Staram się ich nie słuchać" Od początku sezonu wielu ekspertów chwali jazdę Charlesa Leclerca. Młody Monakijczyk spokojnie podchodzi do takich opinii. - Staram się ich nie słuchać - twierdzi kierowca Alfa Romeo Sauber.
|
||||
US Open: Stan Wawrinka rywalem Juana Martina del Potro. Kei Nishikori lepszy od Ivo Karlovicia Stan Wawrinka pokonał Ilję Marczenkę 6:4, 6:1, 6:7(5), 6:3 i w środowym ćwierćfinale US Open 2016 spotka się z Juanem Martinem del Potro. W 1/4 finału znalazł się także Kei Nishikori, który zwyciężył Ivo Karlovicia 6:3, 6:4, 7:6(4).
|
||||
Amerykanin wyrzucony z zespołu ze skutkiem natychmiastowym. Powodem niesportowe zachowanie Trident Motorsport ze skutkiem natychmiastowym zakończył współpracę z Santino Ferruccim. O młodym kierowcy zrobiło się głośno, gdy podczas ostatniego wyścigu Formuły 2 celowo wjechał w kolegę z zespołu i wyeliminował go z rywalizacji.
|
||||
Kolejne osłabienie PSG? Kylian Mbappe ma problem z kostką Kylian Mbappe narzeka na uraz kostki w prawej nodze. Przypomnijmy, iż wcześniej kontuzji doznał Neymar, który na pewno nie zagra z Realem Madryt.
|
||||
@ -5196,7 +5196,7 @@ Mercedes wściekły po porażce w Australii. "Pokonały nas nowe opony" Broniąc
|
||||
Ostrovia - MTS. Jednostronny mecz w Ostrowie. MTS rozbity w kwadrans Pogrom w Ostrowie Wielkopolskim. Prowadzona przez Krzysztofa Przybylskiego Ostrovia w sobotnim spotkaniu 2. kolejki I ligi mężczyzn gr. B pewnie pokonała MTS Chrzanów 39:32 (22:13). Mecz rozstrzygnięty był już po kwadransie.
|
||||
MŚ 2017 kobiet: półfinał nie dla Czeszek. Holandia gra dalej Waleczne Czeszki za burtą Mistrzostw Świata 2017 piłkarek ręcznych. Holandia wytrzymała wojnę nerwów (30:26) i zawalczy o przepustkę do gry o złoto ze zwycięzcą pary Norwegia - Rosja.
|
||||
Liga Mistrzów: porażka w Paryżu. PGE VIVE odpadło z rozgrywek Szczypiorniści PGE VIVE ponieśli drugą porażkę w ćwierćfinale Ligi Mistrzów i nie awansowali do najlepszej czwórki rozgrywek. Kielczanie we Francji przegrali z Paris Saint-Germain HB 32:35.
|
||||
PGE Skra Bełchatów najlepsza w Gostycynie. Kontuzja przyjmującego Trefla Gdańsk Siatkarze PGE Skry Bełchatów zwyciężyli w turnieju towarzyskim rozgrywanym w Gostycynie. Podopieczni Roberto Piazzy w finale zmagań okazali się lepsi od niemieckiego\ Netzhoppers KW zwyciężając po tie-breaku.
|
||||
PGE Skra Bełchatów najlepsza w Gostycynie. Kontuzja przyjmującego Trefla Gdańsk Siatkarze PGE Skry Bełchatów zwyciężyli w turnieju towarzyskim rozgrywanym w Gostycynie. Podopieczni Roberto Piazzy w finale zmagań okazali się lepsi od niemieckiego Netzhoppers KW zwyciężając po tie-breaku.
|
||||
Serie A: Cucine Lube pójdzie za ciosem? Drugi mecz wielkiego finału Lega Pallavolo. Tym razem w Trydencie Po bolesnej porażce 0:3 w pierwszym meczu finału Lega Pallavolo, Diatec stoi pod ścianą. Jeśli w najbliższy czwartek znów przegra z Cucine Lube, szanse na scudetto będzie miał już tylko iluzoryczne. Na żywo od 20.30 w Sportklubie.
|
||||
IHF Super Globe: FC Barcelona Kamila Syprzaka w finale! Zwycięzca Ligi Mistrzów za burtą FC Barcelona z Kamilem Syprzakiem w składzie zagra w finale nieoficjalnych Klubowych Mistrzostw Świata. Hiszpanie pokonali Vardar Skopje 32:29 (15:12). W drugim półfinale obrońca trofeum - Fuesche Berlin zagra z gospodarzem turnieju Al Saad.
|
||||
Maciej Kot o upadku Richarda Freitaga. "Według mnie to była jego wina" - Według mnie była to wina skoczka - mówi Maciej Kot o poważnym upadku Richarda Freitaga w 1. serii konkursu w Innsbrucku. Polski skoczek tłumaczy, jaki błąd popełnił jego niemiecki kolega i dodaje, że ściska za niego kciuki.
|
||||
|
||||
|
Can't render this file because it is too large.
|
5447
test-A/out.tsv
Normal file
5447
test-A/out.tsv
Normal file
File diff suppressed because it is too large
Load Diff
98132
train/train.tsv
Normal file
98132
train/train.tsv
Normal file
File diff suppressed because it is too large
Load Diff
Loading…
Reference in New Issue
Block a user