base line for domain name binarizier and linear SVC.ipynb

{
 "cells": [
  {
   "cell_type": "code",
   "execution_count": 16,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [],
   "source": [
    "from urllib import parse\n",
    "\n",
    "import numpy as np\n",
    "import pandas as pd\n",
    "from sklearn.svm import LinearSVC\n",
    "from sklearn.pipeline import Pipeline\n",
    "from sklearn.preprocessing import LabelBinarizer\n",
    "from sklearn.model_selection import train_test_split"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 17,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [],
   "source": [
    "df = pd.read_excel(\"data/FN_Training_Set.xlsx\")"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 18,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [
    {
     "data": {
      "text/plain": [
       "Index(['fake_news_score', 'click_bait_score', 'Content Title', 'Content Url',\n",
       "       'Content Published Time', 'Content'],\n",
       "      dtype='object')"
      ]
     },
     "execution_count": 18,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "df.columns"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 19,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [],
   "source": [
    "df['domain'] = df['Content Url'].astype(str).apply(lambda t: parse.urlparse(t).netloc)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 20,
   "metadata": {
    "collapsed": true,
    "deletable": true,
    "editable": true
   },
   "outputs": [],
   "source": [
    "train, test = train_test_split(df, test_size=0.1, random_state=42)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 21,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [
    {
     "data": {
      "text/plain": [
       "LabelBinarizer(neg_label=0, pos_label=1, sparse_output=False)"
      ]
     },
     "execution_count": 21,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "binarizer = LabelBinarizer()\n",
    "binarizer.fit(df['domain'])"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 22,
   "metadata": {
    "collapsed": true,
    "deletable": true,
    "editable": true
   },
   "outputs": [],
   "source": [
    "df_train, df_test = train_test_split(df, test_size=0.1, random_state=42)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 23,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [],
   "source": [
    "x_train = binarizer.transform(df_train['domain'])\n",
    "x_test = binarizer.transform(df_test['domain'])"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 24,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [
    {
     "data": {
      "text/plain": [
       "LinearSVC(C=1.0, class_weight=None, dual=True, fit_intercept=True,\n",
       "     intercept_scaling=1, loss='squared_hinge', max_iter=1000,\n",
       "     multi_class='ovr', penalty='l2', random_state=None, tol=0.0001,\n",
       "     verbose=0)"
      ]
     },
     "execution_count": 24,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "clf = LinearSVC()\n",
    "clf.fit(x_train, df_train.click_bait_score)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 25,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [
    {
     "data": {
      "text/plain": [
       "0.89007092198581561"
      ]
     },
     "execution_count": 25,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "clf.score(x_test, df_test.click_bait_score)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {
    "collapsed": true,
    "deletable": true,
    "editable": true
   },
   "outputs": [],
   "source": []
  },
  {
   "cell_type": "code",
   "execution_count": 26,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [
    {
     "data": {
      "text/plain": [
       "LinearSVC(C=1.0, class_weight=None, dual=True, fit_intercept=True,\n",
       "     intercept_scaling=1, loss='squared_hinge', max_iter=1000,\n",
       "     multi_class='ovr', penalty='l2', random_state=None, tol=0.0001,\n",
       "     verbose=0)"
      ]
     },
     "execution_count": 26,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "clf = LinearSVC()\n",
    "clf.fit(x_train, df_train.fake_news_score)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 27,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [
    {
     "data": {
      "text/plain": [
       "0.89007092198581561"
      ]
     },
     "execution_count": 27,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "clf.score(x_test, df_test.fake_news_score)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 28,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [
    {
     "data": {
      "text/plain": [
       "((2533, 7), (282, 7))"
      ]
     },
     "execution_count": 28,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "df_train.shape, df_test.shape"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 29,
   "metadata": {
    "collapsed": true,
    "deletable": true,
    "editable": true
   },
   "outputs": [],
   "source": [
    "# Check which are correct and wrong"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 30,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [],
   "source": [
    "df_test = df_test.copy()\n",
    "df_test['correct'] = (clf.predict(x_test) == df_test.fake_news_score)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 31,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [
    {
     "data": {
      "text/html": [
       "<div>\n",
       "<table border=\"1\" class=\"dataframe\">\n",
       "  <thead>\n",
       "    <tr style=\"text-align: right;\">\n",
       "      <th></th>\n",
       "      <th>fake_news_score</th>\n",
       "      <th>click_bait_score</th>\n",
       "      <th>Content Title</th>\n",
       "      <th>Content Url</th>\n",
       "      <th>Content Published Time</th>\n",
       "      <th>Content</th>\n",
       "      <th>domain</th>\n",
       "      <th>correct</th>\n",
       "    </tr>\n",
       "  </thead>\n",
       "  <tbody>\n",
       "    <tr>\n",
       "      <th>450</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Екстрасенс предрече Трета световна война</td>\n",
       "      <td>http://bulbox.net/regioni-haskovo/5600045/</td>\n",
       "      <td>2017-04-19 17:30:00</td>\n",
       "      <td>Според екстрасенса Хорасио Вийегас, който прав...</td>\n",
       "      <td>bulbox.net</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1174</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Предсказанията за 2017-та година на „Спящия пр...</td>\n",
       "      <td>http://vchas.bg/321112/</td>\n",
       "      <td>2017-03-11 12:12:00</td>\n",
       "      <td>Според Кейси Трета световна война няма да има,...</td>\n",
       "      <td>vchas.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2425</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Нямо 6-годишно момченце проговори на гроба на ...</td>\n",
       "      <td>http://www.novini.bg/news/397523-нямо-6-годишн...</td>\n",
       "      <td>2016-12-22 14:32:00</td>\n",
       "      <td>Дете проговори на гроба на българската ясновид...</td>\n",
       "      <td>www.novini.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2665</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Извинявам се, че нарекох колежките \"овчедушни\"</td>\n",
       "      <td>http://www.blitz.bg/sport/gimnastika/neshka-ro...</td>\n",
       "      <td>2016-11-30 12:51:00</td>\n",
       "      <td>Нешка Робева прояви мъдрост и показа, че има ж...</td>\n",
       "      <td>www.blitz.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1505</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>УТРЕ Е СВ. ВАЛЕНТИН, НО НЕ БЪДЕТЕ ОВЦЕ! НЕ ИСК...</td>\n",
       "      <td>http://novinite711.com/noa/28111</td>\n",
       "      <td>2017-02-13 20:49:00</td>\n",
       "      <td>Отново сме в това време от годината, когато чо...</td>\n",
       "      <td>novinite711.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2248</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Пророчества вещаят апокалипсис през 2017 г.</td>\n",
       "      <td>http://www.168chasa.bg/article/5975927</td>\n",
       "      <td>2017-01-07 13:14:00</td>\n",
       "      <td>Както всяка година, и през новата 2017-а не ли...</td>\n",
       "      <td>www.168chasa.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2720</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>За сегашното положение и настъпващите промени</td>\n",
       "      <td>https://anonybulgaria.wordpress.com/2016/11/28...</td>\n",
       "      <td>2016-11-28 13:34:00</td>\n",
       "      <td>Този анализ няма за цел да даде чисти доказате...</td>\n",
       "      <td>anonybulgaria.wordpress.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>677</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>2017-а носи природни катаклизми, атентати и ог...</td>\n",
       "      <td>https://novinite.eu/astrolozi-preduprezhdavat-...</td>\n",
       "      <td>2017-04-08 22:06:00</td>\n",
       "      <td>2017-та година ще бъде много труден период за ...</td>\n",
       "      <td>novinite.eu</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1103</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>РУСКИ МЕДИИ ГРЪМНАХА С НАЙ-СТРОГО ПАЗЕНАТА ТАЙ...</td>\n",
       "      <td>http://bulgaria365.info/?p=282848</td>\n",
       "      <td>2017-03-15 00:38:00</td>\n",
       "      <td>Baнгa e poдилa cин, ĸoгaтo e билa eдвa нa 17 г...</td>\n",
       "      <td>bulgaria365.info</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2321</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>ВСИЧКИ ВПЕРИХА В ПОГЛЕД! ИЗТЕКОХА НОВИ РАЗКРИТ...</td>\n",
       "      <td>http://vchas.bg/304897/</td>\n",
       "      <td>2017-01-02 13:51:00</td>\n",
       "      <td>Внучето на премиера в оставка Бойко Борисов се...</td>\n",
       "      <td>vchas.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1550</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Сашка Братанова: Да съм на сцената – това е, к...</td>\n",
       "      <td>http://bnr.bg/post/100794907</td>\n",
       "      <td>2017-02-10 14:05:00</td>\n",
       "      <td>„Ние, вие и аз“ е моноспектакъл, изграден върх...</td>\n",
       "      <td>bnr.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2033</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>ГЕРБ и БСП ще се самоубият, ако направят коалиция</td>\n",
       "      <td>http://epicenter.bg/article/Zhivko-Georgiev--G...</td>\n",
       "      <td>2017-01-17 09:52:00</td>\n",
       "      <td>Какви са възможните коалиции в парламента след...</td>\n",
       "      <td>epicenter.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>415</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>За американските партии и марионетката Тръмп</td>\n",
       "      <td>http://www.glas.bg/586513/za-amerikanskite-par...</td>\n",
       "      <td>2017-04-21 18:31:00</td>\n",
       "      <td>През последните дни прочетох немалко статии за...</td>\n",
       "      <td>www.glas.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1127</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Разтърсваща тайна: Ванга е родила дете на 17 г...</td>\n",
       "      <td>http://struma.bg/разтърсваща-тайна-ванга-е-род...</td>\n",
       "      <td>2017-03-14 18:16:00</td>\n",
       "      <td>Baнгa e poдилa cин, ĸoгaтo e билa eдвa нa 17 г...</td>\n",
       "      <td>struma.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1352</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Здраве/Красота /Спа at Тихомир Първанов терапевт</td>\n",
       "      <td>https://allevents.in/sofia/Здраве-Красота-Спа/...</td>\n",
       "      <td>2017-02-26 05:28:00</td>\n",
       "      <td>Матинето е време, в което се срещаш с приятели...</td>\n",
       "      <td>allevents.in</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1775</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Доналд Тръмп нападна „ястребите”: Фокусирайте ...</td>\n",
       "      <td>http://www.pan.bg/view_article-59-370669-Donal...</td>\n",
       "      <td>2017-01-31 14:04:00</td>\n",
       "      <td>Американският президент Доналд Тръмп с остри к...</td>\n",
       "      <td>www.pan.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>354</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Неолиберални тенденции: Имаме си нови параноиц...</td>\n",
       "      <td>http://www.glas.bg/596908/neoliberalni-tendenc...</td>\n",
       "      <td>2017-04-27 18:25:00</td>\n",
       "      <td>От профила на Димитър Самодумов, Фейсбук:Забел...</td>\n",
       "      <td>www.glas.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2487</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>ТАЙНИТЕ ПРОТОКОЛИ | The Bulgarian Times</td>\n",
       "      <td>http://bultimes.com/tajnite-protokoli/</td>\n",
       "      <td>2016-12-15 20:20:00</td>\n",
       "      <td>Ако искате да разсърдите хората, лъжете. Ако ж...</td>\n",
       "      <td>bultimes.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2779</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Турция, бежанската криза и предсказанието на б...</td>\n",
       "      <td>http://www.dailypress.bg/турция-бежанската-кри...</td>\n",
       "      <td>2016-11-22 14:07:00</td>\n",
       "      <td>Секретна служба в СССР събирала информация от ...</td>\n",
       "      <td>www.dailypress.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1494</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Следващата световна война ще бъде като Първа с...</td>\n",
       "      <td>http://fascindoo.blog.bg/politika/2017/02/15/s...</td>\n",
       "      <td>2017-02-15 10:17:00</td>\n",
       "      <td>Дали светът наистина е на прага на евентуална ...</td>\n",
       "      <td>fascindoo.blog.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>194</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Неизвестното значение на най-известните символи</td>\n",
       "      <td>http://novini24online.com/jba/112041</td>\n",
       "      <td>2017-05-05 20:35:00</td>\n",
       "      <td>Символите и знаците съпътстват човечеството от...</td>\n",
       "      <td>novini24online.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1728</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Слава Севрюкова предрекла нещо много важно за ...</td>\n",
       "      <td>http://bulgaria365.info/?p=262472</td>\n",
       "      <td>2017-02-01 19:12:00</td>\n",
       "      <td>Изследователят на българските пророци , Христо...</td>\n",
       "      <td>bulgaria365.info</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2091</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Ново разкритие за тайната на Людмила Живкова и...</td>\n",
       "      <td>http://www.regiona.bg/index.php/ljubopitno/ite...</td>\n",
       "      <td>2017-01-14 13:09:00</td>\n",
       "      <td>Звездна карта пази ключа за мистериозна гробни...</td>\n",
       "      <td>www.regiona.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>506</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Протойерей Димчо Колев оглави празничното бого...</td>\n",
       "      <td>http://focus-radio.net/протойерей-димчо-колев-...</td>\n",
       "      <td>2017-04-16 17:02:00</td>\n",
       "      <td>Благоевград. Протойерей Димчо Колев оглави пра...</td>\n",
       "      <td>focus-radio.net</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1511</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Сензация! Неизвестен правнук на Распутин се из...</td>\n",
       "      <td>http://toppresa.com/107598/сензация-неизвестен...</td>\n",
       "      <td>2017-02-13 09:12:00</td>\n",
       "      <td>Распутин срещу Ванга, кой от двамата е умеел д...</td>\n",
       "      <td>toppresa.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1580</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Главният стратег на Тръмп смята, че се задава ...</td>\n",
       "      <td>http://bultimes.com/glavniyat-strateg-na-tramp...</td>\n",
       "      <td>2017-02-09 16:13:00</td>\n",
       "      <td>Историк твърди, че Стив Банън многократно се е...</td>\n",
       "      <td>bultimes.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>962</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Тази събота е Благовещение, един от най‐големи...</td>\n",
       "      <td>http://www.blagoevgrad.eu/tazi-sbota-e-blagove...</td>\n",
       "      <td>2017-03-23 08:24:00</td>\n",
       "      <td>На 25 март се чества Благовещение. По традиция...</td>\n",
       "      <td>www.blagoevgrad.eu</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1621</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Ванга каза, че костите на Левски са в … – Нови...</td>\n",
       "      <td>http://berbim.info/?p=112493</td>\n",
       "      <td>2017-02-07 00:24:00</td>\n",
       "      <td>„Виждам, че Николай Хайтов дири кокалите на Ле...</td>\n",
       "      <td>berbim.info</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>867</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Пророчицата с рентгенови очи Момера Пенчева: Б...</td>\n",
       "      <td>http://velikabulgaria.eu/пророчицата-с-рентген...</td>\n",
       "      <td>2017-03-25 22:26:00</td>\n",
       "      <td>„Ти не си екстрасенс, ти се лечител, не се отч...</td>\n",
       "      <td>velikabulgaria.eu</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1849</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Феномен с лоша прогноза за България и света! К...</td>\n",
       "      <td>http://vchas.net/310987/</td>\n",
       "      <td>2017-01-27 09:12:00</td>\n",
       "      <td>Феноменът Божидар Караджов накара зрителите на...</td>\n",
       "      <td>vchas.net</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>...</th>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1565</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Людмила Живкова скочила от блок, твърди бодига...</td>\n",
       "      <td>http://plovdivmedia.com/117426.html</td>\n",
       "      <td>2017-02-09 22:48:00</td>\n",
       "      <td>PlovdivMedia - Людмила Живкова скочила от блок...</td>\n",
       "      <td>plovdivmedia.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>941</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>6 мъдри мисли от баба Ванга</td>\n",
       "      <td>https://www.actualno.com/curious/6-mydri-misli...</td>\n",
       "      <td>2017-03-24 13:50:00</td>\n",
       "      <td>Вангелия Пандева Гущерова е по-известна като В...</td>\n",
       "      <td>www.actualno.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2289</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Посланикът на Русия посети къща-музей “Ванга”</td>\n",
       "      <td>http://petrichnews.info/2017/01/04/посланикът-...</td>\n",
       "      <td>2017-01-04 14:57:00</td>\n",
       "      <td>Посланикът на Русия в България Анатолий Анатол...</td>\n",
       "      <td>petrichnews.info</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1435</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Парламентарни избори 2017</td>\n",
       "      <td>http://www.bg-mamma.com/index.php?PHPSESSID=bc...</td>\n",
       "      <td>2017-02-19 12:15:00</td>\n",
       "      <td>Цитат на: Куркума в нд, 19 фев 2017, 12:02Пред...</td>\n",
       "      <td>www.bg-mamma.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1670</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Истерия в Англия за края на света, предсказан ...</td>\n",
       "      <td>http://toppresa.com/106415/истерия-в-англия-за...</td>\n",
       "      <td>2017-02-03 15:39:00</td>\n",
       "      <td>Истерия в Англия за края на света, предсказан ...</td>\n",
       "      <td>toppresa.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>964</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Играете ли руска рулетка с детето си?</td>\n",
       "      <td>http://www.webcafe.bg/id_1112384990_Igraete_li...</td>\n",
       "      <td>2017-03-22 20:20:00</td>\n",
       "      <td>„Страх ме е от болестите, но от ваксините още ...</td>\n",
       "      <td>www.webcafe.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2168</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Западът живее в постоянен ужас! – Политиката –...</td>\n",
       "      <td>http://politikata.net/259747/</td>\n",
       "      <td>2017-01-09 11:07:00</td>\n",
       "      <td>Светът балансира опасно на границата на Трета ...</td>\n",
       "      <td>politikata.net</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2338</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>КАКВА ЩЕ БЪДЕ 2017 Г., СПОРЕД НОСТРАДАМУС</td>\n",
       "      <td>http://www.ndt1.com/article.php/20161231182257296</td>\n",
       "      <td>2016-12-31 18:42:00</td>\n",
       "      <td>Нострадамус е един от най-известните пророци и...</td>\n",
       "      <td>www.ndt1.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2162</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Илюминати предизвикали смъртта на Джордж Майкъ...</td>\n",
       "      <td>https://novinite.eu/ilyuminati-predizvikali-sm...</td>\n",
       "      <td>2017-01-09 11:43:00</td>\n",
       "      <td>Смъртта на Джордж Майкъл, Кари Фишър и Деби Ре...</td>\n",
       "      <td>novinite.eu</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2037</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Социолог: ГЕРБ и БСП ще се самоубият, ако напр...</td>\n",
       "      <td>http://www.blitz.bg/obshtestvo/intervyu/sotsio...</td>\n",
       "      <td>2017-01-17 08:43:00</td>\n",
       "      <td>Какви са възможните коалиции в парламента след...</td>\n",
       "      <td>www.blitz.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1037</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Руски медии: Ванга е родила дете на 17</td>\n",
       "      <td>http://www.zajenata.bg/руски-медии-ванга-е-род...</td>\n",
       "      <td>2017-03-20 12:14:00</td>\n",
       "      <td>Beлиĸaтa пpopoчицa Baнгa e cтaнaлa мaйĸa. Toвa...</td>\n",
       "      <td>www.zajenata.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>233</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Велизар Енчев - най-неморалният кабинет за тез...</td>\n",
       "      <td>http://www.dimitrovgrad.bgvesti.net/news/42625...</td>\n",
       "      <td>2017-05-04 09:21:00</td>\n",
       "      <td>Велизар Енчев и проф. Божидар Димитров коменти...</td>\n",
       "      <td>www.dimitrovgrad.bgvesti.net</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1822</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Тръмп призова двама известни сенатори да не по...</td>\n",
       "      <td>https://novinite.eu/tramp-prizova-dvama-izvest...</td>\n",
       "      <td>2017-01-30 08:18:00</td>\n",
       "      <td>Сенаторите Джон Маккейн и Линдзи Греъм трябва ...</td>\n",
       "      <td>novinite.eu</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1226</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Трета световна война - от Азия ли ще започне?</td>\n",
       "      <td>http://e-novinar.com/news/5225157.html</td>\n",
       "      <td>2017-03-07 12:15:00</td>\n",
       "      <td>NaN</td>\n",
       "      <td>e-novinar.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1263</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Блогът на Ник :: Пет неща, които не знаем за Т...</td>\n",
       "      <td>http://nikikm.blog.bg/politika/2017/03/03/pet-...</td>\n",
       "      <td>2017-03-03 18:18:00</td>\n",
       "      <td>Пет неща, които не знаем за Трети март Лъвът н...</td>\n",
       "      <td>nikikm.blog.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>999</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Тайната на Дейвид Рокфелер - любовта към живота</td>\n",
       "      <td>http://woman.hotnews.bg/n/tajnata-na-dejvid-ro...</td>\n",
       "      <td>2017-03-21 18:11:00</td>\n",
       "      <td>Вчера на 101 години от този свят си отиде най-...</td>\n",
       "      <td>woman.hotnews.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1748</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Забравеният завет на Ванга, който цери и най-с...</td>\n",
       "      <td>http://lifebg.net/175921/</td>\n",
       "      <td>2017-02-01 09:46:00</td>\n",
       "      <td>Веднъж попитали Ванга, когато човечеството ще ...</td>\n",
       "      <td>lifebg.net</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>495</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Ванга - Какво ни завеща, защо не я разбрахме н...</td>\n",
       "      <td>http://chujdozemec.com/любопитно/цитати-мъдрос...</td>\n",
       "      <td>2017-04-17 10:10:00</td>\n",
       "      <td>/24.12.1981 г./1. След 1990 г. много градове и...</td>\n",
       "      <td>chujdozemec.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>457</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Какво правим ако завият сирените?</td>\n",
       "      <td>http://www.bg-mamma.com/index.php?PHPSESSID=bc...</td>\n",
       "      <td>2017-04-19 16:01:00</td>\n",
       "      <td>Цитат на: -veni- в ср, 19 апр 2017, 16:00Ванга...</td>\n",
       "      <td>www.bg-mamma.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>803</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Милиардерът, който не отказва заеми</td>\n",
       "      <td>http://www.webcafe.bg/webcafe/svyat/id_1758822...</td>\n",
       "      <td>2017-03-30 17:37:00</td>\n",
       "      <td>Преди няколко години френският държавен телеко...</td>\n",
       "      <td>www.webcafe.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>903</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Днес е един от най-великите християнски празни...</td>\n",
       "      <td>http://newsbp.com/Днес-е-един-от-най-великите-...</td>\n",
       "      <td>2017-03-25 09:06:00</td>\n",
       "      <td>Днес православната църква отбеляза Благовещени...</td>\n",
       "      <td>newsbp.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>767</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Баба Ванга е помогнала на стотици хора да осла...</td>\n",
       "      <td>http://berbim.info/?p=247078</td>\n",
       "      <td>2017-04-03 19:58:00</td>\n",
       "      <td>След нейната смърт рецептата се запазила и про...</td>\n",
       "      <td>berbim.info</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>528</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Chemtrails HAARP (химически следи в небето и Х...</td>\n",
       "      <td>http://xcombg.net/index.php?topic=15.msg45598#...</td>\n",
       "      <td>2017-04-16 01:59:00</td>\n",
       "      <td>Дихидроген моноксид се сипе в момента над Бург...</td>\n",
       "      <td>xcombg.net</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1850</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Феномен с лоша прогноза за България и света! К...</td>\n",
       "      <td>http://vchas.bg/310987/</td>\n",
       "      <td>2017-01-27 08:28:00</td>\n",
       "      <td>Феноменът Божидар Караджов накара зрителите на...</td>\n",
       "      <td>vchas.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2410</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Легендата се потвърди! Истинско чудо с нямо де...</td>\n",
       "      <td>http://novinite711.com/noa/21700</td>\n",
       "      <td>2016-12-24 11:00:00</td>\n",
       "      <td>Дете проговори на гроба на българската ясновид...</td>\n",
       "      <td>novinite711.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1036</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Руски медии: Ванга е родила дете на 17 | Vchas...</td>\n",
       "      <td>http://vchas.net/323041/</td>\n",
       "      <td>2017-03-20 12:26:00</td>\n",
       "      <td>Beлиĸaтa пpopoчицa Baнгa e cтaнaлa мaйĸa. Toвa...</td>\n",
       "      <td>vchas.net</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>610</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Last Minute за Великден в Петрич! 2 нощувки съ...</td>\n",
       "      <td>http://fact.bg/velikden-v-petrich-086zku</td>\n",
       "      <td>2017-04-11 12:00:00</td>\n",
       "      <td>Все още не сте решили къде ще посрещнете Велик...</td>\n",
       "      <td>fact.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>598</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Проф. Боян Чуков: Ястребите в Америка тласкат ...</td>\n",
       "      <td>http://bultimes.com/prof-boyan-chukov-yastrebi...</td>\n",
       "      <td>2017-04-12 07:52:00</td>\n",
       "      <td>Боян Чуков за това възможно ли е наистина един...</td>\n",
       "      <td>bultimes.com</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1647</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Сливането на човешките раси - Алхимията на Сат...</td>\n",
       "      <td>http://xcombg.net/index.php?topic=2483.msg4493...</td>\n",
       "      <td>2017-02-06 14:58:00</td>\n",
       "      <td>Не съобразяваш, че НСР на илюминати не желае с...</td>\n",
       "      <td>xcombg.net</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>29</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Пророчествата на Фатима-Мистериозната история ...</td>\n",
       "      <td>http://www.zajenata.bg/пророчествата-на-фатима...</td>\n",
       "      <td>2017-05-14 13:58:00</td>\n",
       "      <td>Тя не е португалската Ванга. Откровенията, кои...</td>\n",
       "      <td>www.zajenata.bg</td>\n",
       "      <td>True</td>\n",
       "    </tr>\n",
       "  </tbody>\n",
       "</table>\n",
       "<p>251 rows × 8 columns</p>\n",
       "</div>"
      ],
      "text/plain": [
       "      fake_news_score  click_bait_score  \\\n",
       "450                 3                 3   \n",
       "1174                3                 3   \n",
       "2425                1                 1   \n",
       "2665                1                 1   \n",
       "1505                3                 3   \n",
       "2248                1                 1   \n",
       "2720                1                 1   \n",
       "677                 1                 1   \n",
       "1103                3                 3   \n",
       "2321                3                 3   \n",
       "1550                1                 1   \n",
       "2033                3                 3   \n",
       "415                 3                 3   \n",
       "1127                3                 3   \n",
       "1352                1                 1   \n",
       "1775                3                 3   \n",
       "354                 3                 3   \n",
       "2487                3                 3   \n",
       "2779                3                 3   \n",
       "1494                3                 3   \n",
       "194                 3                 3   \n",
       "1728                3                 3   \n",
       "2091                3                 3   \n",
       "506                 1                 1   \n",
       "1511                3                 3   \n",
       "1580                3                 3   \n",
       "962                 3                 3   \n",
       "1621                3                 3   \n",
       "867                 3                 3   \n",
       "1849                3                 3   \n",
       "...               ...               ...   \n",
       "1565                3                 3   \n",
       "941                 1                 1   \n",
       "2289                3                 3   \n",
       "1435                3                 3   \n",
       "1670                3                 3   \n",
       "964                 1                 1   \n",
       "2168                3                 3   \n",
       "2338                3                 3   \n",
       "2162                1                 1   \n",
       "2037                1                 1   \n",
       "1037                3                 3   \n",
       "233                 3                 3   \n",
       "1822                1                 1   \n",
       "1226                3                 3   \n",
       "1263                3                 3   \n",
       "999                 3                 3   \n",
       "1748                3                 3   \n",
       "495                 3                 3   \n",
       "457                 3                 3   \n",
       "803                 1                 1   \n",
       "903                 3                 3   \n",
       "767                 3                 3   \n",
       "528                 3                 3   \n",
       "1850                3                 3   \n",
       "2410                3                 3   \n",
       "1036                3                 3   \n",
       "610                 3                 3   \n",
       "598                 3                 3   \n",
       "1647                3                 3   \n",
       "29                  3                 3   \n",
       "\n",
       "                                          Content Title  \\\n",
       "450            Екстрасенс предрече Трета световна война   \n",
       "1174  Предсказанията за 2017-та година на „Спящия пр...   \n",
       "2425  Нямо 6-годишно момченце проговори на гроба на ...   \n",
       "2665     Извинявам се, че нарекох колежките \"овчедушни\"   \n",
       "1505  УТРЕ Е СВ. ВАЛЕНТИН, НО НЕ БЪДЕТЕ ОВЦЕ! НЕ ИСК...   \n",
       "2248        Пророчества вещаят апокалипсис през 2017 г.   \n",
       "2720      За сегашното положение и настъпващите промени   \n",
       "677   2017-а носи природни катаклизми, атентати и ог...   \n",
       "1103  РУСКИ МЕДИИ ГРЪМНАХА С НАЙ-СТРОГО ПАЗЕНАТА ТАЙ...   \n",
       "2321  ВСИЧКИ ВПЕРИХА В ПОГЛЕД! ИЗТЕКОХА НОВИ РАЗКРИТ...   \n",
       "1550  Сашка Братанова: Да съм на сцената – това е, к...   \n",
       "2033  ГЕРБ и БСП ще се самоубият, ако направят коалиция   \n",
       "415        За американските партии и марионетката Тръмп   \n",
       "1127  Разтърсваща тайна: Ванга е родила дете на 17 г...   \n",
       "1352   Здраве/Красота /Спа at Тихомир Първанов терапевт   \n",
       "1775  Доналд Тръмп нападна „ястребите”: Фокусирайте ...   \n",
       "354   Неолиберални тенденции: Имаме си нови параноиц...   \n",
       "2487            ТАЙНИТЕ ПРОТОКОЛИ | The Bulgarian Times   \n",
       "2779  Турция, бежанската криза и предсказанието на б...   \n",
       "1494  Следващата световна война ще бъде като Първа с...   \n",
       "194     Неизвестното значение на най-известните символи   \n",
       "1728  Слава Севрюкова предрекла нещо много важно за ...   \n",
       "2091  Ново разкритие за тайната на Людмила Живкова и...   \n",
       "506   Протойерей Димчо Колев оглави празничното бого...   \n",
       "1511  Сензация! Неизвестен правнук на Распутин се из...   \n",
       "1580  Главният стратег на Тръмп смята, че се задава ...   \n",
       "962   Тази събота е Благовещение, един от най‐големи...   \n",
       "1621  Ванга каза, че костите на Левски са в … – Нови...   \n",
       "867   Пророчицата с рентгенови очи Момера Пенчева: Б...   \n",
       "1849  Феномен с лоша прогноза за България и света! К...   \n",
       "...                                                 ...   \n",
       "1565  Людмила Живкова скочила от блок, твърди бодига...   \n",
       "941                         6 мъдри мисли от баба Ванга   \n",
       "2289      Посланикът на Русия посети къща-музей “Ванга”   \n",
       "1435                          Парламентарни избори 2017   \n",
       "1670  Истерия в Англия за края на света, предсказан ...   \n",
       "964               Играете ли руска рулетка с детето си?   \n",
       "2168  Западът живее в постоянен ужас! – Политиката –...   \n",
       "2338          КАКВА ЩЕ БЪДЕ 2017 Г., СПОРЕД НОСТРАДАМУС   \n",
       "2162  Илюминати предизвикали смъртта на Джордж Майкъ...   \n",
       "2037  Социолог: ГЕРБ и БСП ще се самоубият, ако напр...   \n",
       "1037             Руски медии: Ванга е родила дете на 17   \n",
       "233   Велизар Енчев - най-неморалният кабинет за тез...   \n",
       "1822  Тръмп призова двама известни сенатори да не по...   \n",
       "1226      Трета световна война - от Азия ли ще започне?   \n",
       "1263  Блогът на Ник :: Пет неща, които не знаем за Т...   \n",
       "999     Тайната на Дейвид Рокфелер - любовта към живота   \n",
       "1748  Забравеният завет на Ванга, който цери и най-с...   \n",
       "495   Ванга - Какво ни завеща, защо не я разбрахме н...   \n",
       "457                   Какво правим ако завият сирените?   \n",
       "803                 Милиардерът, който не отказва заеми   \n",
       "903   Днес е един от най-великите християнски празни...   \n",
       "767   Баба Ванга е помогнала на стотици хора да осла...   \n",
       "528   Chemtrails HAARP (химически следи в небето и Х...   \n",
       "1850  Феномен с лоша прогноза за България и света! К...   \n",
       "2410  Легендата се потвърди! Истинско чудо с нямо де...   \n",
       "1036  Руски медии: Ванга е родила дете на 17 | Vchas...   \n",
       "610   Last Minute за Великден в Петрич! 2 нощувки съ...   \n",
       "598   Проф. Боян Чуков: Ястребите в Америка тласкат ...   \n",
       "1647  Сливането на човешките раси - Алхимията на Сат...   \n",
       "29    Пророчествата на Фатима-Мистериозната история ...   \n",
       "\n",
       "                                            Content Url  \\\n",
       "450          http://bulbox.net/regioni-haskovo/5600045/   \n",
       "1174                            http://vchas.bg/321112/   \n",
       "2425  http://www.novini.bg/news/397523-нямо-6-годишн...   \n",
       "2665  http://www.blitz.bg/sport/gimnastika/neshka-ro...   \n",
       "1505                   http://novinite711.com/noa/28111   \n",
       "2248             http://www.168chasa.bg/article/5975927   \n",
       "2720  https://anonybulgaria.wordpress.com/2016/11/28...   \n",
       "677   https://novinite.eu/astrolozi-preduprezhdavat-...   \n",
       "1103                  http://bulgaria365.info/?p=282848   \n",
       "2321                            http://vchas.bg/304897/   \n",
       "1550                       http://bnr.bg/post/100794907   \n",
       "2033  http://epicenter.bg/article/Zhivko-Georgiev--G...   \n",
       "415   http://www.glas.bg/586513/za-amerikanskite-par...   \n",
       "1127  http://struma.bg/разтърсваща-тайна-ванга-е-род...   \n",
       "1352  https://allevents.in/sofia/Здраве-Красота-Спа/...   \n",
       "1775  http://www.pan.bg/view_article-59-370669-Donal...   \n",
       "354   http://www.glas.bg/596908/neoliberalni-tendenc...   \n",
       "2487             http://bultimes.com/tajnite-protokoli/   \n",
       "2779  http://www.dailypress.bg/турция-бежанската-кри...   \n",
       "1494  http://fascindoo.blog.bg/politika/2017/02/15/s...   \n",
       "194                http://novini24online.com/jba/112041   \n",
       "1728                  http://bulgaria365.info/?p=262472   \n",
       "2091  http://www.regiona.bg/index.php/ljubopitno/ite...   \n",
       "506   http://focus-radio.net/протойерей-димчо-колев-...   \n",
       "1511  http://toppresa.com/107598/сензация-неизвестен...   \n",
       "1580  http://bultimes.com/glavniyat-strateg-na-tramp...   \n",
       "962   http://www.blagoevgrad.eu/tazi-sbota-e-blagove...   \n",
       "1621                       http://berbim.info/?p=112493   \n",
       "867   http://velikabulgaria.eu/пророчицата-с-рентген...   \n",
       "1849                           http://vchas.net/310987/   \n",
       "...                                                 ...   \n",
       "1565                http://plovdivmedia.com/117426.html   \n",
       "941   https://www.actualno.com/curious/6-mydri-misli...   \n",
       "2289  http://petrichnews.info/2017/01/04/посланикът-...   \n",
       "1435  http://www.bg-mamma.com/index.php?PHPSESSID=bc...   \n",
       "1670  http://toppresa.com/106415/истерия-в-англия-за...   \n",
       "964   http://www.webcafe.bg/id_1112384990_Igraete_li...   \n",
       "2168                      http://politikata.net/259747/   \n",
       "2338  http://www.ndt1.com/article.php/20161231182257296   \n",
       "2162  https://novinite.eu/ilyuminati-predizvikali-sm...   \n",
       "2037  http://www.blitz.bg/obshtestvo/intervyu/sotsio...   \n",
       "1037  http://www.zajenata.bg/руски-медии-ванга-е-род...   \n",
       "233   http://www.dimitrovgrad.bgvesti.net/news/42625...   \n",
       "1822  https://novinite.eu/tramp-prizova-dvama-izvest...   \n",
       "1226             http://e-novinar.com/news/5225157.html   \n",
       "1263  http://nikikm.blog.bg/politika/2017/03/03/pet-...   \n",
       "999   http://woman.hotnews.bg/n/tajnata-na-dejvid-ro...   \n",
       "1748                          http://lifebg.net/175921/   \n",
       "495   http://chujdozemec.com/любопитно/цитати-мъдрос...   \n",
       "457   http://www.bg-mamma.com/index.php?PHPSESSID=bc...   \n",
       "803   http://www.webcafe.bg/webcafe/svyat/id_1758822...   \n",
       "903   http://newsbp.com/Днес-е-един-от-най-великите-...   \n",
       "767                        http://berbim.info/?p=247078   \n",
       "528   http://xcombg.net/index.php?topic=15.msg45598#...   \n",
       "1850                            http://vchas.bg/310987/   \n",
       "2410                   http://novinite711.com/noa/21700   \n",
       "1036                           http://vchas.net/323041/   \n",
       "610            http://fact.bg/velikden-v-petrich-086zku   \n",
       "598   http://bultimes.com/prof-boyan-chukov-yastrebi...   \n",
       "1647  http://xcombg.net/index.php?topic=2483.msg4493...   \n",
       "29    http://www.zajenata.bg/пророчествата-на-фатима...   \n",
       "\n",
       "     Content Published Time  \\\n",
       "450     2017-04-19 17:30:00   \n",
       "1174    2017-03-11 12:12:00   \n",
       "2425    2016-12-22 14:32:00   \n",
       "2665    2016-11-30 12:51:00   \n",
       "1505    2017-02-13 20:49:00   \n",
       "2248    2017-01-07 13:14:00   \n",
       "2720    2016-11-28 13:34:00   \n",
       "677     2017-04-08 22:06:00   \n",
       "1103    2017-03-15 00:38:00   \n",
       "2321    2017-01-02 13:51:00   \n",
       "1550    2017-02-10 14:05:00   \n",
       "2033    2017-01-17 09:52:00   \n",
       "415     2017-04-21 18:31:00   \n",
       "1127    2017-03-14 18:16:00   \n",
       "1352    2017-02-26 05:28:00   \n",
       "1775    2017-01-31 14:04:00   \n",
       "354     2017-04-27 18:25:00   \n",
       "2487    2016-12-15 20:20:00   \n",
       "2779    2016-11-22 14:07:00   \n",
       "1494    2017-02-15 10:17:00   \n",
       "194     2017-05-05 20:35:00   \n",
       "1728    2017-02-01 19:12:00   \n",
       "2091    2017-01-14 13:09:00   \n",
       "506     2017-04-16 17:02:00   \n",
       "1511    2017-02-13 09:12:00   \n",
       "1580    2017-02-09 16:13:00   \n",
       "962     2017-03-23 08:24:00   \n",
       "1621    2017-02-07 00:24:00   \n",
       "867     2017-03-25 22:26:00   \n",
       "1849    2017-01-27 09:12:00   \n",
       "...                     ...   \n",
       "1565    2017-02-09 22:48:00   \n",
       "941     2017-03-24 13:50:00   \n",
       "2289    2017-01-04 14:57:00   \n",
       "1435    2017-02-19 12:15:00   \n",
       "1670    2017-02-03 15:39:00   \n",
       "964     2017-03-22 20:20:00   \n",
       "2168    2017-01-09 11:07:00   \n",
       "2338    2016-12-31 18:42:00   \n",
       "2162    2017-01-09 11:43:00   \n",
       "2037    2017-01-17 08:43:00   \n",
       "1037    2017-03-20 12:14:00   \n",
       "233     2017-05-04 09:21:00   \n",
       "1822    2017-01-30 08:18:00   \n",
       "1226    2017-03-07 12:15:00   \n",
       "1263    2017-03-03 18:18:00   \n",
       "999     2017-03-21 18:11:00   \n",
       "1748    2017-02-01 09:46:00   \n",
       "495     2017-04-17 10:10:00   \n",
       "457     2017-04-19 16:01:00   \n",
       "803     2017-03-30 17:37:00   \n",
       "903     2017-03-25 09:06:00   \n",
       "767     2017-04-03 19:58:00   \n",
       "528     2017-04-16 01:59:00   \n",
       "1850    2017-01-27 08:28:00   \n",
       "2410    2016-12-24 11:00:00   \n",
       "1036    2017-03-20 12:26:00   \n",
       "610     2017-04-11 12:00:00   \n",
       "598     2017-04-12 07:52:00   \n",
       "1647    2017-02-06 14:58:00   \n",
       "29      2017-05-14 13:58:00   \n",
       "\n",
       "                                                Content  \\\n",
       "450   Според екстрасенса Хорасио Вийегас, който прав...   \n",
       "1174  Според Кейси Трета световна война няма да има,...   \n",
       "2425  Дете проговори на гроба на българската ясновид...   \n",
       "2665  Нешка Робева прояви мъдрост и показа, че има ж...   \n",
       "1505  Отново сме в това време от годината, когато чо...   \n",
       "2248  Както всяка година, и през новата 2017-а не ли...   \n",
       "2720  Този анализ няма за цел да даде чисти доказате...   \n",
       "677   2017-та година ще бъде много труден период за ...   \n",
       "1103  Baнгa e poдилa cин, ĸoгaтo e билa eдвa нa 17 г...   \n",
       "2321  Внучето на премиера в оставка Бойко Борисов се...   \n",
       "1550  „Ние, вие и аз“ е моноспектакъл, изграден върх...   \n",
       "2033  Какви са възможните коалиции в парламента след...   \n",
       "415   През последните дни прочетох немалко статии за...   \n",
       "1127  Baнгa e poдилa cин, ĸoгaтo e билa eдвa нa 17 г...   \n",
       "1352  Матинето е време, в което се срещаш с приятели...   \n",
       "1775  Американският президент Доналд Тръмп с остри к...   \n",
       "354   От профила на Димитър Самодумов, Фейсбук:Забел...   \n",
       "2487  Ако искате да разсърдите хората, лъжете. Ако ж...   \n",
       "2779  Секретна служба в СССР събирала информация от ...   \n",
       "1494  Дали светът наистина е на прага на евентуална ...   \n",
       "194   Символите и знаците съпътстват човечеството от...   \n",
       "1728  Изследователят на българските пророци , Христо...   \n",
       "2091  Звездна карта пази ключа за мистериозна гробни...   \n",
       "506   Благоевград. Протойерей Димчо Колев оглави пра...   \n",
       "1511  Распутин срещу Ванга, кой от двамата е умеел д...   \n",
       "1580  Историк твърди, че Стив Банън многократно се е...   \n",
       "962   На 25 март се чества Благовещение. По традиция...   \n",
       "1621  „Виждам, че Николай Хайтов дири кокалите на Ле...   \n",
       "867   „Ти не си екстрасенс, ти се лечител, не се отч...   \n",
       "1849  Феноменът Божидар Караджов накара зрителите на...   \n",
       "...                                                 ...   \n",
       "1565  PlovdivMedia - Людмила Живкова скочила от блок...   \n",
       "941   Вангелия Пандева Гущерова е по-известна като В...   \n",
       "2289  Посланикът на Русия в България Анатолий Анатол...   \n",
       "1435  Цитат на: Куркума в нд, 19 фев 2017, 12:02Пред...   \n",
       "1670  Истерия в Англия за края на света, предсказан ...   \n",
       "964   „Страх ме е от болестите, но от ваксините още ...   \n",
       "2168  Светът балансира опасно на границата на Трета ...   \n",
       "2338  Нострадамус е един от най-известните пророци и...   \n",
       "2162  Смъртта на Джордж Майкъл, Кари Фишър и Деби Ре...   \n",
       "2037  Какви са възможните коалиции в парламента след...   \n",
       "1037  Beлиĸaтa пpopoчицa Baнгa e cтaнaлa мaйĸa. Toвa...   \n",
       "233   Велизар Енчев и проф. Божидар Димитров коменти...   \n",
       "1822  Сенаторите Джон Маккейн и Линдзи Греъм трябва ...   \n",
       "1226                                                NaN   \n",
       "1263  Пет неща, които не знаем за Трети март Лъвът н...   \n",
       "999   Вчера на 101 години от този свят си отиде най-...   \n",
       "1748  Веднъж попитали Ванга, когато човечеството ще ...   \n",
       "495   /24.12.1981 г./1. След 1990 г. много градове и...   \n",
       "457   Цитат на: -veni- в ср, 19 апр 2017, 16:00Ванга...   \n",
       "803   Преди няколко години френският държавен телеко...   \n",
       "903   Днес православната църква отбеляза Благовещени...   \n",
       "767   След нейната смърт рецептата се запазила и про...   \n",
       "528   Дихидроген моноксид се сипе в момента над Бург...   \n",
       "1850  Феноменът Божидар Караджов накара зрителите на...   \n",
       "2410  Дете проговори на гроба на българската ясновид...   \n",
       "1036  Beлиĸaтa пpopoчицa Baнгa e cтaнaлa мaйĸa. Toвa...   \n",
       "610   Все още не сте решили къде ще посрещнете Велик...   \n",
       "598   Боян Чуков за това възможно ли е наистина един...   \n",
       "1647  Не съобразяваш, че НСР на илюминати не желае с...   \n",
       "29    Тя не е португалската Ванга. Откровенията, кои...   \n",
       "\n",
       "                            domain correct  \n",
       "450                     bulbox.net    True  \n",
       "1174                      vchas.bg    True  \n",
       "2425                 www.novini.bg    True  \n",
       "2665                  www.blitz.bg    True  \n",
       "1505               novinite711.com    True  \n",
       "2248               www.168chasa.bg    True  \n",
       "2720   anonybulgaria.wordpress.com    True  \n",
       "677                    novinite.eu    True  \n",
       "1103              bulgaria365.info    True  \n",
       "2321                      vchas.bg    True  \n",
       "1550                        bnr.bg    True  \n",
       "2033                  epicenter.bg    True  \n",
       "415                    www.glas.bg    True  \n",
       "1127                     struma.bg    True  \n",
       "1352                  allevents.in    True  \n",
       "1775                    www.pan.bg    True  \n",
       "354                    www.glas.bg    True  \n",
       "2487                  bultimes.com    True  \n",
       "2779             www.dailypress.bg    True  \n",
       "1494             fascindoo.blog.bg    True  \n",
       "194             novini24online.com    True  \n",
       "1728              bulgaria365.info    True  \n",
       "2091                www.regiona.bg    True  \n",
       "506                focus-radio.net    True  \n",
       "1511                  toppresa.com    True  \n",
       "1580                  bultimes.com    True  \n",
       "962             www.blagoevgrad.eu    True  \n",
       "1621                   berbim.info    True  \n",
       "867              velikabulgaria.eu    True  \n",
       "1849                     vchas.net    True  \n",
       "...                            ...     ...  \n",
       "1565              plovdivmedia.com    True  \n",
       "941               www.actualno.com    True  \n",
       "2289              petrichnews.info    True  \n",
       "1435              www.bg-mamma.com    True  \n",
       "1670                  toppresa.com    True  \n",
       "964                 www.webcafe.bg    True  \n",
       "2168                politikata.net    True  \n",
       "2338                  www.ndt1.com    True  \n",
       "2162                   novinite.eu    True  \n",
       "2037                  www.blitz.bg    True  \n",
       "1037               www.zajenata.bg    True  \n",
       "233   www.dimitrovgrad.bgvesti.net    True  \n",
       "1822                   novinite.eu    True  \n",
       "1226                 e-novinar.com    True  \n",
       "1263                nikikm.blog.bg    True  \n",
       "999               woman.hotnews.bg    True  \n",
       "1748                    lifebg.net    True  \n",
       "495                chujdozemec.com    True  \n",
       "457               www.bg-mamma.com    True  \n",
       "803                 www.webcafe.bg    True  \n",
       "903                     newsbp.com    True  \n",
       "767                    berbim.info    True  \n",
       "528                     xcombg.net    True  \n",
       "1850                      vchas.bg    True  \n",
       "2410               novinite711.com    True  \n",
       "1036                     vchas.net    True  \n",
       "610                        fact.bg    True  \n",
       "598                   bultimes.com    True  \n",
       "1647                    xcombg.net    True  \n",
       "29                 www.zajenata.bg    True  \n",
       "\n",
       "[251 rows x 8 columns]"
      ]
     },
     "execution_count": 31,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "df_test[df_test.correct]"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 32,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [
    {
     "data": {
      "text/html": [
       "<div>\n",
       "<table border=\"1\" class=\"dataframe\">\n",
       "  <thead>\n",
       "    <tr style=\"text-align: right;\">\n",
       "      <th></th>\n",
       "      <th>fake_news_score</th>\n",
       "      <th>click_bait_score</th>\n",
       "      <th>Content Title</th>\n",
       "      <th>Content Url</th>\n",
       "      <th>Content Published Time</th>\n",
       "      <th>Content</th>\n",
       "      <th>domain</th>\n",
       "      <th>correct</th>\n",
       "    </tr>\n",
       "  </thead>\n",
       "  <tbody>\n",
       "    <tr>\n",
       "      <th>1192</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Ако ти подарят един от тези предмети - хвърли ...</td>\n",
       "      <td>https://skafeto.com/любопитно/ако-ти-подарят-е...</td>\n",
       "      <td>2017-03-09 17:20:00</td>\n",
       "      <td>Прочутата пророчица Баба Ванга е вярвала дълбо...</td>\n",
       "      <td>skafeto.com</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2689</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Мехлемът на Баба Ванга ме спаси. Забравих за б...</td>\n",
       "      <td>http://chujdozemec.com/здраве/мехлемът-на-баба...</td>\n",
       "      <td>2016-11-29 11:51:00</td>\n",
       "      <td>Сместа, приготвена вкъщи, помага да се справим...</td>\n",
       "      <td>chujdozemec.com</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>309</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Дядо Ральо от с. Кости: Откриха ми 5 см. увели...</td>\n",
       "      <td>https://skafeto.com/здраве/народна-медицина/дя...</td>\n",
       "      <td>2017-04-28 12:15:00</td>\n",
       "      <td>92-годишният дядо Ральо от странджанското село...</td>\n",
       "      <td>skafeto.com</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2758</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>ПИсимистични непукиЗи с прЪвУписТен АУТсхаймер...</td>\n",
       "      <td>http://www.bg-mamma.com/index.php?PHPSESSID=8k...</td>\n",
       "      <td>2016-11-25 19:28:00</td>\n",
       "      <td>Цитатаз съм опъки човек  ЦитаткокълчеЦитатимах...</td>\n",
       "      <td>www.bg-mamma.com</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2605</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Петричка екзотика: Радо Шишарката пее при Ванга</td>\n",
       "      <td>http://bulbox.net/regioni-blagoevg/5081143/</td>\n",
       "      <td>2016-12-04 14:15:00</td>\n",
       "      <td>Фолклегендата Радо Шишарката и пророчицата Ван...</td>\n",
       "      <td>bulbox.net</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2713</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Деси Тенекеджиева става Людмила Живкова</td>\n",
       "      <td>http://epicenter.bg/article/Desi-Tenekedzhieva...</td>\n",
       "      <td>2016-11-28 18:04:00</td>\n",
       "      <td>Деси Тенекеджиева ще реализира стара обща идея...</td>\n",
       "      <td>epicenter.bg</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2645</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Нешка Робева се оттегля завинаги от гимнастика...</td>\n",
       "      <td>http://www.struma.bg/news/106990/1/1/Neshka-Ro...</td>\n",
       "      <td>2016-12-01 14:23:00</td>\n",
       "      <td>Нешка Робева се оттегля от художествената гимн...</td>\n",
       "      <td>www.struma.bg</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1288</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Западните Балкани и регионалната (не)сигурност...</td>\n",
       "      <td>http://www.memoriabg.com/2017/03/02/zapadnite-...</td>\n",
       "      <td>2017-03-02 11:05:00</td>\n",
       "      <td>Генерал Уесли Кларк описва операция „Съюзна си...</td>\n",
       "      <td>www.memoriabg.com</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2672</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Людмила Живкова възкръсва! (СНИМКИ) – PernikTo...</td>\n",
       "      <td>http://perniktoday.net/людмила-живкова-възкръс...</td>\n",
       "      <td>2016-11-30 05:54:00</td>\n",
       "      <td>Следващата година през пролетта предстои да из...</td>\n",
       "      <td>perniktoday.net</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1769</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>store.bg - Лола - Мейк Бългерия грейт агейн - ...</td>\n",
       "      <td>https://www.book.store.bg/p194992/lola-mejk-by...</td>\n",
       "      <td>2017-01-31 15:10:00</td>\n",
       "      <td>Някои предложения за управлението на държавата...</td>\n",
       "      <td>www.book.store.bg</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2644</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Нешка Робева: Извинявам се, повече нямам място...</td>\n",
       "      <td>http://e-novinar.com/news/5164318.html</td>\n",
       "      <td>2016-12-01 15:10:00</td>\n",
       "      <td>Най-успешният треньор в историята на българска...</td>\n",
       "      <td>e-novinar.com</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1313</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Никога не е късно да станеш за резил</td>\n",
       "      <td>http://shash.bg/elena-poptodorova-polsha-zadur...</td>\n",
       "      <td>2017-02-28 17:57:00</td>\n",
       "      <td>Факти: Бившият български посланик в САЩ Елена ...</td>\n",
       "      <td>shash.bg</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2698</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Представят „Ванга в народната памет\" в Кюстендил</td>\n",
       "      <td>http://www.bulfax.com/?q=node/5990384</td>\n",
       "      <td>2016-11-29 09:48:00</td>\n",
       "      <td>Среща- разговор на Лалка Бенгюзова с читатели ...</td>\n",
       "      <td>www.bulfax.com</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>45</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>НЕ ИСКАЙТЕ МНОГО – НЕ МОЖЕТЕ ДА МУ ПЛАТИТЕ ЦЕН...</td>\n",
       "      <td>http://www.bgnow.eu/news.php?cat=2&amp;cp=0&amp;newsid...</td>\n",
       "      <td>2017-05-13 10:46:00</td>\n",
       "      <td>\"Няма човек, който да е роден само за щастие. ...</td>\n",
       "      <td>www.bgnow.eu</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2545</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>ТРЪМП!</td>\n",
       "      <td>http://www.bg-mamma.com/index.php?PHPSESSID=a1...</td>\n",
       "      <td>2016-12-08 16:21:00</td>\n",
       "      <td>Цитат на: Poppea в чт, 08 дек 2016, 16:14Скрит...</td>\n",
       "      <td>www.bg-mamma.com</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>80</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Гответе се за Трета световна война</td>\n",
       "      <td>https://frognews.bg/news_134360/Anonimnite-Got...</td>\n",
       "      <td>2017-05-10 07:54:00</td>\n",
       "      <td>Известната групировка „Анонимните“ разпростран...</td>\n",
       "      <td>frognews.bg</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2795</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>За САЩ при Тръмп,Европейският съюз не е ключов...</td>\n",
       "      <td>http://yphalachev.blogspot.de/2016/11/blog-pos...</td>\n",
       "      <td>2016-11-20 02:03:00</td>\n",
       "      <td>Русия, Великобритания, Австралия, Канада, Нова...</td>\n",
       "      <td>yphalachev.blogspot.de</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2724</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Франсоа Фийон - кандидатът на дясното за прези...</td>\n",
       "      <td>http://bulevard.bg/news/fransoa-fiyon-kandidat...</td>\n",
       "      <td>2016-11-28 08:54:00</td>\n",
       "      <td>Кой е Фийон и какво обещава на французите, ако...</td>\n",
       "      <td>bulevard.bg</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2577</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Не в статуквото ни е проблемът</td>\n",
       "      <td>https://x3mbg.wordpress.com/2016/12/07/не-в-ст...</td>\n",
       "      <td>2016-12-07 10:40:00</td>\n",
       "      <td>В последно време основната новина по всички ме...</td>\n",
       "      <td>x3mbg.wordpress.com</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1763</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Иво Инджев / Ivo Indzhev</td>\n",
       "      <td>http://ivo.bg/2017/01/31/дуплика-на-репченето-...</td>\n",
       "      <td>2017-01-31 17:18:00</td>\n",
       "      <td>От любов към спора някои спорят, че всъщност Т...</td>\n",
       "      <td>ivo.bg</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2548</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Издислав дат ай ем фийлинг…</td>\n",
       "      <td>http://nedyalko.bg/?p=308</td>\n",
       "      <td>2016-12-08 13:03:00</td>\n",
       "      <td>Плевнелиев щял да реди „коледен кабинет“. Дога...</td>\n",
       "      <td>nedyalko.bg</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>44</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Как Стоичков стана европейски шампион преди 25...</td>\n",
       "      <td>http://www.bgnow.eu/news.php?cat=2&amp;cp=0&amp;newsid...</td>\n",
       "      <td>2017-05-13 10:46:00</td>\n",
       "      <td>Българинът удари греда, подаде за  гола, донес...</td>\n",
       "      <td>www.bgnow.eu</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2732</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Хороскоп за 26 ноември - 2 декември</td>\n",
       "      <td>http://www.briagnews.bg/horoskop-za-26-noemvri...</td>\n",
       "      <td>2016-11-28 00:00:00</td>\n",
       "      <td>Овен 21 март - 20 април Съботният ден отприщва...</td>\n",
       "      <td>www.briagnews.bg</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>70</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>“Анонимните”: Светът да се готви за Трета свет...</td>\n",
       "      <td>http://econ.bg/Научи-за/-Анонимните-Светът-да-...</td>\n",
       "      <td>2017-05-10 12:50:00</td>\n",
       "      <td>Известната потайна групировка „Анонимните“ раз...</td>\n",
       "      <td>econ.bg</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2506</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Блогът на zahariada :: ОПАСНОСТТА БОРИСОВ</td>\n",
       "      <td>http://zahariada.blog.bg/politika/2016/12/14/o...</td>\n",
       "      <td>2016-12-14 13:06:00</td>\n",
       "      <td>Какво умее Бойко Борисов? Умее да печели избор...</td>\n",
       "      <td>zahariada.blog.bg</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>764</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>„Фенове поискаха да пея на „Евровизия“, други ...</td>\n",
       "      <td>https://lovestylemagazine.wordpress.com/2017/0...</td>\n",
       "      <td>2017-04-04 13:16:00</td>\n",
       "      <td>Главна героиня на корицата е поп сензацията Ге...</td>\n",
       "      <td>lovestylemagazine.wordpress.com</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2762</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Катето Евро е сложила вуду кукла в стаята на с...</td>\n",
       "      <td>http://koch.bg/kateto-evro-e-slozhila-vudu-kuk...</td>\n",
       "      <td>2016-11-24 17:15:00</td>\n",
       "      <td>Реклама: Катерина Евро разбуни духовете с нови...</td>\n",
       "      <td>koch.bg</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1340</th>\n",
       "      <td>3</td>\n",
       "      <td>3</td>\n",
       "      <td>Ставаме шейхове при жена управник!</td>\n",
       "      <td>http://novinite.eu/petrolnoto-prorochestvo-na-...</td>\n",
       "      <td>2017-02-27 11:38:00</td>\n",
       "      <td>Изключително пророчество на Ванга за залежи на...</td>\n",
       "      <td>novinite.eu</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2525</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Либерализмът е тоталитаризъм с човешко лице</td>\n",
       "      <td>http://budha2.blog.bg/politika/2016/12/11/libe...</td>\n",
       "      <td>2016-12-11 19:11:00</td>\n",
       "      <td>Либерализмът е тоталитаризъм с човешко лице[То...</td>\n",
       "      <td>budha2.blog.bg</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>368</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Важно за всички. Президентът Румен Радев взе м...</td>\n",
       "      <td>https://skafeto.com/новини/важно-за-всички-пре...</td>\n",
       "      <td>2017-04-26 17:06:00</td>\n",
       "      <td>Президентът Румен Радев е взел решение по един...</td>\n",
       "      <td>skafeto.com</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2676</th>\n",
       "      <td>1</td>\n",
       "      <td>1</td>\n",
       "      <td>Вижте коя известна българска актриса ще изигра...</td>\n",
       "      <td>http://vchas.net/297997/</td>\n",
       "      <td>2016-11-29 20:46:00</td>\n",
       "      <td>Деси Тенекеджиева ще снима филм, посветен на щ...</td>\n",
       "      <td>vchas.net</td>\n",
       "      <td>False</td>\n",
       "    </tr>\n",
       "  </tbody>\n",
       "</table>\n",
       "</div>"
      ],
      "text/plain": [
       "      fake_news_score  click_bait_score  \\\n",
       "1192                1                 1   \n",
       "2689                1                 1   \n",
       "309                 1                 1   \n",
       "2758                1                 1   \n",
       "2605                1                 1   \n",
       "2713                1                 1   \n",
       "2645                1                 1   \n",
       "1288                3                 3   \n",
       "2672                1                 1   \n",
       "1769                1                 1   \n",
       "2644                1                 1   \n",
       "1313                3                 3   \n",
       "2698                1                 1   \n",
       "45                  1                 1   \n",
       "2545                1                 1   \n",
       "80                  1                 1   \n",
       "2795                1                 1   \n",
       "2724                1                 1   \n",
       "2577                1                 1   \n",
       "1763                1                 1   \n",
       "2548                1                 1   \n",
       "44                  1                 1   \n",
       "2732                1                 1   \n",
       "70                  1                 1   \n",
       "2506                1                 1   \n",
       "764                 1                 1   \n",
       "2762                1                 1   \n",
       "1340                3                 3   \n",
       "2525                1                 1   \n",
       "368                 1                 1   \n",
       "2676                1                 1   \n",
       "\n",
       "                                          Content Title  \\\n",
       "1192  Ако ти подарят един от тези предмети - хвърли ...   \n",
       "2689  Мехлемът на Баба Ванга ме спаси. Забравих за б...   \n",
       "309   Дядо Ральо от с. Кости: Откриха ми 5 см. увели...   \n",
       "2758  ПИсимистични непукиЗи с прЪвУписТен АУТсхаймер...   \n",
       "2605    Петричка екзотика: Радо Шишарката пее при Ванга   \n",
       "2713            Деси Тенекеджиева става Людмила Живкова   \n",
       "2645  Нешка Робева се оттегля завинаги от гимнастика...   \n",
       "1288  Западните Балкани и регионалната (не)сигурност...   \n",
       "2672  Людмила Живкова възкръсва! (СНИМКИ) – PernikTo...   \n",
       "1769  store.bg - Лола - Мейк Бългерия грейт агейн - ...   \n",
       "2644  Нешка Робева: Извинявам се, повече нямам място...   \n",
       "1313               Никога не е късно да станеш за резил   \n",
       "2698   Представят „Ванга в народната памет\" в Кюстендил   \n",
       "45    НЕ ИСКАЙТЕ МНОГО – НЕ МОЖЕТЕ ДА МУ ПЛАТИТЕ ЦЕН...   \n",
       "2545                                             ТРЪМП!   \n",
       "80                   Гответе се за Трета световна война   \n",
       "2795  За САЩ при Тръмп,Европейският съюз не е ключов...   \n",
       "2724  Франсоа Фийон - кандидатът на дясното за прези...   \n",
       "2577                     Не в статуквото ни е проблемът   \n",
       "1763                           Иво Инджев / Ivo Indzhev   \n",
       "2548                        Издислав дат ай ем фийлинг…   \n",
       "44    Как Стоичков стана европейски шампион преди 25...   \n",
       "2732                Хороскоп за 26 ноември - 2 декември   \n",
       "70    “Анонимните”: Светът да се готви за Трета свет...   \n",
       "2506          Блогът на zahariada :: ОПАСНОСТТА БОРИСОВ   \n",
       "764   „Фенове поискаха да пея на „Евровизия“, други ...   \n",
       "2762  Катето Евро е сложила вуду кукла в стаята на с...   \n",
       "1340                 Ставаме шейхове при жена управник!   \n",
       "2525        Либерализмът е тоталитаризъм с човешко лице   \n",
       "368   Важно за всички. Президентът Румен Радев взе м...   \n",
       "2676  Вижте коя известна българска актриса ще изигра...   \n",
       "\n",
       "                                            Content Url  \\\n",
       "1192  https://skafeto.com/любопитно/ако-ти-подарят-е...   \n",
       "2689  http://chujdozemec.com/здраве/мехлемът-на-баба...   \n",
       "309   https://skafeto.com/здраве/народна-медицина/дя...   \n",
       "2758  http://www.bg-mamma.com/index.php?PHPSESSID=8k...   \n",
       "2605        http://bulbox.net/regioni-blagoevg/5081143/   \n",
       "2713  http://epicenter.bg/article/Desi-Tenekedzhieva...   \n",
       "2645  http://www.struma.bg/news/106990/1/1/Neshka-Ro...   \n",
       "1288  http://www.memoriabg.com/2017/03/02/zapadnite-...   \n",
       "2672  http://perniktoday.net/людмила-живкова-възкръс...   \n",
       "1769  https://www.book.store.bg/p194992/lola-mejk-by...   \n",
       "2644             http://e-novinar.com/news/5164318.html   \n",
       "1313  http://shash.bg/elena-poptodorova-polsha-zadur...   \n",
       "2698              http://www.bulfax.com/?q=node/5990384   \n",
       "45    http://www.bgnow.eu/news.php?cat=2&cp=0&newsid...   \n",
       "2545  http://www.bg-mamma.com/index.php?PHPSESSID=a1...   \n",
       "80    https://frognews.bg/news_134360/Anonimnite-Got...   \n",
       "2795  http://yphalachev.blogspot.de/2016/11/blog-pos...   \n",
       "2724  http://bulevard.bg/news/fransoa-fiyon-kandidat...   \n",
       "2577  https://x3mbg.wordpress.com/2016/12/07/не-в-ст...   \n",
       "1763  http://ivo.bg/2017/01/31/дуплика-на-репченето-...   \n",
       "2548                          http://nedyalko.bg/?p=308   \n",
       "44    http://www.bgnow.eu/news.php?cat=2&cp=0&newsid...   \n",
       "2732  http://www.briagnews.bg/horoskop-za-26-noemvri...   \n",
       "70    http://econ.bg/Научи-за/-Анонимните-Светът-да-...   \n",
       "2506  http://zahariada.blog.bg/politika/2016/12/14/o...   \n",
       "764   https://lovestylemagazine.wordpress.com/2017/0...   \n",
       "2762  http://koch.bg/kateto-evro-e-slozhila-vudu-kuk...   \n",
       "1340  http://novinite.eu/petrolnoto-prorochestvo-na-...   \n",
       "2525  http://budha2.blog.bg/politika/2016/12/11/libe...   \n",
       "368   https://skafeto.com/новини/важно-за-всички-пре...   \n",
       "2676                           http://vchas.net/297997/   \n",
       "\n",
       "     Content Published Time  \\\n",
       "1192    2017-03-09 17:20:00   \n",
       "2689    2016-11-29 11:51:00   \n",
       "309     2017-04-28 12:15:00   \n",
       "2758    2016-11-25 19:28:00   \n",
       "2605    2016-12-04 14:15:00   \n",
       "2713    2016-11-28 18:04:00   \n",
       "2645    2016-12-01 14:23:00   \n",
       "1288    2017-03-02 11:05:00   \n",
       "2672    2016-11-30 05:54:00   \n",
       "1769    2017-01-31 15:10:00   \n",
       "2644    2016-12-01 15:10:00   \n",
       "1313    2017-02-28 17:57:00   \n",
       "2698    2016-11-29 09:48:00   \n",
       "45      2017-05-13 10:46:00   \n",
       "2545    2016-12-08 16:21:00   \n",
       "80      2017-05-10 07:54:00   \n",
       "2795    2016-11-20 02:03:00   \n",
       "2724    2016-11-28 08:54:00   \n",
       "2577    2016-12-07 10:40:00   \n",
       "1763    2017-01-31 17:18:00   \n",
       "2548    2016-12-08 13:03:00   \n",
       "44      2017-05-13 10:46:00   \n",
       "2732    2016-11-28 00:00:00   \n",
       "70      2017-05-10 12:50:00   \n",
       "2506    2016-12-14 13:06:00   \n",
       "764     2017-04-04 13:16:00   \n",
       "2762    2016-11-24 17:15:00   \n",
       "1340    2017-02-27 11:38:00   \n",
       "2525    2016-12-11 19:11:00   \n",
       "368     2017-04-26 17:06:00   \n",
       "2676    2016-11-29 20:46:00   \n",
       "\n",
       "                                                Content  \\\n",
       "1192  Прочутата пророчица Баба Ванга е вярвала дълбо...   \n",
       "2689  Сместа, приготвена вкъщи, помага да се справим...   \n",
       "309   92-годишният дядо Ральо от странджанското село...   \n",
       "2758  Цитатаз съм опъки човек  ЦитаткокълчеЦитатимах...   \n",
       "2605  Фолклегендата Радо Шишарката и пророчицата Ван...   \n",
       "2713  Деси Тенекеджиева ще реализира стара обща идея...   \n",
       "2645  Нешка Робева се оттегля от художествената гимн...   \n",
       "1288  Генерал Уесли Кларк описва операция „Съюзна си...   \n",
       "2672  Следващата година през пролетта предстои да из...   \n",
       "1769  Някои предложения за управлението на държавата...   \n",
       "2644  Най-успешният треньор в историята на българска...   \n",
       "1313  Факти: Бившият български посланик в САЩ Елена ...   \n",
       "2698  Среща- разговор на Лалка Бенгюзова с читатели ...   \n",
       "45    \"Няма човек, който да е роден само за щастие. ...   \n",
       "2545  Цитат на: Poppea в чт, 08 дек 2016, 16:14Скрит...   \n",
       "80    Известната групировка „Анонимните“ разпростран...   \n",
       "2795  Русия, Великобритания, Австралия, Канада, Нова...   \n",
       "2724  Кой е Фийон и какво обещава на французите, ако...   \n",
       "2577  В последно време основната новина по всички ме...   \n",
       "1763  От любов към спора някои спорят, че всъщност Т...   \n",
       "2548  Плевнелиев щял да реди „коледен кабинет“. Дога...   \n",
       "44    Българинът удари греда, подаде за  гола, донес...   \n",
       "2732  Овен 21 март - 20 април Съботният ден отприщва...   \n",
       "70    Известната потайна групировка „Анонимните“ раз...   \n",
       "2506  Какво умее Бойко Борисов? Умее да печели избор...   \n",
       "764   Главна героиня на корицата е поп сензацията Ге...   \n",
       "2762  Реклама: Катерина Евро разбуни духовете с нови...   \n",
       "1340  Изключително пророчество на Ванга за залежи на...   \n",
       "2525  Либерализмът е тоталитаризъм с човешко лице[То...   \n",
       "368   Президентът Румен Радев е взел решение по един...   \n",
       "2676  Деси Тенекеджиева ще снима филм, посветен на щ...   \n",
       "\n",
       "                               domain correct  \n",
       "1192                      skafeto.com   False  \n",
       "2689                  chujdozemec.com   False  \n",
       "309                       skafeto.com   False  \n",
       "2758                 www.bg-mamma.com   False  \n",
       "2605                       bulbox.net   False  \n",
       "2713                     epicenter.bg   False  \n",
       "2645                    www.struma.bg   False  \n",
       "1288                www.memoriabg.com   False  \n",
       "2672                  perniktoday.net   False  \n",
       "1769                www.book.store.bg   False  \n",
       "2644                    e-novinar.com   False  \n",
       "1313                         shash.bg   False  \n",
       "2698                   www.bulfax.com   False  \n",
       "45                       www.bgnow.eu   False  \n",
       "2545                 www.bg-mamma.com   False  \n",
       "80                        frognews.bg   False  \n",
       "2795           yphalachev.blogspot.de   False  \n",
       "2724                      bulevard.bg   False  \n",
       "2577              x3mbg.wordpress.com   False  \n",
       "1763                           ivo.bg   False  \n",
       "2548                      nedyalko.bg   False  \n",
       "44                       www.bgnow.eu   False  \n",
       "2732                 www.briagnews.bg   False  \n",
       "70                            econ.bg   False  \n",
       "2506                zahariada.blog.bg   False  \n",
       "764   lovestylemagazine.wordpress.com   False  \n",
       "2762                          koch.bg   False  \n",
       "1340                      novinite.eu   False  \n",
       "2525                   budha2.blog.bg   False  \n",
       "368                       skafeto.com   False  \n",
       "2676                        vchas.net   False  "
      ]
     },
     "execution_count": 32,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "df_test[~df_test.correct]"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 33,
   "metadata": {
    "collapsed": false,
    "deletable": true,
    "editable": true
   },
   "outputs": [
    {
     "data": {
      "text/html": [
       "<div>\n",
       "<table border=\"1\" class=\"dataframe\">\n",
       "  <thead>\n",
       "    <tr style=\"text-align: right;\">\n",
       "      <th></th>\n",
       "      <th>fake_news_score</th>\n",
       "      <th>click_bait_score</th>\n",
       "    </tr>\n",
       "  </thead>\n",
       "  <tbody>\n",
       "    <tr>\n",
       "      <th>fake_news_score</th>\n",
       "      <td>1.000000</td>\n",
       "      <td>0.976846</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>click_bait_score</th>\n",
       "      <td>0.976846</td>\n",
       "      <td>1.000000</td>\n",
       "    </tr>\n",
       "  </tbody>\n",
       "</table>\n",
       "</div>"
      ],
      "text/plain": [
       "                  fake_news_score  click_bait_score\n",
       "fake_news_score          1.000000          0.976846\n",
       "click_bait_score         0.976846          1.000000"
      ]
     },
     "execution_count": 33,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "df.corr()"
   ]
  }
 ],
 "metadata": {
  "kernelspec": {
   "display_name": "Python 3",
   "language": "python",
   "name": "python3"
  },
  "language_info": {
   "codemirror_mode": {
    "name": "ipython",
    "version": 3
   },
   "file_extension": ".py",
   "mimetype": "text/x-python",
   "name": "python",
   "nbconvert_exporter": "python",
   "pygments_lexer": "ipython3",
   "version": "3.6.1"
  }
 },
 "nbformat": 4,
 "nbformat_minor": 0
}