1_ClusteringTweetsKMeans++_Heterogeneity_toPublish.ipynb

{
 "cells": [
  {
   "cell_type": "code",
   "execution_count": 1,
   "metadata": {
    "collapsed": false
   },
   "outputs": [],
   "source": [
    "\n",
    "import json\n",
    "from writereadfile import *"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "#the training corpus contains 281338 unique tweets, no retweets included, collected from Ecuador in Nov2016\n",
    "#plus a pool of politicians tweets with 38551 tweets\n",
    "#training corpus has 319889 tweets\n",
    "#tests applied with stemming and NOStemming, at the end best results with NO Stemming\n",
    "#tweets saved in:\n",
    "'tweets_inCorpusReady'\n",
    "\n",
    "#the txt file to train word2vec is: tweetsNOStemmed_corpusReady_word2vec\n",
    "#the model or representation of words in vec had 300 dimensions:\n",
    "tweetsNOStemmed_words2vec300.bin"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "# Create the vector representation for the documents (tweets) in training data to start to detect clusters with k-means"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "model300 = word2vec.load('tweetsNOStemmed_words2vec300.bin')"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 2,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "import word2vec\n",
    "import numpy as np"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 17,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "##find the vector representation for the docs to then cluster them\n",
    "training_corpus=load_json('tweets_inCorpusReady')\n",
    "#Please, in case of requiring the training tweets contact the autor in lore_10_5@hotmail.com"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 18,
   "metadata": {
    "collapsed": false
   },
   "outputs": [
    {
     "data": {
      "text/plain": [
       "['Azuay',\n",
       " 'miabuelasabia',\n",
       " 125492611,\n",
       " 793552443330166784,\n",
       " 'El verdadero amor no se conoce por lo que exige, sino por lo que ofrece. \\n(Jacinto Benavente)',\n",
       " 'verdadero amor conoce exige sino ofrece jacinto benavente']"
      ]
     },
     "execution_count": 18,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "training_corpus[0]"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 19,
   "metadata": {
    "collapsed": false
   },
   "outputs": [
    {
     "data": {
      "text/plain": [
       "319889"
      ]
     },
     "execution_count": 19,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "len(training_corpus)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 11,
   "metadata": {
    "collapsed": false
   },
   "outputs": [],
   "source": [
    "def docs_vectors(corpus, model): #calculate and save in a matrix the vector representation for the tweets in the corpus\n",
    "    dimensions=model.vectors.shape[1]\n",
    "    vocabulary=list(model.vocab)\n",
    "    documents_vectors=[]\n",
    "    training_tweets_new=[] #tweets only with words in vocabulary\n",
    "    for doc in corpus:\n",
    "        words_inDoc= doc[5].split()\n",
    "        doc_vector=[model[w] for w in words_inDoc if w in vocabulary]\n",
    "        if len(doc_vector)>0:\n",
    "            documents_vectors.append(np.sum(doc_vector, axis=0))\n",
    "            training_tweets_new.append(doc)\n",
    "        #tweets with no vector representation are going to be removed from clustering founding process\n",
    "        #else:\n",
    "            #documents_vectors.append(np.zeros(shape=(1,dimensions)))\n",
    "    documents_vectors = np.array(documents_vectors)\n",
    "    return(documents_vectors, training_tweets_new)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 62,
   "metadata": {
    "collapsed": false
   },
   "outputs": [],
   "source": [
    "docs_representation=docs_vectors(training_corpus, model300)"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "# Apply k++ to find the centroids in a smart way"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 67,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "from sklearn.metrics import pairwise_distances\n",
    "import sys\n",
    "import matplotlib.pyplot as plt"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 73,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "from scipy import spatial"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 12,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "def assign_clusters(data, centroids):\n",
    "    \n",
    "    # Compute distances between each data point and the set of centroids:\n",
    "    # Fill in the blank (RHS only)\n",
    "    distances_from_centroids = pairwise_distances(data, centroids, metric='cosine') #metric='euclidean')\n",
    "    \n",
    "    # Compute cluster assignments for each data point:\n",
    "    # Fill in the blank (RHS only)\n",
    "    cluster_assignment = np.argmin(distances_from_centroids,axis=1)\n",
    "    \n",
    "    return cluster_assignment"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 13,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "def revise_centroids(data, k, cluster_assignment):\n",
    "    new_centroids = []\n",
    "    for i in range(k):\n",
    "        # Select all data points that belong to cluster i. Fill in the blank (RHS only)\n",
    "        member_data_points = data[cluster_assignment==i]\n",
    "        # Compute the mean of the data points. Fill in the blank (RHS only)\n",
    "        centroid = member_data_points.mean(axis=0)\n",
    "        \n",
    "        # Convert numpy.matrix type to numpy.ndarray type\n",
    "        #centroid = centroid.A1  I don't have a numpy.matrix\n",
    "        new_centroids.append(centroid)\n",
    "    new_centroids = np.array(new_centroids)\n",
    "    \n",
    "    return new_centroids"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 14,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "def kmeans(data, k, initial_centroids, maxiter, record_heterogeneity=None, verbose=False):\n",
    "    '''This function runs k-means on given data and initial set of centroids.\n",
    "       maxiter: maximum number of iterations to run.\n",
    "       record_heterogeneity: (optional) a list, to store the history of heterogeneity as function of iterations\n",
    "                             if None, do not store the history.\n",
    "       verbose: if True, print how many data points changed their cluster labels in each iteration'''\n",
    "    centroids = initial_centroids[:]\n",
    "    prev_cluster_assignment = None\n",
    "    \n",
    "    for itr in range(maxiter):        \n",
    "        if verbose:\n",
    "            print(itr)\n",
    "        \n",
    "        cluster_assignment = assign_clusters(data, centroids)\n",
    "        centroids = revise_centroids(data, k, cluster_assignment)\n",
    "            \n",
    "        # Check for convergence: if none of the assignments changed, stop\n",
    "        if prev_cluster_assignment is not None and \\\n",
    "          (prev_cluster_assignment==cluster_assignment).all():\n",
    "            break\n",
    "        \n",
    "        # Print number of new assignments \n",
    "        if prev_cluster_assignment is not None:\n",
    "            num_changed = np.sum(prev_cluster_assignment!=cluster_assignment)\n",
    "            if verbose:\n",
    "                print('    {0:5d} elements changed their cluster assignment.'.format(num_changed))   \n",
    "        \n",
    "        # Record heterogeneity convergence metric\n",
    "        if record_heterogeneity is not None:\n",
    "            score = compute_heterogeneity(data, k, centroids, cluster_assignment)\n",
    "            record_heterogeneity.append(score)\n",
    "        \n",
    "        prev_cluster_assignment = cluster_assignment[:]\n",
    "        \n",
    "    return centroids, cluster_assignment"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 15,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "def smart_initialize(docs_vectors, k, seed=None):\n",
    "    '''Use k-means++ to initialize a good set of centroids'''\n",
    "    if seed is not None: # useful for obtaining consistent results\n",
    "        np.random.seed(seed)\n",
    "    centroids = np.zeros((k, docs_vectors.shape[1])) #structure inicialized where to save centroids found\n",
    "    \n",
    "    # Randomly choose the first centroid.\n",
    "    # Since we have no prior knowledge, choose uniformly at random\n",
    "    idx = np.random.randint(docs_vectors.shape[0])\n",
    "    #print(idx)\n",
    "    centroids[0] = docs_vectors[idx,:] ##docs_vectors[idx,:].toarray() if docs_vectors[idx,:] were a sparce matrix\n",
    "    # Compute distances from the first centroid chosen to all the other data points\n",
    "    squared_distances = pairwise_distances(docs_vectors, centroids[0:1], metric='cosine').flatten()**2\n",
    "    \n",
    "    for i in range(1, k):\n",
    "        # Choose the next centroid randomly, so that the probability for each data point to be chosen\n",
    "        # is directly proportional to its squared distance from the nearest centroid.\n",
    "        # Roughtly speaking, a new centroid should be as far as from ohter centroids as possible.\n",
    "        idx = np.random.choice(docs_vectors.shape[0], 1, p=squared_distances/sum(squared_distances))\n",
    "        centroids[i] = docs_vectors[idx,:] #.toarray()\n",
    "        # Now compute distances from the centroids to all data points\n",
    "        squared_distances = np.min(pairwise_distances(docs_vectors, centroids[0:i+1], metric='cosine')**2,axis=1)\n",
    "    \n",
    "    return centroids"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 16,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "def compute_heterogeneity(data, k, centroids, cluster_assignment):\n",
    "    heterogeneity = 0.0\n",
    "    for i in range(k):\n",
    "        \n",
    "        # Select all data points that belong to cluster i.\n",
    "        member_data_points = data[cluster_assignment==i, :]\n",
    "        \n",
    "        if member_data_points.shape[0] > 0: # check if i-th cluster is non-empty\n",
    "            # Compute distances from centroid to data points (RHS only)\n",
    "            distances = pairwise_distances(member_data_points, [centroids[i]], metric='cosine')\n",
    "            squared_distances = distances**2\n",
    "            heterogeneity += np.sum(squared_distances)\n",
    "        \n",
    "    return heterogeneity"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 17,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "def plot_heterogeneity(heterogeneity, seeds, k):\n",
    "    plt.figure(figsize=(7,4))\n",
    "    plt.plot(seeds, heterogeneity, linewidth=4)\n",
    "    plt.xlabel('# Iterations')\n",
    "    plt.ylabel('Heterogeneity')\n",
    "    plt.title('Heterogeneity of clustering over time, K={0:d}'.format(k))\n",
    "    plt.rcParams.update({'font.size': 16})\n",
    "    #plt.tight_layout()\n",
    "    plt.show()"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 18,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "def kmeans_multiple_runs(data, k, maxiter, num_runs, seed_list=None, verbose=False):\n",
    "    heterogeneity = {}\n",
    "    \n",
    "    min_heterogeneity_achieved = float('inf')\n",
    "    best_seed = None\n",
    "    final_centroids = None\n",
    "    final_cluster_assignment = None\n",
    "    \n",
    "    for i in range(num_runs):\n",
    "        \n",
    "        # Use UTC time if no seeds are provided \n",
    "        if seed_list is not None: \n",
    "            seed = seed_list[i]\n",
    "            np.random.seed(seed)\n",
    "        else: \n",
    "            seed = int(time.time())\n",
    "            np.random.seed(seed)\n",
    "        \n",
    "        # Use k-means++ initialization\n",
    "        initial_centroids = smart_initialize(data, k, seed)\n",
    "        \n",
    "        # Run k-means\n",
    "        centroids, cluster_assignment = kmeans(data, k, initial_centroids, maxiter=maxiter,\n",
    "                                           record_heterogeneity=None, verbose=False)\n",
    "        \n",
    "        # To save time, compute heterogeneity only once in the end\n",
    "        heterogeneity[seed] = compute_heterogeneity(data, k, centroids, cluster_assignment)\n",
    "        \n",
    "        if verbose:\n",
    "            print('seed={0:06d}, heterogeneity={1:.5f}'.format(seed, heterogeneity[seed]))\n",
    "            sys.stdout.flush()\n",
    "        \n",
    "        # if current measurement of heterogeneity is lower than previously seen,\n",
    "        # update the minimum record of heterogeneity.\n",
    "        if heterogeneity[seed] < min_heterogeneity_achieved:\n",
    "            min_heterogeneity_achieved = heterogeneity[seed]\n",
    "            best_seed = seed\n",
    "            final_centroids = centroids\n",
    "            final_cluster_assignment = cluster_assignment\n",
    "    \n",
    "    # Return the centroids and cluster assignments that minimize heterogeneity.\n",
    "    return final_centroids, final_cluster_assignment"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 19,
   "metadata": {
    "collapsed": false
   },
   "outputs": [],
   "source": [
    "##\n",
    "\n",
    "def plot_k_vs_heterogeneity(k_values, heterogeneity_values):\n",
    "    plt.figure(figsize=(7,4))\n",
    "    plt.plot(k_values, heterogeneity_values, linewidth=4)\n",
    "    plt.xlabel('K')\n",
    "    plt.ylabel('Heterogeneity')\n",
    "    plt.title('K vs. Heterogeneity')\n",
    "    plt.rcParams.update({'font.size': 10})\n",
    "    plt.show()\n"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 21,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "def visualize_document_clusters(training_corpus, docs_representation, centroids, cluster_assignment, k, model, display_content=True):\n",
    "    '''training_corpus: original data, the tweet is in tweet[4]\n",
    "       docs_representation: data matrix, array format\n",
    "       display_content: if True, display 8 nearest neighbors of each centroid'''\n",
    "    \n",
    "    print('==========================================================')\n",
    "    vocabulary=list(model.vocab)\n",
    "    #distances_words = pairwise_distances(model.vectors, centroids, metric='cosine').flatten()\n",
    "    # Visualize each cluster c\n",
    "    for c in range(k):\n",
    "        # Cluster heading\n",
    "        print('Cluster {0:d}    '.format(c)),\n",
    "        # Print top 5 words in model word2vec that are nearest to the centroid vec\n",
    "        #idx = centroids[c].argsort()[::-1]\n",
    "        distances_words = pairwise_distances(model.vectors, centroids[c].reshape(1, -1), metric='cosine').flatten()\n",
    "        idx = distances_words.argsort()[:5] ## the 5 first items index which distance is smaller\n",
    "        near_words=[vocabulary[i] for i in idx]\n",
    "        dist_nearWords=[distances_words[i] for i in idx]\n",
    "        print(near_words)\n",
    "        print(dist_nearWords)\n",
    "        print('\\n')\n",
    "        \n",
    "        if display_content:\n",
    "            # Compute distances from the centroid to all data points in the cluster,\n",
    "            # and compute nearest neighbors of the centroids within the cluster.\n",
    "            distances = pairwise_distances(docs_representation, centroids[c].reshape(1, -1), metric='cosine').flatten()\n",
    "            distances[cluster_assignment!=c] = float('inf') # remove non-members from consideration if the data point was not assigned to c put and 'inf' insteaad of the distance value calculated\n",
    "            nearest_neighbors = distances.argsort()\n",
    "            # For 8 nearest neighbors, print the title as well as first 180 characters of text.\n",
    "            # Wrap the text at 80-character mark.\n",
    "            for i in range(8):\n",
    "                text = training_corpus[nearest_neighbors[i]][4]\n",
    "                print(text)\n",
    "                print(distances[nearest_neighbors[i]])\n",
    "        print('==========================================================')"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": []
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": []
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "# Re-make experiments with cosine metric as pairwise distance"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "in the methods that contain pairwise 'euclidean' i changed for 'cosine'"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 8,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "import json\n",
    "from writereadfile import *\n",
    "import word2vec\n",
    "import numpy as np\n",
    "from sklearn.metrics import pairwise_distances\n",
    "import sys\n",
    "import matplotlib.pyplot as plt\n",
    "import time"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 9,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "#model100 = word2vec.load('tweetsNOStemmed_words2vec100.bin')\n",
    "model300 = word2vec.load('tweetsNOStemmed_words2vec300.bin')\n",
    "#model500 = word2vec.load('tweetsNOStemmed_words2vec500.bin')"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 23,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "training_corpus=load_json('tweets_inCorpusReady')"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 24,
   "metadata": {
    "collapsed": false
   },
   "outputs": [],
   "source": [
    "#docs_representation=docs_vectors(training_corpus, model100)\n",
    "docs_representation300,training_tweets_new300 = docs_vectors(training_corpus, model300)\n",
    "#docs_representation500=docs_vectors(training_corpus, model500)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 33,
   "metadata": {
    "collapsed": false,
    "scrolled": true
   },
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "seed=000000, heterogeneity=13418.63674\n",
      "seed=020000, heterogeneity=13420.86611\n",
      "seed=040000, heterogeneity=13420.84547\n",
      "seed=060000, heterogeneity=13418.63674\n",
      "seed=080000, heterogeneity=13420.86788\n",
      "seed=000000, heterogeneity=10734.37520\n",
      "seed=020000, heterogeneity=10730.32532\n",
      "seed=040000, heterogeneity=10882.51270\n",
      "seed=060000, heterogeneity=10852.69409\n",
      "seed=080000, heterogeneity=11147.28195\n",
      "seed=000000, heterogeneity=9890.11181\n",
      "seed=020000, heterogeneity=9997.20992\n",
      "seed=040000, heterogeneity=9959.95534\n",
      "seed=060000, heterogeneity=10260.61658\n",
      "seed=080000, heterogeneity=10117.25715\n",
      "seed=000000, heterogeneity=8829.65410\n",
      "seed=020000, heterogeneity=8792.94090\n",
      "seed=040000, heterogeneity=8850.02012\n",
      "seed=060000, heterogeneity=9059.26924\n",
      "seed=080000, heterogeneity=8809.87698\n",
      "seed=000000, heterogeneity=7941.17121\n",
      "seed=020000, heterogeneity=7943.94501\n",
      "seed=040000, heterogeneity=7943.27815\n",
      "seed=060000, heterogeneity=7916.68070\n",
      "seed=080000, heterogeneity=7944.11005\n",
      "seed=000000, heterogeneity=5985.98224\n",
      "seed=020000, heterogeneity=6004.46914\n",
      "seed=040000, heterogeneity=6043.25286\n",
      "seed=060000, heterogeneity=6033.44668\n",
      "seed=080000, heterogeneity=5970.96701\n",
      "seed=000000, heterogeneity=5009.26236\n",
      "seed=020000, heterogeneity=5013.82306\n",
      "seed=040000, heterogeneity=5028.92459\n",
      "seed=060000, heterogeneity=5055.68063\n",
      "seed=080000, heterogeneity=5038.33754\n",
      "seed=000000, heterogeneity=3400.95493\n",
      "seed=020000, heterogeneity=3459.15463\n",
      "seed=040000, heterogeneity=3506.88946\n",
      "seed=060000, heterogeneity=3507.33721\n",
      "seed=080000, heterogeneity=3440.85523\n"
     ]
    },
    {
     "data": {
      "image/png": "iVBORw0KGgoAAAANSUhEUgAAAc0AAAEZCAYAAAD16n4kAAAABHNCSVQICAgIfAhkiAAAAAlwSFlz\nAAALEgAACxIB0t1+/AAAIABJREFUeJzt3XmYXGWd9vHvnQ0SshIggYSERZJhD4shikoDsgRlcQYw\nRFbBkcEZEGccQecd4usKDgMqI+CAvARZoogYkSWANKJAWMMiS0AIWUlYskDYsvzeP55TdHWnu7p6\nqT5V3ffnuupKneecOvU7oZs75znPeY4iAjMzM2tdr7wLMDMzqxUOTTMzszI5NM3MzMrk0DQzMyuT\nQ9PMzKxMDk0zM7MyOTTNrOpJmirp9rzrMHNommUkvSzpgKLlKZLelPTJLvr+sZLWS+rVpP0qSf+3\nzH3cI+mLlakwPxFxXUQcWljO/p62y7Mm65kcmmbNkHQS8FNgckTc14VfnetsI00Du4p5VhbLRa38\ngph1GUn/CPwIODgiZrewzTOSDita7i3pNUkTJG0k6RpJr0taLmm2pM07sb5Jkv6S7ftxSftl7d8F\nPglcImmVpJ9k7X8naZakNyQ9K+mYon1dJelnkv4g6S2gTtJgSdMlLcvOvr9VtH0vSRdmx/o3SV8p\nPjvOPnuFpMWSFkj6jiRl606SdJ+kH2Vn8H+TVHz22Opns/f3AgKezI7zWElPSfpM0b76ZDXu1ll/\n72YAffIuwKzKnAHsCxwQEU+X2O46YCpwa7Z8KPBaRMzJQncwMAr4AJgAvNuGGtTiCmkUcAvwhYi4\nQ9KBwG8kjY+I/5C0L3BNRPwi234AMAv4D+AQYHfgTklPR8Sz2W6PI51RPyhpI+B/gUHANsDmwCxJ\niyPiKuAfs/3sBrwD3Ejjs77pwGJgO2BgVuv8bJ8AE4GrgOHAl4Ers7+ncj4bABGxn6T1wK4R8XJ2\nnGOAE4A/ZNt+BlgcEU+2+Lds1g4+0zRr7NPAg60EJsD1wBGSNs6WjyMFKcAaUiiMi+TxiHi7zO8X\n8Fp2JvampOXZvgu+APwhIu4AiIi7gUeAwzbcFQCfBV6OiOlZLXOA3wBHF23zu4h4sKj2Y4FzIuKd\niHgFuJAUSADHAD+OiCURsRL44YeFSyNI/3g4OyLei4jXgYub1P9KRPwi0qTXVwNbStpC0hZlfLa5\nv6uCa4HJkgZmy8cD15T4rFm7ODTNGjsdGCfpylIbRcTfgGeAwyX1B46gITSvAe4AbpC0UNIPJfUu\n8/sDGB4Rm2avYaSALhgLHNskVPcFRrawv7HApCbbTwVGFG2zoOj9ZkBf0hlewSs0nA1u1WT74vdj\nss8uKfquy7J9Frz64YFGFM6+B2Z1tvbZFkXEEuAvwD9IGgJMJgWpWady96xZY8uAA4E/SfpZRJxR\nYtsbSAHUG/hrRLwEEBFrge8A38m6DW8Dnid1S5ZDtDzQZQEwPSK+3ML6pp9bANRHxCElvq/4M6+T\nzjbHAs9lbWOBRdn7JcDoou3HNPmu90ih39aBOh35bMF04DRS+N6fBalZp/KZplkTEfEqcABwiKT/\nLrHpDcDBwD/RcJaJpDpJu2SDY94mhdC6Mr++xeuZmV+Szm4PzgblbCxpP0lbZeuXkq4JFtxCOnM+\nPhsc01fS3pLGN7fziFgP/Ar4nqSBksYCZ9PQ1fkr4CxJW0kaCvx70WdfJV0/vUjSICXbSfpUawfd\njs++2uQ4AW4G9gTOJAWoWadzaJo1+PAMJyIWks44/0HS95rdOP2P/gFgEjCjaNVI0gCZlcBfgXtI\nYYekSyX9rJwaStR1JPBN4DVS1+m/0fC7/GPgmGyk7MXZtdSDgSmkQTaLSdchNypRw5mkQT4vAX8C\nfpkNAoI0KGcW8CTwKGngzdosbAFOBPqRuq7fBH5Ny13HTY+3LZ+dBkzPunKPBoiI90jXa7cFbirx\nnWbtpko+hDq7LvRZYGlE7NZk3b8BFwCbRcSbWdtPSNciVgMnZ4MWCvfMfYv0C/a9iJiete8J/D9g\nY+DWiPhqxQ7GzDaQ3TJyaURsm3ctAJL+D7BDRJyYdy3WPVX6TPMq0vD0RiSNJo1SfKWobTKwfUTs\nQBqKflnWPgz4T+CjwD7AedmFfoBLgdMiYhypC6rUdRsz66CsO3iy0n2po4DzqJKzOkmbAqcCl+dd\ni3VfFQ3NiPgzsLyZVRcBX2/SdiTZdYjshvIh2RD2Q4BZEbEyIlaQuoYOlTQSGBQRD2Wfnw4cVYHD\nMLMGAr5N6j59lNT9fF6uFQGSTiON+P1DRPwl73qs++ry0bOSDgcWRMRT2WQfBaNoPHx9YdbWtH1R\nUfvCZrY3swrJbhOZmHcdTUXEFcAVeddh3V+XhmZ2P9u3gIOaW93McjTTTivtZmZmFdHVZ5rbk6bm\neiKbU3I08JikiaQzxa2Lth1NGum3EKhr0n5Pie2bJcmBamZmjUREa7d5NdIVt5woexERT0fEyIjY\nLhtttxDYIyKWATNJQ86RNAlYERFLSTOrHCRpSDYo6CDgjmy4/ypJE7MAPhH4XalCIqKmX+edd17u\nNfTk+n0M1fPyMeT/qvX6I9p3HlXR0JR0HXA/aWTrfEmnNNnkw27WiLgVeFnSi6TRb2dk7ctJs6s8\nAswGvh1pQBDZNlcCc4EXIsIPqTUzs4qpaPdsRExtZf12TZb/uYXt/h/pfsym7Y8Cu7a/QjMzs/J5\nRqAaUldXl3cJHVLr9YOPoVr4GPJX6/W3V0VnBKomkqKnHKuZmbVOElGFA4HMzMy6BYemmZlZmfw8\nzRbcdRc89lh6PfEEPP44bLxx3lWZmVmefE2zBdtuC/PmNSw//DDsvXfn12VmZvnwNc1OtOeejZcf\neyyfOszMrHo4NFvg0DQzs6Ycmi1waJqZWVO+ptmCpUth5MiG5Y02grfegr59K1CcmZl1OV/T7EQj\nRsBWWzUsv/8+PPtsfvWYmVn+HJoluIvWzMyKOTRLcGiamVkxh2YJDk0zMyvmgUAlLFgAY8Y0LG+y\nCaxcCb17d3JxZmbW5TwQqJONHg2bbdawvHo1vPBCfvWYmVm+HJolSO6iNTOzBg7NVjg0zcyswKHZ\nCoemmZkVODRb0Vxo9pCxU2Zm1oRDsxXbbQdDhjQsr1wJL7+cXz1mZpYfh2YrJNhjj8Zt7qI1M+uZ\nHJpl8HVNMzMDh2ZZHJpmZgYOzbJ4MJCZmYGn0SvLunUweDC8805D24IFacYgMzOrTZ5Gr0J694YJ\nExq3uYvWzKzncWiWydc1zcysoqEp6UpJSyU9WdR2gaRnJc2R9BtJg4vWnSvphWz9wUXth0p6TtJc\nSd8oat9G0oOSnpd0vaQ+lToWh6aZmVX6TPMq4JAmbbOAnSNiAvACcC6ApJ2AY4EdgcnAz5T0Ai7J\n9rMzcJykv8v2dT5wYUSMB1YAp1bqQByaZmZW0dCMiD8Dy5u03RUR67PFB4HCcJojgBsiYm1EzCMF\n6sTs9UJEvBIRa4AbgCOzzxwA/CZ7fzXwuUody047Qb9+DcuLFsHSpZX6NjMzq0Z5X9P8InBr9n4U\nsKBo3aKsrWn7QmCUpOHA8qIAXghsValC+/aF3XZr3Pb445X6NjMzq0a5haakbwFrIuL6QlMzm0Ur\n7U3XVfT+GXfRmpn1bBUbOFOKpJOAw0jdqwULga2LlkcDi0nBOKZpe0S8LmmopF7Z2WZh+xZNmzbt\nw/d1dXXU1dW1qW6HpplZ7aqvr6e+vr5D+6j45AaStgF+HxG7ZsuHAhcCn4qIN4q22wm4FtiH1CV7\nJ7AD6Wz4eeBAYAnwEDAlIp6TNAO4KSJmSLoUeCIiLmuhjnZPblDw8MMwcWLD8rbbwksvdWiXZmaW\nk/ZMblDR0JR0HVAHDAeWAucB3wT6AYXAfDAizsi2P5c0AnYNcFZEzMraDwV+TArQKyPih1n7tqSB\nQcOAx4Hjs8FCzdXS4dB87z0YODDNEFTw5pswbFiHdmtmZjmoutCsJp0RmgC77w5PPtmwfPfdcMAB\nLW9vZmbVydPodQFf1zQz67kcmm3k0DQz67kcmm3k0DQz67l8TbON3n47PSassCsJVq6EQYM6vGsz\nM+tCvqbZBQYOhPHjG5Yj4Ikn8qvHzMy6jkOzHdxFa2bWMzk028GhaWbWMzk028GhaWbWM3kgUDus\nWNF4FqDeveGtt6B//07ZvZmZdQEPBOoiQ4fCdts1LK9bB089lV89ZmbWNRya7eQuWjOznseh2U4O\nTTOznseh2U4OTTOznscDgdpp2TIYMaJhuV+/NBioX79O+wozM6sgDwTqQltsAaNHNyx/8AE880x+\n9ZiZWeU5NDtgjz0aL7uL1syse3NodoCva5qZ9SwOzQ5waJqZ9SweCNQBCxfC1ls3LPfvD6tWQZ8+\nnfo1ZmZWAR4I1MVGjYLNN29YfvddmD07v3rMzKyyHJodIMFBBzVuu/nmfGoxM7PKc2h20FFHNV7+\n7W/Tg6nNzKz78TXNDnrrLdhss3SfZsHTT8POO3f6V5mZWSfyNc0cDBoEBx7YuM1dtGZm3ZNDsxM0\n7aJ1aJqZdU/unu0Er74KW23V+Frm/PmNb0cxM7Pq4u7ZnIwcCZMmNW6bOTOfWszMrHIcmp3EXbRm\nZt2fu2c7ydy5MH58w3KfPunxYcOGVewrzcysA6que1bSlZKWSnqyqG2YpFmSnpd0h6QhRet+IukF\nSXMkTShqP0nS3OwzJxa17ynpyWzdxZU8ltaMGwc77tiwvHYt3HprfvWYmVnnq3T37FXAIU3azgHu\niojxwB+BcwEkTQa2j4gdgC8Dl2Xtw4D/BD4K7AOcVxS0lwKnRcQ4YJykpt/VpdxFa2bWvVU0NCPi\nz8DyJs1HAldn76/Olgvt07PPzQaGSBpBCt1ZEbEyIlYAs4BDJY0EBkXEQ9nnpwNNYqtrNQ3N226D\n997LpxYzM+t8eQwE2iIilgJExKvAFln7KGBB0XYLs7am7YuK2hc2s31u9t473XpSsHo13H13fvWY\nmVnnqqaHWDW9GCsgmmmnlfYWTZs27cP3dXV11NXVtanA1vTqBUceCZde2tB2883wmc906teYmVk7\n1NfXU19f36F9VHz0rKSxwO8jYrds+VmgLiKWZl2s90TEjpIuy97PyLZ7DtgP2D/b/vSs/TLgHuDe\nwmez9inAfhHxTy3UUdHRswWzZsEhRVdWhw9PEx0MGFDxrzYzszaoutGzGdH4rHAmcHL2/mTgd0Xt\nJwJImgSsyLpx7wAOkjQkGxR0EHBH1rW7StJESco++ztyVlcHQ4c2LL/xBlxxRW7lmJlZJyorNCX1\nbs/OJV0H3E8a2Tpf0inAD0kh+DxwYLZMRNwKvCzpReBy4IysfTnwHeARYDbw7WxAENk2VwJzgRci\n4vb21NmZ+vWD009v3PajHzV+CoqZmdWmsrpnJb0M3AhcFRHPVLyqCuiq7lmApUthm20aj5y94go4\n9dQu+XozMytDJbtndyOdzV0h6UFJ/yhpcJsr7CFGjIAvfalx2w9/COvW5VOPmZl1jjYPBJL0KeB6\nYCjp7PM7EfFiBWrrVF15pglp8M/226eZgQquvx6mTOmyEszMrISKnWlK6i3pCEm/BX4MXAhsB/we\n8GRxzRgzBk48sXHb97/f+PFhZmZWW8q9pvkS6TaPKyPi/ibrfhIRZ1aovk7T1WeakCZx33FHWL++\noW3mTDj88C4tw8zMmtGeM81yQ/MT2ZR4xW37RsRf2lhjbvIITUjdsTNmNCzvsw888ACoTf+ZzMys\ns1UyNB+LiD1ba6tmeYXmE0/AhAmN2+6+Gw44oMtLMTOzIu0JzZLT6En6GPBxYHNJXytaNRho172b\nPc3uu8NnPwu33NLQ9v3vOzTNzGpRawOB+gEDSeE6qOi1Cji6sqV1H9/8ZuPlu++G2bPzqcXMzNqv\n3O7ZsRHxShfUUzF5dc8WHHAA3HNPw/IRR8Dvcp/0z8ys5+r0a5qSLo6Ir0r6Pc08QSQijmh7mfnI\nOzTvugsOOqhx25NPwq675lOPmVlPV4nQ3CsiHpW0X3PrI+LeNtaYm7xDMwImTYKHHmpoO+44uO66\n3EoyM+vRKjZ6Ntt5f2BMRDzfnuLylndoQuqOPeqohuVeveD55+EjH8mvJjOznqqSMwIdDswBbs+W\nJ0ia2fYSe7bDD4dddmlYXr8ezj8/v3rMzKxtyp2wfRowEVgBEBFzgG0qU1L31asXnHtu47arr4YF\nC/Kpx8zM2qbc0FwbESsrWkkPceyxaSL3gjVr4MIL86vHzMzKV25oPi1pKtBb0g6Sfkp6uLS1UZ8+\n8I1vNG77+c9h2bJ86jEzs/KVG5r/AuwMvE96LNgq4KuVKqq7O/FEGDWqYfndd+G//iu/eszMrDxt\nfp5mraqG0bPFLr4Yzj67YblvX3j6aRg3Lr+azMx6kkpO2D4O+DfS4J8P56uNiJqZQbXaQnP1athh\nB1iypKHtkEPgttv8BBQzs65QydB8ArgMeBRYV2iPiEfbWmReqi00Aa6/HqZObdx2003wuc/lU4+Z\nWU9SydB8NCL2andlVaAaQzMC9t8f7i2aV2nMGHj2WRgwIL+6zMx6gopNbgD8XtIZkraUtGnh1Y4a\nrYgEl1wCvYsesjZ/fnp0mJmZVZ9yzzRfbqY5ImK7zi+pMqrxTLPgX/8V/vu/G5b79UuDgnbYIb+a\nzMy6u4rOPVvrqjk0V62C8ePh1Vcb2g49FG691YOCzMwqpZJzzw6Q9B+Sfp4t7yDps+0p0jY0ePCG\nswLdfruft2lmVm3K7Z6dQRo5e2JE7JI98eSBiJhQ6QI7SzWfaYIHBZmZdbVKDgTaPiIuANYARMS7\ngDsOO1FLg4J+8IP8ajIzs8bKDc0PsrPLAJC0PWlKPetEu+wCZ57ZuO2CC+DFF/Opx8zMGis3NM8j\nPUtza0nXAncD/96RL5Z0tqSnJT0p6VpJ/SRtI+lBSc9Lul5Sn2zbfpJukPSCpAckjSnaz7lZ+7OS\nDu5ITdVg2jQYObJh+YMPUpBWcc+ymVmPUVZoRsSdwN8DJ5MmbN87Iurb+6WStiJNAr9nROxGmprv\nOOB84MKIGE96duep2UdOBd6MiB2Ai4ELsv3sBBwL7AhMBn4m1fZ408GDN5y8/bbbYKYf+W1mlrty\nR8/uCYwFlgCLgTGSti+cCbZTb2CTbB/9s/3uD/wmW381cFT2/shsGeBGoDDn7RHADRGxNiLmAS+Q\nHpZd06ZOhU99qnHbWWfBO+/kU4+ZmSXlds/+DHgQ+Dnwv8ADwA3A3PZ0iUbEYuBCYD6wCFgJPAas\niIj12WYLgcIDtEYBC7LPrgNWZjMSfdieWVT0mZrV3KCgV16BH/4wv5rMzKzoiSWtmAecGhF/hQ+7\nRb8OfAe4CZjVli+VNJR09jiWFJi/JnWvNlW4ktdcl2uUaG/WtGnTPnxfV1dHXV1dWfXmYddd4V/+\nJT1CrOCCC+BjH4PJzf1NmZlZSfX19dTX13doH+Xepzmn6T2Zhbbm1pWxv6OBQyLiS9nyCcDHgKOB\nkRGxXtIk4LyImCzp9uz9bEm9gSURsYWkc0jT+Z2f7efD7Zr5zqq+T7M5K1emmYKWLm3c/u//Dt/9\nbnoGp5mZtU8l79N8XtKlkvbLXj8jdc1uRHbvZhvNByZJ2jgbuHMg8FfgHuCYbJuTgMKcODOzZbL1\nfyxqn5KNrt0W+AjwUDvqqUpDhjSek7bgggvSNc9587q8JDOzHq3cM83+wBnAJ0hdon8mXed8DxgQ\nEW+3+Yul84AppNB9HDgNGE26Vjosazs+ItZk4XwNsAfwBjAlG/iDpHNJo2vXAGdFRLNdxbV4pllw\nwQVw7rmwfn3j9qFD4Re/8PM3zczao6ITtkvqB4wnXTN8PiLac4aZm1oOTYD77oPjjoNFizZc98//\nDD/6EWy8cdfXZWZWqyr5EOo60i0f80hnmlsDJ0XEn9peZj5qPTQBXn8dTjkFbrllw3V77AEzZvhx\nYmZm5apkaD4KTI2I57PlccD1EbFXuyrNQXcITUgzA118MXzjG7Cmybn+wIHw85+nM1IzMyutkgOB\n+hYCEyAi5gIeu5kDCc4+G/78Z9h228br3n47TYzwpS95IgQzs0oo90zzF6RrmddkTV8A+kTEKRWs\nrVN1lzPNYitXwmmnwY03brhu551Td+3OO3d9XWZmtaCS3bMbAV+hYfTsn4CfRUTNPOmkO4YmpO7a\nyy+Hr34V3m/yX6N//zSz0CmnpDNUMzNrUJHQzCYTuDoiju9IcXnrrqFZ8MQTcOyxMHfuhuu+8AW4\n9FIYNKjr6zIzq1YVuaaZzfW6eXbLiVWp3XeHRx+FE07YcN2118Jee8Hjj3d9XWZm3Um53bOXA3uS\nZuBZXWiPiGbmq6lO3f1Ms9jVV8MZZ2w4GKhfvzTD0BlnuLvWzKySo2cXA7dk2w8qelkVOukkeOQR\n2GWXxu0ffJAmQjj6aFixIp/azMxqWdkzAgFI2iQiVre+ZfXpSWeaBe++m25PufzyDddtsw3ccAPs\ns0+Xl2VmVhUqdqYp6WOSngGezZZ3zyZttyrWvz9cdlkKx6aDgObNg098Av7rvzac09bMzJpX7jXN\n2aTHds2MiD2ytqcjYpfSn6wePfFMs9iLL8KUKWmwUFOHHZaug262WdfXZWaWl0pe0yQiFjRpWteW\nL7J8feQj8Je/pPs5m7r11jT69k81M5OwmVk+yg3NBZI+DkT27Mp/I+uqtdqx0UZw0UVw880wbFjj\ndYsXw/77w3e+A+v8zyEzs2aV2z27GfBj4NOkGYFmAWdGxJuVLa/z9PTu2abmz08Tu99//4brDjgA\nfvlL2HLLrq/LzKyrVLJ7dnxEfCEiRkTEFtnsQDu2vUSrFmPGQH09nHPOhuv++EeYMAFmNfs4bzOz\nnqvc0PxpmW1WQ/r2hR/8AG6/HTbfvPG6ZcvgkEPgm9+EtWvzqc/MrNqU7J6V9DHg48BXgYuKVg0G\nPhcRu1e2vM7j7tnSlixJc9Tec8+G6/bdF66/HrbeuuvrMjOrlEp0z/YDBgJ9aDwT0CrSLSjWTWy5\nJdx5J3z729CryU/FX/6SumtnzsynNjOzalHuQKCxEfGKZwTqGe69Nz3MevHiDdd99atw/vlpHlsz\ns1pWyYFAW3lGoJ5jv/1gzhyYPHnDdRdfnLpr//a3rq/LzCxv5YbmxcAhwBsAEfEE8KlKFWX523xz\nuOUWuOAC6NOn8bpHHoE994Rf/Sqf2szM8uIZgaxFvXrB178O990HY8c2XrdqFXz+83D66WlieDOz\nnsAzAlmrJk1KD7D+3Oc2XHf55elJKc891/V1mZl1tXJD83TgK8AoYCEwIVu2HmLYMPjNb+CnP91w\nENBTT8Fee6VJ383MurM2PU+zlnn0bOd57LHUNfviixuuO/FE+J//gYEDu74uM7O2aM/o2dYmN/gp\n0OIGEXFmW74sTw7NzvXWW/DlL6dJD5oaPz4NEtptt66vy8ysXJW45eQR4NHsdUTR+8LLeqhBg+Da\na+GKK9LDros9/zxMnJgegO1/p5hZd1J296ykxwsPoO6UL5aGAFcAuwDrgS8Cc4EZwFhgHnBsRKzM\ntv8JMBlYDZwcEXOy9pOAb5HOiL8XEdNb+D6faVbI00+n7tpnntlw3THHwP/+LwwZ0vV1mZmVUtGH\nUFOim7adfgzcGhE7ArsDzwHnAHdFxHjgj8C5AJImA9tHxA7Al4HLsvZhwH8CHwX2Ac7Lwti60C67\nwMMPw6mnbrju179O93Q+/HDX12Vm1tnaEpqdRtIg4JMRcRVARKzNziiPBApjMK/Olsn+nJ5tOxsY\nImkEacKFWRGxMiJWkJ7zeWjXHYkVDBiQumqvvXbDQUAvvZRmEbroInfXmlltKxmakt6StErSKmC3\nwvtCewe+dzvgdUlXSXpM0s8lDQBGRMRSgIh4Fdgi234UUDy5wsKsrWn7oqzNcjJ1ahpdO2FC4/Y1\na+BrX0v3dF52GbxZM48vNzNr0KfUyogYVMHv3RP4SkQ8IukiUtdsS+chTfuclW3bXF90i+cy06ZN\n+/B9XV0ddXV15VdsZdthB3jggTSb0CWXNF738MPpddZZcPjh6RaVQw/1BPBmVnn19fXU19d3aB+5\n3KeZda0+EBHbZcufIIXm9kBdRCyVNBK4JyJ2lHRZ9n5Gtv1zwH7A/tn2p2ftjbZr8p0eCJSDm26C\nL34RVq5seZvhw+G441KA7r03qE2X5c3M2qfSA4E6TdYFu0DSuKzpQOCvwEzg5KztZOB32fuZwIkA\nkiYBK7J93AEcJGlINijooKzNqsTf/316Ysohh7S8zRtvpDPSiRNhp53gBz+A+fO7rkYzs3LlNiOQ\npN1Jt5z0BV4CTgF6A78CtgbmA8dkA3yQdAlpkM9q4JSIeCxrP5mGW06+61tOqtfLL8MvfwnTpzc/\nm1AxCerq0tnnP/xDui/UzKwzdfqMQN2JQ7N6RMCDD6bwvOEGWLGi9Pb9+6cz1hNOgE9/Gnr37po6\nzax7c2iW4NCsTu+/D3/4QwrQP/wB1q4tvf2WW8IXvpDOQHfdtWtqNLPuyaFZgkOz+r3+ejrzvOYa\neOih1refMCGdfU6dCiNHVr4+M+teHJolODRry3PPpfC85hpY0PTx50307g0HH5zOPo88csO5cM3M\nmuPQLMGhWZvWr4d7703dtzfeCG+/XXr7wYPh6KNTgH7yk9Arl/HhZlYLHJolODRr3zvvwM03pwC9\n884UqKWMHZu6b084AcaNK72tmfU8Ds0SHJrdy5IlcN11cPXV8NRTrW+/zz7p7PPzn0+TKZiZOTRL\ncGh2X088kc4+r70Wli4tvW3fvvDZz6YAPewwT99n1pM5NEtwaHZ/a9embttrroHf/hbee6/09ptu\nClOmpACdONHT95n1NA7NEhyaPcuqVWng0PTpaSBRa8aNS+F5/PHpWqiZdX8OzRIcmj3XvHmp63b6\ndJg7t/Xt99svBejRR6fRuGbWPTk0S3BoWkSaNKEwfV9rz/TceGM46qgUoAcdBH1KPkjPzGqNQ7ME\nh6YV++ADuPXWFKC33JIekl3KiBFp+r6pU2HnnVOgmlltc2iW4NC0lrzxBsyYkQJ09uzyPjNiBGyz\nTbr+OXZNrdB5AAANF0lEQVRsw/vCnwMHVrBgM+sUDs0SHJpWjrlzG6bve+WV9u9n001Lh+rQoR6t\na5Y3h2YJDk1ri/Xr4b77Unj+6lfw1ludu/9Bg5oP1cL7zTd3qJpVmkOzBIemtdc778DMmWkGojlz\nYNGi1qfw66j+/RtCtLlQ3XJLz6tr1lEOzRIcmtZZ1qxJwTlvXurCLfxZeL9gQesDizqqb18YM6bl\nUB092qN9zVrj0CzBoWldZd06ePXVDcO0+M/WZivqqF69UnC2FKpjxsBGG1W2BrNq59AswaFp1SIC\nXnut+VAtvO/sa6jN2XLLlkN17FjYZJPK12CWJ4dmCQ5NqxURsGJF6VBtbWKGzjB8+IajfpuOADar\nZQ7NEhya1p289VZDiDYXqq097aUzDB5c+raazTbzCGCrbg7NEhya1pO8+y7Mn99yqC5eXPkRwAMG\nND8CuPDnyJEeAWz5cmiW4NA0a7BmDSxcWHoE8Nq1la2hX7/mRwAX/hw1yiOArbIcmiU4NM3Kt24d\nLFnS8gjg+fMrPwK4d+/mRwAX/tx6a48Ato5xaJbg0DTrPBGwbFnp22refruyNUitjwAeMKCyNVht\nc2iW4NA06zoRsHx56RHAy5dXvo7NNy8dqkOGVL4Gq14OzRIcmmbVZdWq0iOAly2rfA1Dh5YO1eHD\nPQK4O3NoluDQNKst77zT+gjgSv9Kb7JJ6VAdMcIjgGtZzYWmpF7AI8DCiDhC0jbADcAw4DHghIhY\nK6kfMB3YC3gd+HxEzM/2cS7wRWAtcFZEzGrhuxyaZt3IBx+0PgJ43brK1rDRRg0jgJsL1a228gjg\nalaLoXk2KQgHZ6E5A7gxIn4t6VJgTkRcLumfgF0j4gxJnwc+FxFTJO0EXAt8FBgN3AXs0Fw6OjTN\nepZ169LZaEuhOn8+vP9+ZWvo3TuN8m0pVLfeOt16Y/moqdCUNBq4Cvge8LUsNF8DRkTEekmTgPMi\nYrKk27P3syX1BpZExBaSzgEiIs7P9nkbMC0iZjfzfQ5NM/vQ+vWNRwA3N2hp9erK1iCls9GWbqsZ\nOzY9Js4qoz2hmWfHwUXA14EhAJKGA8sjojBPyUJgVPZ+FLAAICLWSVopadOs/YGifS4q+oyZWYt6\n9UqzEo0cCZMmbbg+Is3xW+q2mhUrOlZDRHrM3KJFcP/9zW+zxRalQ3Xw4I7VYG2TS2hK+gywNCLm\nSKorNGevYlG0rqko0W5m1iFSGj07fDjstVfz26xc2fwI4MKfr73W8TqWLUuvhx9ufv2wYaVDddNN\nPQK4M+V1prkvcISkw4D+wCDgYmCIpF7Z2eZoYHG2/UJga2Bx1j07JCKWSyq0FxR/ZgPTpk378H1d\nXR11dXWddkBm1vMMGQK77ZZezVm9uvQI4CVLOj4CePny9Jozp/n1AweWDtURI3pOqNbX11NfX9+h\nfeR+y4mk/YB/LRoIdFNEzMgGAj0REZdJOgPYJRsINAU4qslAoH1I3bJ34oFAZlYj3n8/jfJtKVQX\nLqz8COCNN95wBHBxqG61VRrQ1B3V1ECgDwtoHJrb0nDLyePA8RGxRtJGwDXAHsAbwJSImJd9/lzg\nVGANvuXEzLqRtWtbHwH8wQeVraFPn9ZHAPftW9kaKqUmQ7OrODTNrLtZvz49O7XUCOB33qlsDVJ6\nIk1LoTpmTPWOAHZoluDQNLOeJgLeeKN0qK5cWfk6RoxoOVTHjoVBgypfQ3McmiU4NM3MNrRiRekR\nwK+/XvkaNt20dKgOG1aZwUoOzRIcmmZmbbd6demJ9ZcsqXwNgwaVDtUttmhfqDo0S3Bompl1vvfe\na30E8Pr1re2lY/r3Lz0CeMstmx8B7NAswaFpZtb11qxJMx61FKrz56dtKqlv3w1HAG+zDZx8skOz\nRQ5NM7Pqs3596uJtKVRfeQXefbdS3+7QbJFD08ys9kSk6QhLheqqVe3du0OzRQ5NM7PuacWK0hPr\nv/FGS590aLbIoWlm1jO9/XbzI4BnzHBotsihaWZmxdozerZXpYoxMzPrbhyaZmZmZXJompmZlcmh\naWZmViaHppmZWZkcmmZmZmVyaJqZmZXJoWlmZlYmh6aZmVmZHJpmZmZlcmiamZmVyaFpZmZWJoem\nmZlZmRyaZmZmZXJompmZlcmhaWZmViaHppmZWZkcmmZmZmXKJTQljZb0R0nPSHpK0plZ+zBJsyQ9\nL+kOSUOKPvMTSS9ImiNpQlH7SZLmZp85MY/jMTOzniGvM821wNciYifgY8BXJP0dcA5wV0SMB/4I\nnAsgaTKwfUTsAHwZuCxrHwb8J/BRYB/gvOKg7W7q6+vzLqFDar1+8DFUCx9D/mq9/vbKJTQj4tWI\nmJO9fxt4FhgNHAlcnW12dbZM9uf0bPvZwBBJI4BDgFkRsTIiVgCzgEO77EC6WK3/kNZ6/eBjqBY+\nhvzVev3tlfs1TUnbABOAB4EREbEUUrACW2SbjQIWFH1sYdbWtH1R1mZmZtbpcg1NSQOBG4GzsjPO\naGnTZpajmXZK7MPMzKxDFJFPxkjqA9wC3BYRP87angXqImKppJHAPRGxo6TLsvczsu2eA/YD9s+2\nPz1rb7Rdk+9zmJqZWSMR0dzJV4vyDM3pwOsR8bWitvOBNyPifEnnAEMj4hxJhwFfiYjPSJoEXBwR\nk7KBQI8Ae5LOmh8B9squb5qZmXWqXEJT0r7An4CnSN2pAXwTeAj4FbA1MB84phCAki4hDfJZDZwS\nEY9l7ScD38r28d2ImN6lB2NmZj1GbmeaZmZmtSb30bOVJulQSc9lEyB8I+96yiHpSklLJT1Z1Nbi\nxA/VqD0TWFQbSRtJmi3p8ewYzsvat5H0YHYM12fX56uWpF6SHpM0M1uutfrnSXoi++/wUNZWMz9H\nAJKGSPq1pGcl/VXSPrV0DJLGZX//j2V/rpR0Zi0dA4CksyU9LelJSddK6tfW34duHZqSegGXkO7n\n3Bk4LptEodpdRaq5WLMTP1SxNk1gUY0i4n1g/4jYg3Rb1GRJ+wDnAxdmx7ACODXHMstxFvBM0XKt\n1b+eNOBvj4iYmLXVzM9R5sfArRGxI7A78Bw1dAwRMTf7+98T2It0mey31NAxSNoK+Bdgz4jYDegD\nHEdbfx8iotu+gEmk0bmF5XOAb+RdV5m1jwWeLFp+jnQfK8BI4Lm8a2zj8dwMfLpWjwMYQBpoNhFY\nBvTK2icBt+ddX4m6RwN3AnXAzKzttVqpP6vxZWB4k7aa+TkCBgF/a6a9Zo6hSd0HA/fV2jEAWwGv\nAMOywJwJHNTW3+dufaZJy5Mi1KItovHED5vnXE/ZWpnAoqqPI+vafBx4lRQ+fwNWRMT6bJOFpF/G\nanUR8HWy+5clDQeW11D9kGq/Q9LDkk7L2mrp52g74HVJV2Xdmz+XNIDaOoZinweuy97XzDFExGLg\nQtIg00XASuAx2vj73N1D05Mf5KwNE1hUpYhYH6l7djTpLHPH5jbr2qrKI+kzwNJIU1YWfhfEhr8X\nVVl/kY9HxN7AYaRu/k9S/TUX60O6Le5/InVvrib1etXSMQAgqS9wBPDrrKlmjkHSUNKUrGNJwbgJ\nMLmZTUseU3cPzYXAmKLl0cDinGrpqKXZfLtkEz8sy7meVmUX1G8EromI32XNNXccABGxCriX1H0z\nNLteDtX9M7UvcISkl4DrgQOAi0lzN9dC/cCHZzBExGukbv6J1NbP0UJgQUQ8ki3/hhSitXQMBZOB\nRyPi9Wy5lo7h08BLEfFmRKwjXZP9OG38fe7uofkw8BFJYyX1A6aQ+rFrQdMzgpnAydn7k4DfNf1A\nFfoF8ExkMz5lauY4JG1WGA0oqT/pl+4Z4B7gmGyzqj2GiPhmRIyJiO1IP/t/jIjjqZH6ASQNyHor\nkLQJ6XraU9TQz1HWfblA0ris6UDgr9TQMRQ5jvQPsIJaOob5wCRJG0sSDf8d2vb7kPfF2S64+Hso\n8DzwAnBO3vWUWfN1pH/tvJ/9hz6FdPH6ruxY7iTNlpR7rSWOYV9gHTAHeJx07eBQYNNaOQ5g16zu\nOcCTwLey9m2B2cBcYAbQN+9ayziW/WgYCFQz9We1Fn6Gnir8DtfSz1FW7+6kf8TPAW4ChtTgMfQn\nDSIbVNRWa8dwHumpWk+SnqTVt62/D57cwMzMrEzdvXvWzMys0zg0zczMyuTQNDMzK5ND08zMrEwO\nTTMzszI5NM3MzMrk0DTrISS9VfT+sOxRSKPzrMms1lT1c/TMrFMVJm0/kPSoqoMiYmG+JZnVFoem\nWc8hSZ8ALgcmR8S8nOsxqzmeEcish5D0AbCK9EDnp/Oux6wW+ZqmWc+xBrgfOK21Dc2seQ5Ns55j\nHXAs8FFJ5+ZdjFktcmia9RyKiPeAzwJTJX0x74LMao0HApn1HAEQEcslTQbulfRaRPw+57rMaoYH\nApmZmZXJ3bNmZmZlcmiamZmVyaFpZmZWJoemmZlZmRyaZmZmZXJompmZlcmhaWZmViaHppmZWZn+\nP3ZAkc/D++85AAAAAElFTkSuQmCC\n",
      "text/plain": [
       "<matplotlib.figure.Figure at 0x12bc30ba8>"
      ]
     },
     "metadata": {},
     "output_type": "display_data"
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "16214.266585826874\n"
     ]
    }
   ],
   "source": [
    "#### for model300\n",
    "\n",
    "start = time.time() \n",
    "centroids300 = {}\n",
    "cluster_assignment300 = {}\n",
    "heterogeneity_values300 = []\n",
    "k_list300 = [3, 5, 6, 8, 10, 20, 30, 80]\n",
    "seed_list = [0, 20000, 40000, 60000, 80000]\n",
    "\n",
    "for k in k_list300:\n",
    "    #heterogeneity = []\n",
    "    centroids300[k], cluster_assignment300[k] = kmeans_multiple_runs(docs_representation300, k, maxiter=400,\n",
    "                                                               num_runs=len(seed_list),\n",
    "                                                               seed_list=seed_list,\n",
    "                                                               verbose=True)\n",
    "    score = compute_heterogeneity(docs_representation300, k, centroids300[k], cluster_assignment300[k])\n",
    "    heterogeneity_values300.append(score)\n",
    "\n",
    "plot_k_vs_heterogeneity(k_list300, heterogeneity_values300)\n",
    "\n",
    "end = time.time()\n",
    "print(end-start)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 36,
   "metadata": {
    "collapsed": false
   },
   "outputs": [
    {
     "data": {
      "text/plain": [
       "[13418.636737352976,\n",
       " 10730.325320718275,\n",
       " 9890.1118136937421,\n",
       " 8792.9408956265179,\n",
       " 7916.6806952476363,\n",
       " 5970.9670092855495,\n",
       " 5009.2623597635384,\n",
       " 3400.9549325330972]"
      ]
     },
     "execution_count": 36,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "heterogeneity_values300"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 34,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "for key in k_list300:\n",
    "    centroids300[key]=centroids300[key].tolist()\n",
    "    cluster_assignment300[key]=cluster_assignment300[key].tolist()\n",
    "    #print(centroids300[key].tolist())"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 35,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "data300={'centroids':centroids300,'cluster_assignment':cluster_assignment300,'heterogeneity':heterogeneity_values300}\n",
    "save_json('model300/data300',data300)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 42,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "for key in k_list300:\n",
    "    centroids300[key]=np.array(centroids300[key])\n",
    "    cluster_assignment300[key]=np.array(cluster_assignment300[key])\n",
    "    #print(centroids300[key].tolist())"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 122,
   "metadata": {
    "collapsed": true
   },
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "==========================================================\n",
      "Cluster 0    \n",
      "['juventudes', 'participativo', 'facilitar', 'politi', 'debaten']\n",
      "[0.018994027265179181, 0.021033405502888569, 0.027350629509436897, 0.028355173239587139, 0.028980794628779005]\n",
      "\n",
      "\n",
      "¡La revolución avanza! como nos comprometimos en mi enlace, CNT entregó las líneas de telefonía inalámbrica en Taisha http://t.co/LXRAZ5Qnzj\n",
      "0.0127715733045\n",
      ".@cesarmc0510: continuamos impulsando también el \"Sello Inclusivo progresivo\" con el compromiso de las empresas pri… https://t.co/GemIfleQh0\n",
      "0.0128577012379\n",
      "1/2 IMPORTANTE: Desarticulada violenta organización delictiva de robo y microtráfico que operaba en Guayaquil, dist… https://t.co/DtzvXLaFdC\n",
      "0.0130911167931\n",
      "Hoy presentamos los \"Comités Familiares de CREO\". Será un ejercito de 40.000 voluntarios preparados para cuidar nue… https://t.co/FZPIe48UC9\n",
      "0.0135651661106\n",
      "EN REUNION REALIZADA EN ROMA EL IESS Y ECUATORIANOS RESIDENTE EN ITALIA SE SINTONIZAN PARA IMPULSAR IMPORTANTES... http://t.co/5qFYCew33J\n",
      "0.0159822790198\n",
      "@dfeleon2 @JackitaCeli @johaortizv @GoberLoja @GoberElOro se espera que no se imponga trabajos equivocados sino liderazgo que se note\n",
      "0.0160996249861\n",
      "A las 17hs compartiremos una conferencia magistral en CIESPAL, donde recibirá el doctorado honoris causa del IAEN por su aporte intelectual\n",
      "0.0165374199087\n",
      "Articulamos actividades con Jefa Política y líderes juveniles de #Paute para la ejecución de MIEscuela de Juventude… https://t.co/hZs5CODjBe\n",
      "0.0178050176021\n",
      "==========================================================\n",
      "Cluster 1    \n",
      "['alineaciones', 'maite', 'metele', '@besiktas', '#ufcnyc']\n",
      "[0.020263205969329845, 0.021953462348451414, 0.024306339200952709, 0.024686678791090766, 0.025493431418363022]\n",
      "\n",
      "\n",
      "GANADORES DE NUESTRO SEGMENTO YENDO AL COLE..... #DespiertaMiBienDespierta\n",
      "\n",
      "CELESTE JÁCOME 01 ENTRADA STAR CINES... https://t.co/XhKjjFgFCR\n",
      "0.012651737055\n",
      "Y SI ORGANIZAMOS UN CIRCUITO DE MOTO EN SUA ?? \n",
      "-\n",
      "QUIEN SE APUNTA\n",
      "0.015113398074\n",
      "¿Paul Walker regresará para Rápidos y Furiosos 8? - https://t.co/W8SuWhRx3c |https://t.co/MKjVm3RQMG\n",
      "0.0156628387456\n",
      "GANADORES DE NUESTRO SEGMENTO YENDO AL COLE..... #DespiertaMiBienDespierta\n",
      "\n",
      "SALOME ESPINEL 01 ENTRADA STAR CINES... https://t.co/DlLbh8rvza\n",
      "0.0157042090359\n",
      "Paulina Rubio metió la pata en una entrega de premios / Telemundo.\n",
      "https://t.co/afTFy0lIOa https://t.co/xLoWx0r0Vn\n",
      "0.0177065243792\n",
      "#FUTBOLP.. \n",
      "#MANCITY 1X1 #BARZA...\n",
      "Q TE MAMAS \n",
      "#STERLING.. PERDONASSS!!! M47 https://t.co/M69kVQKlDs\n",
      "0.0183695830006\n",
      "Agenda \"DJ TOTO\"\n",
      "Separa tu fecha desde ya  !!!\n",
      "\n",
      "📱0983184284 -0990190666\n",
      "\n",
      "\"DJ TOTO MARCA DE LA… https://t.co/uB5wCtcjgZ\n",
      "0.0185258329912\n",
      "Nuestros primeros huéspedes bienvenidos cachorro,tito, Dalila, tequila, Max,Toby, Blacky,… https://t.co/j9nPw3JlAx\n",
      "0.0195425546416\n",
      "==========================================================\n",
      "Cluster 2    \n",
      "['perfectamente', 'dejaras', 'escribirle', 'delante', 'querernos']\n",
      "[0.020736420439691372, 0.022728311791770262, 0.023357642915686538, 0.025583341782543734, 0.025985637287693097]\n",
      "\n",
      "\n",
      "Si piensas que eres demasiado pequeño para marcar la diferencia, intenta dormir con un mosquito en la habitación. #Emprendedores\n",
      "0.0123704165812\n",
      "broder definitivo las que sabemos tienen un motivo mas para llorar \"Pacificheques\" https://t.co/uaxUoTPfWc\n",
      "0.0139199586633\n",
      "@MaJosefaCoronel Que hermoso ganar en el mierdero de emelgay. Toma NemeGay por tramposo. Comete tu naríz y tu rabia… https://t.co/G04UNEwde9\n",
      "0.0141626014372\n",
      "@Educacion_Ec a dejar mi carpeta y después me acerque a preguntar xk no me habian llamado xk una amiga fue después y la llamaron para\n",
      "0.0149987608959\n",
      "NO lo tocamos por que no queremos, justamente, quedar como idiotas.\n",
      "0.0157544048273\n",
      "@garypastor10 @KvinAlessander ojala se olviden ya de la brahian alemana, SON DE MENTE FRAGIL ALGUNOS HPTAS y no olvidan lo lacra que es ese\n",
      "0.0159443134263\n",
      "Dudar y \n",
      "Molestar !!!!\n",
      "0.0161345277817\n",
      "Emelecistas que se creen la divina pomada! #VyM para ud's https://t.co/LxPfZLH6uD\n",
      "0.0163685451071\n",
      "==========================================================\n"
     ]
    }
   ],
   "source": [
    "visualize_document_clusters(training_tweets_new300, docs_representation300, centroids300[3], cluster_assignment300[3], 3, model300)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 123,
   "metadata": {
    "collapsed": true
   },
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "==========================================================\n",
      "Cluster 0    \n",
      "['metele', 'interpretara', 'nishikori', 'maite', 'howard']\n",
      "[0.01766192305196046, 0.01769847684977055, 0.019957642288341293, 0.022265080068818, 0.022303525788950673]\n",
      "\n",
      "\n",
      "American Alpha &gt; Enzo y Cass por mucho. #RAW\n",
      "0.0150576107288\n",
      "¿Paul Walker regresará para Rápidos y Furiosos 8? - https://t.co/W8SuWhRx3c |https://t.co/MKjVm3RQMG\n",
      "0.0154535936587\n",
      "Agenda \"DJ TOTO\"\n",
      "Separa tu fecha desde ya  !!!\n",
      "\n",
      "📱0983184284 -0990190666\n",
      "\n",
      "\"DJ TOTO MARCA DE LA… https://t.co/uB5wCtcjgZ\n",
      "0.0175863944993\n",
      "Paulina Rubio metió la pata en una entrega de premios / Telemundo.\n",
      "https://t.co/afTFy0lIOa https://t.co/xLoWx0r0Vn\n",
      "0.0180093638215\n",
      "Con Neymar Jr.  y Nicky Jam : Revisa el segundo adelanto de la explosiva \"xXx: Reactivado\" https://t.co/zHaxwKmuLb https://t.co/4JmbUnP9Yy\n",
      "0.018928902122\n",
      "Acabé el 1º en el torneo de bronce en Quiz Run. Mi usuario es eli9945 https://t.co/mui9uSLhJt https://t.co/YV28f4jGjK\n",
      "0.019621322805\n",
      "Say say say 🎶🎵🎺🎸🎷 cuando Michael era Afroamericano 😊 @ Vinces https://t.co/LhWyrhSEkd\n",
      "0.0201085222458\n",
      "Subastarán fragmento de la escalera original de la torre Eiffel https://t.co/GBo3bUsznj #Teleamazonas https://t.co/oxTwk2W08C\n",
      "0.0203010973485\n",
      "==========================================================\n",
      "Cluster 1    \n",
      "['#deguayaquilalpais', 'marchas', '#ferialasso', 'protagonismo', 'minima']\n",
      "[0.018391498619703461, 0.029160591957376858, 0.029386138660859817, 0.031244195746278458, 0.032470891932773416]\n",
      "\n",
      "\n",
      "Nosotros no compramos conceptos derrotistas, sino no participáramos. Estamos convencidos que llegaremos a la Presidencia de la República.\n",
      "0.0124808029854\n",
      "Cdo en #Chile la élite política llama a respetar institucionalidad vigente y espíritu republicano, LE ESTA DICIENDO APOYE MODELO DE PINOCHET\n",
      "0.0151418423011\n",
      "Vivimos en un momento político en el q nos han clasifica por justos e injustos. La #unidad plantea posibilidad d devolver autonomia a la AN\n",
      "0.0152003111718\n",
      "Me considero un demócrata radical, y para nosotros no es posible el centralismo porque anula los territorios. @notihoyecuador\n",
      "0.0155209902742\n",
      "Militancia y reciente trabajo de Chávez la justifica aún sea débil en #Babahoyo, pero como justifican en AP… https://t.co/nJgz767ghD\n",
      "0.0162547241901\n",
      "Y siguiendo libreto d EEUU la oposición nunca basa en la academia sino en el más ponzoñoso y se consultan entre sí https://t.co/XlC5ksm5r9\n",
      "0.0169097248583\n",
      "@35PAIS Por qué gobierno de la banca? En que fuentes se basan para hacer tal afirmación? Y que opinan de los crímenes del grupo Alfaro Vive?\n",
      "0.0170470106559\n",
      "@EduardoTiguaC \n",
      "\"Tesorito\" cree q los mandantes somos unos GILES presentando es pillos de segunda. ¿Y LOS miles de millones dònde están?\n",
      "0.0173161489339\n",
      "==========================================================\n",
      "Cluster 2    \n",
      "['revisamos', 'autoevaluacion', 'presentaran', '#soymilitarec', 'comites']\n",
      "[0.018295573220535211, 0.019293834279883959, 0.0198123862980637, 0.019934650931766829, 0.021794547055192126]\n",
      "\n",
      "\n",
      "#ElOro | Los municipios de Pasaje y Pucara firmaron convenio para tratar desechos sólidos. Lea:… https://t.co/nxC053yq3A\n",
      "0.00949348961465\n",
      "Se instala mesa temática de #cultura en donde los anhelos de este sector se plasmará en el #IVMandato de #Pichincha https://t.co/RAV5CIRCcA\n",
      "0.0132464438044\n",
      "En .@AguaEc #Portoviejo se realiza reunión sobre los consejos de Cuenca Hidráulica con Misión Francesa #UICN… https://t.co/b3GYbkGUuj\n",
      "0.0137930004281\n",
      "Taller Fortalecimiento Organizativo.  67 organizaciones Dispensarios Sur occidente #Loja  #SeguroSocialCampesino… https://t.co/7ywmBrcwXF\n",
      "0.0150927181638\n",
      "Municipio de Ambato asume problemática de los adolescentes lustrabotas. Te informamos ►https://t.co/weudcxRJAi… https://t.co/68lsvle5pR\n",
      "0.0152781417616\n",
      "@JoseSemanat menciona q el 70% de Servicios Administrativos se atienden en  la Delegación del #IESS La Maná… https://t.co/j9UFngNHLl\n",
      "0.0154944758542\n",
      "Proceso de convalidación Contabilidad y Auditoría, entre el  Instituto Tecnológico Tulcan - UNIANDES extensión Tulcan se va consolidando\n",
      "0.0158666746722\n",
      "Pescadores de Manta realizan marcha en protesta a los controles pesqueros q catalogan \"exagerados\". https://t.co/2hbTtRx4ES\n",
      "0.0158744682595\n",
      "==========================================================\n",
      "Cluster 3    \n",
      "['#domingo', 'disfrutarlo', 'atrasado', '#lunes', '#felizjueves']\n",
      "[0.040844092116570585, 0.040959928773889986, 0.046514247890507399, 0.04878936006844159, 0.050051128738177075]\n",
      "\n",
      "\n",
      "A quien se le antoja chuparla en Cuenca???\n",
      "Disfrutemos juntos!!!! Un hermoso 69 sería lo ideal..\n",
      "Mmmmmm https://t.co/s00wN9VcH0\n",
      "0.0281195650936\n",
      "@friddakalo hola Diosa,como venimos este jueves,viaje uno . barrera,Pancha,tenis y lavarropas todo en orden no?? besotes😄\n",
      "0.0298909942116\n",
      "@mariapazmr @RadioDibluFM mis respetos para uds , viéndolos en wuala machala, full ambiente\n",
      "0.0299445788538\n",
      "Se vivió una gran noch entre amigos; risas y carcajadas 😆😁😅😄 Nos llevamos el premio compas jajajaja @UnsionTv\n",
      "0.0302395010276\n",
      "Aveces por estar \"esperando un milagro\", no disfrutamos de los milagros que a diario recibimos #FelizMiércoles #JesusMiFavorito❤\n",
      "0.0325079992022\n",
      "Desde mi trabajo en paseo shooping villamil ecuador esperando q empiece la transmisión de mi mechita por @Americaenlared\n",
      "0.0359581973069\n",
      "Te propongo que no me ames...\n",
      "...te propongo que sueñes, que me vivas que me disfrutes, que me tengas en tus brazos… https://t.co/eZnbe1cEmM\n",
      "0.0371859021384\n",
      "Tienes una cita con el Ídolo del Astillero a la que no puedes fallar. Gracias a Flower Garden x sumarse al listado… https://t.co/4xfcrrFuts\n",
      "0.0374947316626\n",
      "==========================================================\n",
      "Cluster 4    \n",
      "['perfectamente', 'escribirle', 'aprendo', 'parezca', 'entiendes']\n",
      "[0.020352884655440939, 0.021167398857771746, 0.023204865345233028, 0.024023159186675525, 0.024094659138150898]\n",
      "\n",
      "\n",
      "Si piensas que eres demasiado pequeño para marcar la diferencia, intenta dormir con un mosquito en la habitación. #Emprendedores\n",
      "0.00856605072205\n",
      "Que horrible todo, sobretodo madrugar con chuchaqui.\n",
      "0.0126407447066\n",
      "Me acabo de enterar que le hicieron la pasión de Cristo a mi sobrino, aunque suene cruel no paro de reírme 😂😂 porque el motivo es gracioso.\n",
      "0.0127112942298\n",
      "@meji_01 Exacto, Entiendes perfectamente.\n",
      "0.0128448235318\n",
      ".. HAZLO!! Putea hasta que se te pase la arrechera y demuéstrale quien es la de la personalidad.\n",
      "0.0136388181648\n",
      "Andar publicando que tomas no es motivo de estar orgulloso/a😎\n",
      "0.0138708306535\n",
      "@mishu321 están locos ajaja y lo peor esque ni invitan 💔👈🏼justo en el corazón\n",
      "0.0143551588158\n",
      "NI VERGAAAAA TODO ESTO ES MENTIRA NO NOO TU NO PUEDES IRTE SIN HABERTE DESPEDIDO DE MI CABRON 😭😭😭💔💔\n",
      "0.0144029723436\n",
      "==========================================================\n"
     ]
    }
   ],
   "source": [
    "visualize_document_clusters(training_tweets_new300, docs_representation300, centroids300[5], cluster_assignment300[5], 5, model300)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 124,
   "metadata": {
    "collapsed": true
   },
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "==========================================================\n",
      "Cluster 0    \n",
      "['#deguayaquilalpais', 'marchas', '#ferialasso', 'protagonismo', 'innegable']\n",
      "[0.018423398456763551, 0.029253049701326805, 0.02960023235926712, 0.031546014729938787, 0.032323854272968688]\n",
      "\n",
      "\n",
      "Nosotros no compramos conceptos derrotistas, sino no participáramos. Estamos convencidos que llegaremos a la Presidencia de la República.\n",
      "0.0128491495164\n",
      "Vivimos en un momento político en el q nos han clasifica por justos e injustos. La #unidad plantea posibilidad d devolver autonomia a la AN\n",
      "0.0152826716647\n",
      "Me considero un demócrata radical, y para nosotros no es posible el centralismo porque anula los territorios. @notihoyecuador\n",
      "0.0153231531736\n",
      "Cdo en #Chile la élite política llama a respetar institucionalidad vigente y espíritu republicano, LE ESTA DICIENDO APOYE MODELO DE PINOCHET\n",
      "0.0154616672145\n",
      "Militancia y reciente trabajo de Chávez la justifica aún sea débil en #Babahoyo, pero como justifican en AP… https://t.co/nJgz767ghD\n",
      "0.0162709892164\n",
      "Y siguiendo libreto d EEUU la oposición nunca basa en la academia sino en el más ponzoñoso y se consultan entre sí https://t.co/XlC5ksm5r9\n",
      "0.0168850814276\n",
      "@35PAIS Por qué gobierno de la banca? En que fuentes se basan para hacer tal afirmación? Y que opinan de los crímenes del grupo Alfaro Vive?\n",
      "0.016979439203\n",
      "Resulta contradictorio q se convoque a un diálogo y no se brinden las garantías de un ambiente d elemental confianza http://t.co/yVM8X6CjjD\n",
      "0.0171251638388\n",
      "==========================================================\n",
      "Cluster 1    \n",
      "['perfectamente', 'escribirle', 'parezca', 'aprendo', 'decirlo']\n",
      "[0.020347269159576187, 0.020942219131184325, 0.02390040615031086, 0.023911179279665351, 0.023983352478877951]\n",
      "\n",
      "\n",
      "Si piensas que eres demasiado pequeño para marcar la diferencia, intenta dormir con un mosquito en la habitación. #Emprendedores\n",
      "0.00892485127614\n",
      "Que horrible todo, sobretodo madrugar con chuchaqui.\n",
      "0.0126396012058\n",
      "@meji_01 Exacto, Entiendes perfectamente.\n",
      "0.0128013019963\n",
      "Me acabo de enterar que le hicieron la pasión de Cristo a mi sobrino, aunque suene cruel no paro de reírme 😂😂 porque el motivo es gracioso.\n",
      "0.0128783299507\n",
      ".. HAZLO!! Putea hasta que se te pase la arrechera y demuéstrale quien es la de la personalidad.\n",
      "0.0136408932375\n",
      "Andar publicando que tomas no es motivo de estar orgulloso/a😎\n",
      "0.0137639984021\n",
      "broder definitivo las que sabemos tienen un motivo mas para llorar \"Pacificheques\" https://t.co/uaxUoTPfWc\n",
      "0.0141045774649\n",
      "NI VERGAAAAA TODO ESTO ES MENTIRA NO NOO TU NO PUEDES IRTE SIN HABERTE DESPEDIDO DE MI CABRON 😭😭😭💔💔\n",
      "0.014230625878\n",
      "==========================================================\n",
      "Cluster 2    \n",
      "['revisamos', 'autoevaluacion', '#soymilitarec', 'presentaran', 'comites']\n",
      "[0.018059595071324264, 0.019367775580626967, 0.019591397602661154, 0.019684652757310239, 0.021621440927048763]\n",
      "\n",
      "\n",
      "#ElOro | Los municipios de Pasaje y Pucara firmaron convenio para tratar desechos sólidos. Lea:… https://t.co/nxC053yq3A\n",
      "0.00932777556362\n",
      "Se instala mesa temática de #cultura en donde los anhelos de este sector se plasmará en el #IVMandato de #Pichincha https://t.co/RAV5CIRCcA\n",
      "0.0130355505932\n",
      "En .@AguaEc #Portoviejo se realiza reunión sobre los consejos de Cuenca Hidráulica con Misión Francesa #UICN… https://t.co/b3GYbkGUuj\n",
      "0.0136212582144\n",
      "Taller Fortalecimiento Organizativo.  67 organizaciones Dispensarios Sur occidente #Loja  #SeguroSocialCampesino… https://t.co/7ywmBrcwXF\n",
      "0.0149273765132\n",
      "@JoseSemanat menciona q el 70% de Servicios Administrativos se atienden en  la Delegación del #IESS La Maná… https://t.co/j9UFngNHLl\n",
      "0.0153900895483\n",
      "Municipio de Ambato asume problemática de los adolescentes lustrabotas. Te informamos ►https://t.co/weudcxRJAi… https://t.co/68lsvle5pR\n",
      "0.0153976626912\n",
      "Proceso de convalidación Contabilidad y Auditoría, entre el  Instituto Tecnológico Tulcan - UNIANDES extensión Tulcan se va consolidando\n",
      "0.0157664339548\n",
      "Pescadores de Manta realizan marcha en protesta a los controles pesqueros q catalogan \"exagerados\". https://t.co/2hbTtRx4ES\n",
      "0.015989046759\n",
      "==========================================================\n",
      "Cluster 3    \n",
      "['instrumental', '4k', 'rolling', 'uhc', 'v1']\n",
      "[0.017890653957926217, 0.019740496317556033, 0.020367808922030273, 0.021273399509848745, 0.021996708133541487]\n",
      "\n",
      "\n",
      "Me gustó un video de @YouTube de @clevverteve https://t.co/3WGcyHp4VH Adele Enfrenta Murciélago y Bieber Lanzará Purpose Movie\n",
      "0.0112553156159\n",
      "Me gustó un video de @YouTube de @toyskids7 https://t.co/wFCxMRVNc9 Finger Family Song Collection! Mickey Mouse Hulk and Hulk Friends\n",
      "0.0115875404561\n",
      "Nintendo NES mini unboxing y gameplay en español | 4K UHD https://t.co/zriSKOanB6\n",
      "0.0128842605668\n",
      "Me ha gustado un vídeo de @YouTube de @clevverteve (https://t.co/6u8V9NJpoO - Bieber Pagando La Rehabilitación de Selena,Gigi Hadid\n",
      "0.0137354062641\n",
      "Me ha gustado un vídeo de @YouTube de @clevverteve (https://t.co/CRGIBGZa2M - Bieber Pagando La Rehabilitación de Selena,Gigi Hadid\n",
      "0.0137354062641\n",
      "Me ha gustado un vídeo de @YouTube de @willyrexyt (https://t.co/fXdm3yDOVb - TOM CLANCY'S RAINBOW SIX SIEGE | UNA ENTRADA ÉPICA!).\n",
      "0.0138358282308\n",
      "Trap\n",
      "''Grabando''\n",
      "0.0155200023549\n",
      "PACK DE BOX CRACK Octopus, SPT Box, NCK Box, NS Pro, Infinity Box, Volcano Y MAS | GAGUMA https://t.co/wPT0oVCvA7 vía @gagumaoficial\n",
      "0.0155705376994\n",
      "==========================================================\n",
      "Cluster 4    \n",
      "['#felizjueves', '#felizmiercoles', '#ff', '#felizmartes', '#domingo']\n",
      "[0.034500298418972508, 0.036949344249393334, 0.039335600637625312, 0.039805800505257061, 0.040433878176761029]\n",
      "\n",
      "\n",
      "De lo más divertido en @AmericaRadioGye con café y bolón para iniciar el día ¡un saludo a los amigos migrantes que también nos escucharon!\n",
      "0.0267776794474\n",
      "@TeletonEC Desde 1984 difundiendo un ideal 📣💕#TeletonEcuador2016 #3dediciembre #JuntosPorLaVida\n",
      "0.0284587005218\n",
      "@ZiReyzou2 @Raulms_76 la utilizaré como christmas estas navidades para felicitar a mis queridos colchoneros.\n",
      "0.0290340832571\n",
      "A @maiteoficial 😍 le ha encantado #Diferente y a ustedes? 🤔\n",
      "\n",
      "#ÓleoMx #Pop #Rock #Funk #Music… https://t.co/m884Q6MggC\n",
      "0.0299462542088\n",
      "A quien se le antoja chuparla en Cuenca???\n",
      "Disfrutemos juntos!!!! Un hermoso 69 sería lo ideal..\n",
      "Mmmmmm https://t.co/s00wN9VcH0\n",
      "0.0323890866193\n",
      "Aveces por estar \"esperando un milagro\", no disfrutamos de los milagros que a diario recibimos #FelizMiércoles #JesusMiFavorito❤\n",
      "0.0333904485992\n",
      "#FelizMartes xq tengo a @SilkaLiberio\n",
      "0.0333926952662\n",
      "Círculo y teress con los chicos!! 🌞🎾\n",
      "0.0344293252821\n",
      "==========================================================\n",
      "Cluster 5    \n",
      "['#catolica', '#dalebulla', '3-3', 'cruzado', 'carajooo']\n",
      "[0.026510330282177086, 0.032428337124487894, 0.032659009867155975, 0.033043071306914418, 0.033204756300626581]\n",
      "\n",
      "\n",
      "50' gollllll del #ManchesterCity #KevinDeBruyne desd la pelota parada con falla de #terstegen 2-1 #ucl\n",
      "0.0192379436992\n",
      "ESPERANDOTE PARA ALENTARTE LA GLORIOSA LDU...\n",
      "\n",
      "MUERTE TULCAN DESDE EL 2006\n",
      "MB 98\n",
      "0.0209870599952\n",
      "@VitoMunozUgarte la falla en la mitad de bsc, Richard Calderón entrega malísimos pases, Marque cubriéndole las espaldas, @100xCientoFTBL\n",
      "0.0220418461993\n",
      "La furia del tandilense predomina frente a Marin Cilic y vence por 6-7 2-6 7-5 6-4 y 6-3\n",
      "Delpo pone el empate\n",
      "CRO 2… https://t.co/zrNIpBkxKE\n",
      "0.0222007585199\n",
      "GOOOOOOOOOOOOOl HPT 💛💛💛💛💛💛💛💛💛💛💛💛\n",
      "0.0230573458003\n",
      "#FUTBOLP... #MANCITY 1X1 #BARZA..\n",
      "AHORA SE ACORDÓ DE JUGAR EL CITY.\n",
      "0.0235792252756\n",
      "Por poco llega el empate, salvo Alisson con los puños y en el rebote Guerrero no puede empujar, min 71\n",
      "0.023714726079\n",
      "Richard Carapaz apunta a correr el Giro de Italia - https://t.co/yuKsCEbSNR |https://t.co/MKjVm3RQMG\n",
      "0.0239768990593\n",
      "==========================================================\n"
     ]
    }
   ],
   "source": [
    "visualize_document_clusters(training_tweets_new300, docs_representation300, centroids300[6], cluster_assignment300[6], 6, model300)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 125,
   "metadata": {
    "collapsed": true
   },
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "==========================================================\n",
      "Cluster 0    \n",
      "['instrumental', 'uhc', 'squad', 'woman', 'movie']\n",
      "[0.01796850645664172, 0.021148244923525072, 0.024769096572850313, 0.025470536054016946, 0.025499832505280207]\n",
      "\n",
      "\n",
      "Me ha gustado un vídeo de @YouTube de @willyrexyt (https://t.co/fXdm3yDOVb - TOM CLANCY'S RAINBOW SIX SIEGE | UNA ENTRADA ÉPICA!).\n",
      "0.0101855536956\n",
      "Me gustó un video de @YouTube https://t.co/ElPFGcMDKn BTS (방탄소년단) - Save Me - (Acoustic Guitar English Version)\n",
      "0.0102959962312\n",
      "Me gustó un video de @YouTube de @xdarksoul1988 https://t.co/wgem8sSMtB World of Warcraft | CAZADOR PUNTERÍA PvP NIVEL 110 - PALIZA\n",
      "0.0107424553723\n",
      "Me ha gustado un vídeo de @YouTube de @willyrexyt (https://t.co/fR9xpZf1gd - PARKOUR SOBRE LAVA!! CARRERA ÉPICA | Minecraft Race Map\n",
      "0.0120976298251\n",
      "Me gustó un video de @YouTube de @eugeniekitchen https://t.co/K1nLnoDFS1 \"Eugenie Cake\" Rainbow Heart Surprise Mille Crepe Cake DIY\n",
      "0.0126429210818\n",
      "Me gustó un video de @YouTube de @toyskids7 https://t.co/wFCxMRVNc9 Finger Family Song Collection! Mickey Mouse Hulk and Hulk Friends\n",
      "0.0126892417353\n",
      "Me gustó un video de @YouTube de @basefms https://t.co/b4NgRjkXnj Deep House Mix - Vocal Deep House Nu Disco Chillout Session by Irie\n",
      "0.01342182819\n",
      "Me gustó un video de @YouTube https://t.co/52cILDPRMt [Legendado PT] 160525 BTS \"Comeback Talk\" Cut | MV Bank\n",
      "0.0139774448652\n",
      "==========================================================\n",
      "Cluster 1    \n",
      "['facilitar', 'fortalecen', 'voluntaria', 'crcs', 'transportistas']\n",
      "[0.019555516349453739, 0.019851819336869081, 0.021547413164685447, 0.02330378140883882, 0.023518999242705507]\n",
      "\n",
      "\n",
      "Nutanix amplia sus capacidades de automatización de datacenter https://t.co/wxWBbn5ydn\n",
      "0.0110960583654\n",
      "Trabajadores del Metro de Caracas comenzaron plan de mantenimiento a escaleras eléctricas https://t.co/iVD9ES2OJu\n",
      "0.0121861818386\n",
      "Revisamos procesos administrativos de @AzuayPrefectura. #AzuayConEmpleoGana 👍 https://t.co/YworKRXoqk\n",
      "0.01242146357\n",
      "@CN_Igualdad@MIES_Zona2  #Mandato Juvenil #En Napo Jóvenes se organizan para proponer programas,proyectos,acciones+ https://t.co/ZBnWJNSPFN\n",
      "0.0126871599727\n",
      "UEA | DEPARTAMENTO DE VINCULACIÓN | CHARLA EXTENSIÓN UNIVERSITARIA | MISIONES UNIVERSITARIAS ARGENTINAS EN EL ECUAD… https://t.co/IONP86zagH\n",
      "0.012738837394\n",
      "2/2 para analizar nuevas estrategias y continuar búsqueda de ciudadano suizo desaparecido n #SanCristóbal #Galápagos https://t.co/UhCuDL3G8D\n",
      "0.0133096740947\n",
      "Participación en panel de sustentación de Planes de Investigación en la Universidad de Cádiz -#España https://t.co/3MDtEGgz9n\n",
      "0.0136167404808\n",
      "Seguros Sucre revela que las carreteras no están aseguradas https://t.co/vqDwu1SqOf\n",
      "0.0138845156511\n",
      "==========================================================\n",
      "Cluster 2    \n",
      "['#aficion', 'tercero', 'cuartos', '#copaamerica', '3-2']\n",
      "[0.02379673919188674, 0.024678958172159593, 0.034655109536207096, 0.034698476499628539, 0.036605181389061547]\n",
      "\n",
      "\n",
      "#AFICIÓN Mina hizo explotar el Capwell y @CSEmelec se acerca al @BarcelonaSCweb #Orovisión #MásparaVer… https://t.co/xb6EU6xrZq\n",
      "0.0120422404274\n",
      "@mariocanessa lo bueno de Maximiliano Barreiro es q es un goleador forjado en la costa,los q han venido de la altura fracasaron en Barcelona\n",
      "0.0145577030056\n",
      "@brojotango @SabiasQueEMELEC cuando lleguen y jueguen y mas ganen una final de Copa Libertadores eso es una discusión entre  LDU IDV BSC\n",
      "0.0170897471912\n",
      "Con toda la pica por la eliminación en Eurocopa se viene el Italia vs Alemania partido que nunca será amistoso. Partidazo #ForzaAzzurri\n",
      "0.0173969425273\n",
      "Contra de Ecuador con Ibarra rompe en una sola carrera le sirve a Caidedo la define x abajo cruzado y gooool de la tricolor minuto 44\n",
      "0.0192099612052\n",
      "@AllissonCantos @LDUPoficial @MantaFutbolClub ademas no es un clasico, es un partido mas.!! El clasico es con su vecino de patio @DelfinSC\n",
      "0.019552725653\n",
      "¡ATENTOS!\n",
      "Aníbal Chalá saldrá de #ElNacional y su destino estaría en Italia ¿Qué pasó con Emelec?… https://t.co/c9ysYHZMPm\n",
      "0.0206133854636\n",
      "10' Se detiene el partido, Esteban Dreer se está cambiando de medias.\n",
      "\n",
      "#DCuenca 0-1 #Emelec\n",
      "0.0209001796094\n",
      "==========================================================\n",
      "Cluster 3    \n",
      "['#ff', '#teletonecuador2016', 'encantado', 'exelente', 'disfrutes']\n",
      "[0.040015629593461277, 0.043110546070540323, 0.045046948169285006, 0.045265858650312074, 0.049859513631450469]\n",
      "\n",
      "\n",
      "@TeletonEC Desde 1984 difundiendo un ideal 📣💕#TeletonEcuador2016 #3dediciembre #JuntosPorLaVida\n",
      "0.0222447848858\n",
      "Círculo y teress con los chicos!! 🌞🎾\n",
      "0.0276441267909\n",
      "A @maiteoficial 😍 le ha encantado #Diferente y a ustedes? 🤔\n",
      "\n",
      "#ÓleoMx #Pop #Rock #Funk #Music… https://t.co/m884Q6MggC\n",
      "0.0331994501442\n",
      "#MisterSorteos quieres directos epicos @MisterRMX  es a quien buscas https://t.co/q8zc4TzTc2\n",
      "0.0335393386154\n",
      "@sedienta_sexual inviten chicos\n",
      "0.0336594603703\n",
      "@ELIASCERVANTES #sonrisa de #campeón esperamos ver dicha sonrisa pronto!!! pronto!!! 😉😊 #QueremosMyMenEcuador 💛 💙❤ 🙏🙏🙏🙏🙏🙏😉😊😘 @mercurioquito\n",
      "0.0350993890435\n",
      "Un grandísimo aplauso a los amigos de @juegaterapia por esta magnífica idea! :) https://t.co/Xa9XpQzlEo\n",
      "0.0361193682143\n",
      "Los #amo Mucho también mis queridos #sobrinos y los #recuerdo ya iré pronto a verlos #besos y… https://t.co/HqxF8EwDZP\n",
      "0.0371124212379\n",
      "==========================================================\n",
      "Cluster 4    \n",
      "['pulmones', 'confesiones', 'trenza', '#siempre', 'tibio']\n",
      "[0.01998367989163552, 0.020724797730032551, 0.02116109841788627, 0.021796811389160675, 0.022233610588789476]\n",
      "\n",
      "\n",
      "Vuelve #aTodaMakina con el Viento en Contra #7000Mill #CV #CaballosVato Desmontando a Babylon https://t.co/DzocfCwvqg\n",
      "0.011272869601\n",
      "#Adopta a Lia de Cuencanimal, nuestra perrita invisible. Desde 2012 en el refugio. https://t.co/ESVpG7uM6Z https://t.co/m5oA5BSFFp\n",
      "0.0144704454238\n",
      "Vuelve #aTodaMakina con el Viento en Contra #7000Mill #CV #CaballosVato Desmontando a #Babylon @BabylonDab https://t.co/OHAIGLZTbO\n",
      "0.0144948738628\n",
      "Vuelve #aTodaMakina con el Viento en Contra #7000Mill #CV #CaballosVato Desmontando a #Babylon @BabylonDab... https://t.co/IYI3ohlT50\n",
      "0.0144948738628\n",
      "LOS FABULOSOS CADILLACS - Vasos vacios\n",
      "0.0200835455477\n",
      "LOS FABULOSOS CADILLACS - Vasos vacios\n",
      "0.0200835455477\n",
      "LOS FABULOSOS CADILLACS - Vasos vacios\n",
      "0.0200835455477\n",
      "LOS FABULOSOS CADILLACS - Vasos vacios\n",
      "0.0200835455477\n",
      "==========================================================\n",
      "Cluster 5    \n",
      "['#vgrancabalgata', '#vidaalegriayritmo', 'conmemorarse', '#lojacentrodelarteycultura', 'pumapungo']\n",
      "[0.023709902942868455, 0.025748239217818991, 0.027411424320639699, 0.030385957175054989, 0.032302029126854315]\n",
      "\n",
      "\n",
      "Los Mitos del Rock, 1er aniversario @lospescadosrock #Portoviejo \n",
      "@Josedu2879 https://t.co/NAV1jkpGnM\n",
      "0.0186871771262\n",
      "El evento inaugural será en el Museo #Pumapungo del @Cultura_Ec a las 19:00 con presentaciones artísticas  https://t.co/q2fAtyQsNc\n",
      "0.0204060706744\n",
      "PATRONALES Y PARQUE ECOLÓGICO\n",
      "\n",
      "Con una procesión, misa campal, presentaciones artísticas e inauguración de juegos... https://t.co/PZT1oIRQFC\n",
      "0.0216484215522\n",
      "La Churonita inicia periplo de retorno a Loja custodiada por fieles - https://t.co/E6IrkBQdQz |https://t.co/MKjVm49rEe\n",
      "0.0220274373788\n",
      "Lojanos llegan a la Catedral a despedir a la #VirgenDeElCisne Hoy empieza romería de retorno a su santuario. https://t.co/D9sSGJfZR7\n",
      "0.0227421767278\n",
      "#FiestasDeCuenca El col. Manuela Garaicoa presente en el desfile estudiantil con un baile de las culturas de la Cos… https://t.co/KAwaRhkz8W\n",
      "0.022929131063\n",
      "#ElOro | Selección de Taekwondo de menores realizo tope evaluatorio y adaptación a la altura en Riobamba. Lea:… https://t.co/iOC0l8qGTD\n",
      "0.0229613202388\n",
      "#FelizMartes Hoy invitados a presenciar debut en #Cuenca orquesta Sinfónica trabajadores. Todos invitados… https://t.co/3ZChIunS70\n",
      "0.0231024742265\n",
      "==========================================================\n",
      "Cluster 6    \n",
      "['decirlo', 'escribirle', 'parezca', 'perfectamente', 'creia']\n",
      "[0.023567714057030398, 0.023659036985854254, 0.024549062735402138, 0.024561416934005376, 0.026927652025619864]\n",
      "\n",
      "\n",
      "Me acabo de enterar que le hicieron la pasión de Cristo a mi sobrino, aunque suene cruel no paro de reírme 😂😂 porque el motivo es gracioso.\n",
      "0.012760403348\n",
      "Si piensas que eres demasiado pequeño para marcar la diferencia, intenta dormir con un mosquito en la habitación. #Emprendedores\n",
      "0.0127606752521\n",
      "Andar publicando que tomas no es motivo de estar orgulloso/a😎\n",
      "0.0134936196303\n",
      "broder definitivo las que sabemos tienen un motivo mas para llorar \"Pacificheques\" https://t.co/uaxUoTPfWc\n",
      "0.0135695177226\n",
      ".. HAZLO!! Putea hasta que se te pase la arrechera y demuéstrale quien es la de la personalidad.\n",
      "0.0141900794732\n",
      "@meji_01 Exacto, Entiendes perfectamente.\n",
      "0.0144123424459\n",
      "Preguntaré al primero pasar si está bien que un extraño me vea llorar, en tiempo de presentimientos, de dioses  violentos volveré a comenzar\n",
      "0.0144911368908\n",
      "En serio fue temblor si no fuera por ustedes ni me enteraba, jurada que era mi estómago con hambre :/\n",
      "0.0145088796794\n",
      "==========================================================\n",
      "Cluster 7    \n",
      "['#deguayaquilalpais', '#ferialasso', 'minima', 'marchas', 'seriedad']\n",
      "[0.02102888659103419, 0.028779709248774044, 0.031288256309134788, 0.032031886460908043, 0.032376044242308222]\n",
      "\n",
      "\n",
      "Nosotros no compramos conceptos derrotistas, sino no participáramos. Estamos convencidos que llegaremos a la Presidencia de la República.\n",
      "0.0119714914522\n",
      "Cdo en #Chile la élite política llama a respetar institucionalidad vigente y espíritu republicano, LE ESTA DICIENDO APOYE MODELO DE PINOCHET\n",
      "0.0155613171221\n",
      "Y siguiendo libreto d EEUU la oposición nunca basa en la academia sino en el más ponzoñoso y se consultan entre sí https://t.co/XlC5ksm5r9\n",
      "0.0161876370328\n",
      "@gabricalderon @AparicioCC Tiempos dnd los forajidos no eran parte del gobierno, vendieron sus conciencias y opositores cubren sus intereses\n",
      "0.0172939544662\n",
      "El empresario trabajará mucho y duro, veremos a quién beneficia...y quienes son sus enemigos https://t.co/ZuXgOBYz1w\n",
      "0.0173443529564\n",
      "@MashiRafael JUDICIAL JAMAS LLEGO ENVIA CARTA PIDIENDO CAMBIO DE PERSONA Y VAYA PROCURADOR SINDICO YA BASTA DE BURLARSE Y ALARGAR PROCESO\n",
      "0.0178855163809\n",
      "@EduardoTiguaC \n",
      "\"Tesorito\" cree q los mandantes somos unos GILES presentando es pillos de segunda. ¿Y LOS miles de millones dònde están?\n",
      "0.0181891714129\n",
      "Militancia y reciente trabajo de Chávez la justifica aún sea débil en #Babahoyo, pero como justifican en AP… https://t.co/nJgz767ghD\n",
      "0.0182642803126\n",
      "==========================================================\n"
     ]
    }
   ],
   "source": [
    "visualize_document_clusters(training_tweets_new300, docs_representation300, centroids300[8], cluster_assignment300[8], 8, model300)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 126,
   "metadata": {
    "collapsed": true
   },
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "==========================================================\n",
      "Cluster 0    \n",
      "['tercero', '#aficion', 'cuartos', '3-2', 'rivales']\n",
      "[0.020694034030048103, 0.022866656933114515, 0.02977907984773509, 0.033795136128803804, 0.034103338044916831]\n",
      "\n",
      "\n",
      "#AFICIÓN Mina hizo explotar el Capwell y @CSEmelec se acerca al @BarcelonaSCweb #Orovisión #MásparaVer… https://t.co/xb6EU6xrZq\n",
      "0.0129851215216\n",
      "@mariocanessa lo bueno de Maximiliano Barreiro es q es un goleador forjado en la costa,los q han venido de la altura fracasaron en Barcelona\n",
      "0.0149341599366\n",
      "@brojotango @SabiasQueEMELEC cuando lleguen y jueguen y mas ganen una final de Copa Libertadores eso es una discusión entre  LDU IDV BSC\n",
      "0.0151212565119\n",
      "10' Se detiene el partido, Esteban Dreer se está cambiando de medias.\n",
      "\n",
      "#DCuenca 0-1 #Emelec\n",
      "0.0175297909943\n",
      "@AllissonCantos @LDUPoficial @MantaFutbolClub ademas no es un clasico, es un partido mas.!! El clasico es con su vecino de patio @DelfinSC\n",
      "0.0181298282997\n",
      "Con toda la pica por la eliminación en Eurocopa se viene el Italia vs Alemania partido que nunca será amistoso. Partidazo #ForzaAzzurri\n",
      "0.0194760217221\n",
      "Acompañando a mi negrito en el interbarrial dalitobp10 vamos ganando 1-0 gol de mi negro #fuerzayfe https://t.co/xVat4bj47b\n",
      "0.0201905932212\n",
      "Contra de Ecuador con Ibarra rompe en una sola carrera le sirve a Caidedo la define x abajo cruzado y gooool de la tricolor minuto 44\n",
      "0.0203399908882\n",
      "==========================================================\n",
      "Cluster 1    \n",
      "['b-la', '1500465', 'oveja', 'marchito', 'a-la']\n",
      "[0.039962011590835789, 0.04513756974614902, 0.047105577293176215, 0.050773041970483268, 0.053477973909690224]\n",
      "\n",
      "\n",
      "Ahora emitiendo Margarita lugue- te llevaste todo.mp3\n",
      "0.0040054557706\n",
      "Ahora emitiendo Margarita lugue- te llevaste todo.mp3\n",
      "0.0040054557706\n",
      "Ahora emitiendo Inty Illimani - Samba Lando.mp3\n",
      "0.00549408987516\n",
      "Ahora emitiendo BAYRON CAISEDO - EL ANILLO.mp3\n",
      "0.00551624149435\n",
      "Ahora emitiendo BAYRON CAISEDO - EL ANILLO.mp3\n",
      "0.00551624149435\n",
      "Ahora emitiendo BAYRON CAISEDO - EL ANILLO.mp3\n",
      "0.00551624149435\n",
      "Ahora emitiendo BAYRON CAISEDO - EL ANILLO.mp3\n",
      "0.00551624149435\n",
      "Ahora emitiendo inti illimani - samba lando.mp3\n",
      "0.00585807631458\n",
      "==========================================================\n",
      "Cluster 2    \n",
      "['instrumental', 'uhc', '4k', 'rolling', 'squad']\n",
      "[0.020330208161322139, 0.021693094929889467, 0.022828188683487904, 0.023880435669710876, 0.025777990710077914]\n",
      "\n",
      "\n",
      "Me gustó un video de @YouTube de @clevverteve https://t.co/3WGcyHp4VH Adele Enfrenta Murciélago y Bieber Lanzará Purpose Movie\n",
      "0.0109426158255\n",
      "Me ha gustado un vídeo de @YouTube de @willyrexyt (https://t.co/fR9xpZf1gd - PARKOUR SOBRE LAVA!! CARRERA ÉPICA | Minecraft Race Map\n",
      "0.0131072863052\n",
      "Me ha gustado un vídeo de @YouTube de @willyrexyt (https://t.co/fXdm3yDOVb - TOM CLANCY'S RAINBOW SIX SIEGE | UNA ENTRADA ÉPICA!).\n",
      "0.0133301742449\n",
      "Me gustó un video de @YouTube de @toyskids7 https://t.co/wFCxMRVNc9 Finger Family Song Collection! Mickey Mouse Hulk and Hulk Friends\n",
      "0.0144037021249\n",
      "Me ha gustado un vídeo de @YouTube de @mundodeluigi (https://t.co/XXTwN0z7Yy - Como Grabar Y Configurar El OBS STUDIO (OPEN\n",
      "0.0149479993656\n",
      "Me gustó un video de @YouTube de @xdarksoul1988 https://t.co/wgem8sSMtB World of Warcraft | CAZADOR PUNTERÍA PvP NIVEL 110 - PALIZA\n",
      "0.014957661521\n",
      "Me gustó un video de @YouTube de @eugeniekitchen https://t.co/K1nLnoDFS1 \"Eugenie Cake\" Rainbow Heart Surprise Mille Crepe Cake DIY\n",
      "0.0150215379002\n",
      "Me gustó un video de @YouTube https://t.co/ElPFGcMDKn BTS (방탄소년단) - Save Me - (Acoustic Guitar English Version)\n",
      "0.0156744464038\n",
      "==========================================================\n",
      "Cluster 3    \n",
      "['@meji_01', 'ajajaj', 'intentas', 'mmmmm', 'pff']\n",
      "[0.017682038699429858, 0.018079757407363783, 0.018671231978006131, 0.019816185536393749, 0.019822304698262849]\n",
      "\n",
      "\n",
      "@mepasamucho @carlos2737 se lo dedicas a tu novio ?\n",
      "0.0105477847695\n",
      "@Gabileiiva no iba a dejar desperdiciar esa rica y deliciosa hamburguesa que dicha señorita ya no avanzo 🙄🐷 jaja\n",
      "0.0109658958737\n",
      "@maryswinger35 yo quiero comerme todo eso conmi boca luego meterle clavarle ricooo la verga todita que se moje ricoo que grite de placer\n",
      "0.0113948736343\n",
      "Tu pones cursi, a mis demonios 😍 https://t.co/gSibgx2EUy\n",
      "0.0118558370594\n",
      "jejejej yo soy feo y no se cocinar https://t.co/fvTdFW8Jzp\n",
      "0.0119418341897\n",
      "Un ratito nomas =) https://t.co/k3shggmr05\n",
      "0.0122273144596\n",
      "Esto si es oficial y uy mamasita agárrate que a mi me agarra feo cuando me ando muriendo\n",
      "0.0123078413332\n",
      "@nattaliajz lo q daria q me sigas pero no tengo el disfraz\n",
      "0.0123690267382\n",
      "==========================================================\n",
      "Cluster 4    \n",
      "['ende', 'sintoma', 'trabas', 'persigue', 'motivar']\n",
      "[0.019228484436343285, 0.021020470734695706, 0.022249409821859079, 0.023379293014842761, 0.024095670729080587]\n",
      "\n",
      "\n",
      "Una fuente interna de #Leones explicó que no hay empatía con el coach de banca y coach de pitcheo que ya fue cambiado. #Leones\n",
      "0.0119970060424\n",
      "“Los personajes universales, perfectamente conscientes de su inutilidad, son necesarios rara calmar la conciencia colectiva” Alfonso Guerra.\n",
      "0.0126061488416\n",
      "No son mariposas en el estómago, es la vasoconstricción gástrica provocada por la liberación de norepinefrina en la brecha sináptica.\n",
      "0.0130698797262\n",
      "No veía un despliegue similar de irresponsabilidad política desde el PRE de los 90s https://t.co/zvTLdJKq12\n",
      "0.0131073925292\n",
      "Preocupación‼️ efectivamente, tanto como el populismo de @ahorapodemos o @iunida \n",
      "Los Radicalismos son nefastos https://t.co/oJxtO3aHn4\n",
      "0.0132847344731\n",
      "Esto sí que bastante peligroso para la población, la inflación se irá a la estratosfera!! https://t.co/57qdX9BJkq\n",
      "0.01401635117\n",
      "12 Doctorados Honoris Causa? Se habrán enterado los otorgantes q su titular acumuló todos los poderes, maneja la justicia, reprime y odia?\n",
      "0.0140547193388\n",
      "@_bouree @rcaerodrums @Zeus_es_Dios @jomadogo @GatitaBohemia si se platea que hubo una guerra entre Grecia y Persia, no debe haber pruebas??\n",
      "0.0145176110967\n",
      "==========================================================\n",
      "Cluster 5    \n",
      "['querernos', 'dudas', 'distinto', 'equivocado', 'cansa']\n",
      "[0.026661923128071474, 0.035607279206873899, 0.03647643188169869, 0.036487705410031324, 0.037457356706818601]\n",
      "\n",
      "\n",
      "Descansen uds no saben el placer que me produce hacer política diciendo lo que pienso sin máscaras o para quedar bien con algun capullo.\n",
      "0.0150382875773\n",
      "Como mi abuelita sabe que nunca le puedo decir que no me regala moños para que me peine pero eso es misión imposible sino me gusta peinarme😭\n",
      "0.0154274762049\n",
      "TODA PAREJA DEBERIA HACER UN PACTO :\n",
      "Cuando Sienta Que El Amor Se Esta acabando, Prometo Recordar Todos Los Motivos Que Me Hicieron Amarte.\n",
      "0.015701348763\n",
      "Si el olvido queda en palabras pero el recuerdo permanece, en la misma medida recibirás de eso nuevamente.\n",
      "0.0159921330273\n",
      "No vayas contra lo que es justo para conseguir el elogio de los demás 🍀\n",
      "0.0160450146799\n",
      "No logro aún entender si fue casualidad o \n",
      "Si fue la suerte o estaba escrito \n",
      "O simplemente fue seguir el hilo... https://t.co/OnX8wf91E7\n",
      "0.0162603960543\n",
      "(1/2)Dios sabe lo que di, lo q siento y lo que haría por esas personas aunque me odien, me juzguen o me deseen lo peor. A diferencia de\n",
      "0.0168468612919\n",
      "Al final no importa si las cosas no salen como queremos, porq vale más tener cicatriz valiente que piel intacta por cobarde.\n",
      "0.017872250978\n",
      "==========================================================\n",
      "Cluster 6    \n",
      "['innegable', 'colectivo', 'revolucionar', 'legitimidad', 'profundizar']\n",
      "[0.032214115014889133, 0.033115569915782794, 0.036263062022347414, 0.039696021736835396, 0.041108040081208275]\n",
      "\n",
      "\n",
      "Ecuador felicita al pueblo estadounidense por comicios y espera mantener relaciones “basadas en respeto mutuo”  - https://t.co/YuzWOg77Nc\n",
      "0.0131401198236\n",
      "Soy de centro-izquierda por convicción democrática, convicción que me obliga a creer en la alternabilidad y la división de poderes. 1/3\n",
      "0.0151331185394\n",
      "Músico trujillano considera que el diálogo apegado a la Constitución dará frutos al país https://t.co/b4prAaItrS\n",
      "0.0194545855837\n",
      "\"El diálogo y el aprendizaje nos aseguran un futuro de objetivos cumplidos\" #LaMisiónContinúa #LeninPresidente https://t.co/rn4ThfJ0zY\n",
      "0.0199916624084\n",
      "Las marchas son una iniciativa de la ciudadanía que muestra que está harta de un modelo de prepotencia y de división en el país. @forever925\n",
      "0.0203183652937\n",
      "Nos están llevando a que se haga la obra,  si! Pero que exista fiscalización!  No a la impunidad! #mivotoes2 @PacoMoncayo\n",
      "0.0204561392413\n",
      "En #JuntosPodemos pensamos en un candidato más potente para vencer al correísmo. Es momento de unirnos y construir la patria. @radioquitoec\n",
      "0.0206437708406\n",
      "Al conversar con la ciudadanía sentimos un hastío con el Régimen. Evidenciamos que el 85% de la población quiere un… https://t.co/TpDzbDox83\n",
      "0.0209043825109\n",
      "==========================================================\n",
      "Cluster 7    \n",
      "['jumandi', '#vgrancabalgata', 'conmemorarse', '#cuencadefiesta', '#ecorae']\n",
      "[0.024582951150894594, 0.026145401634394938, 0.02629285897108502, 0.026989075687362529, 0.029302018807750629]\n",
      "\n",
      "\n",
      "Alcaldía dejo listo el escenario de áreas verdes del Polideportivo Leonidas Proaño para los juegos binacionales Ecu… https://t.co/BaJ90ZX0Wp\n",
      "0.0178008107057\n",
      "Una fiesta gastronómica se vivió en la Semifinal de #Pastaza del #MundialEncebollado2017. \n",
      "\n",
      "Calificación de platos por jurado calificador.\n",
      "0.0181221276232\n",
      "Campamentos de la JPsuv se instalan desde este miércoles en el Palacio de Miraflores https://t.co/9IeJOs03GO\n",
      "0.0187747176671\n",
      "PATRONALES Y PARQUE ECOLÓGICO\n",
      "\n",
      "Con una procesión, misa campal, presentaciones artísticas e inauguración de juegos... https://t.co/PZT1oIRQFC\n",
      "0.0192917165644\n",
      "#ElOro | Selección de Taekwondo de menores realizo tope evaluatorio y adaptación a la altura en Riobamba. Lea:… https://t.co/iOC0l8qGTD\n",
      "0.019403691288\n",
      "Más de 200 atletas se reunirán en festival Olímpico de Triatlón en la Vela de Coro https://t.co/wD1s2zVhCd\n",
      "0.0195912154293\n",
      "Paquetazo #correista contra #Quito y #Rumiñahui con el incremento d pasajes al Valle de los Chillos\n",
      "#23M 17:00 Parque Turismo de Rumiñahui\n",
      "0.0199884995814\n",
      "#Sting reabre sala de conciertos #Bataclan de #París en aniversario de matanza https://t.co/vdzOJXpsFD https://t.co/zvqDRRiodR\n",
      "0.0204642070324\n",
      "==========================================================\n",
      "Cluster 8    \n",
      "['fortalecen', 'voluntaria', 'facilitar', 'crcs', 'comites']\n",
      "[0.023482866216137599, 0.023837755457191578, 0.02390753825598102, 0.02421601073056423, 0.024482678686786996]\n",
      "\n",
      "\n",
      "Nutanix amplia sus capacidades de automatización de datacenter https://t.co/wxWBbn5ydn\n",
      "0.0112110845727\n",
      "UEA | DEPARTAMENTO DE VINCULACIÓN | CHARLA EXTENSIÓN UNIVERSITARIA | MISIONES UNIVERSITARIAS ARGENTINAS EN EL ECUAD… https://t.co/IONP86zagH\n",
      "0.01147087199\n",
      "Revisamos procesos administrativos de @AzuayPrefectura. #AzuayConEmpleoGana 👍 https://t.co/YworKRXoqk\n",
      "0.0118533955868\n",
      "En @radialvision el edil @MarcoAndresAvil informa entrega de espacio del C.Cayambe para suelo industrial y financia… https://t.co/z4kV5xafPr\n",
      "0.0121117835842\n",
      "@PastazaCpccs fortalece modelos de transparencia MTTYP con estudiantes UNIANDES, @raquelygonzalez @CPCCS trabaja po… https://t.co/zpl6REni8h\n",
      "0.0126785435094\n",
      "@CN_Igualdad@MIES_Zona2  #Mandato Juvenil #En Napo Jóvenes se organizan para proponer programas,proyectos,acciones+ https://t.co/ZBnWJNSPFN\n",
      "0.0134681870632\n",
      "#FirmaConvenioMinasZhucay motivación social: Se incentiva a propietarios de predios y terrenos a participar con entrega insumos agrícolas.\n",
      "0.0137820068142\n",
      "244 estudiantes de Unearte-Anzoátegui recibieron insumos para potenciar formación artística https://t.co/Cz5tup4gkK\n",
      "0.0138145884479\n",
      "==========================================================\n",
      "Cluster 9    \n",
      "['#felizjueves', '#felizmiercoles', '#felizmartes', 'disfrutarlo', '#felizsabado']\n",
      "[0.026658187498732611, 0.03745128401197606, 0.037523275624356534, 0.041587401184124517, 0.045306760641254717]\n",
      "\n",
      "\n",
      "Buenas de Dios, permítanme informarles que, desde este momento estoy oficialmente en modo y formato de fiestas de... https://t.co/cLkbQxEJ1k\n",
      "0.0239010082015\n",
      "A quien se le antoja chuparla en Cuenca???\n",
      "Disfrutemos juntos!!!! Un hermoso 69 sería lo ideal..\n",
      "Mmmmmm https://t.co/s00wN9VcH0\n",
      "0.0239634358708\n",
      "Agradecido por todo el cariño aquí en #Zamora! #Feliz #JJAMIMANERAenvivo https://t.co/PY5bMPbail\n",
      "0.0262156698204\n",
      "Y seguimos!!\n",
      "#lunes\n",
      "#noviembre \n",
      "#quelascosasbuenaspasen https://t.co/8hEScvz2mZ\n",
      "0.0300884396288\n",
      "De lo más divertido en @AmericaRadioGye con café y bolón para iniciar el día ¡un saludo a los amigos migrantes que también nos escucharon!\n",
      "0.0307568226926\n",
      "Nos estamos preparando para para que disfrutes de un evento lleno de adrenalina y aventura... No dudes… https://t.co/sRt4aH9ur7\n",
      "0.0324138207331\n",
      "#ArribaEcuador te deseamos una gran tarde escuchando nuestra programación! Refrescamos memorias con @cadaverexmusic https://t.co/0U7KWr2ahg\n",
      "0.0333547175767\n",
      "Napo simplemente espectacular. Imposible no visitarla... Te esperamos!!!! @Boris_CordovaG @ObrasPublicasEc… https://t.co/JsnGAGoljP\n",
      "0.0341316672828\n",
      "==========================================================\n"
     ]
    }
   ],
   "source": [
    "visualize_document_clusters(training_tweets_new300, docs_representation300, centroids300[10], cluster_assignment300[10], 10, model300)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": []
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": []
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "# Create 22 clusters of tweets (not words) for the model of 300 dim"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 6,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "#data300={'centroids':centroids300,'cluster_assignment':cluster_assignment300,'heterogeneity':heterogeneity_values300}\n",
    "data300=load_json('model300/data300')\n",
    "centroids300=data300['centroids']\n",
    "cluster_assignment300=data300['cluster_assignment']"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 7,
   "metadata": {
    "collapsed": false
   },
   "outputs": [
    {
     "data": {
      "text/plain": [
       "dict_keys(['3', '5', '6', '8', '10', '20', '30', '80'])"
      ]
     },
     "execution_count": 7,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "centroids300.keys()"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 25,
   "metadata": {
    "collapsed": false
   },
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "seed=000000, heterogeneity=5703.72039\n",
      "seed=020000, heterogeneity=5785.71114\n",
      "seed=040000, heterogeneity=5751.12817\n",
      "seed=060000, heterogeneity=5798.14607\n",
      "seed=080000, heterogeneity=5788.22650\n"
     ]
    }
   ],
   "source": [
    "seed_list = [0, 20000, 40000, 60000, 80000]\n",
    "centroids300['22'], cluster_assignment300['22'] = kmeans_multiple_runs(docs_representation300, 22, maxiter=400,\n",
    "                                                               num_runs=len(seed_list),\n",
    "                                                               seed_list=seed_list,\n",
    "                                                               verbose=True)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 26,
   "metadata": {
    "collapsed": false
   },
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "==========================================================\n",
      "Cluster 0    \n",
      "['fmi', 'liberal', '#obama', 'rousseff', 'insiste']\n",
      "[0.026497198259654908, 0.027050714043726831, 0.029351008820096447, 0.032607762746491131, 0.033498945615219156]\n",
      "\n",
      "\n",
      "¿Reelección indefinida en Alemania? ¿Dónde está la #OpoTrucha que no se pronuncia sobre esta \"dictadura\"?… https://t.co/62h3gnodqq\n",
      "0.0156509229226\n",
      "Presidente brasileño promete veto a amnistía para la corrupción. ▶ https://t.co/7CoGuuj31H https://t.co/vElQbQA4tf\n",
      "0.0183472262116\n",
      "#Colombia: Santos confirma que no tiene tumor o metástasis y puede seguir sus funciones &gt;&gt; https://t.co/hynS62jnpF https://t.co/zP834e6Efs\n",
      "0.0185778485686\n",
      "Discurso del correismo\n",
      "nos remite al discurso dictador Rodriguez Lara en 1972\n",
      "con 1er barril crudo\n",
      "https://t.co/Qk4JvQo4cP\n",
      "#CorreazoAlYasuni\n",
      "0.0197490042672\n",
      "May insiste en sus planes para el #brexit pese a advertencias de la oposición británica https://t.co/YGO70i4nmk https://t.co/JbSOxY4yTM\n",
      "0.021392065907\n",
      "Recuerden q a raiz d esa sentencia se hizo pública carta d Secretario Jurídico d la Presidencia disponiendo q no se falle contra el Estado\n",
      "0.0224193951717\n",
      "Líderes opositores llamaron a validar firmas para el referéndum revocatorio contra Nicolás Maduro  https://t.co/aUM9sciJ2a\n",
      "0.0226303728898\n",
      "Vocero opositor venezolano asegura que tregua con Gobierno terminará\n",
      "#MercurioEc https://t.co/NLbnODW3jb https://t.co/WjSRSeh5Px\n",
      "0.0226824623204\n",
      "==========================================================\n",
      "Cluster 1    \n",
      "['dudas', 'sabiendo', 'aguantar', 'equivocado', 'querernos']\n",
      "[0.030446061168914129, 0.034332778974145883, 0.037324985832256408, 0.037349393717003299, 0.037506106853260279]\n",
      "\n",
      "\n",
      "No vayas contra lo que es justo para conseguir el elogio de los demás 🍀\n",
      "0.0112195489114\n",
      "La forma mas cruel de herir a alguien es hacerle creer que le importas y luego irte\n",
      "0.0138036102157\n",
      "Como mi abuelita sabe que nunca le puedo decir que no me regala moños para que me peine pero eso es misión imposible sino me gusta peinarme😭\n",
      "0.0143309194082\n",
      "El truco está en dejar de hablarle y escribirle, como si no doliera, como si no importara. Hasta que termine por no doler y por no importar.\n",
      "0.0145771384828\n",
      "Es duro fracasar en algo, pero es mucho peor no haberlo intentado\n",
      "0.0146066981644\n",
      "A los acomplejados primero #AlYacuzzi a que vean que la vida es del putas pero después #AlHorno por que han de sufrir.\n",
      "0.0148725800303\n",
      "@domenicaolarte5 Lamentablemente, eso tiene que pasar Dome, aunque es duro al principio, toca acostumbrarse😪👏\n",
      "0.0153819366231\n",
      "La Friendzone no existe, eres demasiado bueno para una chica que ella decide ponerte en standby para hacerte caso cuando deje la Putería.\n",
      "0.0155180579703\n",
      "==========================================================\n",
      "Cluster 2    \n",
      "['asisten', 'organizan', 'urbanas', '#soymilitarec', 'organizadas']\n",
      "[0.018885834057053463, 0.02014077391164637, 0.02153689680264026, 0.022643259680888539, 0.023300073229682416]\n",
      "\n",
      "\n",
      "#InfoMAGAP | Capacitación en enfermedades hemoparasitarias de ganado bovino parroquia #Cube #Quinindé… https://t.co/K6hoAbe7uO\n",
      "0.0101839715273\n",
      "#GuardiaCiudadana👮\n",
      "\n",
      "Cuidamos el #OrdenYSeguridad en diferentes sectores #Cuenca.\n",
      "\n",
      "Se retira ventas ambulantes sin l… https://t.co/bHDSs0VDBi\n",
      "0.0109461926923\n",
      "@andreslara11 y @GOBERCANAR informan sobre el Operativo #Pionero100 desarrollado en el sector los Pinos #Biblian… https://t.co/P7e0FJwwY7\n",
      "0.011249276242\n",
      "#Distrito10D01 #Ibarra #Pimampiro #Urcuquí   entregó certificados a voluntarios de salud resaltando su labor y comp… https://t.co/hCmG7AJGaE\n",
      "0.011679865526\n",
      "#Distrito10D01 atención en comedor obrero del mercado amazonas, con medicina, odontología, psicología #Ibarra https://t.co/rrfoWf0Dqv\n",
      "0.0124737574658\n",
      "#Distrito09D02 realiza control post parto a usuarias en Coop. Libertad en Trinitaria #MilDías… https://t.co/ny7QuPXsPW\n",
      "0.0125062313001\n",
      "Municipio realiza el mantenimiento, reforzamiento y consolidación estructural de varias edificaciones religiosas:… https://t.co/1rRghNfbox\n",
      "0.0127209294192\n",
      "4. Al norte de la urbe hay riberas socavadas donde instituciones como prevención colocaron cintas de seguridad.… https://t.co/ZDDI5eHXWI\n",
      "0.0129111026166\n",
      "==========================================================\n",
      "Cluster 3    \n",
      "['parrales', 'historiador', 'tobar', 'campal', '#fedese']\n",
      "[0.019615267377000478, 0.020313676912646184, 0.020362479343752238, 0.021494815786734511, 0.024421116544544264]\n",
      "\n",
      "\n",
      "ONOMÁSTICO DE SONIA CASTILLO\n",
      "\n",
      "La emprendedora del comercio Sonia Castillo Parrales, celebró su onomástico el 8 de... https://t.co/TdI9dGrs3O\n",
      "0.0112525731882\n",
      "ONOMÁSTICO DE SONIA CASTILLO\n",
      "\n",
      "La emprendedora del comercio Sonia Castillo Parrales, celebró su onomástico el 8 de... https://t.co/kYMzgitUQP\n",
      "0.0112525731882\n",
      "Max Liebermann, pintor del ocio de la alta burguesía alemana antes de la llegada del nazismo: JOSE ÁNGEL GONZ... https://t.co/ylczUpsKUe\n",
      "0.0121089398154\n",
      "María Belén Loor Segovia! Tercera candidata principal por Centro Democrático! Alterno Walter Josué Macías Can Sing… https://t.co/ppqNWYyEi4\n",
      "0.0137486728956\n",
      "UnidosPor Bolívar Rolando Verdezoto Jenny Piedad Chimbo Aldaz Marcelo Cardenas Lorences\n",
      "0.014705046837\n",
      "Juan Pío Montúfar y el obispo José de Cuero y Caicedo,fueron ideólogos y principales cabecillas de la revuelta de #10deAgosto. #EnPieDeLucha\n",
      "0.0153005692704\n",
      "Lusseny Tuarez(Quinindé),Michelle Castillo(Atacames),Dalia Cortez(Rioverde),Viviana Quiñónez (S Lorenzo),candidatas… https://t.co/W36WfqOmtP\n",
      "0.017280200085\n",
      "El cronista colombiano Alberto Salcedo Ramos @SalcedoRamos también participará en la #FILQuito2016 📚 no dejes de le… https://t.co/fVRfeah4WP\n",
      "0.0179128354639\n",
      "==========================================================\n",
      "Cluster 4    \n",
      "['https://t.co/qvepmdjos5', 'suscribes', 'https://t.co/oxazorrdzm', 'apuesto', 'holi']\n",
      "[0.019409201009278343, 0.025342544258090793, 0.089292726519835997, 0.090900143641877373, 0.091343271276205784]\n",
      "\n",
      "\n",
      "@LissetDeGomez1 Holi,soy youtuber si te saco una sonrisa,te SUSCRIBES https://t.co/QVEPMD1Ntv podemos ser amigos :3 https://t.co/8Xu87zhICl\n",
      "0.0162884865088\n",
      "@camiii_075 Holi,soy youtuber si te saco una sonrisa,te SUSCRIBES https://t.co/QVEPMD1Ntv podemos ser amigos :3 https://t.co/8Xu87zhICl\n",
      "0.0162884865088\n",
      "@valeemanya3 Holi,soy youtuber si te saco una sonrisa,te SUSCRIBES https://t.co/QVEPMD1Ntv podemos ser amigos :3 https://t.co/8Xu87zhICl\n",
      "0.0162884865088\n",
      "@baunohemi11 Holi,soy youtuber si te saco una sonrisa,te SUSCRIBES https://t.co/QVEPMD1Ntv podemos ser amigos :3 https://t.co/8Xu87zhICl\n",
      "0.0162884865088\n",
      "@MiguelRecio10 Holi,soy youtuber si te saco una sonrisa,te SUSCRIBES https://t.co/QVEPMD1Ntv podemos ser amigos :3 https://t.co/8Xu87zhICl\n",
      "0.0162884865088\n",
      "@FasaMarty Holi,soy youtuber si te saco una sonrisa,te SUSCRIBES https://t.co/QVEPMD1Ntv podemos ser amigos :3 https://t.co/8Xu87zhICl\n",
      "0.0162884865088\n",
      "@beautyupdatenow Holi,soy youtuber si te saco una sonrisa,te SUSCRIBES https://t.co/QVEPMD1Ntv podemos ser amigos :3 https://t.co/8Xu87zhICl\n",
      "0.0162884865088\n",
      "@ParrulloEd Holi,soy youtuber si te saco una sonrisa,te SUSCRIBES https://t.co/QVEPMD1Ntv podemos ser amigos :3 https://t.co/8Xu87zhICl\n",
      "0.0162884865088\n",
      "==========================================================\n",
      "Cluster 5    \n",
      "['b-la', 'oveja', '1500465', 'a-la', 'marchito']\n",
      "[0.054881977328989695, 0.057272618916965112, 0.057291325789655234, 0.065219801469930561, 0.066149899860161621]\n",
      "\n",
      "\n",
      "Ahora emitiendo Inty Illimani - Samba Lando.mp3\n",
      "0.00318334704073\n",
      "Ahora emitiendo Israel - aprietame.mp3\n",
      "0.00590848264599\n",
      "Ahora emitiendo Israel - aprietame.mp3\n",
      "0.00590848264599\n",
      "Ahora emitiendo Israel - aprietame.mp3\n",
      "0.00590848264599\n",
      "Ahora emitiendo Israel - aprietame.mp3\n",
      "0.00590848264599\n",
      "Ahora emitiendo Israel - aprietame.mp3\n",
      "0.00590848264599\n",
      "Ahora emitiendo Margarita lugue- te llevaste todo.mp3\n",
      "0.00612575389153\n",
      "Ahora emitiendo Margarita lugue- te llevaste todo.mp3\n",
      "0.00612575389153\n",
      "==========================================================\n",
      "Cluster 6    \n",
      "['neztor', '@willyrexyt', 'ash', 'uhc', 'mvl']\n",
      "[0.045921655794004757, 0.047267351761376419, 0.048462525586945526, 0.05598511199167544, 0.058155952942452682]\n",
      "\n",
      "\n",
      "Me ha gustado un vídeo de @YouTube de @bboymoreno92 (https://t.co/ieUxwzMaWm - HACKER FULL DIAMANTE INVENCIBLE EN MINECRAFT).\n",
      "0.0068671319835\n",
      "Me gustó un video de @YouTube https://t.co/jhTziG6WcP Miley Cyrus - Wrecking Ball (Chatroulette Version)\n",
      "0.00758447133554\n",
      "Me ha gustado un vídeo de @YouTube de @rubiu5 (https://t.co/3eMvmINgVN - EPIC SALTO EN PARACAIDAS).\n",
      "0.0082186815159\n",
      "Me ha gustado un vídeo de @YouTube de @rubiu5 (https://t.co/3eMvmJ4RNl - EPIC SALTO EN PARACAIDAS).\n",
      "0.0082186815159\n",
      "Me gustó un video de @YouTube de @windygirk https://t.co/RRjArpM3Nh STRIP CLASH ROYALE ★ LA HEMBRA ALFA\n",
      "0.00907876486327\n",
      "Me gustó un video de @YouTube de @willyrexyt https://t.co/zFsonu7SEO EL BUSCADOR MÁGICO!! Con VEGETTA | EGGWARS\n",
      "0.00931335836305\n",
      "Me ha gustado un vídeo de @YouTube de @tylaryaz (https://t.co/fDwQGHXzjx - UHC Highlights #92 - \"Strength\").\n",
      "0.00934795057675\n",
      "Me ha gustado un vídeo de @YouTube de @willyrexyt (https://t.co/4laFeaBd9u - Vlog - FAIL En La Piscina !!).\n",
      "0.00982389913993\n",
      "==========================================================\n",
      "Cluster 7    \n",
      "['@teleradio1350', '7h30', '@radiomorena', 'pierdan', '@rcristal870am']\n",
      "[0.022392295458645406, 0.028118558945066652, 0.029196259434573268, 0.030577004615464309, 0.035114567126199203]\n",
      "\n",
      "\n",
      "Amigos, mañana estaré en enlace radial a las 07H00. Transmite: @radiorumbagye, @CREsatelital, @radioatalaya680, @rcristal870AM, @radioi99.\n",
      "0.0150177059254\n",
      "Les invito a escucharme mañana en Telerama a las 7H00 am #AvanzaPropone #EcuadorRenace https://t.co/JsoABMxUMe\n",
      "0.0160850907794\n",
      "Amigos manabitas, en breve comenzamos la entrevista en @manavisionec. Sintonicen canal 9 para ver la entrevista. ¡No se la pierdan!\n",
      "0.0165187334996\n",
      "Mañana mi reflexión sobre #InformealaNacion en @Tropicana965Fm a las 07h00 y en @radioatalaya680 a las 08h30. Te invito a escucharme\n",
      "0.0167837865135\n",
      "¡Buenos días! En breve iniciamos la cadena radial transmitida por @CRESATELITAL, @i99radio, @radioatalaya680 y Tropicana. ¡No se la pierdan!\n",
      "0.0170319943879\n",
      "Mañana a partir de las 08h30 escucha mi entrevista en el canal de la @ucatolicagye 42UHF Reflexión sobre movilizaciones  #13A\n",
      "0.0186681412179\n",
      "¡Buenos días Manabí! A las 07H15 empezamos la entrevista en @RadioFarra957 y a las 08H15 en @radioscandalo 103.7 FM. ¡No se las pierdan!\n",
      "0.0189360062056\n",
      "Martes 6 mar, 8h00 Radio Sonorama (103.7 FM.), entrevista sobre temas de Quito y la Asamblea. Espero que logren sintonizarnos, saludos Paco.\n",
      "0.0196348220849\n",
      "==========================================================\n",
      "Cluster 8    \n",
      "['reaction', 'everyone', '#djia', 'first', 'higher']\n",
      "[0.011083478498617128, 0.011433496355400807, 0.012464642185380903, 0.012889428666006508, 0.012997507037882161]\n",
      "\n",
      "\n",
      "#USDCAD held above #elliottwave invalidation level for #ECB &amp; #NFP sessions BEFORE http://t.co/mXTCHZZiQd AFTER http://t.co/LvcCnh8dj7\n",
      "0.0121837965516\n",
      "#USDCAD held above #elliottwave invalidation level for #ECB &amp; #NFP sessions BEFORE http://t.co/mXTCHZZiQd AFTER http://t.co/LvcCnh8dj7\n",
      "0.0121837965516\n",
      "Money box doing his job #EURJPY reaching the target #ondaselliott #elliottwave http://t.co/1WkDQIfCIx\n",
      "0.0131554254181\n",
      "#DAX we said keep tracking to the downside. Dijimos, continuamos a la baja #ondaselliott #elliottwave http://t.co/M9x0Tzeu5b\n",
      "0.0134969885658\n",
      "#DAX we said keep tracking to the downside. Dijimos, continuamos a la baja #ondaselliott #elliottwave . http://t.co/M9x0Tzeu5b .\n",
      "0.0134969885658\n",
      "#DAX we said keep tracking to the downside. Dijimos, continuamos a la baja #ondaselliott #elliottwave . http://t.co/M9x0Tzeu5b\n",
      "0.0134969885658\n",
      "#DAX we said keep tracking to the downside. Dijimos, continuamos a la baja #ondaselliott #elliottwave . http://t.co/M9x0Tzeu5b .\n",
      "0.0134969885658\n",
      "Oil Short around 51.00 area, stop 54.24 on feb 05th. http://t.co/szkSOGc6Yo Now below 43.00. No stressed trades #elliottwave #ondaselliott\n",
      "0.0138724369665\n",
      "==========================================================\n",
      "Cluster 9    \n",
      "['amigosdeltwve', 'oyentes', 'checo', '#telcelconcheco', '#4diasparaelcumpledemarques']\n",
      "[0.050357129879360252, 0.051454743704366424, 0.053153215181151348, 0.053452458906246059, 0.05625620305829282]\n",
      "\n",
      "\n",
      "@ChelaViteri . BENDICIONES NOS ESTAMOS SIGUIENDO. SUGERENCIA @PichiCastroD .\n",
      "0.0191191722869\n",
      "@MisterRMX  yo ya estoy participando..!!! GRACIAS por todo el entretenimiento que me has dado y por las risas que me sacas en los directos\n",
      "0.0204748483574\n",
      "Amigos de @RadioPuntoRojo xfa me ayudan con el tema #Antesqueno de @davidbisbal gracias, bendiciones saludos de la península, se los espera\n",
      "0.0229322275586\n",
      "@NoticiasCNCO apoya #TeletónEcuador2016💚\n",
      "Gracias por traelos @TeletonEC #3deDiciembre siiiiii!\n",
      "0.0315880818047\n",
      "Gracias queridas Valentina y Emi por acompañarnos en éste viaje, que se repita pronto #DeManoAMano🖐🏼 https://t.co/wpbg7kWYaq\n",
      "0.0319694640783\n",
      "@ReporteValioso . BENDICIONES NOS  ESTAMOS SIGUIENDO.\n",
      "0.033128161957\n",
      "Los estamos esperando en mikioskitoec de @plazalagos junto a @RobertoManrique y @Desafioec… https://t.co/eAoIqKyPpY\n",
      "0.0366436980024\n",
      "Hermosa y vibrante reflexión para comenzar un nuevo año! permitanme compartirla.  Muchas gracias, saludos, Andres https://t.co/b1HfBQ4jN9\n",
      "0.036985793976\n",
      "==========================================================\n",
      "Cluster 10    \n",
      "['aspirantes', 'autoevaluacion', 'operadores', 'destaco', 'acreditacion']\n",
      "[0.026353233466605563, 0.027666376736855791, 0.029252727467639739, 0.030719743169017155, 0.031522186845385769]\n",
      "\n",
      "\n",
      "Caracas: reunion orevia d Gabinete binacional ECUADOR-VENEZUELA. Se tratará  portabilidad de aportes IESS http://t.co/wKHoZWanpV\n",
      "0.0103623564163\n",
      "1/2 Miembros de la JPE en compañía de @siguenzamariana mantienen reunión para resoluciones https://t.co/YNTgBzyF8d\n",
      "0.0136491829167\n",
      "Ministro @xavierenderica se reúne con las federaciones deportivas provinciales para socializar el calendario único… https://t.co/30BLt82KDk\n",
      "0.0139302902707\n",
      "Se analizan en tercera reunión #Loja bases legales para establecer #MancomunidadCulturaldelAustroEcuatoriano @CasadelaCultura\n",
      "0.0139478751166\n",
      "#JohnnyChavarríaV, Rector UPSE dialoga con la prensa local sobre nuevas carreras aprobadas y visita de @compaiRENE… https://t.co/jmB71yPT5O\n",
      "0.0165474858522\n",
      "Agradezco a los 17 Consejeros Provinciales que ayer aprobaron la Reforma a la Ordenanza de Gestión Vial del Azuay. https://t.co/fHswCQbDgU\n",
      "0.0170949884591\n",
      "Iniciamos el Parlamento Popular Provincial. Azuayas/os priorizamos las obras del 2016. #ParlamentoAzuay https://t.co/b2BlftRVwD\n",
      "0.0178493076229\n",
      "Hoy tenemos nuestro 1er Consejo de Autoridades del Ejecutivo Desconcentrado, Gobernadores, Jefes y Tenientes Políti… https://t.co/wShSgzUm3d\n",
      "0.0178668848653\n",
      "==========================================================\n",
      "Cluster 11    \n",
      "['demagogia', 'fundamentalismo', 'radicales', 'conveniencia', 'actua']\n",
      "[0.027020525712120103, 0.02944724045134961, 0.030163328564756564, 0.032411850336722114, 0.032715247131322789]\n",
      "\n",
      "\n",
      "@JesBF mí pesimismo se irá cuando vea un par de corruptos presos y seguro volverá el optimismo y credibilidad en la justicia de mí parte...\n",
      "0.00797783047588\n",
      "...para demostrar cómo sus impuestos afectan a la clase media. Si su discurso va en serio, dígale que acepte mi solicitud. (2/2)\n",
      "0.0120653249233\n",
      "@AABenedetti  problema de ego?No senador.es una representacion factica de que en este pais a los parasitos como usted se le paga y demasiado\n",
      "0.0139364107479\n",
      "@jfcarpio @CynthiaViteri6  Friedman pensaba otra cosa con su ejemplo de cambiar  palas mecánicas y cucharas respecto al salario austero\n",
      "0.0141836714408\n",
      "@jayalasa Quito es peor, debemos aguantar además todos los autos d presidencia, ministerios, secretarías, y cuánto organismo inventado hay\n",
      "0.0143356329794\n",
      "Que difícil, evidente e imposible para la oposición separarse, liberarse de \"representativas figuras\" de la banca...los llevan en el alma\n",
      "0.0148033456498\n",
      "Correa es un genio de la manipulación política y la opo se ha pasado de mediocre y oportunista para dejarse embaucar\n",
      "0.0149979067104\n",
      "@marodriguezb estamos en la época en la q todo lo q digas molesta e indigna a alguien,la censura social ha llegado, la tiranía del populismo\n",
      "0.015672996347\n",
      "==========================================================\n",
      "Cluster 12    \n",
      "['#vidaalegriayritmo', 'conmemorarse', 'confraternidad', '#vgrancabalgata', '#lojacentrodelarteycultura']\n",
      "[0.02355467479182094, 0.036228956822798475, 0.038507754178089715, 0.038535242935179514, 0.038965173006025977]\n",
      "\n",
      "\n",
      "La tradicional fritada y un maravilloso  complejo deportivo en La Iberia cantón  El Guabo. Este feriado continúa… https://t.co/1gAFPflXfs\n",
      "0.0137613394866\n",
      "#FiestasDeCuenca El col. Manuela Garaicoa presente en el desfile estudiantil con un baile de las culturas de la Cos… https://t.co/KAwaRhkz8W\n",
      "0.018242744012\n",
      "Celebramos al Carchi con eventos de altura\n",
      "@yosoytulcan\n",
      " #YoSoyEcuador https://t.co/1VAt5Pn49w\n",
      "0.0201380026369\n",
      "El evento inaugural será en el Museo #Pumapungo del @Cultura_Ec a las 19:00 con presentaciones artísticas  https://t.co/q2fAtyQsNc\n",
      "0.0206646405048\n",
      "Artistas de #Quito deleitaron anoche con su humor a propios y extraños en el parque central de #Loja con el… https://t.co/PlAPAvlN8n\n",
      "0.0206745311089\n",
      "Extraordinaria llegada de #PapaNoel al #MalldelSol el ambiente navideño ya se vive en la ciudad… https://t.co/GcCTmViu6z\n",
      "0.0216683670372\n",
      "Hoy 04 de noviembre Independencia de Azogues\n",
      "\n",
      "Reseña histórica de Azogues.\n",
      "\n",
      "Los primitivos pobladores del cantón... https://t.co/XAMfbJwcR2\n",
      "0.0221527136161\n",
      "Invitados hoy a la Celebración Eucarística  a las 15h00 en el interior del Cementerio Patrimonial Cuenca en el sect… https://t.co/YUBX2W8kcJ\n",
      "0.0222371598881\n",
      "==========================================================\n",
      "Cluster 13    \n",
      "['firmes', '@35apd3gye', 'continuaremos', 'conviccion', 'firmeza']\n",
      "[0.036705598169477383, 0.044222210708714127, 0.045958818602074514, 0.046168442286766087, 0.047560635453004596]\n",
      "\n",
      "\n",
      "Con mi compa @TyroneBajana q esta trabajando duro para q en su cantón haya un verdadero cambio Los campesinos lo ap… https://t.co/zKN4uN2tNn\n",
      "0.023281917313\n",
      "Desde Sucumbíos: \"no haremos alianzas con los politiqueros de siempre, nuestra alianza es con el pueblo\" #fuerzayfe… https://t.co/qvBfw076qa\n",
      "0.0241594817029\n",
      "#Ecuatorianos y #Hondureños juntos para apoyar en proceso #honduras esta cambiando @juanorlandoh… http://t.co/J9X52kkzGl\n",
      "0.0246369085583\n",
      "@RossyOrellanaR A pesar del disgusto por la exclusión d algunos compas d las listas, saber de su candidatura devuelve la fe en PAÍS EXITOS\n",
      "0.0259374547234\n",
      ".@MashiRafael \"La mayor condecoración que tenemos es ese cariño de ustedes y esas victorias consecutivas en las urnas\" #Enlace500\n",
      "0.026046498341\n",
      "Compañeros del @PSocialistaEc. Agradezco su apoyo a este sueño de construir un Ecuador más justo. Son un pilar de la transformación (1/2).\n",
      "0.026348329485\n",
      "Con la alegría y frontalidad que caracteriza a @MashiRafael participemos del #Enlace500 en la #LaMana.\n",
      "El gobierno… https://t.co/UanMnBH5Tf\n",
      "0.0265341994045\n",
      "Estamos listos para asumir este reto con el ñeque y compromiso que nos caracteriza. ¡No les fallaremos! #Avanza https://t.co/Ob8pQ8k96T\n",
      "0.0268203726104\n",
      "==========================================================\n",
      "Cluster 14    \n",
      "['disfrutado', 'vivamos', '#felizsabado', 'pasare', 'entretenido']\n",
      "[0.040970360926719573, 0.041762930959990952, 0.046399868527653321, 0.054179759820112805, 0.054512586790613105]\n",
      "\n",
      "\n",
      "Cuantos chicos desean divertirse esta noche?\n",
      "Disfruta #ChicasMachala\n",
      "0.0264199135452\n",
      "Un #FelizDomingo como están esos ánimos que se termina las vacaciones. #FinDeFeriadoLargo https://t.co/HVrvn2yzOM\n",
      "0.027004430717\n",
      "Buenos días! Hoy es el día de abrazar un árbol. Aún no decido si abrazo el álbol de mango o la palma de coco\n",
      "0.0280247287004\n",
      "Existe algo más cansado que un lunes post vacaciones?\n",
      "0.030177836538\n",
      "Nasganas de birrita con maní, justo a esta hora antes de preparar mi cena\n",
      "0.030426807016\n",
      "Hoy nos transportamos al descanso, nos imaginamos de vacaciones pero... quién es más feliz cuando se va de vacacion… https://t.co/gNXItSGb9s\n",
      "0.0305123355262\n",
      "la fiesta de tías se acabó el sábado a las once, y aún llegan a wsp mensajes de agradecimiento.\n",
      "0.030759011713\n",
      "Este sábado podrás reír nuevamente en la Hcda. Monocongo, en las Carreras de Caballos. NO FALTES. https://t.co/o1RXKcdzyS\n",
      "0.0318863673731\n",
      "==========================================================\n",
      "Cluster 15    \n",
      "['1x1', '1ero', 'jue', 'disputan', 'prevista']\n",
      "[0.0289860375421227, 0.04031891848593161, 0.041401899103978956, 0.04833075420242805, 0.048963310909887481]\n",
      "\n",
      "\n",
      "#DATO Equipos más goleados en esta fase de grupos:\n",
      "Legia [24]\n",
      "Celtic [15]\n",
      "Ludogorets y Zagreb [13]\n",
      "#UCL\n",
      "0.0227377983256\n",
      "El Auditorio acogerá el 3 de enero una gala benéfica circense patrocinada por Globalcaja\n",
      "0.0241884099767\n",
      "El hashtag #DíaDelEscudo ocupó el lunes 31, la 10ª posición en el Top20 de las Tendencias de Ecuador: https://t.co/UFfNAZhV8T #trndnl\n",
      "0.0258559042431\n",
      "!!Por un triunfo clave para nuestra selección!!\n",
      "15 de noviembre 15h30\n",
      "10 pantallas hd, 3 ambientes… https://t.co/mAWJngPWoE\n",
      "0.0264249244202\n",
      "Rumiñahui 10k sábado 10 de Dic Sangolqui a las 19:30 Inscríbete https://t.co/Ye2BWX3Igh\n",
      "0.0280400422132\n",
      "Tren Guaicaipuro se integra desde este viernes a Línea 2 y 4 del Metro de Caracas https://t.co/261MvR5fzh\n",
      "0.0289106949459\n",
      "#BarcelonaSC Importantes triunfos de visitante de nuestras Sub 19 y 16, ambas en la busqueda del primer puesto. \n",
      "Gr… https://t.co/zl3nGtshHM\n",
      "0.0297322183843\n",
      "El Ibex 35 arranca la jornada con retrocesos del 0,74%, hasta los 8.964 puntos: Las caídas vuelven a las bols... https://t.co/2mKh1VJ1uH\n",
      "0.029820446265\n",
      "==========================================================\n",
      "Cluster 16    \n",
      "['#aficion', 'tercero', 'golear', '3-2', 'rivales']\n",
      "[0.030266847342235059, 0.030573467680410027, 0.033505926982299039, 0.03467866514656015, 0.037241257162068164]\n",
      "\n",
      "\n",
      "#AFICIÓN Mina hizo explotar el Capwell y @CSEmelec se acerca al @BarcelonaSCweb #Orovisión #MásparaVer… https://t.co/xb6EU6xrZq\n",
      "0.0117641956689\n",
      "INFILTRADO!!\n",
      "Un emelecista metido en la cancha empata y termina el partido!!\n",
      "@CSEmelec @BocaDelPozoBDP @emelec https://t.co/uGH02Tuvxo\n",
      "0.0150793421736\n",
      "@brojotango @SabiasQueEMELEC cuando lleguen y jueguen y mas ganen una final de Copa Libertadores eso es una discusión entre  LDU IDV BSC\n",
      "0.0152476109022\n",
      "@mariocanessa lo bueno de Maximiliano Barreiro es q es un goleador forjado en la costa,los q han venido de la altura fracasaron en Barcelona\n",
      "0.0154817119295\n",
      "Srs. Díaz empata el partido y el Monumental es una locura, con este empate vuelve a recuperar la corona! \n",
      "#BSC 1-1 #Emelec\n",
      "0.0175986841789\n",
      "Con empuje y coraje lo empató FAmarilla. Flojo partido del puntero BSC 1-1 en juego áspero y friccionado. BSC sigue arriba con 5 de ventaja\n",
      "0.0178300683458\n",
      "¡Se viene el Clásico del Astillero y lo vivimos en Sports Planet! A #BarcelonaSC le alcanza un empate para salir... https://t.co/XDwZSK10w1\n",
      "0.0179422820052\n",
      "Goooooooooooooooooooooooooooooooooooooooooooooooooooooooooooooooooooooooooooool 2-2 ya viene el tercero #VamosEcuador 💛💙❤️ #CopaAmerica\n",
      "0.0195017597305\n",
      "==========================================================\n",
      "Cluster 17    \n",
      "['decias', 'tipico', 'caigo', 'cursi', 'noo']\n",
      "[0.017574432761646941, 0.018594561748880967, 0.018742937975956941, 0.018788627843102867, 0.020476756302156285]\n",
      "\n",
      "\n",
      "Esa emoción de cuando te escribe tu crush! 🙈🙈 No se compara con nada jajaja 😊😊😊\n",
      "0.00825105346261\n",
      "@FraanLandrieel siii que tanto! Veni a pelear si queres!  Ahre\n",
      "0.00879935303327\n",
      "jeje la repites hasta que la odias https://t.co/QBby04quvp\n",
      "0.0094297818864\n",
      "@aye_ruiz15 viste no necesitas un novio 💞😘\n",
      "0.00970111739484\n",
      "Que envidia de mi vecina... :/\n",
      "0.0100804716142\n",
      "Hay Que Bonito jajajajaja 😂 Pero no sucederá Jajajaaj 😂😂😂 https://t.co/pxkesNkB1B\n",
      "0.010802873482\n",
      "@ZulianaCuadrado que no suene raro; pero yo te tengo a ti jajajajajajaja\n",
      "0.0109266745163\n",
      "@SoGoodSoWhat Te lo juro 😂😂😂\n",
      "0.0111256509965\n",
      "==========================================================\n",
      "Cluster 18    \n",
      "['querernos', 'admirar', 'confio', 'aprendido', 'creias']\n",
      "[0.031682211542130356, 0.036159575165010449, 0.041344696217633148, 0.042389337864110366, 0.043036527039096883]\n",
      "\n",
      "\n",
      "Aprobé todaaaaaaas, una felicidad enorme ❤\n",
      "0.0110333495204\n",
      "Tu vida no es una casualidad de la naturaleza. Dios te creó.\n",
      "A él no le sorprendió tu nacimiento.\n",
      "Es mas, lo estaba esperando....\n",
      "0.0153747294546\n",
      "Una vida feliz no es factible sin una medida de oscuridad, la palabra felicidad perdería sentido si no estuviera balanceada con la tristeza.\n",
      "0.017032498651\n",
      "@MariaFdaCabal aunque usted sea una de las peores personas para el pais, no le deseo el infierno ojala y conozca a Cristo y salve su alma.\n",
      "0.0185453474954\n",
      "Como no, María siempre humilde ante lis acontecimientos que le tocó vivir,lo único que hacía es orar siempre orar https://t.co/PIWEp2GUdO\n",
      "0.0200839294809\n",
      "\"@ZoilyPuebla: Dios mio, padre mio, en ti confió, por más pruebas que tenga en este mundo, mi alma y espíritu no dejaran de amarte… https://\n",
      "0.0206564149812\n",
      "Al mirar la grandeza del poder de Dios, tengo q reconocer lo pequeño que soy.. #rpsp .@brunoraso #comunicaT-SALT https://t.co/QtNz3cT8A6\n",
      "0.0214868551334\n",
      "Vivir en humildad es que ocurra lo ocurra será un regalo, porque no esperaba nada, y porque la felicidad reside en… https://t.co/0wprLV6fN3\n",
      "0.0223541205521\n",
      "==========================================================\n",
      "Cluster 19    \n",
      "['vayase', 'emm', 'contestes', 'peta', 'pegando']\n",
      "[0.010839241124006471, 0.013445396659344855, 0.013790110999047256, 0.015654897754225461, 0.015875895778533433]\n",
      "\n",
      "\n",
      "@britneyarias27 @SebasAvila98 te faltó mencionar que te hacías lesbiana por mi\n",
      "0.00512535231428\n",
      "@YoSoyBarcelona @PlanetAmarillo y cuál será la grilla de turno 😂😂😂. Se jodió la 🐜\n",
      "0.00711807051108\n",
      "Yo te inaugure tu mierdero, cagón!! #GRANDEÍDOLO💛\n",
      "0.00902892663692\n",
      "Me canso de todo enseguida 😭\n",
      "0.00903083077622\n",
      "poss yo seee ke despues dejaras de hablarme,,,, mejor aki me expreso… — Ome Wey !! Encerio Yia Kita el Anonimo!!☺😅 https://t.co/oCuVYkpxgZ\n",
      "0.00924801828826\n",
      "@FerCadenaV jajaajaja de queee??\n",
      "0.00954472581082\n",
      "\"Me convertí en un loco con largos intervalos de horrible cordura\" Edgar A. Poe\n",
      "0.00957210719791\n",
      "Cuando cupido te lanzó la flecha... donde es que se te clavo?! #digonomas\n",
      "0.0102280302605\n",
      "==========================================================\n",
      "Cluster 20    \n",
      "['3/3', 'consolidar', 'buscamos', 'colectivos', '#medidasdeausteridad']\n",
      "[0.022679054204969296, 0.029157905913278714, 0.032427304896523013, 0.032456994864731303, 0.03341153696139687]\n",
      "\n",
      "\n",
      "Debemos ratificar el protocolo de Nagoya, de la Convención de Diversidad Biológica que regula el uso de recursos ge… https://t.co/e977y2KOB5\n",
      "0.00919071087728\n",
      "#LenínMoreno asegura q las escuelas dl milenio pueden seguir siendo construidas bajo una planificación d eficacia y optimización de recursos\n",
      "0.0104971318241\n",
      "El gobierno central, tiene que creer en gobiernos seccionales descentralizados, capaces de ejecutar sus propias competencias. (1/3)\n",
      "0.0114687131545\n",
      "Además, buscamos reducir el gasto corriente de @AzuayPrefectura. En 2016 continuaremos con autogestión de recursos para #NuestroAzuay.\n",
      "0.0127907531621\n",
      "@GabrielaEsPais:El papel de los parlamentos es fundamental para viabilizar acuerdos realizados entre los jefes d Es… https://t.co/6Hp8Xl89g1\n",
      "0.0141713928182\n",
      "Entre 2003 y 2004, no se aumentaron impuestos, se aplicaron políticas de ahorro, se respetó la autonomía empresarial. #CambioPositivo\n",
      "0.0144364847145\n",
      "📻 La @MediacionCJ puede resolver casos de pensión alimenticia, régimen de visita, tenencia y ayuda prenatal… https://t.co/XOHrsU1hjs\n",
      "0.0150705716523\n",
      "Planteamos una legislación más efectiva: afianzar y profundizar lo alcanzado, garantizar derechos establecidos en la Constitución. @radioi99\n",
      "0.015505335392\n",
      "==========================================================\n",
      "Cluster 21    \n",
      "['avanzado', 'recoger', 'otorgan', 'ajustar', 'totalidad']\n",
      "[0.016253311179417862, 0.019876583997949338, 0.022160784478061135, 0.025034961139938861, 0.025583004803344744]\n",
      "\n",
      "\n",
      "Si tu billete conserva el 55% de su superficie y sus características de seguridad identificables ¡SÍ PUEDES USARLO!… https://t.co/Sc69vEJnCA\n",
      "0.0149676647308\n",
      "Experiencias fueras de nuestra tierra que indican que si es posible , desde EEUU vean 3000 kg de alimento en 370 m2 https://t.co/jiWjLPJt8q\n",
      "0.0153165844054\n",
      "Fáciles ejercicios para reducir y prevenir los dolores de espalda https://t.co/XXF5zw6fkg #Teleamazonas\n",
      "0.0158686183928\n",
      "Además ecológico, que  funciona con smartphones que te proporciona comodidad y utilidad.\n",
      "0.0179511886582\n",
      "Las tías que \"se preocupan por tu estabilidad sentimental y edad apropiada para procrear\" son reales. Juro que no son invento del sistema. 😩\n",
      "0.0183954625154\n",
      "En etapas más avanzadas de infección por VIH sobreviene el sida, que se define por la aparición de una o varias inf… https://t.co/YM5nyVUla9\n",
      "0.0184948651809\n",
      "Discutiré eso dentro de la Metrovía y la tarifa se mantendrá en 12 centavos paran estudiantes que usen el expreso y servicio normal (2/4)\n",
      "0.018735637776\n",
      "@SingerEduardo @voz_populi hoy ha salido con una disculpa Granada por lo de la Sanidad pero ivestigadores de allí #cancer estan sin recursos\n",
      "0.0189198607573\n",
      "==========================================================\n"
     ]
    }
   ],
   "source": [
    "visualize_document_clusters(training_tweets_new300, docs_representation300, centroids300['22'], cluster_assignment300['22'], 22, model300)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 28,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "centroids300['22']=centroids300['22'].tolist()\n",
    "cluster_assignment300['22']=cluster_assignment300['22'].tolist()\n",
    "data300={'centroids':centroids300,'cluster_assignment':cluster_assignment300}\n",
    "save_json('model300/data300',data300)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 27,
   "metadata": {
    "collapsed": false
   },
   "outputs": [
    {
     "data": {
      "text/plain": [
       "dict_keys(['3', '5', '6', '8', '10', '20', '30', '80', '22'])"
      ]
     },
     "execution_count": 27,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "centroids300.keys()"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": []
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": []
  }
 ],
 "metadata": {
  "kernelspec": {
   "display_name": "Python 3",
   "language": "python",
   "name": "python3"
  },
  "language_info": {
   "codemirror_mode": {
    "name": "ipython",
    "version": 3
   },
   "file_extension": ".py",
   "mimetype": "text/x-python",
   "name": "python",
   "nbconvert_exporter": "python",
   "pygments_lexer": "ipython3",
   "version": "3.6.0"
  }
 },
 "nbformat": 4,
 "nbformat_minor": 0
}