Permalink
Browse files

added locales: arabic, catalan, czech, danish, germany, english (defa…

…ult), spain, finnish, french, hungarian, indonesian, italian, japanese, netherlands, norwegia, polish, portuguese, russian, swedish, turkish
  • Loading branch information...
1 parent 85185c3 commit e40ee1aa2b7147c68d1a4bced31cdb66e3713aa9 @happyrobots happyrobots committed Apr 24, 2011
View
6 TODO.txt
@@ -1,9 +1,9 @@
== FEATURES/PROBLEMS:
* Applying transforms to query vectors
-* Detect the optimal dimension reduction in LSA.
-* Allow objects to be passed in as transforms.
+* Detect the optimal dimension reduction in LSA. => run a benchmark
+* Allow objects to be passed in as transforms. => hashes
* Implement Probabilistic latent semantic analysis
* Implement Latent Dirichlet Allocation
-* Matrix transformer has to popout the matrix of VectorSpace::Model and reassign it, get rid of this.
+* Matrix transformer has to popout the matrix of VectorSpace::Model and reassign it, get rid of this.
View
7 lib/semantic/parser.rb
@@ -3,10 +3,9 @@
module Semantic
class Parser
- def initialize
- #English stopwords from ftp://ftp.cs.cornell.edu/pub/smart/english.stop
- #TODO: nicer way to reference stop file location?
- File.open(File.dirname(__FILE__)+'/../../resources/english.stop', 'r') do |file|
+ def initialize(locale='en')
+ # Based on locale codes
+ File.open(File.dirname(__FILE__)+'/../../resources/'+locale+'.stop', 'r') do |file|
@stopwords = file.read().split()
end
end
View
154 locale_code_list.txt
@@ -0,0 +1,154 @@
+http://www.roseindia.net/tutorials/I18N/locales-list.shtml
+
+Albanian (Albania) : sq_AL
+Albanian : sq
+Arabic (Algeria) : ar_DZ
+Arabic (Bahrain) : ar_BH
+Arabic (Egypt) : ar_EG
+Arabic (Iraq) : ar_IQ
+Arabic (Jordan) : ar_JO
+Arabic (Kuwait) : ar_KW
+Arabic (Lebanon) : ar_LB
+Arabic (Libya) : ar_LY
+Arabic (Morocco) : ar_MA
+Arabic (Oman) : ar_OM
+Arabic (Qatar) : ar_QA
+Arabic (Saudi Arabia) : ar_SA
+Arabic (Sudan) : ar_SD
+Arabic (Syria) : ar_SY
+Arabic (Tunisia) : ar_TN
+Arabic (United Arab Emirates) : ar_AE
+Arabic (Yemen) : ar_YE
+Arabic : ar
+Belarusian (Belarus) : be_BY
+Belarusian : be
+Bulgarian (Bulgaria) : bg_BG
+Bulgarian : bg
+Catalan (Spain) : ca_ES
+Catalan : ca
+Chinese (China) : zh_CN
+Chinese (Hong Kong) : zh_HK
+Chinese (Singapore) : zh_SG
+Chinese (Taiwan) : zh_TW
+Chinese : zh
+Croatian (Croatia) : hr_HR
+Croatian : hr
+Czech (Czech Republic) : cs_CZ
+Czech : cs
+Danish (Denmark) : da_DK
+Danish : da
+Dutch (Belgium) : nl_BE
+Dutch (Netherlands) : nl_NL
+Dutch : nl
+English (Australia) : en_AU
+English (Canada) : en_CA
+English (India) : en_IN
+English (Ireland) : en_IE
+English (Malta) : en_MT
+English (New Zealand) : en_NZ
+English (Philippines) : en_PH
+English (Singapore) : en_SG
+English (South Africa) : en_ZA
+English (United Kingdom) : en_GB
+English (United States) : en_US
+English : en
+Estonian (Estonia) : et_EE
+Estonian : et
+Finnish (Finland) : fi_FI
+Finnish : fi
+French (Belgium) : fr_BE
+French (Canada) : fr_CA
+French (France) : fr_FR
+French (Luxembourg) : fr_LU
+French (Switzerland) : fr_CH
+French : fr
+German (Austria) : de_AT
+German (Germany) : de_DE
+German (Luxembourg) : de_LU
+German (Switzerland) : de_CH
+German : de
+Greek (Cyprus) : el_CY
+Greek (Greece) : el_GR
+Greek : el
+Hebrew (Israel) : iw_IL
+Hebrew : iw
+Hindi (India) : hi_IN
+Hungarian (Hungary) : hu_HU
+Hungarian : hu
+Icelandic (Iceland) : is_IS
+Icelandic : is
+Indonesian (Indonesia) : in_ID
+Indonesian : in
+Irish (Ireland) : ga_IE
+Irish : ga
+Italian (Italy) : it_IT
+Italian (Switzerland) : it_CH
+Italian : it
+Japanese (Japan) : ja_JP
+Japanese (Japan,JP) : ja_JP_JP
+Japanese : ja
+Korean (South Korea) : ko_KR
+Korean : ko
+Latvian (Latvia) : lv_LV
+Latvian : lv
+Lithuanian (Lithuania) : lt_LT
+Lithuanian : lt
+Macedonian (Macedonia) : mk_MK
+Macedonian : mk
+Malay (Malaysia) : ms_MY
+Malay : ms
+Maltese (Malta) : mt_MT
+Maltese : mt
+Norwegian (Norway) : no_NO
+Norwegian (Norway,Nynorsk) : no_NO_NY
+Norwegian : no
+Polish (Poland) : pl_PL
+Polish : pl
+Portuguese (Brazil) : pt_BR
+Portuguese (Portugal) : pt_PT
+Portuguese : pt
+Romanian (Romania) : ro_RO
+Romanian : ro
+Russian (Russia) : ru_RU
+Russian : ru
+Serbian (Bosnia and Herzegovina) : sr_BA
+Serbian (Montenegro) : sr_ME
+Serbian (Serbia and Montenegro) : sr_CS
+Serbian (Serbia) : sr_RS
+Serbian : sr
+Slovak (Slovakia) : sk_SK
+Slovak : sk
+Slovenian (Slovenia) : sl_SI
+Slovenian : sl
+Spanish (Argentina) : es_AR
+Spanish (Bolivia) : es_BO
+Spanish (Chile) : es_CL
+Spanish (Colombia) : es_CO
+Spanish (Costa Rica) : es_CR
+Spanish (Dominican Republic) : es_DO
+Spanish (Ecuador) : es_EC
+Spanish (El Salvador) : es_SV
+Spanish (Guatemala) : es_GT
+Spanish (Honduras) : es_HN
+Spanish (Mexico) : es_MX
+Spanish (Nicaragua) : es_NI
+Spanish (Panama) : es_PA
+Spanish (Paraguay) : es_PY
+Spanish (Peru) : es_PE
+Spanish (Puerto Rico) : es_PR
+Spanish (Spain) : es_ES
+Spanish (United States) : es_US
+Spanish (Uruguay) : es_UY
+Spanish (Venezuela) : es_VE
+Spanish : es
+Swedish (Sweden) : sv_SE
+Swedish : sv
+Thai (Thailand) : th_TH
+Thai (Thailand,TH) : th_TH_TH
+Thai : th
+Turkish (Turkey) : tr_TR
+Turkish : tr
+Ukrainian (Ukraine) : uk_UA
+Ukrainian : uk
+Vietnamese (Vietnam) : vi_VN
+Vietnamese : vi
View
162 resources/ar.stop
@@ -0,0 +1,162 @@
+عشر
+عدد
+عدة
+عشرة
+عدم
+عام
+عاما
+عن
+عند
+عندما
+على
+عليه
+عليها
+زيارة
+سنة
+سنوات
+تم
+ضد
+بعد
+بعض
+اعادة
+اعلنت
+بسبب
+حتى
+اذا
+احد
+اثر
+برس
+باسم
+غدا
+شخصا
+صباح
+اطار
+اربعة
+اخرى
+بان
+اجل
+غير
+بشكل
+حاليا
+بن
+به
+ثم
+اف
+ان
+او
+اي
+بها
+صفر
+حيث
+اكد
+الا
+اما
+امس
+السابق
+التى
+التي
+اكثر
+ايار
+ايضا
+ثلاثة
+الذاتي
+الاخيرة
+الثاني
+الثانية
+الذى
+الذي
+الان
+امام
+ايام
+خلال
+حوالى
+الذين
+الاول
+الاولى
+بين
+ذلك
+دون
+حول
+حين
+الف
+الى
+انه
+اول
+ضمن
+انها
+جميع
+الماضي
+الوقت
+المقبل
+اليوم
+و6
+قد
+لا
+ما
+مع
+مساء
+هذا
+واحد
+واضاف
+واضافت
+فان
+قبل
+قال
+كان
+لدى
+نحو
+هذه
+وان
+واكد
+كانت
+واوضح
+مايو
+فى
+في
+كل
+لم
+لن
+له
+من
+هو
+هي
+قوة
+كما
+لها
+منذ
+وقد
+ولا
+نفسه
+لقاء
+مقابل
+هناك
+وقال
+وكان
+نهاية
+وقالت
+وكانت
+للامم
+فيه
+كلم
+لكن
+وفي
+وقف
+ولم
+ومن
+وهو
+وهي
+يوم
+فيها
+منها
+مليار
+لوكالة
+يكون
+يمكن
+مليون
View
124 resources/ca.stop
@@ -0,0 +1,124 @@
+de
+es
+i
+a
+o
+un
+una
+unes
+uns
+un
+tot
+també
+altre
+algun
+alguna
+alguns
+algunes
+ser
+és
+soc
+ets
+som
+estic
+està
+estem
+esteu
+estan
+com
+en
+per
+perquè
+per que
+estat
+estava
+ans
+abans
+éssent
+ambdós
+però
+per
+poder
+potser
+puc
+podem
+podeu
+poden
+vaig
+va
+van
+fer faig
+fa
+fem
+feu
+fan
+cada
+fi
+inclòs
+primer
+des de
+conseguir
+consegueixo
+consigueix
+consigueixes
+conseguim
+consigueixen
+anar
+haver
+tenir
+tinc
+te
+tenim
+teniu
+tene
+el
+la
+les
+els
+seu
+aquí
+meu
+teu
+ells
+elles
+ens
+nosaltres
+vosaltres
+si
+dins
+sols
+solament
+saber
+saps
+sap
+sabem
+sabeu
+saben
+últim
+llarg
+bastant fas
+molts
+aquells
+aquelles
+seus
+llavors
+sota
+dalt
+ús
+molt
+era
+eres
+erem
+eren
+mode
+bé
+quant
+quan
+on
+mentre
+qui
+amb
+entre
+sense
+jo
+aquell
View
136 resources/cs.stop
@@ -0,0 +1,136 @@
+dnes
+cz
+timto
+budes
+budem
+byli
+jses
+muj
+svym
+ta
+tomto
+tohle
+tuto
+tyto
+jej
+zda
+proc
+mate
+tato
+kam
+tohoto
+kdo
+kteri
+mi
+nam
+tom
+tomuto
+mit
+nic
+proto
+kterou
+byla
+toho
+protoze
+asi
+ho
+nasi
+napiste
+re
+coz
+tim
+takze
+svych
+jeji
+svymi
+jste
+aj
+tu
+tedy
+teto bylo
+kde
+ke
+prave
+ji
+nad
+nejsou
+ci
+pod
+tema
+mezi
+pres
+ty
+pak
+vam
+ani
+kdyz
+vsak
+ne
+jsem
+tento
+clanku
+clanky
+aby
+jsme
+pred
+pta
+jejich
+byl
+jeste
+az
+bez
+take
+pouze
+prvni
+vase
+ktera
+nas
+novy
+tipy
+pokud
+muze
+design
+strana
+jeho
+sve
+jine
+zpravy
+nove
+neni vas
+jen
+podle
+zde
+clanek
+uz
+email
+byt
+vice
+bude
+jiz
+nez
+ktery
+by
+ktere
+co
+nebo
+ten
+tak
+ma
+pri
+od
+po
+jsou
+jak
+dalsi
+ale
+si
+ve
+to
+jako
+za
+zpet
+ze
+do
+pro
+je
+na
View
99 resources/da.stop
@@ -0,0 +1,99 @@
+af
+alle
+andet
+andre
+at
+begge
+da
+de
+den
+denne
+der
+deres
+det
+dette
+dig
+din
+dog
+du
+ej
+eller
+en
+end
+ene
+eneste
+enhver
+et
+fem
+fire
+flere
+fleste
+for
+fordi
+forrige fra
+få
+før
+god
+han
+hans
+har
+hendes
+her
+hun
+hvad
+hvem
+hver
+hvilken
+hvis
+hvor
+hvordan
+hvorfor
+hvornår
+i
+ikke
+ind
+ingen
+intet
+jeg
+jeres
+kan
+kom
+kommer
+lav
+lidt
+lille
+man mand
+mange
+med
+meget
+men
+mens
+mere
+mig
+ned
+ni
+nogen
+noget
+ny
+nyt
+nær
+næste
+næsten
+og
+op
+otte
+over
+på
+se
+seks
+ses
+som
+stor
+store
+syv
+ti
+til
+to
+tre
+ud
+var
View
996 resources/de.stop
@@ -0,0 +1,996 @@
+ab
+bei
+da
+deshalb
+ein
+für
+haben
+hier
+ich
+ja
+kann
+machen
+muesste
+nach
+oder
+seid
+sonst
+und
+vom
+wann
+wenn
+wie
+zu
+bin
+eines
+hat
+manche
+solches
+an
+anderm
+bis
+das
+deinem
+demselben
+dir
+doch
+einig
+er
+eurer
+hatte
+ihnen
+ihre
+ins
+jenen
+keinen
+manchem
+meinen
+nichts
+seine
+soll
+unserm
+welche
+werden
+wollte
+während
+alle
+allem
+allen
+aller
+alles
+als
+also
+am
+ander
+andere
+anderem
+anderen
+anderer
+anderes
+andern
+anders
+auch
+auf
+aus
+bist
+bsp.
+daher
+damit
+dann
+dasselbe
+dazu
+daß
+dein
+deine
+deinen
+deiner
+deines
+dem
+den
+denn
+denselben
+der
+derer
+derselbe
+derselben
+des
+desselben
+dessen
+dich
+die
+dies
+diese
+dieselbe
+dieselben
+diesem
+diesen
+dieser
+dieses
+dort
+du
+durch
+eine
+einem
+einen
+einer
+einige
+einigem
+einigen
+einiger
+einiges
+einmal
+es
+etwas
+euch
+euer
+eure
+eurem
+euren
+eures
+ganz
+ganze
+ganzen
+ganzer
+ganzes
+gegen
+gemacht
+gesagt
+gesehen
+gewesen
+gewollt
+hab
+habe
+hatten
+hin
+hinter
+ihm
+ihn
+ihr
+ihrem
+ihren
+ihrer
+ihres
+im
+in
+indem
+ist
+jede
+jedem
+jeden
+jeder
+jedes
+jene
+jenem
+jener
+jenes
+jetzt
+kein
+keine
+keinem
+keiner
+keines
+konnte
+können
+könnte
+mache
+machst
+macht
+machte
+machten
+man
+manchen
+mancher
+manches
+mein
+meine
+meinem
+meiner
+meines
+mich
+mir
+mit
+muss
+musste
+müßt
+nicht
+noch
+nun
+nur
+ob
+ohne
+sage
+sagen
+sagt
+sagte
+sagten
+sagtest
+sehe
+sehen
+sehr
+seht
+sein
+seinem
+seinen
+seiner
+seines
+selbst
+sich
+sicher
+sie
+sind
+so
+solche
+solchem
+solchen
+solcher
+sollte
+sondern
+um
+uns
+unse
+unsen
+unser
+unses
+unter
+viel
+von
+vor
+war
+waren
+warst
+was
+weg
+weil
+weiter
+welchem
+welchen
+welcher
+welches
+werde
+wieder
+will
+wir
+wird
+wirst
+wo
+wolle
+wollen
+wollt
+wollten
+wolltest
+wolltet
+würde
+würden
+z.B.
+zum
+zur
+zwar
+zwischen
+über
+aber
+abgerufen
+abgerufene
+abgerufener
+abgerufenes
+acht
+allein
+allerdings
+allerlei
+allgemein
+allmählich
+allzu
+alsbald
+andererseits
+andernfalls
+anerkannt
+anerkannte
+anerkannter
+anerkanntes
+anfangen
+anfing
+angefangen
+angesetze
+angesetzt
+angesetzten
+angesetzter
+ansetzen
+anstatt
+arbeiten
+aufgehört
+aufgrund
+aufhören
+aufhörte
+aufzusuchen
+ausdrücken
+ausdrückt
+ausdrückte
+ausgenommen
+ausser
+ausserdem
+author
+autor
+außen
+außer
+außerdem
+außerhalb
+bald
+bearbeite
+bearbeiten
+bearbeitete
+bearbeiteten
+bedarf
+bedurfte
+bedürfen
+befragen
+befragte
+befragten
+befragter
+begann
+beginnen
+begonnen
+behalten
+behielt
+beide
+beiden
+beiderlei
+beides
+beim
+beinahe
+beitragen
+beitrugen
+bekannt
+bekannte
+bekannter
+bekennen
+benutzt
+bereits
+berichten
+berichtet
+berichtete
+berichteten
+besonders
+besser
+bestehen
+besteht
+beträchtlich
+bevor
+bezüglich
+bietet
+bisher
+bislang
+bis
+bleiben
+blieb
+bloss
+bloß
+brachte
+brachten
+brauchen
+braucht
+bringen
+bräuchte
+bzw
+böden
+ca.
+dabei
+dadurch
+dafür
+dagegen
+dahin
+damals
+danach
+daneben
+dank
+danke
+danken
+dannen
+daran
+darauf
+daraus
+darf
+darfst
+darin
+darum
+darunter
+darüber
+darüberhinaus
+dass
+davon
+davor
+demnach
+denen
+dennoch
+derart
+derartig
+derem
+deren
+derjenige
+derjenigen
+derzeit
+desto
+deswegen
+diejenige
+diesseits
+dinge
+direkt
+direkte
+direkten
+direkter
+doppelt
+dorther
+dorthin
+drauf
+drei
+dreißig
+drin
+dritte
+drunter
+drüber
+dunklen
+durchaus
+durfte
+durften
+dürfen
+dürfte
+eben
+ebenfalls
+ebenso
+ehe
+eher
+eigenen
+eigenes
+eigentlich
+einbaün
+einerseits
+einfach
+einführen
+einführte
+einführten
+eingesetzt
+einigermaßen
+eins
+einseitig
+einseitige
+einseitigen
+einseitiger
+einst
+einstmals
+einzig
+ende
+entsprechend
+entweder
+ergänze
+ergänzen
+ergänzte
+ergänzten
+erhalten
+erhielt
+erhielten
+erhält
+erneut
+erst
+erste
+ersten
+erster
+eröffne
+eröffnen
+eröffnet
+eröffnete
+eröffnetes
+etc
+etliche
+etwa
+fall
+falls
+fand
+fast
+ferner
+finden
+findest
+findet
+folgende
+folgenden
+folgender
+folgendes
+folglich
+fordern
+fordert
+forderte
+forderten
+fortsetzen
+fortsetzt
+fortsetzte
+fortsetzten
+fragte
+frau
+frei
+freie
+freier
+freies
+fuer
+fünf
+gab
+ganzem
+gar
+gbr
+geb
+geben
+geblieben
+gebracht
+gedurft
+geehrt
+geehrte
+geehrten
+geehrter
+gefallen
+gefiel
+gefälligst
+gefällt
+gegeben
+gehabt
+gehen
+geht
+gekommen
+gekonnt
+gemocht
+gemäss
+genommen
+genug
+gern
+gestern
+gestrige
+getan
+geteilt
+geteilte
+getragen
+gewissermaßen
+geworden
+ggf
+gib
+gibt
+gleich
+gleichwohl
+gleichzeitig
+glücklicherweise
+gmbh
+gratulieren
+gratuliert
+gratulierte
+gute
+guten
+gängig
+gängige
+gängigen
+gängiger
+gängiges
+gänzlich
+haette
+halb
+hallo
+hast
+hattest
+hattet
+heraus
+herein
+heute
+heutige
+hiermit
+hiesige
+hinein
+hinten
+hinterher
+hoch
+hundert
+hätt
+hätte
+hätten
+höchstens
+igitt
+immer
+immerhin
+important
+indessen
+info
+infolge
+innen
+innerhalb
+insofern
+inzwischen
+irgend
+irgendeine
+irgendwas
+irgendwen
+irgendwer
+irgendwie
+irgendwo
+je
+jedenfalls
+jederlei
+jedoch
+jemand
+jenseits
+jährig
+jährige
+jährigen
+jähriges
+kam
+kannst
+kaum
+keines
+keinerlei
+keineswegs
+klar
+klare
+klaren
+klares
+klein
+kleinen
+kleiner
+kleines
+koennen
+koennt
+koennte
+koennten
+komme
+kommen
+kommt
+konkret
+konkrete
+konkreten
+konkreter
+konkretes
+konnten
+könn
+könnt
+könnten
+künftig
+lag
+lagen
+langsam
+lassen
+laut
+lediglich
+leer
+legen
+legte
+legten
+leicht
+leider
+lesen
+letze
+letzten
+letztendlich
+letztens
+letztes
+letztlich
+lichten
+liegt
+liest
+links
+längst
+längstens
+mag
+magst
+mal
+mancherorts
+manchmal
+mann
+margin
+mehr
+mehrere
+meist
+meiste
+meisten
+meta
+mindestens
+mithin
+mochte
+morgen
+morgige
+muessen
+muesst
+musst
+mussten
+muß
+mußt
+möchte
+möchten
+möchtest
+mögen
+möglich
+mögliche
+möglichen
+möglicher
+möglicherweise
+müssen
+müsste
+müssten
+müßte
+nachdem
+nacher
+nachhinein
+nahm
+natürlich
+nacht
+neben
+nebenan
+nehmen
+nein
+neu
+neue
+neuem
+neuen
+neuer
+neues
+neun
+nie
+niemals
+niemand
+nimm
+nimmer
+nimmt
+nirgends
+nirgendwo
+nutzen
+nutzt
+nutzung
+nächste
+nämlich
+nötigenfalls
+nützt
+oben
+oberhalb
+obgleich
+obschon
+obwohl
+oft
+per
+pfui
+plötzlich
+pro
+reagiere
+reagieren
+reagiert
+reagierte
+rechts
+regelmäßig
+rief
+rund
+sang
+sangen
+schlechter
+schließlich
+schnell
+schon
+schreibe
+schreiben
+schreibens
+schreiber
+schwierig
+schätzen
+schätzt
+schätzte
+schätzten
+sechs
+sect
+sehrwohl
+sei
+seit
+seitdem
+seite
+seiten
+seither
+selber
+senke
+senken
+senkt
+senkte
+senkten
+setzen
+setzt
+setzte
+setzten
+sicherlich
+sieben
+siebte
+siehe
+sieht
+singen
+singt
+sobald
+sodaß
+soeben
+sofern
+sofort
+sog
+sogar
+solange
+solc hen
+solch
+sollen
+sollst
+sollt
+sollten
+solltest
+somit
+sonstwo
+sooft
+soviel
+soweit
+sowie
+sowohl
+spielen
+später
+startet
+startete
+starteten
+statt
+stattdessen
+steht
+steige
+steigen
+steigt
+stets
+stieg
+stiegen
+such
+suchen
+sämtliche
+tages
+tat
+tatsächlich
+tatsächlichen
+tatsächlicher
+tatsächliches
+tausend
+teile
+teilen
+teilte
+teilten
+titel
+total
+trage
+tragen
+trotzdem
+trug
+trägt
+tun
+tust
+tut
+txt
+tät
+ueber
+umso
+unbedingt
+ungefähr
+unmöglich
+unmögliche
+unmöglichen
+unmöglicher
+unnötig
+unsem
+unser
+unsere
+unserem
+unseren
+unserer
+unseres
+unten
+unterbrach
+unterbrechen
+unterhalb
+unwichtig
+usw
+vergangen
+vergangene
+vergangener
+vergangenes
+vermag
+vermutlich
+vermögen
+verrate
+verraten
+verriet
+verrieten
+version
+versorge
+versorgen
+versorgt
+versorgte
+versorgten
+versorgtes
+veröffentlichen
+veröffentlicher
+veröffentlicht
+veröffentlichte
+veröffentlichten
+veröffentlichtes
+viele
+vielen
+vieler
+vieles
+vielleicht
+vielmals
+vier
+vollständig
+voran
+vorbei
+vorgestern
+vorher
+vorne
+vorüber
+völlig
+während
+wachen
+waere
+warum
+weder
+wegen
+weitere
+weiterem
+weiteren
+weiterer
+weiteres
+weiterhin
+weiß
+wem
+wen
+wenig
+wenige
+weniger
+wenigstens
+wenngleich
+wer
+werdet
+weshalb
+wessen
+wichtig
+wieso
+wieviel
+wiewohl
+willst
+wirklich
+wodurch
+wogegen
+woher
+wohin
+wohingegen
+wohl
+wohlweislich
+womit
+woraufhin
+woraus
+worin
+wurde
+wurden
+währenddessen
+wär
+wäre
+wären
+zahlreich
+zehn
+zeitweise
+ziehen
+zieht
+zog
+zogen
+zudem
+zuerst
+zufolge
+zugleich
+zuletzt
+zumal
+zurück
+zusammen
+zuviel
+zwanzig
+zwei
+zwölf
+ähnlich
+übel
+überall
+überallhin
+überdies
+übermorgen
+übrig
+übrigens
View
77 resources/el.stop
@@ -0,0 +1,77 @@
+μή
+ἑαυτοῦ
+ἄν
+ἀλλ’
+ἀλλά
+ἄλλοσ
+ἀπό
+ἄρα
+αὐτόσ
+δ’
+δέ
+δή
+διά
+δαί
+δαίσ
+ἔτι
+ἐγώ
+ἐκ
+ἐμόσ
+ἐν
+ἐπί
+εἰ
+εἰμί
+εἴμι
+εἰσ
+γάρ
+γε
+γα^
+ἡ
+ἤ καί
+κατά
+μέν
+μετά
+μή
+ὁ
+ὅδε
+ὅσ
+ὅστισ
+ὅτι
+οὕτωσ
+οὗτοσ
+οὔτε
+οὖν
+οὐδείσ
+οἱ
+οὐ
+οὐδέ
+οὐκ
+περί
+πρόσ
+σύ
+σύν
+τά
+τε
+τήν
+τῆσ
+τῇ
+τι
+τί τισ
+τίσ
+τό
+τοί
+τοιοῦτοσ
+τόν
+τούσ
+τοῦ
+τῶν
+τῷ
+ὑμόσ
+ὑπέρ
+ὑπό
+ὡσ
+ὦ
+ὥστε
+ἐάν
+παρά
+σόσ
View
0 resources/english.stop → resources/en.stop
File renamed without changes.
View
176 resources/es.stop
@@ -0,0 +1,176 @@
+un
+una
+unas
+unos
+uno
+sobre
+todo
+también
+tras
+otro
+algún
+alguno
+alguna
+algunos
+algunas
+ser
+es
+soy
+eres
+somos
+sois
+estoy
+esta
+estamos
+estais
+estan
+como
+en
+para
+atras
+porque
+por qué
+estado
+estaba
+ante
+antes
+siendo
+ambos
+pero
+por
+poder
+puede
+puedo
+podemos
+podeis
+pueden
+fui
+fue
+fuimos
+fueron
+hacer
+hago
+hace
+hacemos
+haceis
+hacen
+cada
+fin
+incluso
+primero desde
+conseguir
+consigo
+consigue
+consigues
+conseguimos
+consiguen
+ir
+voy
+va
+vamos
+vais
+van
+vaya
+gueno
+ha
+tener
+tengo
+tiene
+tenemos
+teneis
+tienen
+el
+la
+lo
+las
+los
+su
+aqui
+mio
+tuyo
+ellos
+ellas
+nos
+nosotros
+vosotros
+vosotras
+si
+dentro
+solo
+solamente
+saber
+sabes
+sabe
+sabemos
+sabeis
+saben
+ultimo
+largo
+bastante
+haces
+muchos
+aquellos
+aquellas
+sus
+entonces
+tiempo
+verdad
+verdadero
+verdadera cierto
+ciertos
+cierta
+ciertas
+intentar
+intento
+intenta
+intentas
+intentamos
+intentais
+intentan
+dos
+bajo
+arriba
+encima
+usar
+uso
+usas
+usa
+usamos
+usais
+usan
+emplear
+empleo
+empleas
+emplean
+ampleamos
+empleais
+valor
+muy
+era
+eras
+eramos
+eran
+modo
+bien
+cual
+cuando
+donde
+mientras
+quien
+con
+entre
+sin
+trabajo
+trabajar
+trabajas
+trabaja
+trabajamos
+trabajais
+trabajan
+podria
+podrias
+podriamos
+podrian
+podriais
+yo
+aquel
View
747 resources/fi.stop
@@ -0,0 +1,747 @@
+aiemmin
+aika
+aikaa
+aikaan
+aikaisemmin
+aikaisin
+aikajen
+aikana
+aikoina
+aikoo
+aikovat
+aina
+ainakaan
+ainakin
+ainoa
+ainoat
+aiomme
+aion
+aiotte
+aist
+aivan
+ajan
+älä
+alas
+alemmas
+älköön
+alkuisin
+alkuun
+alla
+alle
+aloitamme
+aloitan
+aloitat
+aloitatte
+aloitattivat
+aloitettava
+aloitettevaksi
+aloitettu
+aloitimme
+aloitin
+aloitit
+aloititte
+aloittaa
+aloittamatta
+aloitti
+aloittivat
+alta
+aluksi
+alussa
+alusta
+annettavaksi
+annetteva
+annettu
+antaa
+antamatta
+antoi
+aoua
+apu
+asia
+asiaa
+asian
+asiasta
+asiat
+asioiden
+asioihin
+asioita
+asti
+avuksi
+avulla
+avun
+avutta
+edellä
+edelle
+edelleen
+edeltä
+edemmäs
+edes
+edessä
+edestä
+ehkä
+ei
+eikä
+eilen
+eivät
+eli
+ellei
+elleivät
+ellemme
+ellen
+ellet
+ellette
+emme
+en
+enää
+enemmän
+eniten
+ennen
+ensi
+ensimmäinen
+ensimmäiseksi
+ensimmäisen
+ensimmäisenä
+ensimmäiset
+ensimmäisiä
+ensimmäisiksi
+ensimmäisinä
+ensimmäistä
+ensin
+entinen
+entisen
+entisiä
+entistä
+entisten
+eräät
+eräiden
+eräs
+eri
+erittäin
+erityisesti
+esi
+esiin
+esillä
+esimerkiksi
+et
+eteen
+etenkin
+että
+ette
+ettei
+halua
+haluaa
+haluamatta
+haluamme
+haluan
+haluat
+haluatte
+haluavat
+halunnut
+halusi
+halusimme
+halusin
+halusit
+halusitte
+halusivat
+halutessa
+haluton
+hän
+häneen
+hänellä
+hänelle
+häneltä
+hänen
+hänessä
+hänestä
+hänet
+he
+hei
+heidän
+heihin
+heille
+heiltä
+heissä
+heistä
+heitä
+helposti
+heti
+hetkellä
+hieman
+huolimatta
+huomenna
+hyvä
+hyvää
+hyvät
+hyviä
+hyvien
+hyviin
+hyviksi
+hyville
+hyviltä
+hyvin
+hyvinä
+hyvissä
+hyvistä
+ihan
+ilman
+ilmeisesti
+itse
+itseään
+itsensä
+ja
+jää
+jälkeen
+jälleen
+jo
+johon
+joiden
+joihin
+joiksi
+joilla
+joille
+joilta
+joissa
+joista
+joita
+joka
+jokainen
+jokin
+joko
+joku
+jolla
+jolle
+jolloin
+jolta
+jompikumpi
+jonka
+jonkin
+jonne
+joo
+jopa
+jos
+joskus
+jossa
+josta
+jota
+jotain
+joten
+jotenkin
+jotenkuten
+jotka
+jotta
+jouduimme
+jouduin
+jouduit
+jouduitte
+joudumme
+joudun
+joudutte
+joukkoon
+joukossa
+joukosta
+joutua
+joutui
+joutuivat
+joutumaan
+joutuu
+joutuvat
+juuri
+kahdeksan
+kahdeksannen
+kahdella
+kahdelle
+kahdelta
+kahden
+kahdessa
+kahdesta
+kahta
+kahteen
+kai
+kaiken
+kaikille
+kaikilta
+kaikkea
+kaikki
+kaikkia
+kaikkiaan
+kaikkialla
+kaikkialle
+kaikkialta
+kaikkien
+kaikkin
+kaksi
+kannalta
+kannattaa
+kanssa
+kanssaan
+kanssamme
+kanssani
+kanssanne
+kanssasi
+kauan
+kauemmas
+kautta
+kehen
+keiden
+keihin
+keiksi
+keillä
+keille
+keiltä
+keinä
+keissä
+keistä
+keitä
+keittä
+keitten
+keneen
+keneksi
+kenellä
+kenelle
+keneltä
+kenen
+kenenä
+kenessä
+kenestä
+kenet
+kenettä
+kennessästä
+kerran
+kerta
+kertaa
+kesken
+keskimäärin
+ketä
+ketkä
+kiitos
+kohti
+koko
+kokonaan
+kolmas
+kolme
+kolmen
+kolmesti
+koska
+koskaan
+kovin
+kuin
+kuinka
+kuitenkaan
+kuitenkin
+kuka
+kukaan
+kukin
+kumpainen
+kumpainenkaan
+kumpi
+kumpikaan
+kumpikin
+kun
+kuten
+kuuden
+kuusi
+kuutta
+kyllä
+kymmenen
+kyse
+lähekkäin
+lähellä
+lähelle
+läheltä
+lähemmäs
+lähes
+lähinnä
+lähtien
+läpi
+liian
+liki
+lisää
+lisäksi
+luo
+mahdollisimman
+mahdollista
+me
+meidän
+meillä
+meille
+melkein
+melko
+menee
+meneet
+menemme
+menen
+menet
+menette
+menevät
+meni
+menimme
+menin
+menit
+menivät
+mennessä
+mennyt
+menossa
+mihin
+mikä
+mikään
+mikäli
+mikin
+miksi
+milloin
+minä
+minne
+minun
+minut
+missä
+mistä
+mitä
+mitään
+miten
+moi
+molemmat
+mones
+monesti
+monet
+moni
+moniaalla
+moniaalle
+moniaalta
+monta
+muassa
+muiden
+muita
+muka
+mukaan
+mukaansa
+mukana
+mutta
+muu
+muualla
+muualle
+muualta
+muuanne
+muulloin
+muun
+muut
+muuta
+muutama
+muutaman
+muuten
+myöhemmin
+myös
+myöskään
+myöskin
+myötä
+näiden
+näin
+näissä
+näissähin
+näissälle
+näissältä
+näissästä
+näitä
+nämä
+ne
+neljä
+neljää
+neljän
+niiden
+niin
+niistä
+niitä
+noin
+nopeammin
+nopeasti
+nopeiten
+nro
+nuo
+nyt
+ohi
+oikein
+ole
+olemme
+olen
+olet
+olette
+oleva
+olevan
+olevat
+oli
+olimme
+olin
+olisi
+olisimme
+olisin
+olisit
+olisitte
+olisivat
+olit
+olitte
+olivat
+olla
+olleet
+olli
+ollut
+oma
+omaa
+omaan
+omaksi
+omalle
+omalta
+oman
+omassa
+omat
+omia
+omien
+omiin
+omiksi
+omille
+omilta
+omissa
+omista
+on
+onkin
+onko
+ovat
+päälle
+paikoittain
+paitsi
+pakosti
+paljon
+paremmin
+parempi
+parhaillaan
+parhaiten
+peräti
+perusteella
+pian
+pieneen
+pieneksi
+pienellä
+pienelle
+pieneltä
+pienempi
+pienestä
+pieni
+pienin
+puolesta
+puolestaan
+runsaasti
+saakka
+sadam
+sama
+samaa
+samaan
+samalla
+samallalta
+samallassa
+samallasta
+saman
+samat
+samoin
+sata
+sataa
+satojen
+se
+seitsemän
+sekä
+sen
+seuraavat
+siellä
+sieltä
+siihen
+siinä
+siis
+siitä
+sijaan
+siksi
+sillä
+silloin
+silti
+sinä
+sinne
+sinua
+sinulle
+sinulta
+sinun
+sinussa
+sinusta
+sinut
+sisäkkäin
+sisällä
+sitä
+siten
+sitten
+suoraan
+suuntaan
+suuren
+suuret
+suuri
+suuria
+suurin
+suurten
+taa
+täällä
+täältä
+taas
+taemmas
+tähän
+tahansa
+tai
+takaa
+takaisin
+takana
+takia
+tällä
+tällöin
+tämä
+tämän
+tänä
+tänään
+tänne
+tapauksessa
+tässä
+tästä
+tätä
+täten
+tavalla
+tavoitteena
+täysin
+täytyvät
+täytyy
+te
+tietysti
+todella
+toinen
+toisaalla
+toisaalle
+toisaalta
+toiseen
+toiseksi
+toisella
+toiselle
+toiselta
+toisemme
+toisen
+toisensa
+toisessa
+toisesta
+toista
+toistaiseksi
+toki
+tosin
+tuhannen
+tuhat
+tule
+tulee
+tulemme
+tulen
+tulet
+tulette
+tulevat
+tulimme
+tulin
+tulisi
+tulisimme
+tulisin
+tulisit
+tulisitte
+tulisivat
+tulit
+tulitte
+tulivat
+tulla
+tulleet
+tullut
+tuntuu
+tuo
+tuolla
+tuolloin
+tuolta
+tuonne
+tuskin
+tykö
+usea
+useasti
+useimmiten
+usein
+useita
+uudeksi
+uudelleen
+uuden
+uudet
+uusi
+uusia
+uusien
+uusinta
+uuteen
+uutta
+vaan
+vähän
+vähemmän
+vähintään
+vähiten
+vai
+vaiheessa
+vaikea
+vaikean
+vaikeat
+vaikeilla
+vaikeille
+vaikeilta
+vaikeissa
+vaikeista
+vaikka
+vain
+välillä
+varmasti
+varsin
+varsinkin
+varten
+vasta
+vastaan
+vastakkain
+verran
+vielä
+vierekkäin
+vieri
+viiden
+viime
+viimeinen
+viimeisen
+viimeksi
+viisi
+voi
+voidaan
+voimme
+voin
+voisi
+voit
+voitte
+voivat
+vuoden
+vuoksi
+vuosi
+vuosien
+vuosina
+vuotta
+yhä
+yhdeksän
+yhden
+yhdessä
+yhtä
+yhtäällä
+yhtäälle
+yhtäältä
+yhtään
+yhteen
+yhteensä
+yhteydessä
+yhteyteen
+yksi
+yksin
+yksittäin
+yleensä
+ylemmäs
+yli
+ylös
+ympäri
View
124 resources/fr.stop
@@ -0,0 +1,124 @@
+alors
+au
+aucuns
+aussi
+autre
+avant
+avec
+avoir
+bon
+car
+ce
+cela
+ces
+ceux
+chaque
+ci
+comme
+comment
+dans
+des
+du
+dedans
+dehors
+depuis
+deux
+devrait
+doit
+donc
+dos
+droite
+début
+elle
+elles
+en
+encore
+essai
+est
+et
+eu
+fait
+faites
+fois
+font
+force
+haut
+hors
+ici
+il
+ils
+je juste
+la
+le
+les
+leur
+là
+ma
+maintenant
+mais
+mes
+mine
+moins
+mon
+mot
+même
+ni
+nommés
+notre
+nous
+nouveaux
+ou
+où
+par
+parce
+parole
+pas
+personnes
+peut
+peu
+pièce
+plupart
+pour
+pourquoi
+quand
+que
+quel
+quelle
+quelles
+quels
+qui
+sa
+sans
+ses
+seulement
+si
+sien
+son
+sont
+sous
+soyez sujet
+sur
+ta
+tandis
+tellement
+tels
+tes
+ton
+tous
+tout
+trop
+très
+tu
+valeur
+voie
+voient
+vont
+votre
+vous
+vu
+ça
+étaient
+état
+étions
+été
+être
View
33 resources/hu.stop
@@ -0,0 +1,33 @@
+a
+az
+egy
+be
+ki
+le
+fel
+meg
+el
+át
+rá
+ide oda
+szét
+össze
+vissza
+de
+hát
+és
+vagy
+hogy
+van
+lesz
+volt csak
+nem
+igen
+mint
+én
+te
+mi
+ti
+õk
+ön
View
329 resources/id.stop
@@ -0,0 +1,329 @@
+a
+acara
+ada
+adalah
+adanya
+agar
+akan
+akhir
+akhirnya
+akibat
+aku
+anda
+antara
+apa
+apakah
+apalagi
+asal
+atas
+atau
+awal
+b
+badan
+bagaimana
+bagi
+bagian
+bahkan
+bahwa
+baik
+banyak
+barang
+barat
+baru
+bawah
+beberapa
+begitu
+belakang
+belum
+benar
+bentuk
+berada
+berarti
+berat
+berbagai
+berdasarkan
+berjalan
+berlangsung
+bersama