39 lines
2.4 KiB
Python
39 lines
2.4 KiB
Python
import GlobalVariable as MYSY_GV
|
|
|
|
def update_token_fr_pontuation(token_fr_pontuation):
|
|
tab_ponctuation = ['...', '.', ';', ',', ':', '!', '?', ')', '(', '[', ']', '{', '}','-',
|
|
'=', '°', '#', '-', '/', '~', '&', '\\']
|
|
|
|
for val in tab_ponctuation:
|
|
token_fr_pontuation.append(val)
|
|
|
|
print(" ######## token_fr_pontuation = "+str(token_fr_pontuation))
|
|
|
|
|
|
|
|
def update_stopWords(stopWords):
|
|
tab_stop_word = ['m', 'par', 'les', 'est', 'ton', 'serez', 'pour', 'fussent', 'eut', 'fut', 'moi',
|
|
'n', 'soit', 'etant', 'que', 'aurai', 'en', 'avez', 'aurais', 'aies', 'c', 'qu',
|
|
'etiez', 'ou', 'ait', 'sommes', 'aurions', 'ayez', 'auras', 'à', 'ete', 'nos',
|
|
'ayants', 'elle', 'etes', 'avais', 'eues', 'ayons', 'fus', 'avec', 'eussent', 'etee',
|
|
'toi', 'eusses', 'il', 'vos', 'son', 'eutes', 'serais', 'auront', 'meme', 'es', 'aie',
|
|
'eue', 'etes', 'eut', 'seriez', 'y', 'ont', 'aurons', 'fusses', 'j', 'serons', 'votre',
|
|
'au', 'mes', 'ayant', 'etantes', 'etaient', 'fussiez', 's', 'eus', 'ses', 'seraient',
|
|
'eu', 'fut', 'pas', 'avait', 'furent', 'd', 'leur', 'fusse', 'ai', 'aura', 'etais', 'dans',
|
|
'etants', 'eurent', 'seront', 'ayante', 'avions', 't', 'soyez', 'des', 'etes', 'eumes',
|
|
'aurez', 'ces', 'as', 'la', 'ils', 'un', 'serait', 'soient', 'eussiez', 'une', 'notre',
|
|
'du', 'on', 'de', 'tu', 'me', 'je', 'te', 'sur', 'suis', 'aviez', 'qui', 'ce', 'ayantes',
|
|
'eux', 'ne', 'sois', 'fumes', 'eussions', 'l', 'nous', 'etions', 'sa', 'aient', 'serions',
|
|
'lui', 'sont', 'ma', 'se', 'sera', 'et', 'avons', 'aurait', 'serai', 'seras', 'avaient',
|
|
'vous', 'soyons', 'auriez', 'eusse', 'tes', 'aux', 'etante', 'ta', 'fussions', 'etait',
|
|
'le', 'mon', 'mais', 'futes', 'auraient', 'vais', 'va', 'faire', 'veux', 'voir', 'a', 'ca',
|
|
'donc', 'salut', 'allons', 'mets', 'bien', 'ici', 'aller', 'tous', 'avoir', 'alors', 'plus',
|
|
'petit', 'tres', 'etre', 'oui', 'toto', 'moins', 'heureux', 'rien', 'quand', 'trois', 'bientot',
|
|
'ceci', 'voila', 'tout', 'touts', 'toute', 'fait', 'si', '-']
|
|
|
|
|
|
for val in tab_stop_word:
|
|
stopWords.add(val)
|
|
|
|
print(" ######## stopWords = "+str(stopWords))
|