stefan-it's picture
vocab: add vocab for French Europeana ELECTRA model (32k vocab, created with Tokenizers library)
f1e70b8
[PAD]
[UNK]
[CLS]
[SEP]
[MASK]
!
"
#
$
%
&
'
(
)
*
+
,
-
.
/
0
1
2
3
4
5
6
7
8
9
:
;
<
=
>
?
@
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
[
\
]
^
_
a
b
c
d
e
f
g
h
i
j
k
l
m
n
o
p
q
r
s
t
u
v
w
x
y
z
{
|
}
~
£
¥
§
©
ª
«
¬
®
°
±
º
»
¾
¿
À
Â
Æ
Ç
È
É
Ê
Ë
Ì
Î
Ï
Ô
Ù
Ú
Û
Ü
Þ
ß
à
â
æ
ç
è
é
ê
ë
ì
í
î
ï
ô
ù
û
ü
þ
ÿ
Œ
œ
Ÿ
Ǿ
А
Б
З
И
а
б
е
з
и
р
с
ி
##r
##a
##e
##d
##l
##O
##o
##U
##è
##g
##s
##n
##t
##i
##k
##w
##y
##S
##u
##ï
##à
##c
##b
##m
##T
##v
##é
##R
##N
##f
##4
##ë
##1
##8
##9
##M
##p
##j
##î
##Ù
##H
##E
##G
##È
##K
##I
##B
##C
##q
##©
##ç
##â
##£
##W
##h
##Q
##É
##Ï
##ê
##J
##ù
##ü
##A
##X
##z
##L
##Y
##5
##2
##6
##ô
##x
##P
##F
##D
##0
##Î
##û
##V
##À
##Æ
##7
##■
##Û
##3
##Ë
##ÿ
##Ü
##Ô
##œ
##ß
##®
##Ê
##Â
##™
##°
##Ç
##Z
##Œ
##¥
##€
##±
##♦
##Ÿ
##æ
##★
##☆
##▼
##□
##►
##❖
##✓
##◦
##▲
##е
##Ì
##б
##Þ
##Ú
##B
##¾
##ຬ
##í
##а
##b
##ì
##◄
##þ
##෤
##Ǿ
##º
##es
##nt
##on
de
##ou
##er
##re
##ai
##an
##ar
##is
##le
##ent
##ti
qu
la
##ur
##en
##ne
##te
et
le
##it
##or
##our
##om
##in
##ant
les
##qu
pr
##ie
en
au
##tion
##al
##il
des
##us
##ait
##ce
##el
##au
##ment
##as
du
##me
##oi
##és
##st
par
##ont
##ri
##ais
##ans
##ch
##ra
un
##res
av
que
##ous
##et
##se
##li
il
##at
est
##eu
com
ét
qui
##ons
ch
une
##ci
##ée
re
##ran
##de
se
pour
##ag
##ation
##tre
##ui
##que
##os
dans
pl
##mp
##ol
##di
in
con
tr
##ouv
##ér
##lle
##les
##ier
pas
##ue
##ion
##ff
pro
sur
##ir
##ab
##ère
##urs
ne
Le
##ès
##ec
##aire
##ois
##am
##ort
##pp
##end
##ux
##out
##ers
an
di
ex
##ien
ce
##ut
##ot
ar
plus
##ain
##ac
##ve
##ille
##pr
##oir
##ure
##and
##ité
ou
##00
##si
La
##ré
on
son
ac
si
##onn
##ge
sa
##un
##aux
##én
##ist
##ul
##ette
##elle
##ale
##mb
ser
##ces
##ro
avec
été
su
##té
##ard
aux
ont
Ch
##ours
##aient
Par
nous
##ig
##oy
##ic
##che
##ées
##ert
Les
ent
tout
##id
cont
sont
##mes
##age
50
Il
##iss
##ine
pu
##ques
##ll
comm
mar
fr
##ond
##ati
pré
##ap
##ance
##ES
int
##ens
##tt
app
##eur
elle
##mi
18
ses
cette
li
peu
##lé
comp
as
lui
##bre
##ay
pre
mais
fran
##ins
ad
##bli
##onne
dis
##cl
te
or
fait
so
vi
##oup
##tions
##vi
vous
Paris
es
##oc
##aint
##tes
avait
10
était
che
19
##able
##op
gran
##ill
##teur
prés
##ations
mo
rue
leur
ces
##ord
##co
deux
##aires
dép
##uit
cons
nom
##ad
me
##ise
aut
##ts
Mar
##ique
être
bien
Fran
##use
##tu
##eau
res
##aine
tra
##ON
##ence
##av
min
##près
comme
tou
##ter
même
##pé
je
##ants
##man
no
On
##eux
11
do
po
##cu
gén
Et
##onc
imp
##gn
##ante
##mé
sans
ab
ma
##pu
parti
##cs
##éd
##ble
quel
##ouver
##iè
##dre
dev
jour
ter
Je
##nes
dont
for
tous
##ER
ra
##ii
##ments
ils
##ieu
##oul
##ru
000
##érie
25
sui
15
pri
ai
nouv
##ren
##ét
##fi
##ég
##AN
Un
vo
##ass
##oire
##omp
##ction
pe
der
ment
per
##ors
faire
##IS
##min
##ace
heur
ass
grand
gr
##ress
ju
##ang
ti
ans
sous
##mps
acc
##éra
après
am
##are
dire
att
DE
En
##agn
##ail
éc
##pos
heures
mon
rés
ann
Saint
entre
très
mil
##uer
##mand
contre
donn
##tr
##ver
##AR
Au
ca
emp
dit
cl
ag
12
##teurs
An
aur
aff
##vre
20
##ct
cour
##iers
##EN
ci
cel
mal
##ong
France
30
ob
##OU
##em
man
##og
ren
##aut
##par
##era
##aiss
##vers
##iste
##nement
##ieux
car
pos
##um
##éral
##ière
##çais
##ph
br
dés
hom
##uss
jus
##tin
##mbre
off
##ats
dern
##enir
##ues
eff
##jet
col
##endant
##isse
cr
Mais
##oint
##ères
leurs
##ici
##ies
##ente
##core
seu
port
aus
repr
déc
##lement
##tement
##ôt
publi
ins
##if
pay
De
Al
##rent
gouver
##IN
part
##endre
##agne
##vent
al
francs
encore
jeu
rec
pers
co
fer
sec
peut
##ains
cor
##oule
##lè
##tte
avoir
13
exp
##ing
Ce
##ves
trois
##aî
##eure
autre
sera
Mme
##elles
##erie
poli
##roit
pass
##RE
ouv
général
##im
mati
inter
nos
présid
75
fin
16
##orte
##tique
##ta
mes
Qu
##ches
Com
hier
toutes
lieu
fa
##tres
soir
14
##gl
##TI
##ges
ri
##ête
sou
##ures
déf
##ût
im
##oute
##vé
notre
##LE
##lles
toute
enf
##jour
ques
temps
ni
##ances
##éri
aussi
##cher
trav
eu
env
##itu
all
##puis
ret
##ions
cent
arri
point
conf
##rait
##pt
17
gar
fi
##cc
rép
##insi
##ales
fut
français
hui
Ar
##ission
tion
##lo
coup
rapp
char
mi
##ém
peti
conc
##istes
##art
##lan
##asse
##TE
##ition
##ez
##istre
##enu
##oci
trouv
Nous
##rib
##ose
ép
matin
nombre
##omb
##rit
prin
rég
cha
prix
##ob
##hé
pris
autres
##seil
##du
gra
##ult
##ités
éle
##mer
##enant
##ole
mont
pren
##aud
##été
quelques
##titu
##oix
moins
##all
mois
jours
##dic
##ric
In
cours
rel
Ma
pres
avant
sal
##ages
##olu
##ner
guer
arr
ainsi
##ud
gouvernement
inf
##gé
conn
long
##int
heure
##oin
pouv
président
##antes
journ
##rai
40
##fs
prop
soci
##uses
cap
cert
##ché
##mande
non
##êt
ministre
rem
##oli
##alité
vers
##ambre
##cien
fem
##ate
##ieurs
droit
décl
##cip
beau
prem
guerre
##ger
Une
depuis
soit
##cid
tu
Con
##ler
ég
prof
inst
##ourn
##jourd
st
pays
##rer
grande
demand
rev
Du
Se
##ables
21
vie
place
##pec
##ade
sy
mer
##ret
cet
##RI
servi
##ls
Re
vis
chez
Or
puis
##aill
##lic
##endu
présent
##igne
ph
ind
100
Dans
MM
##mière
##uite
asse
60
inc
déj
Pour
##cle
##rier
préc
##la
Si
##lég
##amb
##illes
ver
fois
LA
##lu
déb
##iti
22
dou
##duit
##vant
##ire
étran
##gan
trans
devant
mai
cin
loi
som
##quel
réun
##rés
##illet
ay
fort
##jours
indi
45
Elle
##bles
jusqu
Ber
disc
##est
##rie
##aille
##mis
avons
faut
##aul
##ents
lég
##tal
##AL
##ourg
nation
vient
Mont
23
ceux
##iens
##ils
arti
représ
##ia
diff
##IL
##ense
##AU
##né
étaient
cré
donc
bon
##lier
##des
toujours
##pe
met
##dit
##cep
##èrent
kil
mom
rien
##aison
fl
hab
suite
##publi
quat
reç
év
500
##ines
ta
sol
##mée
##ement
lib
déjà
##erv
aujourd
homme
commun
sent
##ze
not
sign
voy
##enue
##ss
vol
près
ap
##he
##main
PAR
##iter
##mbl
##une
##onnes
mort
##aisse
35
minist
##vis
esp
##tel
fond
##ps
oc
fai
##ess
##ienne
serait
moment
const
bat
va
moi
demande
St
organ
mis
sc
##ib
voul
at
##cess
##quer
situ
##ttre
##alement
premier
jou
80
moy
conseil
adress
##vement
##az
déclar
ordre
bar
##ame
dernier
tant
première
24
##ath
Alle
avaient
can
31
Etat
##ature
##aise
Ju
doit
##oût
question
ayant
##ite
pendant
nouveau
##cri
elles
##ration
proc
##vres
etc
##tit
femme
##ich
spé
celui
Lou
Mlle
vic
rep
##UR
##eaux
##val
Tr
représent
cas
##IE
##ième
tre
celle
Jean
pai
28
alle<