LogBert-tokenizer / vocab.txt
improz4's picture
Upload tokenizer
daa560b
raw
history blame
8.22 kB
[PAD]
[UNK]
[CLS]
[SEP]
[MASK]
!
(
)
*
+
,
-
.
/
0
1
2
3
4
5
6
7
8
9
:
=
_
a
b
c
d
e
f
g
h
i
j
k
l
m
n
o
p
q
r
s
t
u
v
w
x
y
z
##p
##e
##n
##t
##i
##c
##r
##o
##s
##d
##7
##1
##9
##u
##a
##g
##l
##3
##6
##f
##2
##5
##0
##x
##4
##h
##m
##b
##8
##y
##v
##z
##k
##q
##w
##er
##or
##ti
##en
in
##ng
##on
##00
cor
##ting
##ating
gen
core
gener
##ec
##al
generating
##ru
##ar
int
##pt
##ce
##erru
interru
interrupt
##ro
##tion
##le
##ed
mi
##ent
##ss
##ond
er
err
##ot
##at
##ing
error
##an
00
ex
##ou
##0000
##econd
##econds
##od
##gr
de
##ig
##cro
##seconds
micro
##ign
microseconds
ma
##in
##cal
##ut
##put
##re
##ri
input
cri
##st
##tical
##ect
critical
interrupts
sp
exce
0x
al
id
##ption
##im
exception
iar
##he
dear
10
##10
##ment
##ignment
alignment
exceptions
ci
##ile
on
##rect
tot
##um
##am
total
##et
##ction
##ble
correct
ciod
dat
pro
the
##mgr
##ert
inst
data
tim
##it
##ag
##24
##gram
max
spent
program
time
ass
bg
is
of
po
##as
##ad
##lo
##43
0010
##int
assert
bgl
point
file
sy
##ck
##us
##age
00106
dd
for
##dp
##un
sym
ddr
024
dou
flo
hum
st
sou
##por
##tmgr
##rce
##ran
##spor
##68
##mer
##otran
##ode
idotran
corrected
double
floating
hummer
source
##sportmgr
idotransportmgr
15
lin
or
re
##el
##ion
##ch
##72
##14
##ading
##cket
at
ca
lo
sign
tl
##pp
##nd
##id
##om
##sk
##94
##88
##ruction
##ssion
mask
instruction
signal
tlb
16
32
ce
fun
hom
im
node
rt
##ra
##78
##92
##35
##val
inval
miss
##ance
##000000
0x0
ido
line
function
home
rts
invalid
missing
and
cal
du
han
no
rb
sing
vn
was
##tect
##ct
##ring
##ol
##dl
##76
##16
##12
##97
##able
##acket
##lp
##ls
##32
##48
##ard
exp
detect
##stre
##imum
correctable
instance
maximum
loading
image
calls
during
handl
rbs
single
vnm
detected
handler
0000000
23
26
22
45
by
ch
cond
cpp
card
fa
hit
not
par
pre
sen
tor
##pe
##pro
##e0
##tra
##ition
##cc
##c0
##che
##db
##11
##99
##av
##3a
##33
##2f
##05
##xy
##40
##atch
003a
##oudp
##00000000
##ression
idoudp
1043
##iled
bglct
##dpacket
stor
cache
idopro
##lpav
expression
condition
failed
sendpacket
torus
##trace
##xydb
idoudpmgr
bglctlpav
idoproxydb
bglctlpavtrace
172
27
29
ac
gb
ib
me
mou
per
rec
ran
so
te
##ei
##nt
##io
##ix
##ood
##set
##15
##a0
##good
##30
##23
##22
##01
##mp
##bol
##ve
##ver
##tive
##ce1
##ssage
map
spel
##ity
bglio
symbol
0245
stat
reset
parity
active
ibm
message
mount
recei
rank
spelce1
0d
02f
13
114
116
21
60
64
96
9f
ad
bit
con
dc
den
e9
ff
f2
hp
lu
latch
mp
ok
seconds
to
ur
##ied
##ission
##ostre
##dre
##75
##768
##18
##96
##ure
##gent
##343
##6c
##ff
##fix
##25
##20
##55
##03
##4c
##mission
##86
##80
##ype
##erat
generat
0014
spas
0x0000
107
ciostre
##lock
asserted
files
##used
001065
0244c
##6800
reading
caused
prefix
003a92
store
gb1
permission
socket
temp
status
receiv
1146800
addre
denied
hpcc
lustre
urgent
##erature
generated
spasm
ciostream
temperature
address
08
012
178
199
20
28
200
243
30
305
978
as
app
bas
code
clock
di
do
ip
ic
il
jt
over
pe
ps
ph
pgood
ra
run
se
su
sw
tre
type
vp
vol
##pm
##es
##no
##nec
##te
##ip
##ic
##il
##ice
##ist
##c3
##ser
##dc
##77
##73
##70
##1c
##13
##1ec
##9c
##9a
##9f
##90
##ug
##ang
##a15
##gal
##gist
##6d
##676
##ft
##for
##51
##x1
##bi
##bf
##872
##vice
##ory
##legal
errno
errors
00c0
0099
exec
##ine
sppm
0x00
0x10
0x40
1072
##rectory
001061
0010622
02494
link
regist
##940
##353
##0000000
functional
00000002
00000000
45872
chip
prep
storage
connec
mpgood
0014a15
0x000001
00106568
0244c1ec
003a92a0
received
apps
directory
icbi
illegal
jtag
peer
psr
phy
rail
such
swl
tree
vpd
volt
10722
00106228
02494b
register
458720
connection
0014a150
09
04
0m
000000000
17
11
19
1f
12
14
100
135
197
115
122
1x1
25
210
294
235
248
211
255
3d
37
31
39
33
36
34
3b
332
432
57
56
52
524
578
592
576
533
523
68
635
648
640
6940
7e
76
72
78
743
718
777
81
84
897
886
851
8bf
98
988
933
are
action
aus
aug
aft
be
block
co
c2
c4
cle
da
dim
dra
ec
e0
fi
fu
fou
gu
g0
ger
got
gun
has
j16
l3
lat
lim
mt
mc
m1
ml
mb
mode
mlp
match
ne
nf
n2
net
pi
pr
pd
pa
por
pan
pri
packet
pix
r10
ret
si
sc
sl
sh
ser
sle
scal
sel
tu
tou
tun
tra
un
u11
wi
war
wan
xy
yat
##pr
##py
##pad
##eg
##e4
##est
##ead
##e88
##e48
##efor
##epy
##ni
##n2
##ning
##num
##nel
##ten
##ton
##ted
##ir
##is
##ical
##cd
##cy
##com
##cpe
##ry
##red
##ratch
##ox
##ob
##opp
##sle
##sert
##sion
##sical
##ds
##d3
##df
##din
##d6c
##dir
##74
##7b
##794
##735
##716
##71c
##1a
##1f
##1b
##197
##130
##910
##988
##912
##997
##930
##918
##9343
##955
##uen
##uce
##ution
##a5
##a00
##acc
##aa0
##a794
##ged
##ll
##lan
##lred
##36
##3f
##376
##312
##397
##3c0
##315
##62
##65
##64
##600
##643
##692
##fc
##f2
##file
##fc0
##200
##2ec
##299
##21f
##57
##50
##58
##596
##56d
##5e88
##5918
##010
##078
##032
##0c0
##025
##xf
##x32
##47
##44
##4b
##488
##448
##hang
##me
##mo
##mat
##man
##mance
##bc
##b2
##ben
##bas
##b72
##b35
##b86
##bug
##be48
##box
##b3f
##87
##80000
##8e0
##833
##8cd
##81a
##8aa0
##836
##yte
##vile
##ze
##zt
##zer
##kpt
##kin
##quen
##qbox
##wn
##wor
##ordin
##tial
##ency
##ension
insert
##0032
##eck
##ecting
##ecis
##aran
##arefor
into
##cess
##rome
##edc
##eds
mip
midp
mini
##ate
0097
009a
00b35
##00000000000
demo
mach
##ining
##utting
##stqbox
exceeds
0x11
0x20
0x80
0x13
0x0000000
0x1b
alert
allred
##head
108
1024
1068
10676
10312
10692
##etest
process
instead
databas
##248
00105e88
synd
0010620
0010671c
00106988
00106600
00106448
format
0246d
stopp
159
1524
1596
155918
##eline
##elton
##elds
##148
##14e0
low
load
##94c3
##886
##880
164
323
32k
3292
32768
32010
impr
##783
0x06
0x0b
0x08
0x022
0x0397
0x02ec
0x058
nosle
nozer
##ctn
##32315
##ardser
expecting
vnm64
00000007
237
23768
2347
2605
2613
26735
26078
2211
2296
22376
22783
4501
45353
45880
chang
chkpt
check
part
##e0e0
##e08cd
##ccfc
##336
##2f8
##2fff
##0594c3
##404
003a90
003a910
##0000000000000000000
##000000000594c3
17276
27197
27997
2911
2930
29025
gb2
perfor
soft
testqbox
##a09c
##239343
##mps
##vered
mapfile
bglio23
bglio55
bglio716
bglio336
0245a5
0245b72
0245ccfc
0245a09c
state
receiver
02f75
02f7b
02f643
21353
64k
64mps
conten
dcr
dcbf
mpi
##758
##768x1
##343000000000594c3
##343239343
##6c48
##ff0c0
##25c
##03833
##80a794
00149f
0x0000200
10712
10740
10718
00106570
0244c25c
003a9294
receiving
0810
0129a
01290
1781
17851
1990
1998
207
2032315
2005
20021f
24314
30912
30886
3053
30586
9785
asic
base
baseline
down
rundir
sequen
severed
##escom
##teed
##c3fc0
##service
##7348
##70b86
##1c88
##9c14e0
##9f8e0
00c06c48
00c07348
0099be48
00991c88
execution
0x0080000
0x009c14e0
001061dc
001061e4
preparefor
0x000001f2
0x000001b2
psr1
psr0
physical
02494bec
02494bbc
04df
0000000000000000000000000000
1174
19596
128
1465
1005
13592
1973
11562
1x1x32
21016
29420
23544
2486
21175
25568
31758
3980
36248
34955
4329
560
52930
52403
5781
5927
57673
53387
52376
685
63543
640404
7623
7205
7830
74350
7777
841
8977
8bfa00
9825
9881
9337
auselton
after
been
coordin
clear
dimension
draeg
ecid
fields
full
found
guaran
german
gunnel
latency
limit
mtype
mcardser
mlctn
new
nfs
networ
pipe
prxf
pdt
pakin
portion
panic
privile
pixf
retry
size
scratch
slot
shutting
service
slept
scaletest
select
tue
touch
tuned
training
unit
wire
warning
wanted
xyzt
yates
##epyescom
##cpes
##obyte
##d38aa0
##1304b
##lane
##2998
##56d5
##03257
##b3f3c0
##81ae08cd
inserted
##00328
##ecise
midplane
miniben
009756d5
009a2998
00b35148
machine
0x11b3f3c0
0x13d38aa0
0x00000002
0x1b70b86
alerts
allreduce
##header
10247
10686
processor
database
syndrome
00106204
0246dacc
stopping
15966
155918940
32768cpes
imprecise
0x022c3fc0
0x0397e0e0
0x0589f8e0
nosleepyescom
nozerobyte
23768676
26059
26131
22119
22967
changed
##2fffff0c0
003a90dc
003a9108
29308
performance
softheader
testqboxhang
bglio559
0245a5ec
0245b72c
02f75edc
02f7bd6c
02f6436c
contention
##343000000000594c31304b
##34323934303257
##03833343000000000594c31304b
##80a7942fffff0c0
00149f88
0x00002000
0129a488
012902f8
203231503833343000000000594c31304b
20021f01
3091200
sequential
0x00800000
prepareforservice
04df80a7942fffff0c0
117400328
14652
1x1x32768x1
2354412
74350836
8bfa0003
coordinate
draeger
fully
guaranteed
germann2
gunnels
mcardsernum
network
pakin1
privileged
retrying
scratchpad
##81ae08cd2
0x1b70b860
nosleepyescomm
nozerobytebug
203231503833343000000000594c31304b34323934303257
04df80a7942fffff0c081ae08cd2