transformers
sentencepiece
torch
pandas
numpy
faiss-gpu
faiss-cpu
datasets