ミスキーサーバーに必要なスペックは公式サイトで明言されていませんが、少なくともXserver VPSの2GBのプランで十分稼働可能です。
利用者が増えるなどサーバーの活用頻度が増えると、メモリやSSDが不足して不安定になる可能性があるので、その兆候が見え始めたら上位プランへの変更やSSDの増設を検討してみてください。