この研究では、LLM Chatbotsが特化モデルとの性能競争においてどのような結果を示すかが評価されました。結果から明らかなように、商用ChatGPTやオープンソースのGPT4allなどの一部のモデルは高い精度を達成しました。しかし、Stanford AlpacaやDollyなど他のモデルは限界があり、特にNERタスクで効果的ではありませんでした。
これらの結果から推測すると、現時点では一部のLLM Chatbotsは特化モデルと同等もしくはそれ以上の性能を発揮しています。ただし、全体的に見るとまだ改善すべき点も多く残っています。将来的にはさらなる研究や技術革新により、LLM Chatbotsが特化モデルと本質的に競合し得る可能性があると考えられます。