早速返事を頂き、ありがとうございます。
私もそのように考えたのですが、最初の辞書登録だけではなく、辞書登録モードに入るときは、いつでも４秒かかってしまいます。
まだサーバーを立てて試してはいないのですが、メモリは４Gありマシンスペックもそれほど低いわけでもないので、何か他に原因がないのだろうかと思っています。

ご返答頂き、ありがとうございました。

gc-cons-thresholdの値は、400000になっていました。
確かにメッセージを見ると、辞書登録モードに入るときにガベージコレクションが動くことが多いようです。
それで、go-cons-thresholdの値を1000倍にしてみました。
これでガベージコレクションは起動しなくなりましたが、やはり切り替わりまでに４秒ほどかかります。
また試しに、gc-cons-thresholdの値を1000分の1にもしてみましたが、特に体感速度は変わりませんでした。
辞書登録モードに入るときに以外には、特に動作が遅くなるような所はありません。

一度、辞書サーバーを立てて実験してみようと思います。
結果がでましたら、また報告いたします。