以下のようなバグがあります。

ath9k disassociates/reassociates a lot
(https://bugs.launchpad.net/ubuntu/+source/linux/+bug/414560)

ログを見れば、同じ状態だということが分かると思います。kernelのバグらしいです。
私は、アップデートを待つことにしましたが、どうしても待ちきれなければ、karmic-proposedに新しいkernelがあるので、kernelだけを選択してアップデートしてみるといいでしょう。

できたら報告お願いしますね。

解決したので報告します。
まず、正式にカーネルアップデートがありましたが、”全く”改善されませんでした。
もしかしてNetworkManagerが・・・（詳しいことは全く分かりません）と考えて、Wicdを使ってみると、全く切断されなくなりました。速度も問題ないので、madwifiをインストールする必要はないと思います。（というか私には出来なかった）

ryofunakiさん、報告ありがとうございます。
しかし、不審な点が・・・。まさか、最近流行りの高度な荒らしじゃないですよね？疑ってすみません。