golem xiii による投稿:

また、スイッチングハブとLANケーブルだけで同時に複数台のコンピュータをインターネット接続できるのでしょうか？

出来ないこともないのですが、単品のルータを購入した方がご期待の環境に近いはずです。
一般的な家庭内LANを想定した場合、「複数台で同時にインターネット」には「ADSLモデムや光終端装置と繋がって、ネット接続をLAN内で共有する機械」が一台は必要になります。
その「ネット接続を共有する機械」をPCにやらせることも出来ますが、そのPCを終了すると他のPCはネットに繋がらない事になるので、
専用の機械、すなわち”ブロードバンドルータ”と呼ばれているものを導入した方が良いと思います。

最も簡単な手順で済むのは
・ルータ自体に有線LAN差込口が3つ以上あり(ADSLモデムや光終端装置の分＋PC2台分)
・お使いのプロバイダ対応
のルータを使って、2台とも有線LAN接続する、です。
今後台数が増えたら、ルータの差込口のひとつにスイッチングハブを繋いで、そこにPCを繋ぎます。

将来的に無線LANも検討されているなら、無線LAN機能付きのブロードバンドルータを使うのが最終的に「期待した環境」に近く、また安く上がると思います。

TCP/IPプロトコルで接続しているものですから、本来はOSは関係ないはずです。
現に私のところのWHR2-G54(http://buffalo.jp/products/catalog/item/w/whr2-g54/#taiou)も、公式にはWindowsにしか対応していません。それでも特に何もせずとも、Linux(Ubuntu)から接続出来ています。

付属のユーティリティがWindowsやMacにしか対応していない、と言うことなんだろうと思うのですが。
ただ、製品によって多少のクセはあるようで、どうやってもWindowsからしか接続出来ないと言ったものもあるとは聞きます。
私自身は経験がないのですが…。

絶対に失敗したくないのであれば、CoregaやPlanexなど公式にLinuxをサポートしているメーカーの(Linux Readyなどと書いてある)製品を購入するのが吉とは思います。

無線の場合は、ちょっとハマる可能性もありかもですね。
11nではうまく接続できないとか。
お財布と相談と言ったこともあるかと思いますが、ネットその他でLinuxでの動作報告の情報が多く取れる機種を選択した方が、最終的には無難と思います。