明確な決まりがあるのかどうかは私も知らないのですが、
http://www.atmarkit.co.jp/flinux/rensai/theory02/theory02a.html
ここらあたりが入門としては手頃かもしれません。

「インストール（install）」自体の説明が必要な気がするので簡単に（これはLinuxであろうとWindowsであろうと変わりません）。

インストールとは何かを設置して使える状態にすることです。PC専門用語ではなく、install a telephoneなら電話を家に通すことです（他の例、 install a fridge）。セットアップ（set up）と交換可能な感じで使われるというのも分かるかと思います。

これがコンピュータソフトウェアの場合は「アプリケーションを使える状態にする」＝「アプリケーションを構成するプログラムやデータなどのファイルをハードディスクなどにコピーし、必要な設定を行なう」となります。実際には、「アプリケーション本体」、「他のアプリケーションとも共有されうるライブラリ」、「ユーザー別の設定ファイル」などは用途が異なるので違う場所に配置されることが一般的です（これはOSの設計によります）。

冷蔵庫はキッチン、辞書は書斎、雑誌はリビングなどというような置き場所の違いだと考えてください。重要なものだけを金庫にいれるように、アクセスのしやすさも場所により異なり、適した場所に一定の規則従い整然と配置します。

ところで、新たに質問です。
#include "config.h"

#include <stdio.h>
#include <stdlib.h>
#include <string.h>
これはあるc言語のソースの文の冒頭にあったのですが、includeとは取り込むという意味で、＜＞で囲まれてんのはヘッダーファイルですよね？入門書にc言語には標準に装備されてる云々かんぬんと書かれてるのですが、一体どのくらいの種類が存在してるのでしょう？ヘッダーファイルで検索してもいまいちよく分かりません。どうも、検索の仕方も勉強しなきゃならないのでしょうか・・・orz
また、できれば、stdio.h、string.hの中身を知りたいです。これは初心者には上級でしょうか？ダブルクォーテーションで囲まれてるのはおそらくオリジナルのファイルでしょうか、そのファイルはあったのでそのファイルを取り込むと解釈して良いのですね？そのような事ができることも入門書には載ってなかったです。入門書だけでは分からないことだらけですね。次のステップとしてより詳しくc言語を知るには何か良い本などあったら教えてください。そうでなければ遅々として進まない気がします。よろしくお願いします。

ありがとうございます。
今、本屋めぐりをしてみたら、入門書は多いですが、中級者向けのc言語の本が少ない事に気づきました。やっと見付けた中級者向けの本にもそのようなことが書かれていました。しかし、無いわけではないので、じっくり探してしばらく独学に励んでみたいと思っています。また、疑問に思ったら、別トピックで質問してみます。ありがとうございました。