罫線を引く範囲を指定します。

リボンから「ホーム」タブをクリックし、「フォント」グループから「罫線」の「▼」をクリックして、表示された一覧から罫線の種類をクリックします。
ここでは例として、「外枠太罫線」を選択します。

下図のように罫線の色が反転したような状態になったら右クリックし、表示された一覧から「セルの書式設定」をクリックします。

「セルの書式設定」が表示されます。
「罫線」タブをクリックし、「線」グループから「色」ボックスの「▼」をクリックして、表示された一覧から目的の色をクリックします。
ここでは例として、「赤」を選択します。

※ 既定では、「自動」が選択されています。

「プリセット」欄から色を変更する罫線の場所（「外枠」か「内側」）をクリックします。
「罫線」欄のプレビュー表示で色が変更されたことを確認したら、「OK」をクリックします。