ホームタブの「罫線」ボタンから選択するか、右クリックメニューの「セルの書式設定」で罫線タブを開いて設定できます。
「セルの書式設定」の罫線タブで、線の種類や色を選択できます。点線や二重線など様々なスタイルが用意されています。
表全体を選択した状態で「罫線」ボタンの「外枠」や「格子」を選ぶか、オートフォーマット機能を使うと効率的です。