ウェブサイトの基本的なことについて

解決したいこと

ウェブサイトを作成しているのですが、index.html以外のページを作成する際にindex.htmlを参照してそれを改変して使用することは可能でしょうか？それともいちいち手動でヘッダーなどをコピーして作る必要があるのでしょうか？
見てわかる通り初心者なので分かりやすくお願いします。