外からの騒音要因は窓からだけとは限りませんが、窓を塞ぐのであれば遮音シートを挟んだ仕様にすべきです。
遮音シートとは、鉛のような比重の高い素材を練り込んだシートで、大きなホームセンターで販売しています。
この遮音シート（遮音）とグラスウール（吸音）を挟み込んだボードで塞ぐと効果的です。