Swallow The Sun была сформирована весной 2000 года парнем Juha Raivio. Soon Pasi Pasanen был вместе с ним так как они оба так же играли в Plutonium Orange. Они репетировали несколько песен, одна из них была Through Her Silvery Body с первой демки Out of This Gloomy Light. В 2001 Markus Jämsen, которого Raivio и Pasanen уже знали с прошлых банд, присоединился как второй гитарист и Mikko Kotamäki с Funeris Nocturnum как вокалист. Они репетировали пару песен и начали искать басиста и клавишника. Поиск не был долгим: Aleksi Munter и Matti Honkonen, так же с Funeris Nocturnum, присоединились к банде после их первой репетиции с Swallow the Sun. Итак весной 2002 они начали подготавливать песни для демки, которая была записана в январе 2003 года. Запись осуществлялась в Sam’s Workshop с Sami Kokko, который также микшировал демку.

Контракт с лейблом Firebox Records был подписан через несколько месяцев после записи демки, и Swallow the Sun вошли в студию в июле 2003 года. На протяжении следующих трёх недель они записали свой дебютный альбом, The Morning Never Came.

В феврале 2005 года, Swallow the Sun выпустили свой второй альбом под названием Ghosts of Loss. Их сингл Forgive Her… занял 4-е место в списке в Finnish Top 20 singles chart в первую неделю релиза, и оставался в чарте 6 недель. Их альбом также вошел в чарт: #8 между Gwen Stefani и System of a Down.

На протяжении 2006 года они подписали контракт с Spinefarm Records и съездили в маленький европейский тур.

В январе 2007 года они выпустили свой третий альбом Hope, который включает в себя кавер на песню Timo Rautiainen & Trio Niskalaukaus «Alavilla mailla» (которую они перевели на английский и назвали «These Low Lands») как бонус трек на digipack edition - спета Tomi Joutsen, фронтменом дружеской финской метал банды Amorphis. Так же был приглашен гость Jonas Renkse из Katatonia который поет в песне «The Justice Of Suffering».