Sommer futbola çocukken yerel bir takım olan FC Herrliberg'de başladı ardından FC Concordia Basel'e transfer oldu. 2003 yılında buradan Basel'e geçti. 2005 yılında ilk profesyonel kontratını FC Basel'le imzaladı. İlk profesyonel maçın a Basel'in U-21 takımında çıktı. FC Basel'de Louis Crayton ve Franco Costanzo'dan sonra üçüncü kalecilik yaptı.
2007 yılının yazında FC Basel'le 2011 yılına kadar sözleşme imzaladı ve Lihtenştayn ekiplerinden İsviçre 1.Ligi'nde oynayan Vaduz'a kiralandı. 7 Ocak 2009'da sakatlığından dolayı FC Basel'e dönmüştür.[2] Burada 1 sezonda 33 maça çıkmıştır.
İsviçre Süper Ligi'ndeki ilk maçına FC Basel'in kalecisi olarak Young Boys karşısında İsviçre Stadyumustadyumunda çıktı. Sezon sonuna kadar burada 6 maça çıktı. 16 Haziran 2009'da Grasshopper'a 1 sezon boyunca kiralandı.[3] Burada da bir sezon boyunca 33 maça çıkmıştır.
Sommer, 14 Haziran 2010'da FC Basel'le 5 yıllık sözleşme imzaladı.[4] Franco Costanzo'dan sonra ikinci kaleci oldu. Mart 2011'de Franco Costanzo'nun sözleşmesi bitti ve Basel sözleşme yenilemedi. Sezonun devamında Sommer birinci kalecilik yaptı. Bu sezon da 5 maça çıktı ve Basel'in şampiyon olan kadrosunda yer aldı.