太陽系行星是否都有固體外殼

不是。

水星、金星、地球、火星、冥王星都屬類地行星，都有固體地表。木星、土星屬於類木行星，沒有固體地表，主要是氫和氦。天王星和海王星屬於冰巨星。它們可以看作是類木行星和類地行星的一種過渡形態，大氣成分主要是氫和氦。但是內部卻是由水、氨和巖石組成的混合體。天王星和海王星沒有固體地表。