Exactement !
La lumière des étoiles se déplace à 300 000 km/s.
Puisque le Soleil est à environ 150 millions de km de nous, sa lumière met environ 500 secondes à nous arriver. Donc si le Soleil explosait, nous ne pourrions le voir (et donc le savoir) que environ 8 minutes plus tard.
Pour les étoiles beaucoup plus lointaines, c'est encore pire : leur lumière peut mettre des années ou des siècles à nous parvenir : nous les voyons donc comme elles étaient il y a des années ou des siècles.
Plus nous regardons loin dans le ciel, plus nous regardons dans le passé.