look out of the window意思是“朝窗外看或者从窗口处往外看”，一般隐含看着靠窗户较近，更强调看的对象在窗外。

look through the window意思是“（目光）穿过/透过窗户看”，只强调看者的目光必须穿过/透过窗户，不强调其他含义。through是介词，从内部通过。