Klikni na soubor pravým tlačítkem myši na soubor, který chceš otevřít a vyber "Otevřít v programu/Zvolit výchozí program" Tam si můžeš vybrat, v čem to otevřeš a klidně si i rovnou nastavit, aby se soubory se stejnou koncovkou otevíraly vždy v tebou vybraném programu.
Další možnost je ve Vlastnostech. Klikni pravým tlačítkem myši na soubor, vyber "Vlastnosti" a v záložce "Obecné" máš na jednom řádku "Otevřít v programu". Dej "Změnit" a můžeš si vybrat výchozí program pro všechny soubory se stejnou koncovkou.
Edit: A ještě doplním odpověd na název tématu

. Dělá to proto, že se zřejmě implicitně nastavilo při instalaci officu otevírání souborů s různými koncovkami, ne jen standartní textové dokumenty.