En fait, j'ai trouvé le truc en recherchant sur google. Il faut que tu change directement l'extension du fichier de .txt à .csv, sinon le tout se retrouvera dans une même case sur Excel.
Ce que j'ai trouvé, c'est d'aller dans le panneau de configuration. Là, dans la zone de recherche, tu peux écrire "extension". Il y a alors l'option "afficher ou masquer les extensions de fichiers". Rendu là, tu décoche "masquer les extensions de fichier dont le type est connu". Ensuite, comme tu vois toutes les extensions, tu peux facilement faire la manipulation dont je t'ai parlé plus haut.