樋口さん、こんばんわ。
下記の手順で取り込むことで、文字化けは解消されると思いますので、お試しください。
1. CSV 形式のファイルのデータをメモ帳で開きます。
2. データがカンマで区切られているのを確認しましたら、[ファイル] - [名前を付けて保存] をクリックします。
3. [ファイルの種類] を [すべてのファイル] に変更し、文字コードは [UTF-8] を選択した後、[保存] ボタンをクリックします。
4. そのCSVファイルをMicrosoft Online Services 管理画面にてインポートいたします。