Удаление мультибитных символов из файла с использованием SED

Question

Мне нужно удалить все мультибитные символы из файла, я не знаю, что они есть, поэтому мне нужно покрыть весь диапазон.

Я могу найти их, используя grep, как так: grep -p [ x80- xff] 'myfile'

Попытка сделать симулярную вещь с SED, но вместо этого удалить их.

Ваше здоровье

Answer 1

Give this a try:

LANG=C sed 's/[\x80-\xFF]//g' filename

Answer 2

you can use iconv to convert from one encoding to another