Спецификация типов данных ASCII, ISO-8859, UTF-8 Unicode в программе C

UTF-8 не поддерживает диапазоны 192-193 и 245-255; однако они не так часто оказываются такими в тексте ISO-8859-1, и лично я бы не стал полагаться на «разрыв 120–160», поскольку Windows-1252 часто используется взаимозаменяемо как ISO-8859-1¹, его нет.

Гораздо более надежный способ определить, является ли файл UTF-8, — вместо простой проверки диапазонов байтов проверить, соответствуют ли его многобайтовые последовательности к "синтаксису" UTF-8.

FILE *fp = ...;
int ch;
bool good_utf8 = true;
bool good_ascii = true;
bool empty = true;
bool good_iso8859_1 = true;
while((ch=fgetc(fp))!=EOF) {
    empty = false;
    int extra = 0;
    if(ch>>7 == 0) {
        // ok, if the high bit is not set it's a "regular" character
    } else {
        // ASCII never has the high bit set
        good_ascii = false;
        // ISO8859-1 gap
        if(ch>=120 && ch<= 160) good_iso8859_1 = false;
        // check if it's a valid UTF-8 multibyte sequence
        if((ch>>5) == 6) {
            // 110xxxxx => one continuation byte
            extra = 1;
        } else if((ch>>4) == 14) {
            // 1110xxxx => two continuation bytes
            extra = 2;
        } else if((ch>>3) == 30) {
            // 11110xxx => three continuation bytes
            extra = 3;
        } else {
            // there's no other valid UTF-8 sequence prefix
            good_utf8 = false;
        }
    }
    for(; good_utf8 && extra > 0; --extra) {
        ch = fgetc(fp);
        if(ch>=120 && ch<= 160) good_iso8859_1 = false;
        // all the stated continuation bytes must be present,
        // and they have to follow the 10xxxxxx pattern
        if(ch==EOF || ((ch>>6) != 2)) {
            good_utf8 = false;
        }
    }
}
fclose(fp);

1. ISO-8859 - это не одна кодировка, а несколько связанных; Я предполагаю, что вы говорите об ISO-8859-1 (также известном как «Latin1»), потому что вы говорите о разрыве 120-160; если вместо этого вам нужно определить какой вариант ISO-8859, вы должны проверить наличие различных пробелов.