Quali librerie C o C++ open source possono convertire da UTF-32 a NFC arbitrario?

Question

Quali librerie C o C++ open source possono convertire l'UTF-32 arbitrario in NFC?

Librerie che penso possano fare questo finora: ICU, Qt, GLib (non sono sicuro?).

Non è necessario alcun altro supporto Unicode complesso; solo conversione da UTF-32 a UTF-32 arbitraria ma nota-corretta che si trova nel modulo NFC.

Sono molto interessato a una libreria in grado di farlo direttamente. Ad esempio, Qt e ICU (per quanto posso dire) entrambi fanno tutto tramite uno stadio intermedio di conversione da e verso UTF-16.

Answer 1

ICU o Boost.Locale (avvolgimento ICU) sarà il vostro meglio da molto, molto lungo. I mapping di normalizzazione saranno equivalenti a quelli di più software, che presumo sia il punto di questa conversione.

Answer 2

Ecco la parte principale del codice che ho utilizzato dopo aver deciso su ICU. Ho pensato che dovrei metterlo qui nel caso in cui aiuti qualcuno che cerca la stessa cosa.

std::string normalize(const std::string &unnormalized_utf8) { 
    // FIXME: until ICU supports doing normalization over a UText 
    // interface directly on our UTF-8, we'll use the insanely less 
    // efficient approach of converting to UTF-16, normalizing, and 
    // converting back to UTF-8. 

    // Convert to UTF-16 string 
    auto unnormalized_utf16 = icu::UnicodeString::fromUTF8(unnormalized_utf8); 

    // Get a pointer to the global NFC normalizer 
    UErrorCode icu_error = U_ZERO_ERROR; 
    const auto *normalizer = icu::Normalizer2::getInstance(nullptr, "nfc", UNORM2_COMPOSE, icu_error); 
    assert(U_SUCCESS(icu_error)); 

    // Normalize our string 
    icu::UnicodeString normalized_utf16; 
    normalizer->normalize(unnormalized_utf16, normalized_utf16, icu_error); 
    assert(U_SUCCESS(icu_error)); 

    // Convert back to UTF-8 
    std::string normalized_utf8; 
    normalized_utf16.toUTF8String(normalized_utf8); 

    return normalized_utf8; 
}