क्या खुला स्रोत सी या सी ++ पुस्तकालय मनमाने ढंग से यूटीएफ -32 को एनएफसी में परिवर्तित कर सकते हैं?

Question

क्या खुले स्रोत सी या सी ++ पुस्तकालय मनमाने ढंग से यूटीएफ -32 से NFC परिवर्तित कर सकते हैं?

पुस्तकालय जो मुझे लगता है कि अब तक ऐसा कर सकते हैं: आईसीयू, क्यूटी, जीएलआईबी (सुनिश्चित नहीं है?)।

मुझे किसी अन्य जटिल यूनिकोड समर्थन की आवश्यकता नहीं है; सिर्फ मनमानी लेकिन ज्ञात-सही यूटीएफ -32 से यूटीएफ -32 तक रूपांतरण जो NFC रूप में है।

मुझे लाइब्रेरी में सबसे अधिक रुचि है जो इसे सीधे कर सकता है। उदाहरण के लिए, क्यूटी और आईसीयू (जहां तक ​​मैं कह सकता हूं) दोनों यूटीएफ -16 से और मध्यवर्ती रूपांतरण चरण के माध्यम से सबकुछ करते हैं।

Answer 1

आईसीयू या Boost.Locale (रैपिंग आईसीयू) बहुत ही लंबे समय से आपका सर्वश्रेष्ठ होगा। सामान्यीकरण मैपिंग अधिक सॉफ़्टवेयर के बराबर होंगे, जो मुझे लगता है कि इस रूपांतरण का बिंदु है।

Answer 2

आईसीयू पर निर्णय लेने के बाद मैंने जो कोड समाप्त किया, उसका मुख्य भाग यहां दिया गया है। मैंने सोचा कि मुझे इसे यहां रखना चाहिए यदि यह किसी ऐसे व्यक्ति की मदद करता है जो इस बात की कोशिश करता है।

std::string normalize(const std::string &unnormalized_utf8) { 
    // FIXME: until ICU supports doing normalization over a UText 
    // interface directly on our UTF-8, we'll use the insanely less 
    // efficient approach of converting to UTF-16, normalizing, and 
    // converting back to UTF-8. 

    // Convert to UTF-16 string 
    auto unnormalized_utf16 = icu::UnicodeString::fromUTF8(unnormalized_utf8); 

    // Get a pointer to the global NFC normalizer 
    UErrorCode icu_error = U_ZERO_ERROR; 
    const auto *normalizer = icu::Normalizer2::getInstance(nullptr, "nfc", UNORM2_COMPOSE, icu_error); 
    assert(U_SUCCESS(icu_error)); 

    // Normalize our string 
    icu::UnicodeString normalized_utf16; 
    normalizer->normalize(unnormalized_utf16, normalized_utf16, icu_error); 
    assert(U_SUCCESS(icu_error)); 

    // Convert back to UTF-8 
    std::string normalized_utf8; 
    normalized_utf16.toUTF8String(normalized_utf8); 

    return normalized_utf8; 
}