UTF-8

// UTF-8 인코딩/디코딩 (Node.js & Browser)
const text = "안녕하세요 Hello 🚀";

// TextEncoder/TextDecoder (표준 Web API)
const encoder = new TextEncoder();  // 항상 UTF-8
const decoder = new TextDecoder('utf-8');

// 문자열 → UTF-8 바이트 (Uint8Array)
const encoded = encoder.encode(text);
console.log("바이트:", encoded);
// Uint8Array(26) [236, 149, 136, ...]

// UTF-8 바이트 → 문자열
const decoded = decoder.decode(encoded);
console.log("문자열:", decoded);  // 안녕하세요 Hello 🚀

// ⚠️ 문자 길이 vs 바이트 길이
console.log(`문자 수: ${text.length}`);          // 15 (JS는 UTF-16 기준!)
console.log(`실제 문자 수: ${[...text].length}`); // 14 (정확한 문자 수)
console.log(`바이트 수: ${encoded.length}`);      // 26

// 이모지 주의! (Surrogate Pair)
const emoji = "😀";
console.log(emoji.length);      // 2 (JS 내부는 UTF-16)
console.log([...emoji].length); // 1 (실제 문자 수)

// Buffer 활용 (Node.js)
const buf = Buffer.from(text, 'utf-8');
console.log(`바이트 길이: ${buf.length}`);  // 26
console.log(`Buffer: ${buf.toString('hex')}`);

// 바이트 길이 계산 함수
function getByteLength(str) {
    return new TextEncoder().encode(str).length;
}
console.log(getByteLength("가나다"));  // 9 (3 x 3바이트)

// BOM 감지 및 제거
function removeBOM(str) {
    return str.charCodeAt(0) === 0xFEFF ? str.slice(1) : str;
}

import java.nio.charset.StandardCharsets;
import java.io.*;

public class UTF8Example {
    public static void main(String[] args) throws Exception {
        String text = "안녕하세요 Hello 🚀";

        // 문자열 → UTF-8 바이트
        byte[] encoded = text.getBytes(StandardCharsets.UTF_8);
        System.out.println("바이트 수: " + encoded.length);  // 26

        // UTF-8 바이트 → 문자열
        String decoded = new String(encoded, StandardCharsets.UTF_8);
        System.out.println("문자열: " + decoded);

        // ⚠️ 문자 길이 vs 바이트 길이
        System.out.println("length(): " + text.length());      // 15 (UTF-16 기준)
        System.out.println("codePointCount: " +
            text.codePointCount(0, text.length()));            // 14 (실제 문자 수)

        // 각 문자별 바이트 길이
        for (String ch : new String[]{"A", "가", "😀"}) {
            int byteLen = ch.getBytes(StandardCharsets.UTF_8).length;
            System.out.println("'" + ch + "' → " + byteLen + "바이트");
        }

        // 파일 읽기/쓰기 (UTF-8 명시!)
        try (BufferedWriter writer = new BufferedWriter(
                new OutputStreamWriter(
                    new FileOutputStream("test.txt"),
                    StandardCharsets.UTF_8))) {
            writer.write(text);
        }

        try (BufferedReader reader = new BufferedReader(
                new InputStreamReader(
                    new FileInputStream("test.txt"),
                    StandardCharsets.UTF_8))) {
            String line = reader.readLine();
            System.out.println("읽은 내용: " + line);
        }

        // BOM 제거
        String withBOM = "\uFEFF안녕하세요";
        if (withBOM.charAt(0) == '\uFEFF') {
            withBOM = withBOM.substring(1);
        }
    }
}