Initial commit.
[pdfium.git] / core / src / fxcrt / fx_basic_utf.cpp
1 // Copyright 2014 PDFium Authors. All rights reserved.\r
2 // Use of this source code is governed by a BSD-style license that can be\r
3 // found in the LICENSE file.\r
4  \r
5 // Original code copyright 2014 Foxit Software Inc. http://www.foxitsoftware.com\r
6 \r
7 #include "../../include/fxcrt/fx_basic.h"\r
8 void CFX_UTF8Decoder::Clear()\r
9 {\r
10     m_Buffer.Clear();\r
11     m_PendingBytes = 0;\r
12 }\r
13 void CFX_UTF8Decoder::AppendChar(FX_DWORD ch)\r
14 {\r
15     m_Buffer.AppendChar((FX_WCHAR)ch);\r
16 }\r
17 void CFX_UTF8Decoder::Input(FX_BYTE byte)\r
18 {\r
19     if (byte < 0x80) {\r
20         m_PendingBytes = 0;\r
21         m_Buffer.AppendChar(byte);\r
22     } else if (byte < 0xc0) {\r
23         if (m_PendingBytes == 0) {\r
24             return;\r
25         }\r
26         m_PendingBytes --;\r
27         m_PendingChar |= (byte & 0x3f) << (m_PendingBytes * 6);\r
28         if (m_PendingBytes == 0) {\r
29             AppendChar(m_PendingChar);\r
30         }\r
31     } else if (byte < 0xe0) {\r
32         m_PendingBytes = 1;\r
33         m_PendingChar = (byte & 0x1f) << 6;\r
34     } else if (byte < 0xf0) {\r
35         m_PendingBytes = 2;\r
36         m_PendingChar = (byte & 0x0f) << 12;\r
37     } else if (byte < 0xf8) {\r
38         m_PendingBytes = 3;\r
39         m_PendingChar = (byte & 0x07) << 18;\r
40     } else if (byte < 0xfc) {\r
41         m_PendingBytes = 4;\r
42         m_PendingChar = (byte & 0x03) << 24;\r
43     } else if (byte < 0xfe) {\r
44         m_PendingBytes = 5;\r
45         m_PendingChar = (byte & 0x01) << 30;\r
46     }\r
47 }\r
48 void CFX_UTF8Encoder::Input(FX_WCHAR unicode)\r
49 {\r
50     if ((FX_DWORD)unicode < 0x80) {\r
51         m_Buffer.AppendChar(unicode);\r
52     } else {\r
53         if ((FX_DWORD)unicode >= 0x80000000) {\r
54             return;\r
55         }\r
56         int nbytes = 0;\r
57         if ((FX_DWORD)unicode < 0x800) {\r
58             nbytes = 2;\r
59         } else if ((FX_DWORD)unicode < 0x10000) {\r
60             nbytes = 3;\r
61         } else if ((FX_DWORD)unicode < 0x200000) {\r
62             nbytes = 4;\r
63         } else if ((FX_DWORD)unicode < 0x4000000) {\r
64             nbytes = 5;\r
65         } else {\r
66             nbytes = 6;\r
67         }\r
68         static FX_BYTE prefix[] = {0xc0, 0xe0, 0xf0, 0xf8, 0xfc};\r
69         int order = 1 << ((nbytes - 1) * 6);\r
70         int code = unicode;\r
71         m_Buffer.AppendChar(prefix[nbytes - 2] | (code / order));\r
72         for (int i = 0; i < nbytes - 1; i ++) {\r
73             code = code % order;\r
74             order >>= 6;\r
75             m_Buffer.AppendChar(0x80 | (code / order));\r
76         }\r
77     }\r
78 }\r
79 CFX_ByteString FX_UTF8Encode(FX_LPCWSTR pwsStr, FX_STRSIZE len)\r
80 {\r
81     FXSYS_assert(pwsStr != NULL);\r
82     if (len < 0) {\r
83         len = (FX_STRSIZE)FXSYS_wcslen(pwsStr);\r
84     }\r
85     CFX_UTF8Encoder encoder;\r
86     while (len -- > 0) {\r
87         encoder.Input(*pwsStr ++);\r
88     }\r
89     return encoder.GetResult();\r
90 }\r
91 void FX_UTF8Encode(FX_LPCWSTR pwsStr, FX_STRSIZE len, CFX_ByteStringL &utf8Str, IFX_Allocator* pAllocator)\r
92 {\r
93     FXSYS_assert(pwsStr != NULL);\r
94     if (len < 0) {\r
95         len = (FX_STRSIZE)FXSYS_wcslen(pwsStr);\r
96     }\r
97     CFX_UTF8Encoder encoder(pAllocator);\r
98     while (len -- > 0) {\r
99         encoder.Input(*pwsStr ++);\r
100     }\r
101     encoder.GetResult(utf8Str);\r
102 }\r