~ubuntu-branches/ubuntu/hardy/php5/hardy-updates

« back to all changes in this revision

Viewing changes to ext/mbstring/libmbfl/filters/mbfilter_utf16.c

  • Committer: Bazaar Package Importer
  • Author(s): Adam Conrad
  • Date: 2005-10-09 03:14:32 UTC
  • Revision ID: james.westby@ubuntu.com-20051009031432-kspik3lobxstafv9
Tags: upstream-5.0.5
ImportĀ upstreamĀ versionĀ 5.0.5

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
/*
 
2
 * "streamable kanji code filter and converter"
 
3
 * Copyright (c) 1998-2002 HappySize, Inc. All rights reserved.
 
4
 *
 
5
 * LICENSE NOTICES
 
6
 *
 
7
 * This file is part of "streamable kanji code filter and converter",
 
8
 * which is distributed under the terms of GNU Lesser General Public 
 
9
 * License (version 2) as published by the Free Software Foundation.
 
10
 *
 
11
 * This software is distributed in the hope that it will be useful,
 
12
 * but WITHOUT ANY WARRANTY; without even the implied warranty of
 
13
 * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
14
 * GNU Lesser General Public License for more details.
 
15
 *
 
16
 * You should have received a copy of the GNU Lesser General Public
 
17
 * License along with "streamable kanji code filter and converter";
 
18
 * if not, write to the Free Software Foundation, Inc., 59 Temple Place,
 
19
 * Suite 330, Boston, MA  02111-1307  USA
 
20
 *
 
21
 * The author of this file:
 
22
 *
 
23
 */
 
24
/*
 
25
 * The source code included in this files was separated from mbfilter.c
 
26
 * by moriyoshi koizumi <moriyoshi@php.net> on 4 dec 2002.
 
27
 * 
 
28
 */
 
29
 
 
30
#ifdef HAVE_CONFIG_H
 
31
#include "config.h"
 
32
#endif
 
33
 
 
34
#include "mbfilter.h"
 
35
#include "mbfilter_utf16.h"
 
36
 
 
37
static const char *mbfl_encoding_utf16_aliases[] = {"utf16", NULL};
 
38
 
 
39
const mbfl_encoding mbfl_encoding_utf16 = {
 
40
        mbfl_no_encoding_utf16,
 
41
        "UTF-16",
 
42
        "UTF-16",
 
43
        (const char *(*)[])&mbfl_encoding_utf16_aliases,
 
44
        NULL,
 
45
        MBFL_ENCTYPE_MWC2BE
 
46
};
 
47
 
 
48
const mbfl_encoding mbfl_encoding_utf16be = {
 
49
        mbfl_no_encoding_utf16be,
 
50
        "UTF-16BE",
 
51
        "UTF-16BE",
 
52
        NULL,
 
53
        NULL,
 
54
        MBFL_ENCTYPE_MWC2BE
 
55
};
 
56
 
 
57
const mbfl_encoding mbfl_encoding_utf16le = {
 
58
        mbfl_no_encoding_utf16le,
 
59
        "UTF-16LE",
 
60
        "UTF-16LE",
 
61
        NULL,
 
62
        NULL,
 
63
        MBFL_ENCTYPE_MWC2LE
 
64
};
 
65
 
 
66
const struct mbfl_convert_vtbl vtbl_utf16_wchar = {
 
67
        mbfl_no_encoding_utf16,
 
68
        mbfl_no_encoding_wchar,
 
69
        mbfl_filt_conv_common_ctor,
 
70
        mbfl_filt_conv_common_dtor,
 
71
        mbfl_filt_conv_utf16_wchar,
 
72
        mbfl_filt_conv_common_flush
 
73
};
 
74
 
 
75
const struct mbfl_convert_vtbl vtbl_wchar_utf16 = {
 
76
        mbfl_no_encoding_wchar,
 
77
        mbfl_no_encoding_utf16,
 
78
        mbfl_filt_conv_common_ctor,
 
79
        mbfl_filt_conv_common_dtor,
 
80
        mbfl_filt_conv_wchar_utf16be,
 
81
        mbfl_filt_conv_common_flush
 
82
};
 
83
 
 
84
const struct mbfl_convert_vtbl vtbl_utf16be_wchar = {
 
85
        mbfl_no_encoding_utf16be,
 
86
        mbfl_no_encoding_wchar,
 
87
        mbfl_filt_conv_common_ctor,
 
88
        mbfl_filt_conv_common_dtor,
 
89
        mbfl_filt_conv_utf16be_wchar,
 
90
        mbfl_filt_conv_common_flush
 
91
};
 
92
 
 
93
const struct mbfl_convert_vtbl vtbl_wchar_utf16be = {
 
94
        mbfl_no_encoding_wchar,
 
95
        mbfl_no_encoding_utf16be,
 
96
        mbfl_filt_conv_common_ctor,
 
97
        mbfl_filt_conv_common_dtor,
 
98
        mbfl_filt_conv_wchar_utf16be,
 
99
        mbfl_filt_conv_common_flush
 
100
};
 
101
 
 
102
const struct mbfl_convert_vtbl vtbl_utf16le_wchar = {
 
103
        mbfl_no_encoding_utf16le,
 
104
        mbfl_no_encoding_wchar,
 
105
        mbfl_filt_conv_common_ctor,
 
106
        mbfl_filt_conv_common_dtor,
 
107
        mbfl_filt_conv_utf16le_wchar,
 
108
        mbfl_filt_conv_common_flush
 
109
};
 
110
 
 
111
const struct mbfl_convert_vtbl vtbl_wchar_utf16le = {
 
112
        mbfl_no_encoding_wchar,
 
113
        mbfl_no_encoding_utf16le,
 
114
        mbfl_filt_conv_common_ctor,
 
115
        mbfl_filt_conv_common_dtor,
 
116
        mbfl_filt_conv_wchar_utf16le,
 
117
        mbfl_filt_conv_common_flush
 
118
};
 
119
 
 
120
#define CK(statement)   do { if ((statement) < 0) return (-1); } while (0)
 
121
 
 
122
/*
 
123
 * UTF-16 => wchar
 
124
 */
 
125
int mbfl_filt_conv_utf16_wchar(int c, mbfl_convert_filter *filter)
 
126
{
 
127
        int n, endian;
 
128
 
 
129
        endian = filter->status & 0xff00;
 
130
        switch (filter->status & 0xff) {
 
131
        case 0:
 
132
                if (endian) {
 
133
                        n = c & 0xff;
 
134
                } else {
 
135
                        n = (c & 0xff) << 8;
 
136
                }
 
137
                filter->cache |= n;
 
138
                filter->status++;
 
139
                break;
 
140
        default:
 
141
                if (endian) {
 
142
                        n = (c & 0xff) << 8;
 
143
                } else {
 
144
                        n = c & 0xff;
 
145
                }
 
146
                n |= filter->cache & 0xffff;
 
147
                filter->status &= ~0xff;
 
148
                if (n == 0xfffe) {
 
149
                        if (endian) {
 
150
                                filter->status = 0;             /* big-endian */
 
151
                        } else {
 
152
                                filter->status = 0x100;         /* little-endian */
 
153
                        }
 
154
                        CK((*filter->output_function)(0xfeff, filter->data));
 
155
                } else if (n >= 0xd800 && n < 0xdc00) {
 
156
                        filter->cache = ((n & 0x3ff) << 16) + 0x400000;
 
157
                } else if (n >= 0xdc00 && n < 0xe000) {
 
158
                        n &= 0x3ff;
 
159
                        n |= (filter->cache & 0xfff0000) >> 6;
 
160
                        filter->cache = 0;
 
161
                        if (n >= MBFL_WCSPLANE_SUPMIN && n < MBFL_WCSPLANE_SUPMAX) {
 
162
                                CK((*filter->output_function)(n, filter->data));
 
163
                        } else {                /* illegal character */
 
164
                                n &= MBFL_WCSGROUP_MASK;
 
165
                                n |= MBFL_WCSGROUP_THROUGH;
 
166
                                CK((*filter->output_function)(n, filter->data));
 
167
                        }
 
168
                } else {
 
169
                        filter->cache = 0;
 
170
                        CK((*filter->output_function)(n, filter->data));
 
171
                }
 
172
                break;
 
173
        }
 
174
 
 
175
        return c;
 
176
}
 
177
 
 
178
/*
 
179
 * UTF-16BE => wchar
 
180
 */
 
181
int mbfl_filt_conv_utf16be_wchar(int c, mbfl_convert_filter *filter)
 
182
{
 
183
        int n;
 
184
 
 
185
        switch (filter->status) {
 
186
        case 0:
 
187
                filter->status = 1;
 
188
                n = (c & 0xff) << 8;
 
189
                filter->cache |= n;
 
190
                break;
 
191
        default:
 
192
                filter->status = 0;
 
193
                n = (filter->cache & 0xff00) | (c & 0xff);
 
194
                if (n >= 0xd800 && n < 0xdc00) {
 
195
                        filter->cache = ((n & 0x3ff) << 16) + 0x400000;
 
196
                } else if (n >= 0xdc00 && n < 0xe000) {
 
197
                        n &= 0x3ff;
 
198
                        n |= (filter->cache & 0xfff0000) >> 6;
 
199
                        filter->cache = 0;
 
200
                        if (n >= MBFL_WCSPLANE_SUPMIN && n < MBFL_WCSPLANE_SUPMAX) {
 
201
                                CK((*filter->output_function)(n, filter->data));
 
202
                        } else {                /* illegal character */
 
203
                                n &= MBFL_WCSGROUP_MASK;
 
204
                                n |= MBFL_WCSGROUP_THROUGH;
 
205
                                CK((*filter->output_function)(n, filter->data));
 
206
                        }
 
207
                } else {
 
208
                        filter->cache = 0;
 
209
                        CK((*filter->output_function)(n, filter->data));
 
210
                }
 
211
                break;
 
212
        }
 
213
 
 
214
        return c;
 
215
}
 
216
 
 
217
/*
 
218
 * wchar => UTF-16BE
 
219
 */
 
220
int mbfl_filt_conv_wchar_utf16be(int c, mbfl_convert_filter *filter)
 
221
{
 
222
        int n;
 
223
 
 
224
        if (c >= 0 && c < MBFL_WCSPLANE_UCS2MAX) {
 
225
                CK((*filter->output_function)((c >> 8) & 0xff, filter->data));
 
226
                CK((*filter->output_function)(c & 0xff, filter->data));
 
227
        } else if (c >= MBFL_WCSPLANE_SUPMIN && c < MBFL_WCSPLANE_SUPMAX) {
 
228
                n = ((c >> 10) - 0x40) | 0xd800;
 
229
                CK((*filter->output_function)((n >> 8) & 0xff, filter->data));
 
230
                CK((*filter->output_function)(n & 0xff, filter->data));
 
231
                n = (c & 0x3ff) | 0xdc00;
 
232
                CK((*filter->output_function)((n >> 8) & 0xff, filter->data));
 
233
                CK((*filter->output_function)(n & 0xff, filter->data));
 
234
        } else {
 
235
                if (filter->illegal_mode != MBFL_OUTPUTFILTER_ILLEGAL_MODE_NONE) {
 
236
                        CK(mbfl_filt_conv_illegal_output(c, filter));
 
237
                }
 
238
        }
 
239
 
 
240
        return c;
 
241
}
 
242
 
 
243
/*
 
244
 * UTF-16LE => wchar
 
245
 */
 
246
int mbfl_filt_conv_utf16le_wchar(int c, mbfl_convert_filter *filter)
 
247
{
 
248
        int n;
 
249
 
 
250
        switch (filter->status) {
 
251
        case 0:
 
252
                filter->status = 1;
 
253
                n = c & 0xff;
 
254
                filter->cache |= n;
 
255
                break;
 
256
        default:
 
257
                filter->status = 0;
 
258
                n = (filter->cache & 0xff) | ((c & 0xff) << 8);
 
259
                if (n >= 0xd800 && n < 0xdc00) {
 
260
                        filter->cache = ((n & 0x3ff) << 16) + 0x400000;
 
261
                } else if (n >= 0xdc00 && n < 0xe000) {
 
262
                        n &= 0x3ff;
 
263
                        n |= (filter->cache & 0xfff0000) >> 6;
 
264
                        filter->cache = 0;
 
265
                        if (n >= MBFL_WCSPLANE_SUPMIN && n < MBFL_WCSPLANE_SUPMAX) {
 
266
                                CK((*filter->output_function)(n, filter->data));
 
267
                        } else {                /* illegal character */
 
268
                                n &= MBFL_WCSGROUP_MASK;
 
269
                                n |= MBFL_WCSGROUP_THROUGH;
 
270
                                CK((*filter->output_function)(n, filter->data));
 
271
                        }
 
272
                } else {
 
273
                        filter->cache = 0;
 
274
                        CK((*filter->output_function)(n, filter->data));
 
275
                }
 
276
                break;
 
277
        }
 
278
 
 
279
        return c;
 
280
}
 
281
 
 
282
/*
 
283
 * wchar => UTF-16LE
 
284
 */
 
285
int mbfl_filt_conv_wchar_utf16le(int c, mbfl_convert_filter *filter)
 
286
{
 
287
        int n;
 
288
 
 
289
        if (c >= 0 && c < MBFL_WCSPLANE_UCS2MAX) {
 
290
                CK((*filter->output_function)(c & 0xff, filter->data));
 
291
                CK((*filter->output_function)((c >> 8) & 0xff, filter->data));
 
292
        } else if (c >= MBFL_WCSPLANE_SUPMIN && c < MBFL_WCSPLANE_SUPMAX) {
 
293
                n = ((c >> 10) - 0x40) | 0xd800;
 
294
                CK((*filter->output_function)(n & 0xff, filter->data));
 
295
                CK((*filter->output_function)((n >> 8) & 0xff, filter->data));
 
296
                n = (c & 0x3ff) | 0xdc00;
 
297
                CK((*filter->output_function)(n & 0xff, filter->data));
 
298
                CK((*filter->output_function)((n >> 8) & 0xff, filter->data));
 
299
        } else {
 
300
                if (filter->illegal_mode != MBFL_OUTPUTFILTER_ILLEGAL_MODE_NONE) {
 
301
                        CK(mbfl_filt_conv_illegal_output(c, filter));
 
302
                }
 
303
        }
 
304
 
 
305
        return c;
 
306
}
 
307
 
 
308
 
 
309