1 /*
2 * Copyright (c) 2003, 2010, Oracle and/or its affiliates. All rights reserved.
3 * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
4 *
5 * This code is free software; you can redistribute it and/or modify it
6 * under the terms of the GNU General Public License version 2 only, as
7 * published by the Free Software Foundation. Oracle designates this
8 * particular file as subject to the "Classpath" exception as provided
9 * by Oracle in the LICENSE file that accompanied this code.
10 *
11 * This code is distributed in the hope that it will be useful, but WITHOUT
12 * ANY WARRANTY; without even the implied warranty of MERCHANTABILITY or
13 * FITNESS FOR A PARTICULAR PURPOSE. See the GNU General Public License
14 * version 2 for more details (a copy is included in the LICENSE file that
15 * accompanied this code).
16 *
17 * You should have received a copy of the GNU General Public License version
18 * 2 along with this work; if not, write to the Free Software Foundation,
19 * Inc., 51 Franklin St, Fifth Floor, Boston, MA 02110-1301 USA.
20 *
21 * Please contact Oracle, 500 Oracle Parkway, Redwood Shores, CA 94065 USA
22 * or visit www.oracle.com if you need additional information or have any
23 * questions.
24 */
25
26 package sun.nio.cs.ext;
27
28 import java.nio.ByteBuffer;
29 import java.nio.CharBuffer;
30 import java.nio.charset.Charset;
31 import java.nio.charset.CharsetDecoder;
32 import java.nio.charset.CharsetEncoder;
33 import java.nio.charset.CoderResult;
34 import java.nio.charset.CharacterCodingException;
35 import java.nio.charset.MalformedInputException;
36 import sun.nio.cs.HistoricallyNamedCharset;
37 import java.security.AccessController;
38 import java.security.PrivilegedAction;
39 import static java.lang.Character.UnicodeBlock;
40
41
42 public class JISAutoDetect
43 extends Charset
44 implements HistoricallyNamedCharset
45 {
46
47 private final static int EUCJP_MASK = 0x01;
48 private final static int SJIS2B_MASK = 0x02;
49 private final static int SJIS1B_MASK = 0x04;
50 private final static int EUCJP_KANA1_MASK = 0x08;
51 private final static int EUCJP_KANA2_MASK = 0x10;
52
53 public JISAutoDetect() {
54 super("x-JISAutoDetect", ExtendedCharsets.aliasesFor("x-JISAutoDetect"));
55 }
56
57 public boolean contains(Charset cs) {
58 return ((cs.name().equals("US-ASCII"))
59 || (cs instanceof SJIS)
60 || (cs instanceof EUC_JP)
61 || (cs instanceof ISO2022_JP));
62 }
63
64 public boolean canEncode() {
65 return false;
66 }
67
68 public CharsetDecoder newDecoder() {
69 return new Decoder(this);
70 }
71
72 public String historicalName() {
73 return "JISAutoDetect";
74 }
75
76 public CharsetEncoder newEncoder() {
77 throw new UnsupportedOperationException();
78 }
79
80 /**
81 * accessor methods used to share byte masking tables
82 * with the sun.io JISAutoDetect implementation
83 */
84
85 public static byte[] getByteMask1() {
86 return Decoder.maskTable1;
87 }
88
89 public static byte[] getByteMask2() {
90 return Decoder.maskTable2;
91 }
92
93 public final static boolean canBeSJIS1B(int mask) {
94 return (mask & SJIS1B_MASK) != 0;
95 }
96
97 public final static boolean canBeEUCJP(int mask) {
98 return (mask & EUCJP_MASK) != 0;
99 }
100
101 public final static boolean canBeEUCKana(int mask1, int mask2) {
102 return ((mask1 & EUCJP_KANA1_MASK) != 0)
103 && ((mask2 & EUCJP_KANA2_MASK) != 0);
104 }
105
106 // A heuristic algorithm for guessing if EUC-decoded text really
107 // might be Japanese text. Better heuristics are possible...
108 private static boolean looksLikeJapanese(CharBuffer cb) {
109 int hiragana = 0; // Fullwidth Hiragana
110 int katakana = 0; // Halfwidth Katakana
111 while (cb.hasRemaining()) {
112 char c = cb.get();
113 if (0x3040 <= c && c <= 0x309f && ++hiragana > 1) return true;
114 if (0xff65 <= c && c <= 0xff9f && ++katakana > 1) return true;
115 }
116 return false;
117 }
118
119 private static class Decoder extends CharsetDecoder {
120 private final static String osName = AccessController.doPrivileged(
121 (PrivilegedAction<String>) () -> System.getProperty("os.name"));
122
123 private final static String SJISName = getSJISName();
124 private final static String EUCJPName = getEUCJPName();
125 private DelegatableDecoder detectedDecoder = null;
126
127 public Decoder(Charset cs) {
128 super(cs, 0.5f, 1.0f);
129 }
130
131 private static boolean isPlainASCII(byte b) {
132 return b >= 0 && b != 0x1b;
133 }
134
135 private static void copyLeadingASCII(ByteBuffer src, CharBuffer dst) {
136 int start = src.position();
137 int limit = start + Math.min(src.remaining(), dst.remaining());
138 int p;
139 byte b;
140 for (p = start; p < limit && isPlainASCII(b = src.get(p)); p++)
141 dst.put((char)(b & 0xff));
142 src.position(p);
143 }
144
145 private CoderResult decodeLoop(Charset cs,
146 ByteBuffer src, CharBuffer dst) {
147 detectedDecoder = (DelegatableDecoder) cs.newDecoder();
148 return detectedDecoder.decodeLoop(src, dst);
149 }
150
151 protected CoderResult decodeLoop(ByteBuffer src, CharBuffer dst) {
152 if (detectedDecoder == null) {
153 copyLeadingASCII(src, dst);
154
155 // All ASCII?
156 if (! src.hasRemaining())
157 return CoderResult.UNDERFLOW;
158 if (! dst.hasRemaining())
159 return CoderResult.OVERFLOW;
160
161 // We need to perform double, not float, arithmetic; otherwise
162 // we lose low order bits when src is larger than 2**24.
163 int cbufsiz = (int)(src.limit() * (double)maxCharsPerByte());
164 CharBuffer sandbox = CharBuffer.allocate(cbufsiz);
165
166 // First try ISO-2022-JP, since there is no ambiguity
167 Charset cs2022 = Charset.forName("ISO-2022-JP");
168 DelegatableDecoder dd2022
169 = (DelegatableDecoder) cs2022.newDecoder();
170 ByteBuffer src2022 = src.asReadOnlyBuffer();
171 CoderResult res2022 = dd2022.decodeLoop(src2022, sandbox);
172 if (! res2022.isError())
173 return decodeLoop(cs2022, src, dst);
174
175 // We must choose between EUC and SJIS
176 Charset csEUCJ = Charset.forName(EUCJPName);
177 Charset csSJIS = Charset.forName(SJISName);
178
179 DelegatableDecoder ddEUCJ
180 = (DelegatableDecoder) csEUCJ.newDecoder();
181 ByteBuffer srcEUCJ = src.asReadOnlyBuffer();
182 sandbox.clear();
183 CoderResult resEUCJ = ddEUCJ.decodeLoop(srcEUCJ, sandbox);
184 // If EUC decoding fails, must be SJIS
185 if (resEUCJ.isError())
186 return decodeLoop(csSJIS, src, dst);
187
188 DelegatableDecoder ddSJIS
189 = (DelegatableDecoder) csSJIS.newDecoder();
190 ByteBuffer srcSJIS = src.asReadOnlyBuffer();
191 CharBuffer sandboxSJIS = CharBuffer.allocate(cbufsiz);
192 CoderResult resSJIS = ddSJIS.decodeLoop(srcSJIS, sandboxSJIS);
193 // If SJIS decoding fails, must be EUC
194 if (resSJIS.isError())
195 return decodeLoop(csEUCJ, src, dst);
196
197 // From here on, we have some ambiguity, and must guess.
198
199 // We prefer input that does not appear to end mid-character.
200 if (srcEUCJ.position() > srcSJIS.position())
201 return decodeLoop(csEUCJ, src, dst);
202
203 if (srcEUCJ.position() < srcSJIS.position())
204 return decodeLoop(csSJIS, src, dst);
205
206 // end-of-input is after the first byte of the first char?
207 if (src.position() == srcEUCJ.position())
208 return CoderResult.UNDERFLOW;
209
210 // Use heuristic knowledge of typical Japanese text
211 sandbox.flip();
212 Charset guess = looksLikeJapanese(sandbox) ? csEUCJ : csSJIS;
213 return decodeLoop(guess, src, dst);
214 }
215
216 return detectedDecoder.decodeLoop(src, dst);
217 }
218
219 protected void implReset() {
220 detectedDecoder = null;
221 }
222
223 protected CoderResult implFlush(CharBuffer out) {
224 if (detectedDecoder != null)
225 return detectedDecoder.implFlush(out);
226 else
227 return super.implFlush(out);
228 }
229
230 public boolean isAutoDetecting() {
231 return true;
232 }
233
234 public boolean isCharsetDetected() {
235 return detectedDecoder != null;
236 }
237
238 public Charset detectedCharset() {
239 if (detectedDecoder == null)
240 throw new IllegalStateException("charset not yet detected");
241 return ((CharsetDecoder) detectedDecoder).charset();
242 }
243
244
245 /**
246 * Returned Shift_JIS Charset name is OS dependent
247 */
248 private static String getSJISName() {
249 if (osName.equals("Solaris") || osName.equals("SunOS"))
250 return("PCK");
251 else if (osName.startsWith("Windows"))
252 return("windows-31J");
253 else
254 return("Shift_JIS");
255 }
256
257 /**
258 * Returned EUC-JP Charset name is OS dependent
259 */
260
261 private static String getEUCJPName() {
262 if (osName.equals("Solaris") || osName.equals("SunOS"))
263 return("x-eucjp-open");
264 else
265 return("EUC_JP");
266 }
267
268 // Mask tables - each entry indicates possibility of first or
269 // second byte being SJIS or EUC_JP
270 private static final byte maskTable1[] = {
271 0, 0, 0, 0, // 0x00 - 0x03
272 0, 0, 0, 0, // 0x04 - 0x07
273 0, 0, 0, 0, // 0x08 - 0x0b
274 0, 0, 0, 0, // 0x0c - 0x0f
275 0, 0, 0, 0, // 0x10 - 0x13
276 0, 0, 0, 0, // 0x14 - 0x17
277 0, 0, 0, 0, // 0x18 - 0x1b
278 0, 0, 0, 0, // 0x1c - 0x1f
279 0, 0, 0, 0, // 0x20 - 0x23
280 0, 0, 0, 0, // 0x24 - 0x27
281 0, 0, 0, 0, // 0x28 - 0x2b
282 0, 0, 0, 0, // 0x2c - 0x2f
283 0, 0, 0, 0, // 0x30 - 0x33
284 0, 0, 0, 0, // 0x34 - 0x37
285 0, 0, 0, 0, // 0x38 - 0x3b
286 0, 0, 0, 0, // 0x3c - 0x3f
287 0, 0, 0, 0, // 0x40 - 0x43
288 0, 0, 0, 0, // 0x44 - 0x47
289 0, 0, 0, 0, // 0x48 - 0x4b
290 0, 0, 0, 0, // 0x4c - 0x4f
291 0, 0, 0, 0, // 0x50 - 0x53
292 0, 0, 0, 0, // 0x54 - 0x57
293 0, 0, 0, 0, // 0x58 - 0x5b
294 0, 0, 0, 0, // 0x5c - 0x5f
295 0, 0, 0, 0, // 0x60 - 0x63
296 0, 0, 0, 0, // 0x64 - 0x67
297 0, 0, 0, 0, // 0x68 - 0x6b
298 0, 0, 0, 0, // 0x6c - 0x6f
299 0, 0, 0, 0, // 0x70 - 0x73
300 0, 0, 0, 0, // 0x74 - 0x77
301 0, 0, 0, 0, // 0x78 - 0x7b
302 0, 0, 0, 0, // 0x7c - 0x7f
303 0, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x80 - 0x83
304 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x84 - 0x87
305 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x88 - 0x8b
306 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, // 0x8c - 0x8f
307 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x90 - 0x93
308 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x94 - 0x97
309 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x98 - 0x9b
310 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x9c - 0x9f
311 0, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xa0 - 0xa3
312 SJIS1B_MASK|EUCJP_MASK|EUCJP_KANA1_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xa4 - 0xa7
313 SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xa8 - 0xab
314 SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xac - 0xaf
315 SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xb0 - 0xb3
316 SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xb4 - 0xb7
317 SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xb8 - 0xbb
318 SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xbc - 0xbf
319 SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xc0 - 0xc3
320 SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xc4 - 0xc7
321 SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xc8 - 0xcb
322 SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xcc - 0xcf
323 SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xd0 - 0xd3
324 SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xd4 - 0xd7
325 SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xd8 - 0xdb
326 SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, SJIS1B_MASK|EUCJP_MASK, // 0xdc - 0xdf
327 SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, // 0xe0 - 0xe3
328 SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, // 0xe4 - 0xe7
329 SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, // 0xe8 - 0xeb
330 SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, // 0xec - 0xef
331 SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, // 0xf0 - 0xf3
332 SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, // 0xf4 - 0xf7
333 SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, // 0xf8 - 0xfb
334 SJIS2B_MASK|EUCJP_MASK, EUCJP_MASK, EUCJP_MASK, 0 // 0xfc - 0xff
335 };
336
337 private static final byte maskTable2[] = {
338 0, 0, 0, 0, // 0x00 - 0x03
339 0, 0, 0, 0, // 0x04 - 0x07
340 0, 0, 0, 0, // 0x08 - 0x0b
341 0, 0, 0, 0, // 0x0c - 0x0f
342 0, 0, 0, 0, // 0x10 - 0x13
343 0, 0, 0, 0, // 0x14 - 0x17
344 0, 0, 0, 0, // 0x18 - 0x1b
345 0, 0, 0, 0, // 0x1c - 0x1f
346 0, 0, 0, 0, // 0x20 - 0x23
347 0, 0, 0, 0, // 0x24 - 0x27
348 0, 0, 0, 0, // 0x28 - 0x2b
349 0, 0, 0, 0, // 0x2c - 0x2f
350 0, 0, 0, 0, // 0x30 - 0x33
351 0, 0, 0, 0, // 0x34 - 0x37
352 0, 0, 0, 0, // 0x38 - 0x3b
353 0, 0, 0, 0, // 0x3c - 0x3f
354 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x40 - 0x43
355 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x44 - 0x47
356 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x48 - 0x4b
357 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x4c - 0x4f
358 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x50 - 0x53
359 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x54 - 0x57
360 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x58 - 0x5b
361 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x5c - 0x5f
362 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x60 - 0x63
363 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x64 - 0x67
364 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x68 - 0x6b
365 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x6c - 0x6f
366 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x70 - 0x73
367 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x74 - 0x77
368 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x78 - 0x7b
369 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, 0, // 0x7c - 0x7f
370 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x80 - 0x83
371 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x84 - 0x87
372 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x88 - 0x8b
373 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x8c - 0x8f
374 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x90 - 0x93
375 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x94 - 0x97
376 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x98 - 0x9b
377 SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, SJIS2B_MASK, // 0x9c - 0x9f
378 SJIS2B_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xa0 - 0xa3
379 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xa4 - 0xa7
380 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xa8 - 0xab
381 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xac - 0xaf
382 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xb0 - 0xb3
383 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xb4 - 0xb7
384 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xb8 - 0xbb
385 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xbc - 0xbf
386 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xc0 - 0xc3
387 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xc4 - 0xc7
388 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xc8 - 0xcb
389 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xcc - 0xcf
390 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xd0 - 0xd3
391 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xd4 - 0xd7
392 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xd8 - 0xdb
393 SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS1B_MASK|SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xdc - 0xdf
394 SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xe0 - 0xe3
395 SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xe4 - 0xe7
396 SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xe8 - 0xeb
397 SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xec - 0xef
398 SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, SJIS2B_MASK|EUCJP_MASK|EUCJP_KANA2_MASK, // 0xf0 - 0xf3
399 SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, // 0xf4 - 0xf7
400 SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, SJIS2B_MASK|EUCJP_MASK, // 0xf8 - 0xfb
401 SJIS2B_MASK|EUCJP_MASK, EUCJP_MASK, EUCJP_MASK, 0 // 0xfc - 0xff
402 };
403 }
404 }