source: icGREP/icgrep-devel/icgrep/UCD/ucd_compiler.cpp @ 5798

Last change on this file since 5798 was 5798, checked in by cameron, 13 months ago

Use Alphabet=Byte in to_utf8, u8u32, UCD compiler

File size: 24.0 KB
Line 
1#include "ucd_compiler.hpp"
2#include <cc/alphabet.h>
3#include <cc/cc_compiler.h>
4#include <UCD/unicode_set.h>
5#include <re/re_name.h>
6#include <re/re_cc.h>
7#include <utf8_encoder.h>
8#include <utf16_encoder.h>
9#include <array>
10#include <pablo/pe_var.h>
11#include <pablo/pe_zeroes.h>
12#include <pablo/pe_ones.h>
13#include <pablo/printer_pablos.h>
14#include <llvm/Support/ErrorHandling.h>
15#include <llvm/Support/raw_ostream.h>
16
17using namespace cc;
18using namespace re;
19using namespace pablo;
20using namespace llvm;
21using namespace boost::container;
22
23namespace UCD {
24
25/** ------------------------------------------------------------------------------------------------------------- *
26 * @brief UTF_16 UTF_8
27 ** ------------------------------------------------------------------------------------------------------------- */
28inline codepoint_t encodingByte(const codepoint_t cp, const unsigned n, bool UTF_16) {
29    return UTF_16 ? UTF16_Encoder::encodingByte(cp, n) : UTF8_Encoder::encodingByte(cp, n);
30}
31
32inline unsigned length(const codepoint_t cp, bool UTF_16) {
33    return UTF_16 ? UTF16_Encoder::length(cp) : UTF8_Encoder::length(cp);
34}
35
36inline codepoint_t maxCodePoint(const unsigned length, bool UTF_16) {
37    return UTF_16 ?  UTF16_Encoder::maxCodePoint(length) : UTF8_Encoder::maxCodePoint(length);
38}
39
40inline bool isLowCodePointAfterByte(const codepoint_t cp, const unsigned n, bool UTF_16) {
41    return UTF_16 ? UTF16_Encoder::isLowCodePointAfterByte(cp, n) : UTF8_Encoder::isLowCodePointAfterByte(cp, n);
42}
43inline bool isHighCodePointAfterByte(const codepoint_t cp, const unsigned n, bool UTF_16) {
44    return UTF_16 ? UTF16_Encoder::isHighCodePointAfterByte(cp, n) : UTF8_Encoder::isHighCodePointAfterByte(cp, n);
45}
46inline codepoint_t minCodePointWithCommonBytes(const re::codepoint_t cp, const unsigned n, bool UTF_16) {
47    return UTF_16 ? UTF16_Encoder::minCodePointWithCommonBytes(cp, n) : UTF8_Encoder::minCodePointWithCommonBytes(cp, n);
48}
49inline codepoint_t maxCodePointWithCommonBytes(const re::codepoint_t cp, const unsigned n, bool UTF_16) {
50    return UTF_16 ? UTF16_Encoder::maxCodePointWithCommonBytes(cp, n) : UTF8_Encoder::maxCodePointWithCommonBytes(cp, n);
51}
52
53const UCDCompiler::RangeList UCDCompiler::defaultIfHierachy = {
54    // Non-ASCII
55    {0x80, 0x10FFFF},
56    // Two-byte sequences
57    {0x80, 0x7FF},
58    {0x100, 0x3FF},
59    // 0100..017F; Latin Extended-A
60    // 0180..024F; Latin Extended-B
61    // 0250..02AF; IPA Extensions
62    // 02B0..02FF; Spacing Modifier Letters
63    {0x100, 0x2FF}, {0x100, 0x24F}, {0x100, 0x17F}, {0x180, 0x24F}, {0x250, 0x2AF}, {0x2B0, 0x2FF},
64    // 0300..036F; Combining Diacritical Marks
65    // 0370..03FF; Greek and Coptic
66    {0x300, 0x36F}, {0x370, 0x3FF},
67    // 0400..04FF; Cyrillic
68    // 0500..052F; Cyrillic Supplement
69    // 0530..058F; Armenian
70    // 0590..05FF; Hebrew
71    // 0600..06FF; Arabic
72    {0x400, 0x5FF}, {0x400, 0x4FF}, {0x500, 0x058F}, {0x500, 0x52F}, {0x530, 0x58F}, {0x590, 0x5FF}, {0x600, 0x6FF},
73    // 0700..074F; Syriac
74    // 0750..077F; Arabic Supplement
75    // 0780..07BF; Thaana
76    // 07C0..07FF; NKo
77    {0x700, 0x77F}, {0x700, 0x74F}, {0x750, 0x77F}, {0x780, 0x7FF}, {0x780, 0x7BF}, {0x7C0, 0x7FF},
78    // Three-byte sequences
79    {0x800, 0xFFFF}, {0x800, 0x4DFF}, {0x800, 0x1FFF}, {0x800, 0x0FFF},
80    // 0800..083F; Samaritan
81    // 0840..085F; Mandaic
82    // 08A0..08FF; Arabic Extended-A
83    // 0900..097F; Devanagari
84    // 0980..09FF; Bengali
85    // 0A00..0A7F; Gurmukhi
86    // 0A80..0AFF; Gujarati
87    // 0B00..0B7F; Oriya
88    // 0B80..0BFF; Tamil
89    // 0C00..0C7F; Telugu
90    // 0C80..0CFF; Kannada
91    // 0D00..0D7F; Malayalam
92    // 0D80..0DFF; Sinhala
93    // 0E00..0E7F; Thai
94    // 0E80..0EFF; Lao
95    // 0F00..0FFF; Tibetan
96    {0x1000, 0x1FFF},
97    // 1000..109F; Myanmar
98    // 10A0..10FF; Georgian
99    // 1100..11FF; Hangul Jamo
100    // 1200..137F; Ethiopic
101    // 1380..139F; Ethiopic Supplement
102    // 13A0..13FF; Cherokee
103    // 1400..167F; Unified Canadian Aboriginal Syllabics
104    // 1680..169F; Ogham
105    // 16A0..16FF; Runic
106    // 1700..171F; Tagalog
107    // 1720..173F; Hanunoo
108    // 1740..175F; Buhid
109    // 1760..177F; Tagbanwa
110    // 1780..17FF; Khmer
111    // 1800..18AF; Mongolian
112    // 18B0..18FF; Unified Canadian Aboriginal Syllabics Extended
113    // 1900..194F; Limbu
114    // 1950..197F; Tai Le
115    // 1980..19DF; New Tai Lue
116    // 19E0..19FF; Khmer Symbols
117    // 1A00..1A1F; Buginese
118    // 1A20..1AAF; Tai Tham
119    // 1AB0..1AFF; Combining Diacritical Marks Extended
120    // 1B00..1B7F; Balinese
121    // 1B80..1BBF; Sundanese
122    // 1BC0..1BFF; Batak
123    // 1C00..1C4F; Lepcha
124    // 1C50..1C7F; Ol Chiki
125    // 1CC0..1CCF; Sundanese Supplement
126    // 1CD0..1CFF; Vedic Extensions
127    // 1D00..1D7F; Phonetic Extensions
128    // 1D80..1DBF; Phonetic Extensions Supplement
129    // 1DC0..1DFF; Combining Diacritical Marks Supplement
130    // 1E00..1EFF; Latin Extended Additional
131    // 1F00..1FFF; Greek Extended
132    {0x2000, 0x4DFF}, {0x2000, 0x2FFF},
133    {0x3000, 0x4DFF},
134    {0x4E00, 0x9FFF},
135    // 4E00..9FFF; CJK Unified Ideographs
136    {0xA000, 0xFFFF},
137
138    {0x10000, 0x10FFFF}};
139
140const UCDCompiler::RangeList UCDCompiler::noIfHierachy = {{0x80, 0x10FFFF}};
141
142/** ------------------------------------------------------------------------------------------------------------- *
143 * @brief generateRange
144 ** ------------------------------------------------------------------------------------------------------------- */
145void UCDCompiler::generateRange(const RangeList & ifRanges, PabloBuilder & entry) {
146    // Pregenerate the suffix var outside of the if ranges. The DCE pass will either eliminate it if it's not used or the
147    // code sinking pass will move appropriately into an inner if block.
148    CC *  suffix = makeByte(0x80, 0xBF);
149    assert (!suffix->empty());
150    mSuffixVar = mCharacterClassCompiler.compileCC(suffix, entry);
151    generateRange(ifRanges, 0, UNICODE_MAX, entry);
152}
153
154/** ------------------------------------------------------------------------------------------------------------- *
155 * @brief generateRange
156 * @param ifRangeList
157 ** ------------------------------------------------------------------------------------------------------------- */
158void UCDCompiler::generateRange(const RangeList & ifRanges, const codepoint_t lo, const codepoint_t hi, PabloBuilder & builder) {
159
160    // Codepoints in unenclosed ranges will be computed unconditionally.
161    // Generate them first so that computed subexpressions may be shared
162    // with calculations within the if hierarchy.
163    const auto enclosed = rangeIntersect(ifRanges, lo, hi);
164    for (const auto rg : rangeGaps(enclosed, lo, hi)) {
165        generateSubRanges(lo_codepoint(rg), hi_codepoint(rg), builder);
166    }
167
168    for (auto & f : mTargetValue) {
169        const auto v = mTarget.find(f.first);
170        assert (v != mTarget.end());
171        PabloAST * value = f.second;
172        if (!isa<Zeroes>(value)) {
173            if (LLVM_LIKELY(builder.getParent() != nullptr)) {
174                value = builder.createOr(v->second, value);
175            }
176            builder.createAssign(v->second, value);
177            f.second = builder.createZeroes();
178        }
179    }
180
181    const auto outer = outerRanges(enclosed);
182    const auto inner = innerRanges(enclosed);
183
184    Values nonIntersectingTargets;
185
186    for (const auto range : outer) {
187
188        // Split our current target list into two sets: the intersecting and non-intersecting ones. Any non-
189        // intersecting set will be removed from the current map to eliminate the possibility of it being
190        // considered until after we leave the current range. The intersecting sets are also stored to ensure
191        // that we know what the original target value was going into this range block so tha we can OR the
192        // inner value with the outer value.
193
194        for (auto f = mTargetValue.begin(); f != mTargetValue.end(); ) {
195            if (f->first->intersects(range.first, range.second)) {
196                ++f;
197            } else {
198                nonIntersectingTargets.push_back(*f);
199                f = mTargetValue.erase(f);
200            }
201        }
202        if (mTargetValue.size() > 0) {
203            PabloBuilder inner_block = PabloBuilder::Create(builder);
204            builder.createIf(ifTestCompiler(range.first, range.second, builder), inner_block);
205            generateRange(inner, range.first, range.second, inner_block);
206        }
207        for (auto t : nonIntersectingTargets) {
208            mTargetValue.insert(t);
209        }
210        nonIntersectingTargets.clear();
211    }
212}
213
214/** ------------------------------------------------------------------------------------------------------------- *
215 * @brief generateSubRanges
216 ** ------------------------------------------------------------------------------------------------------------- */
217void UCDCompiler::generateSubRanges(const codepoint_t lo, const codepoint_t hi, PabloBuilder & builder) {
218    for (auto & t : mTargetValue) {
219        const auto range = rangeIntersect(*t.first, lo, hi);
220        PabloAST * target = t.second;
221        // Divide by UTF-8 length, separating out E0, ED, F0 and F4 ranges
222        const std::array<interval_t, 9> ranges =
223            {{{0, 0x7F}, {0x80, 0x7FF}, {0x800, 0xFFF}, {0x1000, 0xD7FF}, {0xD800, 0xDFFF},
224             {0xE000, 0xFFFF}, {0x10000, 0x3FFFF}, {0x40000, 0xFFFFF}, {0x100000, 0x10FFFF}}};
225        for (auto r : ranges) {
226            const auto subrange = rangeIntersect(range, lo_codepoint(r), hi_codepoint(r));
227            target = sequenceGenerator(std::move(subrange), 1, builder, target, nullptr);
228        }
229        t.second = target;
230    }
231}
232
233/** ------------------------------------------------------------------------------------------------------------- *
234 * @brief sequenceGenerator
235 * @param ifRangeList
236 *
237 *
238 * Generate remaining code to match UTF-8 code sequences within the codepoint set cpset, assuming that the code
239 * matching the sequences up to byte number byte_no have been generated.
240 ** ------------------------------------------------------------------------------------------------------------- */
241PabloAST * UCDCompiler::sequenceGenerator(const RangeList && ranges, const unsigned byte_no, PabloBuilder & builder, PabloAST * target, PabloAST * prefix) {
242        bool isUTF_16 = mCharacterClassCompiler.isUTF_16();
243
244    if (LLVM_LIKELY(ranges.size() > 0)) {
245
246        codepoint_t lo, hi;
247        std::tie(lo, hi) = ranges[0];
248
249        const auto min = length(lo_codepoint(ranges.front()), isUTF_16);
250        const auto max = length(hi_codepoint(ranges.back()), isUTF_16);
251
252        if (min != max) {
253            const auto mid = maxCodePoint(min, isUTF_16);
254            target = sequenceGenerator(std::move(rangeIntersect(ranges, lo, mid)), byte_no, builder, target, prefix);
255            target = sequenceGenerator(std::move(rangeIntersect(ranges, mid + 1, hi)), byte_no, builder, target, prefix);
256        } else if (min == byte_no) {
257            // We have a single byte remaining to match for all code points in this CC.
258            // Use the byte class compiler to generate matches for these codepoints.
259            PabloAST * var = mCharacterClassCompiler.compileCC(makeCC(byteDefinitions(ranges, byte_no, isUTF_16), &Byte), builder);
260            if (byte_no > 1) {
261                var = builder.createAnd(var, builder.createAdvance(makePrefix(lo, byte_no, builder, prefix), 1));
262            }
263            target = builder.createOr(target, var);
264        } else {
265            for (auto rg : ranges) {
266                codepoint_t lo, hi;
267                std::tie(lo, hi) = rg;
268                const auto lo_byte = encodingByte(lo, byte_no, isUTF_16);
269                const auto hi_byte = encodingByte(hi, byte_no, isUTF_16);
270                if (lo_byte != hi_byte) {
271                    unsigned num = isUTF_16 ? 10 : 6;
272                    if (!isLowCodePointAfterByte(lo, byte_no, isUTF_16)) {
273                        const codepoint_t mid = lo | ((1 << (num * (min - byte_no))) - 1);
274                        target = sequenceGenerator(lo, mid, byte_no, builder, target, prefix);
275                        target = sequenceGenerator(mid + 1, hi, byte_no, builder, target, prefix);
276                    } else if (!isHighCodePointAfterByte(hi, byte_no, isUTF_16)) {
277                        const codepoint_t mid = hi & ~((1 << (num * (min - byte_no))) - 1);
278                        target = sequenceGenerator(lo, mid - 1, byte_no, builder, target, prefix);
279                        target = sequenceGenerator(mid, hi, byte_no, builder, target, prefix);
280                    } else { // we have a prefix group of type (a)
281                        PabloAST * var = mCharacterClassCompiler.compileCC(makeByte(lo_byte, hi_byte), builder);
282                        if (byte_no > 1) {
283                            var = builder.createAnd(builder.createAdvance(prefix, 1), var);
284                        }
285                        for (unsigned i = byte_no; i != length(lo, isUTF_16); ++i) {
286                            var = builder.createAnd(mSuffixVar, builder.createAdvance(var, 1));
287                        }
288                        target = builder.createOr(target, var);
289                    }
290                } else { // lbyte == hbyte
291                    PabloAST * var = mCharacterClassCompiler.compileCC(makeByte(lo_byte, hi_byte), builder);
292                    if (byte_no > 1) {
293                        var = builder.createAnd(builder.createAdvance(prefix ? prefix : var, 1), var);
294                    }
295                    if (byte_no < length(lo, isUTF_16)) {
296                        target = sequenceGenerator(lo, hi, byte_no + 1, builder, target, var);
297                    }
298                }
299            }
300        }
301    }
302    return target;
303}
304
305/** ------------------------------------------------------------------------------------------------------------- *
306 * @brief sequenceGenerator
307 ** ------------------------------------------------------------------------------------------------------------- */
308inline PabloAST * UCDCompiler::sequenceGenerator(const codepoint_t lo, const codepoint_t hi, const unsigned byte_no, PabloBuilder & builder, PabloAST * target, PabloAST * prefix) {
309    return sequenceGenerator({{ lo, hi }}, byte_no, builder, target, prefix);
310}
311
312/** ------------------------------------------------------------------------------------------------------------- *
313 * @brief ifTestCompiler
314 ** ------------------------------------------------------------------------------------------------------------- */
315inline PabloAST * UCDCompiler::ifTestCompiler(const codepoint_t lo, const codepoint_t hi, PabloBuilder & builder) {
316    return ifTestCompiler(lo, hi, 1, builder, builder.createOnes());
317}
318
319/** ------------------------------------------------------------------------------------------------------------- *
320 * @brief ifTestCompiler
321 ** ------------------------------------------------------------------------------------------------------------- */
322PabloAST * UCDCompiler::ifTestCompiler(const codepoint_t lo, const codepoint_t hi, const unsigned byte_no, PabloBuilder & builder, PabloAST * target) {
323
324        bool isUTF_16 = mCharacterClassCompiler.isUTF_16();
325    codepoint_t lo_byte = encodingByte(lo, byte_no, isUTF_16);
326    codepoint_t hi_byte = encodingByte(hi, byte_no, isUTF_16);
327    const bool at_lo_boundary = (lo == 0 || encodingByte(lo - 1, byte_no, isUTF_16) != lo_byte);
328    const bool at_hi_boundary = (hi == 0x10FFFF || encodingByte(hi + 1, byte_no, isUTF_16) != hi_byte);
329
330    if (at_lo_boundary && at_hi_boundary) {
331        if (!isUTF_16) {
332            if (lo_byte != hi_byte) {
333                if (lo == 0x80) lo_byte = 0xC0;
334                if (hi == 0x10FFFF) hi_byte = 0xFF;
335            }
336        }
337        PabloAST * cc = mCharacterClassCompiler.compileCC(makeByte(lo_byte, hi_byte), builder);
338        target = builder.createAnd(cc, target);
339    } else if (lo_byte == hi_byte) {
340        PabloAST * cc = mCharacterClassCompiler.compileCC(makeByte(lo_byte, hi_byte), builder);
341        target = builder.createAnd(cc, target);
342        target = builder.createAdvance(target, 1);
343        target = ifTestCompiler(lo, hi, byte_no + 1, builder, target);
344    } else if (!at_hi_boundary) {
345        const auto mid = minCodePointWithCommonBytes(hi, byte_no, isUTF_16);
346        PabloAST * e1 = ifTestCompiler(lo, mid - 1, byte_no, builder, target);
347        PabloAST * e2 = ifTestCompiler(mid, hi, byte_no, builder, target);
348        target = builder.createOr(e1, e2);
349    } else {
350        const auto mid = maxCodePointWithCommonBytes(lo, byte_no, isUTF_16);
351        PabloAST * e1 = ifTestCompiler(lo, mid, byte_no, builder, target);
352        PabloAST * e2 = ifTestCompiler(mid + 1, hi, byte_no, builder, target);
353        target = builder.createOr(e1, e2);
354    }
355    return target;
356}
357
358/** ------------------------------------------------------------------------------------------------------------- *
359 * @brief definePrecedingPrefix
360 * @param ifRangeList
361 *
362 *
363 * Ensure the sequence of preceding bytes is defined, up to, but not including the given byte_no
364 ** ------------------------------------------------------------------------------------------------------------- */
365PabloAST * UCDCompiler::makePrefix(const codepoint_t cp, const unsigned byte_no, PabloBuilder & builder, PabloAST * prefix) {
366    assert (byte_no >= 1 && byte_no <= 4);
367    assert (byte_no == 1 || prefix != nullptr);
368    bool isUTF_16 = mCharacterClassCompiler.isUTF_16();
369    for (unsigned i = 1; i != byte_no; ++i) {
370        const CC * const cc = makeByte(encodingByte(cp, i, isUTF_16));
371        PabloAST * var = mCharacterClassCompiler.compileCC(cc, builder);
372        if (i > 1) {
373            var = builder.createAnd(var, builder.createAdvance(prefix, 1));
374        }
375        prefix = var;
376    }
377    return prefix;
378}
379
380/** ------------------------------------------------------------------------------------------------------------- *
381 * @brief definePrecedingPrefix
382 * @param ifRangeList
383 *
384 *
385 * Ensure the sequence of preceding bytes is defined, up to, but not including the given byte_no
386 ** ------------------------------------------------------------------------------------------------------------- */
387UCDCompiler::RangeList UCDCompiler::byteDefinitions(const RangeList & list, const unsigned byte_no, bool isUTF_16) {
388    RangeList result;
389    result.reserve(list.size());
390    for (const auto & i : list) {
391        result.emplace_back(encodingByte(lo_codepoint(i), byte_no, isUTF_16), encodingByte(hi_codepoint(i), byte_no, isUTF_16));
392    }
393    return result;
394}
395
396/** ------------------------------------------------------------------------------------------------------------- *
397 * @brief rangeIntersect
398 * @param list
399 * @param lo
400 * @param hi
401 ** ------------------------------------------------------------------------------------------------------------- */
402template <typename RangeListOrUnicodeSet>
403UCDCompiler::RangeList UCDCompiler::rangeIntersect(const RangeListOrUnicodeSet & list, const codepoint_t lo, const codepoint_t hi) {
404    RangeList result;
405    for (const auto i : list) {
406        if ((lo_codepoint(i) <= hi) && (hi_codepoint(i) >= lo)) {
407            result.emplace_back(std::max(lo, lo_codepoint(i)), std::min(hi, hi_codepoint(i)));
408        }
409    }
410    return result;
411}
412
413/** ------------------------------------------------------------------------------------------------------------- *
414 * @brief rangeGaps
415 * @param cc
416 * @param lo
417 * @param hi
418 ** ------------------------------------------------------------------------------------------------------------- */
419UCDCompiler::RangeList UCDCompiler::rangeGaps(const RangeList & list, const codepoint_t lo, const codepoint_t hi) {
420    RangeList gaps;
421    if (LLVM_LIKELY(lo < hi)) {
422        if (LLVM_UNLIKELY(list.empty())) {
423            gaps.emplace_back(lo, hi);
424        } else {
425            codepoint_t cp = lo;
426            for (const auto & i : list) {
427                if (hi_codepoint(i) < cp) {
428                    continue;
429                } else if (lo_codepoint(i) > cp) {
430                    gaps.emplace_back(cp, lo_codepoint(i) - 1);
431                } else if (hi_codepoint(i) >= hi) {
432                    continue;
433                }
434                cp = hi_codepoint(i) + 1;
435            }
436        }
437    }
438    return gaps;
439}
440
441/** ------------------------------------------------------------------------------------------------------------- *
442 * @brief outerRanges
443 * @param list
444 ** ------------------------------------------------------------------------------------------------------------- */
445UCDCompiler::RangeList UCDCompiler::outerRanges(const RangeList & list) {
446    RangeList ranges;
447    if (LLVM_LIKELY(list.size() > 0)) {
448        auto i = list.cbegin();
449        for (auto j = i + 1; j != list.cend(); ++j) {
450            if (hi_codepoint(*j) > hi_codepoint(*i)) {
451                ranges.emplace_back(lo_codepoint(*i), hi_codepoint(*i));
452                i = j;
453            }
454        }
455        if (LLVM_LIKELY(i != list.end())) {
456            ranges.emplace_back(lo_codepoint(*i), hi_codepoint(*i));
457        }
458    }
459    return ranges;
460}
461
462/** ------------------------------------------------------------------------------------------------------------- *
463 * @brief innerRanges
464 ** ------------------------------------------------------------------------------------------------------------- */
465UCDCompiler::RangeList UCDCompiler::innerRanges(const RangeList & list) {
466    RangeList ranges;
467    if (LLVM_LIKELY(list.size() > 0)) {
468        for (auto i = list.cbegin(), j = i + 1; j != list.cend(); ++j) {
469            if (hi_codepoint(*j) <= hi_codepoint(*i)) {
470                ranges.emplace_back(lo_codepoint(*j), hi_codepoint(*j));
471            } else {
472                i = j;
473            }
474        }
475    }
476    return ranges;
477}
478
479/** ------------------------------------------------------------------------------------------------------------- *
480 * @brief generateWithDefaultIfHierarchy
481 ** ------------------------------------------------------------------------------------------------------------- */
482void UCDCompiler::generateWithDefaultIfHierarchy(NameMap & names, PabloBuilder & entry) {
483    makeTargets(entry, names);
484    generateRange(defaultIfHierachy, entry);
485}
486
487/** ------------------------------------------------------------------------------------------------------------- *
488 * @brief generateWithoutIfHierarchy
489 ** ------------------------------------------------------------------------------------------------------------- */
490void UCDCompiler::generateWithoutIfHierarchy(NameMap & names, PabloBuilder & entry) {
491    makeTargets(entry, names);
492    generateRange(noIfHierachy, entry);
493}
494
495/** ------------------------------------------------------------------------------------------------------------- *
496 * @brief addTargets
497 ** ------------------------------------------------------------------------------------------------------------- */
498inline void UCDCompiler::makeTargets(PabloBuilder & entry, NameMap & names) {
499
500    mTargetValue.clear();
501    mTarget.clear();
502
503    struct Comparator {
504        inline bool operator() (const CC * lh, const CC * rh) const{
505            return *lh < *rh;
506        }
507    } ec;
508
509    flat_map<CC *, Var *, Comparator> CCs(ec);
510
511    Zeroes * const zeroes = entry.createZeroes();
512
513    for (auto & t : names) {
514        Name * const name = t.first;
515        if (name->getType() == Name::Type::Byte) {
516            continue;
517        }       
518        CC * const cc = dyn_cast<CC>(name->getDefinition());
519        if (cc) {
520            const auto f = CCs.find(cc);
521            // This check may not be needed. Memoization ought to detect duplicate classes earlier.
522            if (LLVM_LIKELY(f == CCs.end())) {
523                PabloAST * const value = t.second ? t.second : zeroes;
524                mTargetValue.emplace(cc, value);
525                Var * const var = entry.createVar(name->getName(), value);
526                mTarget.emplace(cc, var);
527                CCs.emplace(cc, var);
528                t.second = var;
529            } else {
530                t.second = f->second;
531            }
532        } else {
533            report_fatal_error(name->getName() + " is not defined by a CC!");
534        }
535    }
536}
537
538/** ------------------------------------------------------------------------------------------------------------- *
539 * @brief constructor
540 ** ------------------------------------------------------------------------------------------------------------- */
541UCDCompiler::UCDCompiler(cc::CC_Compiler & ccCompiler)
542: mCharacterClassCompiler(ccCompiler)
543, mSuffixVar(nullptr) { }
544
545}
Note: See TracBrowser for help on using the repository browser.