source: icGREP/icgrep-devel/icgrep/kernels/delmask_kernel.cpp

Last change on this file was 6184, checked in by nmedfort, 9 months ago

Initial version of PipelineKernel? + revised StreamSet? model.

File size: 5.1 KB
Line 
1/*
2 *  Copyright (c) 2016 International Characters.
3 *  This software is licensed to the public under the Open Software License 3.0.
4 */
5
6#include "delmask_kernel.h"
7#include <re/re_cc.h>
8#include <pablo/pe_ones.h>          // for Ones
9#include <pablo/pe_var.h>           // for Var
10#include <pablo/pe_zeroes.h>        // for Zeroes
11#include <cc/cc_compiler.h>
12#include <pablo/builder.hpp>
13#include <llvm/IR/Module.h>
14#include <pablo/pablo_toolchain.h>
15
16using namespace kernel;
17using namespace pablo;
18using namespace llvm;
19
20void DelMaskKernelBuilder::generatePabloMethod() {
21    PabloBuilder main(getEntryScope());
22    //  input: 8 basis bit streams
23   
24    std::vector<PabloAST *> u8_bits = getInputStreamSet("u8bit");
25    //  output: delmask stream + error stream
26   
27    cc::Parabix_CC_Compiler ccc(getEntryScope(), u8_bits);
28   
29    Zeroes * zeroes = main.createZeroes();
30
31    // Outputs
32    Var * delmask = main.createVar("delmask", zeroes);
33    Var * neg_delmask = main.createVar("neg_delmask", zeroes);
34    Var * error_mask = main.createVar("error_mask", zeroes);
35   
36    PabloAST * u8pfx = ccc.compileCC(re::makeCC(0xC0, 0xFF));
37    PabloAST * nonASCII = ccc.compileCC(re::makeCC(0x80, 0xFF));
38    auto it = main.createScope();
39    main.createIf(nonASCII, it);
40    Var * u8invalid = it.createVar("u8invalid", zeroes);
41    PabloAST * u8pfx2 = ccc.compileCC(re::makeCC(0xC2, 0xDF), it);
42    PabloAST * u8pfx3 = ccc.compileCC(re::makeCC(0xE0, 0xEF), it);
43    PabloAST * u8pfx4 = ccc.compileCC(re::makeCC(0xF0, 0xF4), it);
44    PabloAST * u8suffix = ccc.compileCC("u8suffix", re::makeCC(0x80, 0xBF), it);
45    //
46    // Two-byte sequences
47    Var * u8scope22 = it.createVar("u8scope22", zeroes);
48    auto it2 = it.createScope();
49    it.createIf(u8pfx2, it2);
50    it2.createAssign(u8scope22, it2.createAdvance(u8pfx2, 1));
51    //
52    // Three-byte sequences
53    Var * u8scope3X = it.createVar("u8scope3X", zeroes);
54    Var * EX_invalid = it.createVar("EX_invalid", zeroes);
55    Var * del3 = it.createVar("del3", zeroes);
56    auto it3 = it.createScope();
57    it.createIf(u8pfx3, it3);
58    PabloAST * u8scope32 = it3.createAdvance(u8pfx3, 1, "u8scope32");
59    PabloAST * u8scope33 = it3.createAdvance(u8scope32, 1, "u8scope33");
60    it3.createAssign(u8scope3X, it3.createOr(u8scope32, u8scope33));
61    PabloAST * E0_invalid = it3.createAnd(it3.createAdvance(ccc.compileCC(re::makeCC(0xE0), it3), 1), ccc.compileCC(re::makeCC(0x80, 0x9F), it3));
62    PabloAST * ED_invalid = it3.createAnd(it3.createAdvance(ccc.compileCC(re::makeCC(0xED), it3), 1), ccc.compileCC(re::makeCC(0xA0, 0xBF), it3));
63    it3.createAssign(EX_invalid, it3.createOr(E0_invalid, ED_invalid));
64    it3.createAssign(del3, u8scope32);
65    //
66    // Four-byte sequences
67    Var * u8scope4nonfinal = it.createVar("u8scope4nonfinal", zeroes);
68    Var * u8scope4X = it.createVar("u8scope4X", zeroes);
69    Var * FX_invalid = it.createVar("FX_invalid", zeroes);
70    Var * del4 = it.createVar("del4", zeroes);
71    auto it4 = it.createScope();
72    it.createIf(u8pfx4, it4);
73    PabloAST * u8scope42 = it4.createAdvance(u8pfx4, 1, "u8scope42");
74    PabloAST * u8scope43 = it4.createAdvance(u8scope42, 1, "u8scope43");
75    PabloAST * u8scope44 = it4.createAdvance(u8scope43, 1, "u8scope44");
76    it4.createAssign(u8scope4nonfinal, it4.createOr(u8scope42, u8scope43));
77    it4.createAssign(u8scope4X, it4.createOr(u8scope4nonfinal, u8scope44));
78    PabloAST * F0_invalid = it4.createAnd(it4.createAdvance(ccc.compileCC(re::makeCC(0xF0), it4), 1), ccc.compileCC(re::makeCC(0x80, 0x8F), it4));
79    PabloAST * F4_invalid = it4.createAnd(it4.createAdvance(ccc.compileCC(re::makeCC(0xF4), it4), 1), ccc.compileCC(re::makeCC(0x90, 0xBF), it4));
80    it4.createAssign(FX_invalid, it4.createOr(F0_invalid, F4_invalid));
81    it4.createAssign(del4, it4.createOr(u8scope42, u8scope43));
82    //
83    // Invalid cases
84    PabloAST * anyscope = it.createOr(u8scope22, it.createOr(u8scope3X, u8scope4X), "anyscope");
85    PabloAST * legalpfx = it.createOr(it.createOr(u8pfx2, u8pfx3), u8pfx4);
86    //  Any scope that does not have a suffix byte, and any suffix byte that is not in
87    //  a scope is a mismatch, i.e., invalid UTF-8.
88    PabloAST * mismatch = it.createXor(anyscope, u8suffix);
89    PabloAST * EF_invalid = it.createOr(EX_invalid, FX_invalid);
90    PabloAST * pfx_invalid = it.createXor(u8pfx, legalpfx);
91    it.createAssign(u8invalid, it.createOr(pfx_invalid, it.createOr(mismatch, EF_invalid)));
92    //PabloAST * u8valid = it.createNot(u8invalid, "u8valid");
93    it.createAssign(error_mask, u8invalid);
94   
95    it.createAssign(delmask, it.createInFile(it.createOr(it.createOr(del3, del4), ccc.compileCC(re::makeCC(0xC0, 0xFF), it))));
96    it.createAssign(neg_delmask, it.createInFile(it.createNot(delmask)));
97   
98    Var * delmask_out = getOutputStreamVar("delMask");
99    Var * neg_delmask_out = getOutputStreamVar("neg_delMask");
100    Var * error_mask_out = getOutputStreamVar("errMask");
101   
102    main.createAssign(main.createExtract(delmask_out, main.getInteger(0)), delmask);
103    main.createAssign(main.createExtract(neg_delmask_out, main.getInteger(0)), neg_delmask);
104    main.createAssign(main.createExtract(error_mask_out,  main.getInteger(0)), error_mask);
105
106}
Note: See TracBrowser for help on using the repository browser.