feng smith

字符串超过缓冲区的时候，拷贝未处理过的字符的时候多拷贝了一个字符。

1

最近在看 ik 的代码的时候，发现了一个 bug 。AnalyzeContext 第 121 行、第 124 行有点问题。  缓冲区的大小是 4096 ，超过 3996 就可能需要把未处理过的字符拷贝到缓冲区的前面。 我构造了个 4100（ > 3996 ，需要把未处理过的字符拷贝能缓冲区，能触发 bug）长的字符串 ，都是 垚 字，正确的应该是输出 4100 个 垚 字，实际上输出了 4101...

英文分词，英文句号和句号之前的单词分到一起了

2

用 ik_smart 分词英文的时候，英文句号 . 和 . 之前的单词分到一起了。样例如下: ``` GET /_analyze { "analyzer": "ik_smart", "text": "In 1997, a group of twenty British women made history. Working " } ``` 分词结果是: ```json...

find_and_replace.sh: No such file or directory

1

When I run ``` python scripts/prepare_data.py ``` finally print Cleaning data... sh: /Users/xxxxx/xxxxx/image-to-latex/data/scripts/find_and_replace.sh: No such file or directory But I find out that find_and_replace.sh the file located in ``` /Users/xxxxx/xxxxx/image-to-latex/scripts/find_and_replace.sh...

CreateTableTest 单元测试报错

3

建表语句报错了: ``` CREATE TABLE IF NOT EXISTS mytable ( f2 IDENTITY(1, 10) CONSTRAINT pk PRIMARY KEY HASH AUTO_INCREMENT, f5 int NOT NULL UNIQUE NOT NULL, f6 int NULL CHECK f6...