aereal https://blog.hatena.ne.jp/aereal/ Sexually Knowing https://this.aereal.org/ Go Go の text/scanner はレキサを書く面倒な仕事の大半をいいかんじにしてくれて本質的なコードに取り組みやすくとても便利。 しかしはてな記法や Markdown のように、行全体が単なるテキストではなくいくつかのパターンからなる文法のレキサを書くときは、パターン中に明示的に改行を含めたい。 どういうことかというと: line: inlines CR みたいに書きたい。 しかし scanner.Scan が改行を含む空白文字をスキップしてしまうので改行をトークナイズする、ということができない。 結論からいうと Scanner.Scan は Scanner.Whitespace というフ… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fthis.aereal.org%2Fentry%2F2017%2F02%2F27%2F104611" title="Go の text/scanner で改行をトークナイズしたいときは - Sexually Knowing" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2017-02-27 10:46:11 rich https://this.aereal.org/entry/2017/02/27/104611 1.0 100%