.NET Simple Tokenizer (2.0 or later)
This library can use with .NET Framework 2.0 or later.
- download or clone entire this repository.
- open "Tokeniser.sln" in your Visual Studio.
- run this project.
- CSV tokenize sample will be running on click "Load CSV" button.
- JSON tokenize sample will be running on click "Load JSON" button.
please use previous version Visual Studio, if you get some errors.
- open "Tokenizer(vs2010).sln" in your Visual Studio.
- this solution file can use with Visual Studio 2010 or later.
- CSV file tokenize sample: Sample/CSVTokenizer.cs
- JSON file tokenize sample: Sample/JsonTokenizer.cs
- This project does not correspond to build for class library for now, copy files in Hikipuro/Text on your project folder, if you want to use in your project.
- This project can't easy to use with NuGet for now.
- Visual Studio 2015
- Sample/CSV/13TOKYO.CSV: borrowed from Japanese post office.
- Sample/JSON/*.json: borrowed from JSON Example.
(in Japanese) シンプルなC#の字句解析ツール
.NET Framework 2.0 以降の環境で実行できると思います。
- Visual Studio 2015
- Visual Studio で Tokenizer.sln を開いてください
- "Load CSV" ボタンを押すと、CSV ファイルの分解サンプルが実行されます
- "Load JSON" ボタンを押すと、JSON ファイルの分解サンプルが実行されます
古いバージョンの Visual Studio で開く場合
- Tokenizer(vs2010).sln を開いてください
- Visual Studio 2010 以降に対応しています
より詳しい使い方
- CSV ファイルのサンプルコード: Sample/CSVTokenizer.cs
- JSON ファイルのサンプルコード: Sample/JsonTokenizer.cs
- 今のところクラスライブラリにはしていないので、ほかのプロジェクトから使用する場合は Hikipuro/Text 内のファイルをコピーしてください
- Sample/CSV/13TOKYO.CSV: 郵便局のサイト からお借りしました
- Sample/JSON/*.json: JSON Example からお借りしました