CTokenizer

Giấy phép: Miễn phí ‎Kích cỡ tệp: N/A
‎Xếp hạng người dùng: 3.0/5 - ‎1 ‎Phiếu

Về CTokenizer

CTokenizer chấp nhận cú pháp C++ như đầu vào và đầu ra một vector của các đối tượng CToken, trong đó có một chuỗi mã thông báo và một (n liệt kê) loại mã thông báo, mà sau đó có thể được sử dụng để phân tích cú pháp đầu vào.