토큰화 과정은 유니코드 스칼라 값의 열을 토큰열로 바꾸어 파싱 과정으로 넘긴다.
이 분류에는 하위 분류 1개만이 속해 있습니다.
다음은 이 분류에 속하는 문서 6개 가운데 6개입니다.
