토큰

토큰은 나루 코드 문법의 최소 해석 단위로, 토큰화 과정에서 반환된다. 모든 코드는 0개 이상의 토큰으로 이루어져 있으며, 각 토큰은 1개 이상의 코드 문자로 이루어져 있다.

• 공백
• 구분자
  • 개행
• 주석
• 구획
• 기호
• 예약어
• 이름
  • 따옴표가 쳐지지 않은 이름
  • 따옴표가 쳐진 이름
  • 이름
• 리터럴
  • true
  • false
  • 숫자 리터럴
  • 문자열 리터럴
    • 표현식을 포함한 문자열 리터럴
    • 탈출열