newline_token.go 458 B

12345678910111213141516171819202122232425262728293031
  1. package ini
  2. func isNewline(b []rune) bool {
  3. if len(b) == 0 {
  4. return false
  5. }
  6. if b[0] == '\n' {
  7. return true
  8. }
  9. if len(b) < 2 {
  10. return false
  11. }
  12. return b[0] == '\r' && b[1] == '\n'
  13. }
  14. func newNewlineToken(b []rune) (Token, int, error) {
  15. i := 1
  16. if b[0] == '\r' && isNewline(b[1:]) {
  17. i++
  18. }
  19. if !isNewline([]rune(b[:i])) {
  20. return emptyToken, 0, NewParseError("invalid new line token")
  21. }
  22. return newToken(TokenNL, b[:i], NoneType), i, nil
  23. }