StringTokenizer의 사용

오라클 공식문서

https://docs.oracle.com/en/java/javase/26/docs/api/java.base/java/util/StringTokenizer.html

StringTokenizer is a legacy class that is retained for compatibility reasons although its use is discouraged in new code. It is recommended that anyone seeking this functionality use the split method of String or the java.util.regex package instead.

StringTokenizer는 호환성(Compatibility)을 위해 남아있는 Legacy 클래스이며, 새로운 코드에서는 String.split() 또는 java.util.regex를 사용하는 것이 권장된다.

---

StringTokenizer가 만들어진 이유

Java가 처음 등장한 시기에는 지금처럼 문자열을 쉽게 분리하는 메서드가 없었다. 그래서 문자열을 자를려면 반복문을 돌려 공백을 찾은 후 그 부분을 분리 시켜야했다. 그래서 만들어진게 "문자열을 특정 구분자(Delimiter)를 기준으로 빠르게 잘라주는 클래스"인 StringTokenizer가 만들어졌다.

---

왜 StringTokenizer를 사용했을까?

그 당시에는

• 정규표현식을 거 사용하지 않음
• String.split() 없음
• 문자열 처리 API 부족

	public static void main(String[] args) throws IOException {
		BufferedReader br = new BufferedReader(new InputStreamReader(System.in));
		String temp = br.readLine();

		StringTokenizer st = new StringTokenizer(temp);
		while (st.hasMoreTokens()) {
			System.out.println(st.nextToken());
		}

	}

---

StringTokenizer 내부 작동 방식

A,B,C,D
 ^
A,B,C,D
   ^

nextToken()

StringTokenizer는 문자열을 복사해서 나누는 것이 아니라 현재 위치(index)를 하나 기억하면서 한칸씩 위치가 이동한다.

---

split() 의 방식

나중에 자바가 발전하면서 split() 이 추가되었는데 방식이 더 편리해졌다.

String[] arr = str.split(" ");

• 배열로 변환 가능
• 정규표현식 지원
• foreach 사용가능
• 코드가 직관적

---

알고리즘에서는 왜 아직도 StringTokenizer를 많이 사용할까?

BufferedReader + StringTokenizer

split()의 경우 입력이 많아지면 정규표현식 사용, 배열 생성, 메모리 추가 사용이 되지만 StringTokenizer를 사용하게 되면 필요한 문자열만 한칸씩 옮기며 찾아내기 때문에 메모리 사용이 적고 속도도 빠른 편이다.

---

StringTokenizer의 단점

• Legacy 클래스
  예전 API 기 때문에 새로운 프로젝트에서는 권장하지 않음
• 정규표현식 지원 없음

---

참고

https://docs.oracle.com/en/java/javase/26/docs/api/java.base/java/util/StringTokenizer.html

StringTokenizer (Java SE 26 & JDK 26)

https://inpa.tistory.com/entry/JAVA-%E2%98%95-Split-StringTokenizer-%EB%AC%B8%EC%9E%90%EC%97%B4-%EC%9E%90%EB%A5%B4%EA%B8%B0-%EB%B9%84%EA%B5%90%ED%95%98%EA%B8%B0

☕ 자바 split / StringTokenizer - 문자열 자르기 비교