tokenizers 설치시 오류
error: can't find Rust compiler
에러발생 => Rust compiler 를 설치해야함
Rust compiler 설치 ( windows )
https://www.rust-lang.org/learn/get-started
rustup-init.exe 파일을 다운로드해서 설치함
설치 옵션에서 1번 visual studio community installer 선택함visual studio 설치 완료 후 계속 진행
1 번 선택함
최종 위 화면이 나왔다면 설치 완료
PATH 설정
설치하고 나면 대략 아래와 같은 경로에 toolchain 이 설치됩니다.
C:\Users\계정이름\.rustup\toolchains\stable-x86_64-pc-windows-msvc\bin
위 경로를 PATH에 적절히 연결합니다.
cmdline에 아래와 같이 하거나 시스템에서 PATH를 추가해주면 됩니다. set PATH=%PATH%;C:\Users\계정이름\.rustup\toolchains\stable-x86_64-pc-windows-msvc\bin
PATH를 설정한 후 cmd 창에서 rustc 를 쳤을때 실행되어야합니다.
그 후 tokenizers 를 계속 해서 설치하면 됩니다.