1. 토큰 질의 함수 내용
1-1. 임의의 텍스트 소스로부터 구분자(delimiter)로 토큰 질의
1-2. 토큰으로부터 n_gram_token, prefix_n_gram_token 질의 및 메타 데이터 작성
1-3. 토큰 컨테이너를 위한 바리에이션 지원 // ::std::set<Token>, ::std::unordered_set<Token>, ::std::map<Token, Token_Meta_Data>, ::std::unordered_map<Token, Token_Meta_Data>
1-4. 문자 인코딩 지원 // { ::std::string | 기본 인코딩 }
1-5. 문자 인코딩 지원(예정) // { ::std::string | utf8, utf16, utf32 }, { ::std::wstring | utf16 }, { ::std::u8string | utf8 }, { ::std::u16string | utf16 }, { ::std::u32string | utf32 }
대목표 :
현재 게임 오브젝트들은 국가별 정적으로 번역된 대사 레퍼토리로만 말할 수 있는데
언젠가 로컬 모델을 이용해 주변 상황을 인지해서 생각하고 말하고 행동하는 능력을 얻게 될 거야.
이 드라마틱한 진화가, 가능하다면, 내 오리지널 로컬 모델에 기반했으면 좋겠어.
소목표 :
1. 검색 엔진 시스템을 추상적으로(플랫폼이나 GUI로부터 독립적으로)선언 및 구현할 거야.
2. 검색 엔진에 ImGui를 붙여 게시판을 사용 가능하게 만들거야.
3-1. (대목표 완료 전) token, prefix_n_gram_token 키워드로 기본 검색 지원.
3-2. (대목표 완료 후) 게임 오브젝트들이 뭔가 원할 때 퀘스트 보드 게시판에 동적으로 글 써서 의뢰 작성.
구것이 바로 테이블!