ailiaTokenizerGetWordIDs method

int ailiaTokenizerGetWordIDs(
  1. Pointer<AILIATokenizer> net,
  2. Pointer<Int> word_ids,
  3. int count
)

~japanese @brief ワードIDを取得します。 @param net トークナイザオブジェクトポインタ @param word_ids ワードID @param count 格納先トークン数 @param @return 成功した場合は \ref AILIA_STATUS_SUCCESS 、そうでなければエラーコードを返す。 @details ailiaTokenizerEncode() を一度も実行していない場合は \ref AILIA_STATUS_INVALID_STATE が返ります。 AILIA_TOKENIZER_TYPE_ROBERTAとAILIA_TOKENIZER_TYPE_BERTの場合のみ有効です。

~english @brief Gets the word ID. @param net A tokenizer instance pointer @param word_ids Word ID @param count Token count @return If this function is successful, it returns \ref AILIA_STATUS_SUCCESS , or an error code otherwise. @details If ailiaTokenizerEncode() is not run at all, the function returns \ref AILIA_STATUS_INVALID_STATE . This is valid only for AILIA_TOKENIZER_TYPE_ROBERTA and AILIA_TOKENIZER_TYPE_BERT.

Implementation

int ailiaTokenizerGetWordIDs(
  ffi.Pointer<AILIATokenizer> net,
  ffi.Pointer<ffi.Int> word_ids,
  int count,
) {
  return _ailiaTokenizerGetWordIDs(
    net,
    word_ids,
    count,
  );
}