Tokenization
AIKernel.Dtos reference members from AIKernel.NET/src/AIKernel.Dtos/Tokenization.
Source: AIKernel.NET/src/AIKernel.Dtos/Tokenization
概要
このセクションは AIKernel.Dtos の生成メンバー 20 件を記録します。対象ソース内のメンバー種別: method, property, type。
位置づけ
この Reference ページは、生成された API 事実にパッケージとソースの文脈を添えて、単なる一覧ではなく実装判断に使える資料として公開しています。
利用方法
AIKernel.NET/src/AIKernel.Dtos/Tokenization から生成されたソース連動のメンバー一覧を、パッケージが分かった状態で確認するときに使います。
例
dotnet add package AIKernel.Dtos --version 0.1.2
注記
メンバー説明は利用可能な XML ドキュメントから読み取っています。空欄は、該当メンバーに日本語 XML コメントがまだないことを示します。
関連項目
Package | Docs | Generation Report
| 種別 | メンバー | 概要 | 詳細 |
|---|---|---|---|
| method | AIKernel.Dtos.Tokenization.TokenizerStatistics.Empty<string>M:AIKernel.Dtos.Tokenization.TokenizerStatistics.Empty<string> |
AIKernel の公開参照サーフェスとして Empty<string> 操作を実行します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.PaddingInfo.LogicalTokenCountP:AIKernel.Dtos.Tokenization.PaddingInfo.LogicalTokenCount |
AIKernel の公開参照サーフェスで公開される LogicalTokenCount 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.PaddingInfo.MemoryDifferenceBytesP:AIKernel.Dtos.Tokenization.PaddingInfo.MemoryDifferenceBytes |
AIKernel の公開参照サーフェスで公開される MemoryDifferenceBytes 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.PaddingInfo.PaddingAmountP:AIKernel.Dtos.Tokenization.PaddingInfo.PaddingAmount |
AIKernel の公開参照サーフェスで公開される PaddingAmount 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.PaddingInfo.PaddingMethodP:AIKernel.Dtos.Tokenization.PaddingInfo.PaddingMethod |
AIKernel の公開参照サーフェスで公開される PaddingMethod 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.PaddingInfo.PaddingPercentageP:AIKernel.Dtos.Tokenization.PaddingInfo.PaddingPercentage |
AIKernel の公開参照サーフェスで公開される PaddingPercentage 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.PaddingInfo.PhysicalCardinalityP:AIKernel.Dtos.Tokenization.PaddingInfo.PhysicalCardinality |
AIKernel の公開参照サーフェスで公開される PhysicalCardinality 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.PaddingInfo.RationaleP:AIKernel.Dtos.Tokenization.PaddingInfo.Rationale |
AIKernel の公開参照サーフェスで公開される Rationale 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.Token.EndPositionP:AIKernel.Dtos.Tokenization.Token.EndPosition |
AIKernel の公開参照サーフェスで公開される EndPosition 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.Token.StartPositionP:AIKernel.Dtos.Tokenization.Token.StartPosition |
AIKernel の公開参照サーフェスで公開される StartPosition 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.Token.TokenIdP:AIKernel.Dtos.Tokenization.Token.TokenId |
AIKernel の公開参照サーフェスで公開される TokenId 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.Token.TokenTypeP:AIKernel.Dtos.Tokenization.Token.TokenType |
AIKernel の公開参照サーフェスで公開される TokenType 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.Token.ValueP:AIKernel.Dtos.Tokenization.Token.Value |
AIKernel の公開参照サーフェスで公開される Value 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.TokenizerStatistics.AverageTokenLengthP:AIKernel.Dtos.Tokenization.TokenizerStatistics.AverageTokenLength |
AIKernel の公開参照サーフェスで公開される AverageTokenLength 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.TokenizerStatistics.MaxTokenLengthP:AIKernel.Dtos.Tokenization.TokenizerStatistics.MaxTokenLength |
AIKernel の公開参照サーフェスで公開される MaxTokenLength 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.TokenizerStatistics.VersionP:AIKernel.Dtos.Tokenization.TokenizerStatistics.Version |
AIKernel の公開参照サーフェスで公開される Version 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| property | AIKernel.Dtos.Tokenization.TokenizerStatistics.VocabularySizeP:AIKernel.Dtos.Tokenization.TokenizerStatistics.VocabularySize |
AIKernel の公開参照サーフェスで公開される VocabularySize 値を取得または設定します。 | 追加の XML 詳細はありません。 |
| type | AIKernel.Dtos.Tokenization.PaddingInfoT:AIKernel.Dtos.Tokenization.PaddingInfo |
AIKernel パッケージ利用者に公開される PaddingInfo の参照サーフェスを表します。 | 追加の XML 詳細はありません。 |
| type | AIKernel.Dtos.Tokenization.TokenT:AIKernel.Dtos.Tokenization.Token |
AIKernel パッケージ利用者に公開される Token の参照サーフェスを表します。 | 追加の XML 詳細はありません。 |
| type | AIKernel.Dtos.Tokenization.TokenizerStatisticsT:AIKernel.Dtos.Tokenization.TokenizerStatistics |
AIKernel パッケージ利用者に公開される TokenizerStatistics の参照サーフェスを表します。 | 追加の XML 詳細はありません。 |