モデル
OpenAI互換またはAnthropicのエンドポイントを、ベースURLと必要なAPIキーで設定し、接続をテストします。ローカルのモデルサーバーは起動が必要です。リモートツールは別途データを送信する場合があります。
製品
ソフトウェアの機能 · LZ78フレーズトークン
01
PhraseNacreではバイト例と並べてLZ78の辞書参照と最後の不完全なフレーズを検討できます。
プロジェクト
フォルダーを選び、編集前に関連ファイルを読むようアシスタントに依頼します。作業の目的と変更範囲を明確にしてください。
変更内容
変更内容とコマンド出力を確認します。結果を採用する前にプロジェクトの検証を実行してください。生成コードが自動的にテスト済みになるわけではありません。
LZ78フレーズトークン
● ● ●PhraseNacre●
ワークフロー · LZ78フレーズトークン ×
def lz78_tokens(data):
if type(data) is not bytes or len(data) > 4096:
raise ValueError("lz78.input")
dictionary, phrase, output = {b"": 0}, b"", []
for byte in data:
extended = phrase + bytes([byte])
if extended in dictionary:
phrase = extended
else:
output.append((dictionary[phrase], byte))
dictionary[extended] = len(dictionary)
phrase = b""
if phrase:
output.append((dictionary[phrase], None))
return output✳最大4096バイトをLZ78の辞書番号と次バイトの組に符号化します。
✓ 変更内容適用前に確認 ↗
ワークスペースのイメージ