词片 🎲
一种子词分词算法，将文本切分为高频字符序列，广泛用于 BERT 等 Transformer 模型。
Пока нет связанных полок. Скоро появятся.
🌐 English — WordPiece
A subword tokenization algorithm that splits text into frequent character sequences, widely used in transformer models such as BERT.
🌐 中文 — 词片
一种子词分词算法，将文本切分为高频字符序列，广泛用于 BERT 等 Transformer 模型。
🌐 العربية — وورد بيس
خوارزمية ترميز رمزي فرعي تقسم النص إلى متتاليات حروف متكررة، وتُستخدم على نطاق واسع في نماذج المحولات مثل بيرت.
🌐 Español — WordPiece
Algoritmo de tokenización por subpalabras que divide el texto en secuencias de caracteres frecuentes, ampliamente usado en modelos transformer como BERT.
🌐 Français — WordPiece
Algorithme de tokenisation en sous-mots qui découpe le texte en séquences de caractères fréquentes, largement utilisé dans les modèles Transformer comme BERT.
🌐 de — WordPiece
Ein Subwort-Tokenisierungsalgorithmus, der Text in häufige Zeichenfolgen zerlegt und in Transformer-Modellen wie BERT weit verbreitet ist.
🌐 pt — WordPiece
Algoritmo de tokenização em subpalavras que divide o texto em sequências de caracteres frequentes, amplamente usado em modelos transformer como o BERT.
🌐 tr — Kelime Parçası
Metni sık geçen karakter dizilerine bölen, BERT gibi transformer modellerinde yaygın olarak kullanılan bir alt kelime tokenizasyon algoritması.
🌐 hi — वर्डपीस
एक उप-शब्द टोकनाइज़ेशन एल्गोरिद्म जो पाठ को बार-बार आने वाले अक्षर अनुक्रमों में विभाजित करता है और BERT जैसे ट्रांसफ़ॉर्मर मॉडल में व्यापक रूप से उपयोग किया जाता है।