Що означає помилка "Token indices sequence length is longer than the specified maximum…
- User
Що означає помилка "Token indices sequence length is longer than the specified maximum sequence length for this model (94 > 77). Running this sequence through the model will result in indexing errors" при редагуванні зображення моделлю ШІ з сайту HuggingFace? На шо слід звернути увагу?
- Assistant
Чудове запитання! Це одна з найпоширеніших помилок, з якою стикаються користувачі при роботі з моделями генерації зображень, як-от Stable Diffusion.
Давайте розберемо її по частинах, простою мовою.
Що означає ця помилка?
Якщо коротко: Ваш текстовий опис (промпт) занадто довгий для "короткострокової пам'яті" моделі.
Аналогія: Уявіть, що модель ШІ — це художник, якому ви диктуєте, що малювати. Але в нього є лише маленький блокнот на 77 слів (або частин слів). Ви почали диктувати, і ваш опис зайняв 94 слова. Художник записав перші 77, а решту просто не зміг вмістити. Через це він не зрозумів завдання до кінця і попереджає вас, що результат може бути непередбачуваним або взагалі нічого не вийде ("indexing errors").
Розберемо детальніше технічні терміни:
-
Tokens (Токени): Це не зовсім слова. Модель розбиває ваш текст на найменші значущі одиниці.
- Просте слово, як
cat, — це 1 токен. - Складне слово, як
unbelievably, може бути розбите на 2-3 токени (un-,believab,ly). - Знаки пунктуації, як-от кома чи крапка, також є токенами.
- Наприклад, фраза
a beautiful cat, masterpiece— це вже 5 токенів (a,beautiful,cat,,,masterpiece).
- Просте слово, як
-
Sequence Length (Довжина послідовності): Це загальна кількість токенів у вашому текстовому запиті. У вашому випадку вона дорівнює 94.
-
Maximum Sequence Length (Максимальна довжина послідовності): Це архітектурне обмеження конкретної моделі. Вона фізично не може обробити більше токенів за один раз. Для більшості моделей, заснованих на CLIP (які використовуються в Stable Diffusion 1.5, 2.1), цей ліміт становить 77 токенів. Це число не випадкове, воно було закладене розробниками архітектури.
Отже, помилка "(94 > 77)" буквально означає: "Ваша послідовність з 94 токенів більша, ніж мій ліміт у 77 токенів".
На що слід звернути увагу і як це виправити?
Це найважливіша частина. Ось конкретні кроки:
1. Скоротіть ваш основний промпт (Positive Prompt). Це найочевидніше рішення.
- Приберіть зайві слова: Замість
a hyperrealistic, photorealistic, ultra detailed photoзалиштеphotorealistic photoабо простоphotograph. - Видаліть синоніми: Не пишіть
beautiful, gorgeous, stunning. Виберіть одне, найсильніше слово. - Сконцентруйтеся на головному: Що є об'єктом? Що він робить? Де він знаходиться? Яке освітлення? Залиште тільки ключові елементи.
Приклад:
Було (забагато токенів):
A hyperrealistic and incredibly detailed award-winning fantasy painting of a majestic ancient dragon with glowing blue eyes, sitting on top of a huge mountain peak during a dramatic and beautiful sunset, masterpiece, art by Greg Rutkowski and Alphonse Mucha.Стало (коротше і ефективніше):
Fantasy painting of a majestic dragon with glowing blue eyes on a mountain peak at sunset, by Greg Rutkowski.2. Перевірте негативний промпт (Negative Prompt). Дуже часто користувачі забувають, що негативний промпт (слова, які описують, чого НЕ повинно бути на зображенні) також використовує токени! Деякі інтерфейси можуть додавати довжину обох промптів. Якщо у вашому негативному промпті написано щось на кшталт
blurry, grainy, low quality, deformed, mutated, ugly, disfigured, text, watermark, signature, це теж займає багато місця. Залиште тільки найважливіші негативні ключові слова.3. Використовуйте більш "сильні" та ефективні слова. З часом ви зрозумієте, які слова дають кращий результат. Наприклад, замість
a painting in the style of Van Goghможна просто написатиin style of Van Goghабоvangogh style, що економить токени.4. Використовуйте спеціальні синтаксиси (якщо підтримується). Деякі просунуті інтерфейси (наприклад, Automatic1111) дозволяють підвищувати "вагу" слова за допомогою дужок, наприклад
(masterpiece:1.2). Це ефективніше, ніж повторювати слово кілька разів.5. Розбийте ідею на кілька етапів. Якщо ідея дуже складна, згенеруйте спочатку просту базу (наприклад,
dragon on a mountain), а потім за допомогою інструментівimg2img(редагування зображення за допомогою зображення) абоinpainting(домальовування частини зображення) додавайте деталі за новим, коротким промптом.Висновок
Ця помилка — не збій, а радше корисне попередження від моделі. Вона каже вам: "Будь ласка, сформулюйте свою думку лаконічніше".
Навичка складання коротких, але ємних промптів — один з ключових аспектів у роботі з генеративними ШІ. Експериментуйте, скорочуйте і залишайте тільки те, що справді має значення для фінального зображення.
-
Other models, same or similar prompt
Responses were produced in different, uncontrolled contexts (system prompts, settings, prior turns). This is not a benchmark.