Как я сэкономил $2585 на переводе инди-игры

Вы, конечно, уже догадались что речь пойдёт про втирание ChatGPT дважды в день. Но дьявол, как известно, прячется в деталях, так что описываю весь процесс и цифры. Лонг.

У меня есть древняя браузерная игра Witchcraft, в которую ещё ваша бабушка играла. А возможно и до сих по играет, и даже иногда заносит кусочек дедовой заначки. В игру каждый день заходит несколько сотен человек, большая часть из них старше 50.

Глядя на новости про то, что российский геймдев отстаёт от общемирового на 15 лет, я решил что моя 13-летняя игра имеет потенциал для успеха в известных соцсетях - она ведь как раз идёт в ногу с локальным временем! А значит, её надо непременно перевести на русский.

Что примечательно, Witchcraft мы уже как-то однажды пробовали запустить в Однодачниках, но это было 7 или 8 лет назад. На тот момент она, очевидно, слишком опережала время и не возымела успеха. Версию под ОК мы в итоге закрыли а русский перевод выпилили за ненадобностью.

Сегодня рунет наконец догнал игру, поэтому я залез в историю версий кода и выкопал там наши старые переводы. Но они, конечно же, частично устарели, а частично не существовали.

Тексты в игре представляют собой табличку ключ-значение, где ключ это место и роль текста в игре, а значение - это кусок текста на английском.

Оказалось что надо перевести:

Пакет 1 - Тексты в UI

Пакет 2 - Игровая Wiki

Солидный объём, как по мне.

Я всё аккуратно сложил в гугл-таблицу и пошёл в народ спрашивать, сколько будет стоить перевести такую пачку текстов.

Предложений масса, но их можно разделить примерно на три категории:

В итоге, перевод моих текстов обошёлся бы мне:

Итого - от $2670 до $6500. Округлил цифры для наглядности, не бейте.

У меня есть тайный список приятных способов потратить несколько тысяч долларов - и оплата услуг переводчиков в этот список пока не входит. Я решил, что передо мной отличный повод для эксперимента и наконец можно поиграться с API ChatGPT под благовидным предлогом.

Чтобы перевести текст через ChatGPT, нужно робота вежливо попросить сделать перевод, сообщить контекст и задать правила. Делать это лучше всего автоматически, через API, не через веб-интерфейс, иначе можно быстро кончиться.

Для работы с API я подключил к гугл-таблице вот это расширение. Есть и другие подобные, гугл в помощь.

Расширение может работать двумя путями - используя предоставленный вами ключ API или через их собственные ключи. Первый вариант заметно дешевле. Им я и решил воспользоваться, но где-то накосячил при стартовой настройке аккаунта в OpenAI и какое-то время ключ не работал и я платил в три раза дороже.

Когда ключ у меня нормально подключился - стоимость использования расширения примерно сравнялась со стоимостью использования API, то есть в итоге выходит грубо говоря цена работы API × 2. Единственный минус - то что расширение надо оплачивать пакетами по $40, которые надо ещё потрудиться потратить.

Для перевода я использовал набор из нескольких промптов, которые комбинировались в единый промпт для функции GPT_TRANSLATE в зависимости от того, какой текст нужно переводить.

Пропт 1 - Специфика перевода

Промпт 2 - Разметка HTML

Промпт 3 - Ключи для вставки значений в коде

Промпт 4 - Глоссарий (это важно, про него будет ниже)

В результате для каждой строчки мы имеем один длинный промпт, составленный из комбинации нескольких. Промпт 1 использовался при переводе каждой строки, промпты 2 и 3 добавлялись если в тексте встречаются символы html-разметки или ключи формата %{key} которые в коде заменяются на цифры или названия. Промпт 4 - когда в тексте встречались слова из глоссария.

Отдельного внимания заслуживает составление глоссария. Это словарик терминов, используемых в игре, и соответствующий им перевод этих терминов.

Глоссарий важно составить и использовать, чтобы часто употребляемые слова и выражения в игре переводились единообразно. Если не использовать глоссарий - одни и те же термины могут быть переведены по разному в зависимости от контекста, и этим в равной степени грешат и роботы, и переводчики-люди.

К примеру, в англоязычной версии моей игры используется слово Coven для обозначения команды игроков. На русский язык оно переводится как "шабаш", что верно с точки зрения контекста, но в играх на русском языке это слово встречается крайне редко. Гораздо более часто употребляемое и понятное слово - "клан". Именно так я и хочу чтобы термин переводился - "coven" везде превращается в "клан", "coven members" в "члены клана", "coven monsters" в "клановые монстры" и так далее. В другом языке это может быть не клан, а какой-нибудь "der Horde" или "共产党".

Для составления глоссария я точно так же использовал ChatGPT - разбил весь текст в кучки по 100 строк, для каждой кучки попросил выделить список терминов, затем отфильтровал и причесал эти термины и тем же ChatGPT их перевёл. Получилось 210 терминов.

Для перевода UI я применял модели ChatGPT 3.5 и 4-turbo. Использовал и ту и другую, чтобы посмотреть качество перевода. Модель 4-turbo почти ни разу не выдала результат, который был бы лучше модели 3.5, поэтому я оставил переводы от неё.

Wiki я переводил несколько позже, когда уже вышла модель 4o, и решил опробовать новинку. Смена модели делается в формулах в один клик, а цена использования новой модели оказалась почти такой же как у 3.5

Используемое мной расширение поддерживает и несколько других моделей помимо ChatGPT, но я не стал с ними копаться. Поиски идеала - удел поэтов.

Как только промпты и глоссарий были готовы, я засунул их в формулу и радостно растянул её на весь документ. Но нихрена не вышло.

Как оказалось, когда ты только начинаешь пользоваться API, у тебя есть ограничение - не больше 30000 токенов в минуту. Для моих текстов при работе с глоссарием выходило примерно 2-3 тысячи токенов на каждую строку перевода, то есть я мог раз в минуту переводить по 10-15 строк.

Поначалу это было не очень чувствительно, так как я непрерывно допиливал промпты, менял формулу и дорабатывал табличку там и сям. Но когда всё более-менее устаканилось - стало душновато от рутины.

Я потратил примерно 3 часа на то чтобы перевести все тексты из wiki. Ограничение на количество токенов можно повысить, если занести разом $50 на депозит API. Но я, во-первых, не уверен что мне этот депозит понадобится в ближайшее время, а во-вторых, догадался что так можно сделать только когда начал писать эту заметку.

Ещё есть нюанс, что готовый перевод надо из ячейки с формулой обязательно скопировать в новую ячейку и удалить (или отключить) формулу - чтобы она повторно не пересчитывалась при последующих открытиях или когда добавляем/удаляем столбцы и строки. Реально бывает обидно, когда по привычке втыкаешь новый столбец - и несколько сотен формул заново тратят твои деньги. Остановить выполнение уже запущенных формул нельзя.

Для пакета текстов UI, где использовались модели 3.5 и 4-turbo, получилась примерно следующая статистика:

Стоит оговориться, что две трети исправленных строк - это названия фэнтезийных предметов, монстров и локаций. То есть всё то, что никак не могло попасть в глоссарий, и в целом является скорее вкусовщиной.

Было достаточно много правок для поддержания единообразия переводов, когда, например, монстр называется "Ледяной гигант" а предмет перевелся как "Сапоги ледяного великана", или предметы из коллекции "Стражник" называются "Сапоги стражника" и "Броня охранника".

Были, конечно, и всякие перлы, например "Royal Guardian Shield" робот перевел как "Королевский стражничий щит", а "Viking Ship" как "Викингский корабль". Очевидно, в датасет для обучения входили сочинения пятиклассников.

С пакетом текстов Wiki модель 4o справилась заметно лучше - я поправил чуть меньше 5% текстов. Большинство правок также касалось единообразия переводов терминов, не включенных в глоссарий (название компании в terms of service, например), а также названий игровых предметов и сущностей.

Думаю, на качество перевода Wiki сильно повлияло то, что здесь каждый кусок текста представляет из себя законченную смысловую единицу - заголовок страницы или параграф текста. Для UI многие тексты не имеют очевидного контекста и их можно перевести по-разному в зависимости от места использования. К примеру, одно и то же слово "View" можно перевести как "Просмотр" если это заголовок диалога и как "Посмотреть" если это надпись на кнопке.

Все переведенные тексты я самолично прочитал. Может, где-то не очень дотошно, но как минимум пробежал глазами и поправил косяки где заметил. Смысловых расхождений между оригиналом и переводом не заметил ни разу.

Помимо ручной вычитки, я проверял все переводы по следующим правилам:

Для всех этих проверок я сделал просто столбцы в документе, по которым фильтровал записи и вручную всё проверял. У меня в документ были внесены все строки игры, не только те которые надо было перевести, поэтому я ещё до кучи и несколько косяков в старых переводах поправил.

При переводе wiki был интересный момент. В некоторых параграфах используются вставки кода на ruby и в этом коде в виде параметров функций попадаются строки, которые нужно переводить. Эти строки никак не отличаются от других таких же строк в том же куске кода, которые переводить не надо. Я не давал никаких инструкций касательно этого кода и планировал его сам переводить, но в итоге оказалось что робот успешно перевел нужные строки в более чем сотне случаев использования и накосячил всего один раз.

На первичные эксперименты по работе с API и перевод пакета UI у меня ушло примерно $45. Это было до того, как я корректно настроил ключи. С нормально настроенными ключами я тот же объём текста перевел уже за $15.

На перевод Wiki с ключами и уже классно настроенной гугл-таблицей ушло ещё примерно $25.

На настройку таблички, сам перевод, вычитку и исправление косяков перевода у меня ушло суммарно около 10-15 рабочих часов. Если бы я занимался только вычиткой и правкой - ушло бы часа 4-5.

Стоит учесть, что я переводил с языка, который хорошо знаю, на свой родной язык, а значит мог сам заниматься вычиткой и мне не пришлось за это платить (деньгами). Однако, если количество времени, потраченное на вычитку, умножить на примерную ставку переводчика в час, то выйдет не шибко много, не больше пары сотен.

Для следующих переводов, уже на незнакомые мне языки, я хочу:

1) Использовать глоссарий не целиком, а частично. Сейчас если в строке встречается одно слово из глоссария - он идёт в промпт целиком, что раздувает количество токенов в запросе и сжирает лимиты. Теоретически, будет достаточно включать 2-3 пары слов из глоссария для получения того же самого результата.

2) Более детально разметить тексты в соответствии с их использованием в игре. Если речь идёт о кнопке, заголовке или названии предмета - это нужно указывать в промпте, чтобы робот корректировал перевод соответственно.-

3) Сгруппировать куски текста по смыслу и давать их в качестве контекста перевода. К примеру, если предметы из одной коллекции - сообщать название коллекции и то как оно было переведено. А если кнопка показывается внутри диалога покупки - давать в промпте лежащий рядом текст с описанием промо-акции.-

4) Добавить какую-то автоматизацию вызова функций перевода и копирования результатов. Сейчас это приходится делать вручную по 10-15 строк в минуту и это капец как нудно.

5) Ну и, конечно же, вычитку лучше доверить профессиональному переводчику или, как минимум, носителю языка.

По моему мнению, переводы через LLM уже вполне можно делать и, по крайней мере, для одного языка результат будет очень хороший. 95% текстов игровой Wiki и 85% текстов для UI и внутриигровых названий робот перевёл практически идеально и я уверен, что это не предел.

Переводчики хоть и станут кушать меньше, но совсем без работы пока ещё не остаются. Перевод от ChatGPT всё ещё требует вычитки и небольшой коррекции. Количество работы переводчика можно снизить путём добавления дополнительного контекста и правил перевода в зависимости от роли текста в продукте.

Полноценный перевод нарративной составляющей игр и художественных произведений через ChatGPT пока ещё скорее утопия. Но для рутинного перевода UI, документации, инструкций, wiki и других кусков текста, не обременённых художественной составляющей - уже реальность.

Если вам понравилась статья - ставьте лайки, пишите комментарии, подписывайтесь на меня на DTF или пишите мне в телеграм.

Спасибо за внимание!