Датамайнинг клиента игры - Page 11

nORb Dragon_renamed_41442_28082025 · 30.04.2019, 09:25

Ссылки на полезные ресурсы:

Публичный архив изменений по датамайну на «E7 Vault»

Ссылки на полезные посты:

потрошилки пакетов/архивов:

data.pack (скрипты на python) - https://forums.goha.ru/showthread.ph...#post159273387 (версия 2.7 от 2021.12.02)
*.bank (скрипты на python, только под Windows) - https://forums.goha.ru/showthread.ph...#post159275908
описание потрошения звуковых файлов (.bank) - https://forums.goha.ru/showthread.ph...#post158649085

конверсия формата файлов:

db-файл в csv-формат (скрипты на python) - https://forums.goha.ru/showthread.ph...#post159274578
(ВНИМАНИЕ! поддерживается пока только старый формат, использовавшийся до патча от 2021.06.10)
scsp-файл в json-формат (скрипты на python) - https://forums.goha.ru/showthread.ph...#post159272975
(ВНИМАНИЕ! поддерживается пока только старый формат, использовавшийся до патча от 2021.06.10)

Если у кого есть мысли, идеи, предложения или даже конкретные "программные продукты" для датамайна Epic Seven - пишем, не стесняемся.

Открытый код - приветствуется!

В случае, если есть что обсудить со мной, но лень регистрироваться на гохе, меня можно найти и на reddit: /u/nORbDragon

nORb Dragon_renamed_41442_28082025 · 09.11.2021, 15:50 **#251** **#251**

Надоело "умно ковыряться", искать концы.

Сегодня или завтра просто накидаю брутфорс и запущу через него подбор ключа по предполагаемым ключевым фразам в зашифрованной строке. Надеюсь, что это даст какой-нибудь результат.

nORb Dragon_renamed_41442_28082025 · 10.11.2021, 01:02 **#252** **#252**

Собрал и запустил брутфорс... если и он мне не родит ключ для дешифровки, то я умываю руки.

nORb Dragon_renamed_41442_28082025 · 12.11.2021, 10:51 **#253** **#253**

Буду краток: решил забить на попытки расшифровать db-файлы (тексты, инфа по скиллам и пассивкам персонажей и т.д.).

Теперь касаемо того, что до сих пор незашифровано. Вкидываю очередные картинки из датамайна, которые возможно достойны упоминания.

Морда лица для нового скина (Мерседес):

Морда лица для спецухи Пилис:

Морды лица для Адин (3★ новый сюжетный персонаж) и Заххака (5★, земля, боец):

Морды лиц для новых 3★ персонажей (c3134 и c3135 - имён не знаю, до эпизода 4 ещё не дополз):

Морды для новых НПЦ:

Вообще, картинка составная из 12 кусков (12 месяцев года?). Как я понимаю, связана с разлочкой сюжетного персонажа Адин.

Я решил склеить эти 12 кусков.

Если кому надо их отдельно - свистите, дам линки.

Заххак

Адин

спецуха Пиллис

СЮЖЕТНЫЕ СПОЙЛЕРЫ! ОТКРЫВАТЬ НА СВОЙ СТРАХ И РИСК!

ГАДАНИЕ НА ДАТАМАЙНОВОЙ КОФЕЙНОЙ ГУЩЕ, ПОМЕШИВАЯ ВИЛАМИ:

В датамайне обнаружены пустышки-заготовки с именами c4141, c4142, c4143, c4144. Единственное, что в описании этих заглушек бросается в глаза, это строчка вида "sprite/undisclosed_adin".

То есть, или это заглушки под Адин, изменения в её стихии/персонаже по мере прохождения сюжета (? вроде что-то говорилось о таком?), или таки заглушки под новых персов, куда напихали копипаст вида "проходим мимо - это Адин" для отвода глаз.

Darkmor · 12.11.2021, 13:05 **#254** **#254**

Originally Posted by nORb Dragon:

c3134 и c3135 - имён не знаю, до эпизода 4 ещё не дополз

Первая Еоонрянг, вторая Хасоль. Первая встречается в сюжетке, вторая в побочке сюжетки. Местные органы правопорядка.
Видимо, будут 3* персонажами

nORb Dragon_renamed_41442_28082025 · 12.11.2021, 13:27 **#255** **#255**

Originally Posted by Darkmor:

Видимо, будут 3* персонажами

Докладываю с уверенностью 146%!

Все персы, которые начинаются на c3xxx - 3★ игровые персы, без исключений. Если их ещё не завезли как игровые, значит завезут потом.

nORb Dragon_renamed_41442_28082025 · 14.11.2021, 15:17 **#256** **#256**

Гуглил всякое, и вот случайно натолкнулся на пост автора бывшего очень полезного сайта по просмотру моделек персонажей из э7 - https://e7herder.com/

Ссылка на пост - https://github.com/zklm/e7herder-iss...eases/tag/dump , взято с реддита - https://old.reddit.com/r/EpicSeven/c...s_e7herdercom/

Quote:

Earlier in 2021, E7 did a major update to their modeling library (Spine v2 -> v3) which would require a large rework of my code to get the model viewer working and regularly updated with the newer models. Sorry to say but I don't have the motivation and time to dig in to it. I've taken the site down since it's pretty pointless to keep it going.

If you'd still like to use the model viewer for models released before around May 2021, I've attached the entire site's frontend here. Just keep in mind that time to time models are updated, so these old files may not be 100% as they appear in-game now.

To use this offline dump, simply extract it somewhere and then run a local server from the directory (where index.html is).

Если коротко и "на русскам":
Смайлы перешли с использования старой версии Spine (v2) на новую (v3) с полной переработкой библиотек, связанных со спрайтами и анимацией. Автор ресурса решил не заморачиваться и забить.

Но, чтоб его труды не были напрасными, он решил выложить свои наработки и дамп базы в открытый доступ для свободного пользования. Завтра наверн скачаю и гляну, как он это реализовал. Мб смогу и модельки по свежим персам компоновать себе, если не всё так серьёзно поменялось, как он пишет...

nORb Dragon_renamed_41442_28082025 · 15.11.2021, 12:25 **#257** **#257**

В дампе e7herder.com включены персонажи по патч 2021.04.29 включительно (Senya).

С помощью зубила и напильника подправил в некоторых местах код, чтоб работало не на "верхнем уровне", а во "вложенной папке". Там кругом хардкод, вплоть до списка персонажей.

Кто скучает по моделькам из e7herder, но не может поднять копию его сайта у себя, можете поковыряться на моей копии - https://www.norbdragon.com/e7herder/tools/model-viewer

Если чего, в "моей" версии могут быть глюки. Как я уже упоминал выше, я правил часть кода ради возможности развернуть этот сайтик в какой-нибудь левой подпапке, не на верхнем уровне. И правил я только EN-версию. Хардкод других языковых пакетов я не правил.

Дальше, касаемо перегонки файлов моделей персонажей из .sct и .scsp в .json и .png... Ну, я предполагаю, что это одно и то же, просто нужен дешифровщик/конвертер.

В его дампе нет конвертеров. Используются уже готовые конвертированные/дешифрованные файлы.

Яхз даже... региться на реддите и ломиться в личку дядькам, которые выкладывают свежак с просьбой рассказать, как они конвертят эти файлы в png и json?

Но я бы такого ноунейма с 0+ постами на реддите, ломящегося мне в личку с такими просьбами и вопросами, послал бы на хутор бабочек ловить.

nORb Dragon_renamed_41442_28082025 · 16.11.2021, 10:09 **#258** **#258**

Зарегился на реддите вчера вечером.

Попробовал написать в личку buttreynolds, у него личка залочена.

Там есть ещё функционал чата, которым я решил воспользоваться вместо лички. Написал ему туда приветствие и т.д. Судя по тому, что пока от него нет реакции, видно он на реддите не такой уж и частый гость. Или просто игнорит все варианты "приватной переписки".

nORb Dragon_renamed_41442_28082025 · 18.11.2021, 12:38 **#259** **#259**

Originally Posted by nORb Dragon:

Попробовал написать в личку buttreynolds, у него личка залочена.

Дядько на связь до сих пор не вышел. Да и вообще сильно похоже, что он не столько игнорит меня, сколько на реддите всё ещё не появлялся.

Думаю немножко его расшевелить, вкинув на следующей неделе свежий датамайн картинок на реддит. С ремаркой, что хотел бы пообщаться с другими датамайнерами, buttreynolds в том числе. Ну, я тут поковырялся и пришёл к выводу, что на реддите давно никто не выкидывает полноценный датамайн картинок.

Между делом глянул, как обычно это делал Юфитроуэвей. Он это всё выкидывал на imgur.com , отдельным "альбомом-линкой" каждую папку датамайна (баннеры отдельно, арты отдельно и т.д.). Думал побыть "имитацией", тоже заливать как "анонимус" на имгур.ком, но... хрен там плавал. imgur.com пошёл по пути наших любимых соцсетей, требует теперь привязки к своим учёткам реального мобильного номера. В целях "борьбы со спамерами". Ага, верю, что мобильный номер они юзают именно для этого.

Перебрав варианты, остановился на мысли о хранении картинок из датамайна на своём сервере, как сейчас. Совсем не палюсь, да.

Но вроде пока бананы за датамайн клиента не раздают?

Для удобства просмотра собрал автоматический генератор html-страниц, имитирующий стиль "альбомов" с imgur.com .

Предлагаю, кому не лень, тупо пробежаться по ссылкам и чекнуть, нормально ли всё показывает.

Darkmor · 18.11.2021, 13:57 **#260** **#260**

Originally Posted by nORb Dragon:

нормально ли всё показывает.

у меня, на опере, всё работает

Originally Posted by nORb Dragon:

Можно озвучивать идеи и предложения

https://www.norbdragon.com/uploads/e...11111/cut.html
в анимациях неплохо бы добавить возможность реплея для ролика

nORb Dragon_renamed_41442_28082025 · 18.11.2021, 14:04 **#261** **#261**

Originally Posted by Darkmor:

в анимациях неплохо бы добавить возможность реплея для ролика

Я думал над этим, но не нагуглил реализации.

webp, мать его за ногу.

nORb Dragon_renamed_41442_28082025 · 18.11.2021, 15:43 **#262** **#262**

Originally Posted by Darkmor:

в анимациях неплохо бы добавить возможность реплея для ролика

Сообразил, как реализовать.

Теперь вроде должно нормально показывать как при повторном заходе на страницу (у меня в хроме при рефреше страницы показывало последний кадр везде) и добавил ещё функционал повторного просмотра видео.

Для повторного просмотра надо тупо тыкнуть в область этого видео.

nORb Dragon_renamed_41442_28082025 · 19.11.2021, 11:49 **#263** **#263**

Продолжаю диалог с самим собою.

Сделал автогенератор html-страничек для картинок, где были замечены хотя бы мелкие изменения в файлах. На глаз возможно разницы нет, но байтики расходятся.

Сравнительные странички из датамайна за 30 сентября (старое), результаты сравнивания с датамайном за 16 сентября, если чего:

https://www.norbdragon.com/uploads/e...--changes.html
https://www.norbdragon.com/uploads/e...--changes.html

Следующее на очереди:
1) генерировать страничку, где будут перечислены ссылки на "альбомы патча";
2) формирование "странички верхнего уровня", где будут перечислены ссылки на все обработанные датамайны, их изменения.

Грубо говоря, первое - это тупо страничка вида "в датамайне от 2021.11.11 были обнаружено новое/изменения в таких то папках, подробнее можно посмотреть по ссылкам таким то". Ну и список папок в виде ссылок на страницы "альбомов" с картинками.

Второе - это тупо список дат отдатамайненных патчей с переходом на страницы из "первого пункта" при нажатии на интересующей дате датамайна.

Ну, надеюсь, что понятно выразился.

Darkmor · 19.11.2021, 13:47 **#264** **#264**

Originally Posted by nORb Dragon:

На глаз возможно разницы нет

я даже подумал, что страничка с Белиан, это пресет для 3д очков :)

nORb Dragon_renamed_41442_28082025 · 19.11.2021, 14:23 **#265** **#265**

Originally Posted by Darkmor:

страничка с Белиан, это пресет для 3д очков

Ладно. Первую задумку накидал - https://www.norbdragon.com/uploads/e...930/index.html

Добавил в шапку просмотра "альбома" кнопку "подняться на уровень выше". Возвращает в список "папок-альбомов" выбранного датамайна.

Теперь в "свободное от работы время" буду соображать "самый верхний уровень". Где будет список всех обработанных датамайнов.

nORb Dragon_renamed_41442_28082025 · 19.11.2021, 16:02 **#266** **#266**

Касаемо второй задумки - https://www.norbdragon.com/uploads/epic7/datamine/

Пока черновик.

Darkmor · 19.11.2021, 17:17 **#267** **#267**

[Datamine] 2021.11.11 Patch: New images in /img folder [ 36 pics ]
тут можно немного переставить картинки по номерам, чтобы было цельное изображение:

nORb Dragon_renamed_41442_28082025 · 19.11.2021, 19:42 **#268** **#268**

Originally Posted by Darkmor:

тут можно немного переставить картинки по номерам, чтобы было цельное изображение:

У меня сортировка картинок по алфавиту, а не по номерам.

Если кому надо собрать цельное изображение, я его уже фотожопил и выкладывал в этом топике.

https://forums.goha.ru/showthread.ph...#post159249514

Добавлено через 3 минуты

Решил оставлять в датамайне "намёки" на наличие новых персов/монстров в клиенте игры.

Выглядит это так: https://www.norbdragon.com/uploads/e...2020/20200220/

Сразу после ссылок на альбомы картинок могут быть дополнительные небольшие блоки текста вида:

Quote:

New portraits (big and nice for dialogs and for window «Hero Management») in patch for:
- c4023, npc1119, npc1120
Changed portraits (big and nice for dialogs and for window «Hero Management») in patch for:
- c1081
New models (sprites/actions) in patch for:
- axe_wind_c, ceris, pet_eggmouse1_n_grade1_1, pet_eggmouse1_n_grade1_2, pet_eggmouse1_n_grade1_3, pet_eggmouse1_n_grade3_1, pet_eggmouse1_n_grade3_2, pet_eggmouse1_n_grade3_3, pet_eggmouse1_s_grade1_1, pet_eggmouse1_s_grade3_1, pet_princess1_n_grade1_1, pet_princess1_n_grade1_2, pet_princess1_n_grade1_3, pet_princess1_n_grade3_1, pet_princess1_n_grade3_2, pet_princess1_n_grade3_3, pet_princess1_s_grade1_1, pet_princess1_s_grade1_2, pet_princess1_s_grade3_1, pet_princess1_s_grade3_2

Имён персонажей и мобов я, конечно, расшифровывать не буду. Это скорее информация для тех, кто любит "мозгоштурм"... или "датамайнер".

nORb Dragon_renamed_41442_28082025 · 19.11.2021, 23:45 **#269** **#269**

"Рут" по датамайнам с возможностью как перехода сразу в нужный альбом нужного датамайна, так и на индивидуальную небольшую страничку по выбранному датамайну - https://www.norbdragon.com/uploads/epic7/datamine/

Но я тут обнаружил, что у меня все старые data.pack надо заново потрошить и заново сравнивать их содержимое.

Процесс нифига не быстрый. Поэтому пока сколько смог столько обработал и выложил на сервере. Благо нигде я этой ссылкой не светил кроме гохи, могу особо не торопиться.

В принципе, наверное уже изменений особо в структуру подачи данных вносить не буду. Как будет выглядеть в итоге, можно оценить уже сейчас.

Приветствие только подправлю ещё с предложением датамайнерам "в теме шифровки моделек персонажей" выйти со мной на связь, допустим через реддит.

nORb Dragon_renamed_41442_28082025 · 20.11.2021, 22:45 **#270** **#270**

Долго и упорно потрошу старые датамайны, сравниваю их, заливаю результат на сервак, запускаю автогенератор страничек и делаю беглую пробежку по получившемуся напоследок...

И вот что я ещё увидел, чекая по-диагонали результаты.

Туториалы для новайсов, куда никто никогда не смотрит.

Есть у нас художнеги от слова худо, кто поменяет на первой картинке Раса на Виолета, а Вилла на Кайрона? Иконки стихий, так и быть, я и сам поменяю.

nORb Dragon_renamed_41442_28082025 · 21.11.2021, 00:42 **#271** **#271**

Этого кажется не выкладывал в своё время.

Пущай здесь поваляется.

nORb Dragon_renamed_41442_28082025 · 22.11.2021, 12:10 **#272** **#272**

Тыкс. В общем, вроде пока всё.

Собрал "публичный архив" изменений в датамайнах от 2020.02.20 до "сегодня" - https://www.norbdragon.com/uploads/epic7/datamine/

Для "дураков": для нормальной работы этого "мини-сайтика" требуется разрешение на использование java-скриптов.

Касается это обычно только параноиков, которые в браузере настроили запреты на всё, вплоть до исполнения ява-скриптов на "неодобренных" ими сайтах.

Как минимум одного такого лично знаю, поэтому предупреждаю.

В планах ещё снова сравнивать файлы озвучки, отписываться об появлении новых войс-линий в корейском паке.

Darkmor · 25.11.2021, 01:03 **#273** **#273**

https://www.reddit.com/r/EpicSeven/c...amine_anymore/
кто-то ищет датамайны :)

nORb Dragon_renamed_41442_28082025 · 25.11.2021, 08:44 **#274** **#274**

Думаю, они сами не знают, чего ищут.

Самая важная часть в датамайне для "задрота":
- мультипликаторы скиллов;
- реальная работа скиллов, последовательность активации шагов скилла (сначала стрип/бафф, потом атака, потом дебаффы?);
- намёки на следующий баннер.

Для незадрота могут быть интересны тексты (сайдсторики?), картинки и модельки персонажей (для e7herder).

Сейчас непонятно через какое место несколько дяденек реддита достают мультипликаторы.

Реальную работу скиллов и тексты достать невозможно, ибо db-файлы зашифрованы.

Модельки персонажей... вроде не зашифрованы, но владелец e7herder махнул рукой на свой проект со словами "они перешли на spine v.3, я не могу под него подстроиться, умываю руки". Видимо там не всё так просто. Но контакта со "знающими людьми" я так ещё и не установил.

Намёки на следующий баннер часто спойлерят в стримах. В патч-ноутах тишина, но если смотреть стримы, там в последние месяца всегда расписывают ВСЕ баннеры на следующий период. И да, ещё прикол: они в дата.пак игры давно засунули все баннеры по всем активным персам и не удаляют их. В итоге, если будет запланирован повтор баннера, то датамайнер этого не увидит. Раньше смайлы удаляли баннеры из дата-пака, чтоб экономить место, и заново его потом добавляли. Что сразу бросалось в глаза и предупреждало датамайнера о вероятном повторе баннера.

Остаются только картинки. Ну и частично, как я уже упоминал выше, модельки персонажей. Появление которых в клиенте вместе с картинками скиллов для них намекает на то, что персонаж возможно близок к релизу в качестве игрового (Заххак, допустим, или Белиан, или Лайка).

Возможно, что поэтому никто больше датамайны и не выкладывает.

Ибо они свелись к клипарту и картинкам.

Добавлено через 2 минуты

Самое весёлое щаз в датамайне, это наблюдение за особой любовью смайлов к... "баннерам с паками" и "туториалу".

Чуть ли не в каждом патче идёт куча перерисовок и дорисовок для баннеров к пакам и туториалу.

nORb Dragon_renamed_41442_28082025 · 25.11.2021, 13:37 **#275** **#275**

Пока чекнул только apk-файл. Ничего интересного. Дата-пак и озвучку буду майнить вечером.

19.11.2021, 13:47 #264 #264
Darkmor Мастер 6,975 Всего лайков: 1,743 Join Date: 23.01.2019	Re: Датамайнинг клиента игры Quote: Originally Posted by nORb Dragon Originally Posted by nORb Dragon: На глаз возможно разницы нет я даже подумал, что страничка с Белиан, это пресет для 3д очков :)

19.11.2021, 17:17 #267 #267
Darkmor Мастер 6,975 Всего лайков: 1,743 Join Date: 23.01.2019	Re: Датамайнинг клиента игры [Datamine] 2021.11.11 Patch: New images in /img folder [ 36 pics ] тут можно немного переставить картинки по номерам, чтобы было цельное изображение:

25.11.2021, 01:03 #273 #273
Darkmor Мастер 6,975 Всего лайков: 1,743 Join Date: 23.01.2019	Re: Датамайнинг клиента игры https://www.reddit.com/r/EpicSeven/c...amine_anymore/ кто-то ищет датамайны :)

Posting Rules
You may not post new threads You may not post replies You may not post attachments You may not edit your posts BB code is On Smilies are On [IMG] code is On HTML code is Off Forum Rules