[DEV]Java emu

[mAdloVe]

Вот, решил начать писать emu пресловутой игры на Java, так как данная игра и язык представляют для меня большой интерес. Хочется совместить приятное с полезным и углублять свои знания в Java. Может кого-нибудь заинтересует моя задумка...
На данный момент удалось реализовать аутентификацию с реалм сервером.
Выкладываю исходники своего творения. Прошу строго не судить.

[HIDE="Устарело"]
Проект переехал с http://github.com/ШтормКоре в http://github.com/JMaNGOS
git clone git://github.com/JMaNGOS/storm.git

В данный момент проект storm заморожен.

UPDATE:
storm закрыт полностью все наработки перебрались в JMaNGOS
[/HIDE]

В свою очередь все наработки были перенесены в новый проект "JMaNGOS". И сейчас все работы ведутся над "JMaNGOS".
Проект http://github.com/JMaNGOS
git clone git://github.com/JMaNGOS/JMaNGOS.git

математика.
Я точно не смотрел(проверял) апдейтполя, и поиск по маске. Скорее всего можно что то выкинуть, но точно утвержать в cpp коде не могу.

[RomanRom2]

Сообщение от zergtmn

Может мои глаза меня обманывают, но как раз получается, что равно.

ваши глаза вас обманывают. типов объектов несколько больше, чем привели вы. чуть выше я привел их все. проверьте на значениях выше TYPE_CORPSE. ни на какие размышления не наводит?

а то что приведенное вами совпадение имеет место быть, это всего лишь выдавание желаемого за действительное. это напоминает мне очень старую байку:

Родственник мой, S., оказался в Америке в начале восьмидесятых, в возрасте «за сорок» и владея английским языком в рамках «средней школы давно». Помыкавшись некоторое время (не о том сказ), S. нашел отличную работу — программистом Больших Шкафов для телефонного гиганта AB&C (кто знает, тот поймет). Для общения с начальством новоиспеченный программист быстро выучил английскую фразу «летмишоую» (сейчас покажу), за которой следовала демонстрация работающего кода, и вопросов больше не возникало.

Работа в телефонных гигантах неторопливая, но S. бездельничать не любил, и решил заняться оптимизацией. В одном из Больших Шкафов обнаружилась база данных, а в ней — таблица с парами чисел: 1-3, 2-6, 3-9, … , 1000000-3000000. Hичтоже сумняшеся, S. таблицу стер, а обращения к ней заменил строчкой B=A*3. Шкаф, радостно заурчав, продолжал функционировать. Отсутствие таблицы начальство заметило (и то по чистой случайности) через неделю. Состоялся знаменательный диалог:

— Где таблица?
— Таблица не нужна.
— Как это не нужна?
— Hу, не нужна. Летмишоую. Вот: B=A*3
— Что это?
— Вместо таблицы.
— А где таблица?
— Я ее стер. Hе нужна.
— Как стер???
— Летмишоую. Вот, работает. B=A*3
— Hу, работает. А где таблица-то?
…

В конце концов, проявив завидную корпоративную мудрость, начальник оставил S. в покое. А по AB&C долго ходили легенды о сумасшедшем бородатом русском, который ПРИДУМАЛ ФОРМУЛУ.

Это старая байка. На самом деле, большие шкафы не умели умножать. То есть умели, но программно и очень долго. Поэтому была таблица.

А «сумасшедший» русский придумал вот что:

A=(B сдвиг влево)+B, что эквивалентно умножению на 3

Со временем байка сохранилась, а смысл потерялся, т. к. владельцу «Пентиума», трудно себе представить, что большой шкаф не умел аппаратно умножать.

[zergtmn]

Сообщение от RomanRom2

ваши глаза вас обманывают. типов объектов несколько больше, чем привели вы. чуть выше я привел их все. проверьте на значениях выше TYPE_CORPSE. ни на какие размышления не наводит?

Я ничего не утвердаю. Я вижу закономерность и надеюсь, что кто-то, копавший поглубже опровергнет или скажет "это совпадение", приведя весомые аргументы.

Сообщение от RomanRom2

проверьте на значениях выше TYPE_CORPSE

Ваши данные:
ID_AIGROUP = $8;
ID_AREATRIGGER = $9;
TYPE_AIGROUP = $100;
TYPE_AREATRIGGER = $200;

Проверяем:
TYPE_AIGROUP = 1 << ID_AIGROUP; // 1 << 8 = 100h
TYPE_AREATRIGGER = 1 << ID_AREATRIGGER; // 1 << 9 = 200h

[RomanRom2]

да, мой косяк. посыпаю голову пеплом и приношу извинения.

попробую объясниться:
вижу:
ID_AIGROUP = $8;
ID_AREATRIGGER = $9;
NUM_OBJECT_TYPES = $0A;
и
TYPE_CORPSE = $80;
TYPE_AIGROUP = $100;
TYPE_AREATRIGGER = $200;
, т.е. последние три строчки списков и их соответствующе сравниваю. отсюда косяк.

нельзя читать форумы в перерывах между программежом... пойду проверять программеж, может и там всё поперепутал...

выходит, совпадения возможно и не случайны и ЕСТЬ ФОРМУЛА

А9 не так уж и прост в создании...да и необходимо попутно реализовывать другие вещи, по возможности ставлю заглушки
Мапменеджер - "Злодей", следит за картами и обновляет их переодически ( 100мс ). Работает, но пока только как заглушка. Карты обновляет, но самих карт, то нет ^^ . Точнее есть прообраз карт со списком зарегистрированных объектов. Да и до LOS пока далеко, нужны данные карт, переделать( написать ) навмеш...
Система статов - тянет еще больше: спелы, итемы, ауры. Везде заглушки не получится сделать, да и все равно необходима реализация.
зы честно говоря при программировании на джава начинаю немного завидовать cpp в плане работы с памятью, многие фокусы реализовать невозможно. В итоге массив значений-параметров ( m_uint32Values ) пришлось заменить на байтбуффер...надеюсь производительность не сильно упадет. Иначе придется костыли лепить еще те. Как там делфи в этом плане поживает?
ззы баги, опечатки... а ведь иногда же запускается и работает.
зззы как ФОРМУЛА поживает?

[TOM_RUS]

Сообщение от Minimajack

В итоге массив значений-параметров ( m_uint32Values ) пришлось заменить на байтбуффер...надеюсь производительность не сильно упадет. Иначе придется костыли лепить еще те.

А зачем? Неужели в яве нету что-то типа:

[StructLayout(LayoutKind.Explicit)]
struct UpdateField
{
      [FieldOffset(0)]
      public int IntValue;
      [FieldOffset(0)]
      public uint UIntValue;
      [FieldOffset(0)]
      public float FloatValue;
}

это C# аналог С++ union

union UpdateField
{
    int32 IntValue;
    uint32 UIntValue;
    float FloatValue;
}

нативного нету

немного оптимизации:
____
при CMSG_CHAR_ENUM - мы получаем информацию о персонажах, которая в дальнейшем не используется.
решил экономить - храню её до получения CMSG_PLAYER_LOGIN . Памяти сожрет побольше, но ненадолго (либо дроп по тайм-ауту, либо логин и очистка ненужных данных ).
в итоге запрос к characters уменьшился (ну хоть на 60 байт), и упростилась проверка принадлежности гуида персонажа аккаунту - нет в сохраненных данных - значит чужой.
____
LoadInventory, загрузка инвентаря плеера. Имеем на каждый нормальный итем двойное обращение к ObjectMgr::GetItemPrototype...я понимаю, что поиск по хештаблице очень быстрый, но зачем когда 2 строки выше уже получили, что надо ?

Доделал конвертор дбц2хмл (ver 12340)
test.7z
запускать или батник (extract.bat) или в коммандной строке с параметром quick. Кто хочет получить "все" может убрать параметр.
Ищет в текущей директории папку с дбц файлами и извлекает их в папку хмл (без нее вылезет ошибка). Работает в 5 потоков, поэтому товарищи, у кого 1 процессор, извиняйте; добавлять настройки не буду( можно и подождать ).
зы остались не разобранными только простые gtХХХххх.dbc и Achievement_Criteria.dbc (до него руки пока не дошли и пока явно не дойдут)

[Easy]

Хм... буквально пол года назад, может чуть больше, на айте тринити искал людей кто со мной начнёт делать сервер на Python или Java
Оказалось что ещё кому то в голову пришла такая идея, и не просто пришла а реализовывается
Бегло просмотрел все сообщения, и я так понял что это просто попытка сделать подобие мангосу.
А может стоит подумать и усовершенствовать, например как на офе, возможность бг между различными реалмами, или инсты.
Ещё о поддержки кластерной системы, например по мапам.
Собственно первое и второе связанно между собой.

Сообщение от Easy

Хм... буквально пол года назад, может чуть больше, на айте тринити искал людей кто со мной начнёт делать сервер на Python или Java
Оказалось что ещё кому то в голову пришла такая идея, и не просто пришла а реализовывается
Бегло просмотрел все сообщения, и я так понял что это просто попытка сделать подобие мангосу.
А может стоит подумать и усовершенствовать, например как на офе, возможность бг между различными реалмами, или инсты.
Ещё о поддержки кластерной системы, например по мапам.
Собственно первое и второе связанно между собой.

питоновцы Blacksmither
java хз, пока в основном наброски

[Easy]

Я не предлагаю сделать на питоне Это я предлагал раньше Я начал делать, сделал проверку логина и пароля, и отправку реалмов, и не кто не слова не написал что хочет делать, наоборот написали зачем оно нужно я и бросил.

Я предлагаю раз уж ты начал, и тут если люди которые не пишут что бы ты бросал, может стоит обсудить как сделать так, на яве, что бы каждый игровой сервер обслуживал определённых клиентов или лучше локацию.

Например все бг вынести отдельно, на отдельный мир, а инсты отдельно. ну и игру отдельно.
Ну и на базе этого, сделать бг межреалмное. Хотя, это нужно только для оч крупных серверов) так что может и не стоит даже думать об этом.

сначала нужно сделать - что бы работало.

[Easy]

Ну, как бы мангос работает, а легко его раскинуть на кластер? Нет
По этому нужно перед тем как делать - продумать как делать. Но вообщем то это просто мысли вслух Если будет делать один человек, это будет очень сложно и долго.

Сообщение от Easy

Ну, как бы мангос работает, а легко его раскинуть на кластер? Нет
По этому нужно перед тем как делать - продумать как делать. Но вообщем то это просто мысли вслух Если будет делать один человек, это будет очень сложно и долго.

вроде как rsa делал подобное, только никому не показывал.
http://www.jgroups.org/ .

[rsa]

Сообщение от Minimajack

вроде как rsa делал подобное, только никому не показывал.
http://www.jgroups.org/ .

делал, но не средствами мангоса, а через XEN.

[valsha]

интересно у вас тут, munche надо звать

как запустить данную весчь ?
Хочется посмотреть

[HuntsMan]

Через Java машину.

По поводу SMSG_CHAR_ENUM: может стоит загружать всю информацию о персонажах на отдельный CharacterServer? И оттуда сервер уже будет получать через сеть/сокет/кластер. Жрать оперативы это конечно будет прилично, но можно оптимизировать, т.е. держать в ОЗУ наиболее активных персонажей. К примеру средняя база на 300к голов занимает около 3х гигов, если произвести хорошую оптимизацию и того меньше будет.

[Evgeniy]

Сообщение от HuntsMan

Через Java машину.

По поводу SMSG_CHAR_ENUM: может стоит загружать всю информацию о персонажах на отдельный CharacterServer? И оттуда сервер уже будет получать через сеть/сокет/кластер. Жрать оперативы это конечно будет прилично, но можно оптимизировать, т.е. держать в ОЗУ наиболее активных персонажей. К примеру средняя база на 300к голов занимает около 3х гигов, если произвести хорошую оптимизацию и того меньше будет.

и зачем? Можно запросом в БД...тот же кеш фактически. Те же кластерные Бд и т.п. Тут не важна скорость...

[mAdloVe]

С начало сделали форк, а потом а потом вообще перезалили.
https://github.com/TRILLIUM-EMU/TRILLIUM-CORE

Можно ли как-нибудь сделать чтоб у них было что это форк?

update: удалили

Сообщение от mAdloVe

С начало сделали форк, а потом а потом вообще перезалили.
https://github.com/TRILLIUM-EMU/TRILLIUM-CORE

Можно ли как-нибудь сделать чтоб у них было что это форк?

update: удалили

Если перезаливали,то форк обрываеться

[mAdloVe]

Сообщение от Sex1k

Если перезаливали,то форк обрываеться

Это понятно. (Они для этого это и делали). После моего письма они удалили вообще.

[mAdloVe]

Как не нарушать лицензию клиента?
Как я понимаю вытягивать данные из клиента нельзя. А значит тулы с данными возможностями в репу коммитать нельзя. Как поступить тогда?

[KiriX]

Сообщение от mAdloVe

Как не нарушать лицензию клиента?
Как я понимаю вытягивать данные из клиента нельзя. А значит тулы с данными возможностями в репу коммитать нельзя. Как поступить тогда?

А не пофиг ли? Ты выкладываешь тулсы, а не данные клиента. Каждый, кто будет пользоваться этими тулсами сам принимает решение о нарушении лицензионного соглашения.
Это как оружие - создавшие его не несёт ответственности за то кем и как оно будет применено

[LLIbIcpEP]

Сообщение от Dereka

hibernate, почему он вдруг стал модным?
ORM конечно повышает производительность разработки, но использовать его нужно осторожно.
Всё конечно зависит от кривизны, но jdbc всегда быстрее чем ORMы.
В любом случае если проект для обучения то hibernate нужно попробовать
Я юзал плагин в еклипсе, он показывал какой в Итоге запрос уходит в БД от ORM, полезная штука оказалсь)

Садитесь, два Быстрее JDBC будет в сферическом вакууме тестов, а не продакшн-нагрузке. Вы как-то совсем не учли, что ORM это не только запросы в базу. Если правильно спроектировать сущности, и правильно работать с их прокси-объектами, использовать кэш - выйдет гораздо дешевле простого JDBC. А еще если мудро использовать FetchType - ведь не обязательно вытягивать всю информацию о сущности при ее загрузке, можно использовать ленивую инициализацию. Или вы собрались мастерить собственный кэш и прочее? У вас в итоге выйдет собственная ORM, не более.
PS: Проект еще жив? Как то я поздно узнал о нем Хочу участвовать. Могу пожертвовать билд-сервер и сделать континус-интегрейшн, реализовав фэншуйную сборку под мэйвеном, ну и разумеется участие в разработке.

[Evgeniy]

Сообщение от LLIbIcpEP

Садитесь, два Быстрее JDBC будет в сферическом вакууме тестов, а не продакшн-нагрузке. Вы как-то совсем не учли, что ORM это не только запросы в базу. Если правильно спроектировать сущности, и правильно работать с их прокси-объектами, использовать кэш - выйдет гораздо дешевле простого JDBC. А еще если мудро использовать FetchType - ведь не обязательно вытягивать всю информацию о сущности при ее загрузке, можно использовать ленивую инициализацию. Или вы собрались мастерить собственный кэш и прочее? У вас в итоге выйдет собственная ORM, не более.
PS: Проект еще жив? Как то я поздно узнал о нем Хочу участвовать. Могу пожертвовать билд-сервер и сделать континус-интегрейшн, реализовав фэншуйную сборку под мэйвеном, ну и разумеется участие в разработке.

Проекты насколько видно заморожены. Как говорится - нет времени.
зы У меня заглохло на стадии входа в мир...

[LLIbIcpEP]

https://github.com/llibicpep/JMaNGOS
Товарищи, не зачем нам замораживаться. Поехали дальше
Итак, теперь у нас есть мэйвен, и все наше счастье весит 1МБ. Все зависимости есть в публичных репозиториях, например, JBoss или Codehaus. Кроме jsr-310-ri-0.6.3.jar, ее надо подкладывать ручками. Уже есть Nexus для проекта, там будут все депенденси и проксирование публичных репо (ручками всегда подкладывать не будем), но я пока не готов открыть доступ в паблик из секьюрных соображений. Так-же есть Jenkins, но там еще нет ни одной джобы... Все равно код пока не компилится.
Почему? Такое впечатление, что с последнем коммитом в СтормКор что-то не докоммитилось.
PS: JMaNGOS не MaNGOS на джаве, да, урок понял
PPS: Давай налетай, без вас я в протоколе год разбираться буду. Опкоды для меня темный лес. Но вместе осилим
PPPS: Автор, давай тоже размораживайся Ну хотя-бы сделай мне небольшой интродакшн по тому, что есть...

Теперь есть nexus, со всеми зависимостями, в паблике.

[Evgeniy]

есть рабочий реалм сервер, и обработка пакетов мирового сервера.
У меня есть экстрактор dbc в xml, классы для работы с wmo, adt, m2 моделями, построение трианглмеша.
Что непонятно пиши.

[LLIbIcpEP]

В последнем коммите стормкора встречаются импорты следующих классов, хотя самих классов нету:
org.stormcore.authserver.network.realm.serverpacke ts.SMSG_SESSION_KEY;
org.stormcore.realmserver.network.auth.serverpacke ts.SMSG_SESSION_KEY;
org.stormcore.realmserver.RealmService;
org.stormcore.realmserver.services.PlayerService;
org.stormcore.realmserver.entity.PlayerEntity;

org.stormcore.realmserver.RealmServer:
Services.init(); - класс Services не импортирован, что это вообще не ясно

[Evgeniy]

Сообщение от LLIbIcpEP

В последнем коммите стормкора встречаются импорты следующих классов, хотя самих классов нету:
org.stormcore.authserver.network.realm.serverpacke ts.SMSG_SESSION_KEY;
org.stormcore.realmserver.network.auth.serverpacke ts.SMSG_SESSION_KEY;
org.stormcore.realmserver.RealmService;
org.stormcore.realmserver.services.PlayerService;
org.stormcore.realmserver.entity.PlayerEntity;

org.stormcore.realmserver.RealmServer:
Services.init(); - класс Services не импортирован, что это вообще не ясно

SMSG_SESSION_KEY - возможно для обмена сообщениями между authserver и realmserver...realmserver - походу привычный для названия world сервер. Я не в курсе что там mAdloVe задумал.
Могу перевести весь свой код для сборки мэйвеном и выложить в паблик, но это займет время. Нужно очень много почистить , так как там накопилось очень много мусора.

[LLIbIcpEP]

Ну, было-бы не плохо начать с чего-то, что все-таки компилится. Разгадывать паззл, когда в нем не хватает деталей, уж очень не просто. Вообще шикарно было-бы, если бы мне рассказали примерную архитектуру проекта, и где у нас что.

Давай попробуем все это смержить, что бы я пустил уже крутиться билды на CI.
Ресурсы уже все есть, домен проделегирован, осталось форум донастроить и html страничку на главной написать в русском и английском варианте.

[Evgeniy]

Сообщение от LLIbIcpEP

Ну, было-бы не плохо начать с чего-то, что все-таки компилится. Разгадывать паззл, когда в нем не хватает деталей, уж очень не просто. Вообще шикарно было-бы, если бы мне рассказали примерную архитектуру проекта, и где у нас что.

Давай попробуем все это смержить, что бы я пустил уже крутиться билды на CI.
Ресурсы уже все есть, домен проделегирован, осталось форум донастроить и html страничку на главной написать в русском и английском варианте.

смержить неполучится - у меня архитектура другая(DAO, guice ...и т.п.); фактически мы вместе не работали. У mAdloVe точно должен работать authserver.

[LLIbIcpEP]

Сорри, я думал у тебя форк mAdloVe. Я могу взглянуть? Может я не с того проекта форк сделал

[Evgeniy]

Сообщение от LLIbIcpEP

Сорри, я думал у тебя форк mAdloVe. Я могу взглянуть? Может я не с того проекта форк сделал

взгялунть - как только почищу от хлама...такое показывать людям нельзя

[LLIbIcpEP]

Ой, да ладно, мы же с вами оба понимаем что в реальном мире код никогда не бывает идеальным ))
Я же могу помочь, как минимум я могу переводить на мэйвен - мне для этого не нужно глубоко знать проект и его архитектуру.

[Evgeniy]

Сообщение от LLIbIcpEP

Ой, да ладно, мы же с вами оба понимаем что в реальном мире код никогда не бывает идеальным ))
Я же могу помочь, как минимум я могу переводить на мэйвен - мне для этого не нужно глубоко знать проект и его архитектуру.

почистить от субпроектов - моделвьювер и т.п. - что прямо не относится к эмуляции. Вынести их в тулзы или отдельные субпроекты.
зы как насчет OSGI ?

[LLIbIcpEP]

Я думаю должен быть корневой проект, и в нем как модули - эмулятор, экстракторы, тулзы, не?
OSGI, Spring, IoC... это все хорошо, но что я могу сказать не имея представления о том, что сейчас есть? Раз уже что-то есть, то архитектура уже наверное была выбрана, так уже будем ее придерживаться - это же java way. Не будем начинать с нуля, когда уже что-то есть, будем переиспользовать

[Evgeniy]

Сообщение от LLIbIcpEP

Я думаю должен быть корневой проект, и в нем как модули - эмулятор, экстракторы, тулзы, не?
OSGI, Spring, IoC... это все хорошо, но что я могу сказать не имея представления о том, что сейчас есть? Раз уже что-то есть, то архитектура уже наверное была выбрана, так уже будем ее придерживаться - это же java way. Не будем начинать с нуля, когда уже что-то есть, будем переиспользовать

сейчас все в куче
я сечас на работе, исходники смогу подчистить, но залить на гитхаб - только вечером.

[LLIbIcpEP]

Да, вообще мне тоже пора уже бы ехать.
Так что, будем вместе работать? Не против названия? А то уже домен зарегал

[Sid]

Читаю и прямо душа радуется
Я для саморазвития полгода назад начал свой велосипед писать используя только Qt, запустил персонажа в мир, потом работа появилась и теперь времени не хватает