MMOCore Assíncrono

[KhayrusS]

 

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

 

Há um tempo estive me perguntando o porquê do mmocore, um dos principais componentes dos servidores L2J, não estar sendo evoluído.  O máximo de melhoria que vi, pelos diversos projetos que tive acesso ao código, foi o uso de mais de um  SelectorThread. 

Depois de um tempo de pesquisa, procurando por alguma modificação significante no mmocore, cheguei a conclusão que essa falta de melhorias só podia ter 3 explicações:

1. A alteração no mmocore é custosa e devido ao tempo de maturidade seria um grande risco;
2. Utilizar outra abordagem não iria apresentar um melhor desempenho, talvez até piorasse. Então quem tentou, provavelmente desistiu;
3. Quem evoluiu o mmocore simplesmente não quis compartilhar.

Na minha percepção  era improvável que uma tecnologia com mais de 15 anos, ainda continue sendo a melhor opção para esse cenário. Visto que a biblioteca NIO, atualmente utilizada pelo mmocore, foi lançada com o Java 1.4 e uma atualização dessa mesma biblioteca chamada de NIO2 foi lançada com o Java 7, então há uma chance de melhorar o mmocore utilizando a API introduzida pelo Java 7.

Uns dias atrás, fiquei um pouco ocioso e resolvi tirar a prova eu mesmo. Resolvi desenvolver um novo mmocore, tentando manter o máximo possível de compatibilidade com o atual, utilizando sockets assíncronos que em teoria iria melhorar o tempo de resposta cliente - servidor, o que acarretaria na diminuição de lag. Mas nem tudo é perfeito, há um preço a se pagar por essa melhoria: utilização de mais recursos (Memória e CPU).  Inicialmente estimei que haveria um aumento de 25 a 40 KB no consumo de memória para cada player logado, o que daria 4 MB a cada 100 player, se você fizer a façanha de colocar 10000 players no servidor, esse número subiria para 400 MB, o que não é lá muita coisa, levando em consideração os recursos disponíveis atualmente.

Após o desenvolvimento de uma versão utilizável, fiz alguns testes de carga utilizando o jmeter, que são apresentados nas tabelas abaixo:

O teste realizado foi bem simples, projetado apenas para saber o tempo de resposta de cada solução. Para não sofrer interferência por causa da latência de rede foi realizado em uma única máquina,  o que não é recomendado por causa do compartilhamento de recursos, principalmente CPU, entre o jmeter e o servidor. Mas acredito que para uma versão inicial já é o bastante.

O teste consiste em uma variedade de players (conexões) enviarem um pacote de 8 Kb, que é maior que a maioria dos pacotes utilizados pelo cliente do Lineage 2, e esperar uma resposta de também 8 Kb. Assim foi calculado o tempo de conexão mais o Round Trip do envio de pacotes. Segue uma breve explicação sobre os dados que estão nas tabelas:

Players - Quantidade de conexões concorrentes fazendo requisições (enviado pacote) para o servidor.

Média - O tempo médio de conexão mais o tempo de envio do pacote mais o tempo de recebimento e leitura (Round Trip Time) em milissegundos.

Min -  O tempo mínimo de conexão mais o tempo de envio do pacote mais o tempo de recebimento e leitura (Round Trip Time) em milissegundos.

Max - O tempo máximo de conexão mais o tempo de envio do pacote mais o tempo de recebimento e leitura (Round Trip Time) em milissegundos.

D. Padrão - medida de dispersão em torno da média, no geral quanto menor quer dizer que os tempos estão mais próximos uns dos outros.

Throughput - Quantidade de requisições por segundo.

Erro - Porcentagem de requisições que retornaram com erro.

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

No geral, utilizando sockets assíncronos apresentou um melhor desempenho, como pode ser visto. Os arquivos com o resultado dos testes estão disponíveis no

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

 

[ ]'s

Editado Abril 13, 2020 por KhayrusS

[Marlon]

Muito bom KhayrusS, você é um colírio para os olhos. 

Como contribuição vou upar um programa que gerou muita dor de cabeça um tempo atrás, para você analisar se há uma forma de fixar o problema juntamente nessa mudança, pois pelo que lembro a correção era feita no mmocore.

Gostaria de ajudar mais se possível, mas acredito que não é do meu nível de conhecimento tal façanha.

[KhayrusS]

 

Como contribuição vou upar um programa que gerou muita dor de cabeça um tempo atrás, para você analisar se há uma forma de fixar o problema juntamente nessa mudança, pois pelo que lembro a correção era feita no mmocore.

Opa, com certeza analisarei. O próximo passo é utilizá-lo no Gameserver para ver como se comporta, corrigir as falhas que venham acontecer. Depois verificar questões de segurança.

 

Gostaria de ajudar mais se possível, mas acredito que não é do meu nível de conhecimento tal façanha.

Acredito que cada um pode contribuir independente de nível de conhecimento, afinal o conhecimento está por aí pra ser adquirido, quanto maior o desafio mais conhecimento é gerado. Toda ajuda é bem vinda

[vert]

Bom dia campeão!

Também não tenho um conhecimento tão sólido, mas estarei acompanhando o tópico e caso aja algo em que eu possa ajudar, estou a disposição;

[Sakaki Shio]

Jamais imaginei que alguém iria mexer nisso, e muito menos dessa forma, incrível.

Tomara que você consiga alcançar os devidos resultados, o foda e o mais triste, que jaja estará sendo implantado em futuros projetos e vai ter gente anunciando (Vendo projeto com MMOCore atualizado 10x mais desempenho) é triste.

Boa sorte com o projeto, estou acompanhando, apesar de não ter conhecimento para contribuir 

[KhayrusS]

 

Jamais imaginei que alguém iria mexer nisso, e muito menos dessa forma, incrível.

Tomara que você consiga alcançar os devidos resultados, o foda e o mais triste, que jaja estará sendo implantado em futuros projetos e vai ter gente anunciando (Vendo projeto com MMOCore atualizado 10x mais desempenho) é triste.

Boa sorte com o projeto, estou acompanhando, apesar de não ter conhecimento para contribuir 

É realmente triste ver esse tipo de prática com open source. Eu poderia simplesmente implementar e vender, mas eu faço isso pelo prazer, pelo desafio. Então tento não pensar muito nisso.

 

 

Bom dia campeão!

Também não tenho um conhecimento tão sólido, mas estarei acompanhando o tópico e caso aja algo em que eu possa ajudar, estou a disposição;

O desenvolvimento ainda está no início, tem muitas coisas que planejo fazer, algumas a curto prazo e outras a longo prazo. Com certeza uma mãozinha a mais é sempre bem-vinda. 

O projeto está disponível no

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

. Assim como um

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

. Apesar de ter realizado um teste de "sanidade" e não ter encontrado nenhum problema grave. Acredito que ainda existem bugs, mas não tenho tanto tempo para testar. Como eu sou usuário Linux, o teste foi realizado apenas em um Servidor Interlude baseado em L2jServer, pois o cliente interlude pode ser executado em Linux sem muitas dificuldades. Seria interessante utilizar em servidores mais atuais, então se alguém estiver disposto a tentar utilizá-lo,  pode contar com a minha ajuda.

Os próximos passos que pretendo fazer:

• Escrever uma documentação, inicialmente simples, descrevendo como utilizá-lo;
• Criar uma wiki com as principais dificuldades e suas prováveis resoluções;
• Documentar e melhorar o código.

Quando tiver um tempo irei atualizar o post principal e o wiki do projeto no github.

 

[ ]'s

[BezneR]

Falta só colocar online para saber as possíveis falhas? Ou existe outra maneira de se obter isso?

Editado Setembro 29, 2018 por PeNaChO

[Marlon]

 

 

Não pensa nisso mesmo, tem gente que faz? Tem! Mas o lineage 2 também não é tão nosso para apontarmos o dedo para isso.

Com esse pensamento de não compartilhar por que vão vender, se todos pensassem assim ninguém nunca teria feito nada. Uma coisa é você fazer para si, para utilizar, etc, entendível a questão de não compartilhar. Mas fazer pensando em não postar por que vão vender é meio sei lá, eu não pensaria assim, nem penso. Tenho algumas tralhas feitas, e provavelmente que quando não for utilizar postarei tudo.

[BezneR]

 

Não pensa nisso mesmo, tem gente que faz? Tem! Mas o lineage 2 também não é tão nosso para apontarmos o dedo para isso.

Com esse pensamento de não compartilhar por que vão vender, se todos pensassem assim ninguém nunca teria feito nada. Uma coisa é você fazer para si, para utilizar, etc, entendível a questão de não compartilhar. Mas fazer pensando em não postar por que vão vender é meio sei lá, eu não pensaria assim, nem penso. Tenho algumas tralhas feitas, e provavelmente que quando não for utilizar postarei tudo.

Infelizmente tu sabe que é assim que funciona, caras como @KhayrusS criam, mas quem ganha com isso não são os desenvolvedores.

Porque sempre tem uns "zé ruela" que vem aqui o fórum pegam as coisas e vão pro facebook vender, quando não mandam mp querendo vender aqui no fórum mesmo.

# FATO

[KhayrusS]

 

Falta só colocar online para saber as possíveis falhas? Ou existe outra maneira de se obter isso?

Eu já fiz alguns testes básicos, mas ainda é necessário ver como é comportamento com vários players logados. Ainda existe a probabilidade de haver falhas que seriam evidenciadas ao colocar online, embora eu não planeje colocar um servidor para teste por agora, nem aconselho que usem em servidores reais por enquanto. Como não tenho tanto tempo pra fazer um teste real em um servidor online nesse momento, ficarei esperando algum aventureiro tentar usá-lo e reportar os bugs que surgirem.

Alguém que tenha conhecimento sólido em Java já é capaz de utilizá-lo, em teoria em poucos passos:

1. Compilar o mmocore disponível no
   O conteúdo está oculto, favor efetuar login ou se cadastrar!

   • Entre
   • ou
   • Cadastre-se
   ;
2. Colocá-lo no classpath do projeto que pretende utilizar;
3. Realizar as mudanças necessárias para utilizar as novas classes. 

 

Há algumas mudanças necessárias nas chamadas de método dos Packets, que provavelmente tendem a ser mais demoradas devido a quantidade de Classes existentes. Com relação a mudança do mmocore em si, basicamente o que precisa ser feito é substituir essa parte do código*:

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

por essa:

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

 

Contudo, há mudanças de hierarquia em L2GamePacketHandler e no Ipv4Filter. Essas alterações entre outros detalhes postarei depois quando estiver com um pouco mais de tempo.

Essas e as outras mudanças necessárias podem ser encontradas

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

.

* Essa mudança está utilizando como base L2jserver.

 

 

[ ]'s

[Nattan Felipe]

São essas coisas que fazem você um dos melhores membros do fórum. Desde 2008 até hoje!

Parabéns, brother. Que maravilha de tópico. Com toda certeza irei estudar um pouco sobre o assunto.

[KhayrusS]

 

São essas coisas que fazem você um dos melhores membros do fórum. Desde 2008 até hoje!

Parabéns, brother. Que maravilha de tópico. Com toda certeza irei estudar um pouco sobre o assunto.

Obrigado, brother 

 

Adicionei uma descrição básica de como usar

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

. E a primeira

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

.

[Bluur]

Sensacional, parabéns cara! Espero que dê tudo certo...

[Tayran.JavaDev]

Mano parabéns, incrível como você teve uma sacada dessa, será sucesso!

[KhayrusS]

 

Sensacional, parabéns cara! Espero que dê tudo certo...

 

 

Mano parabéns, incrível como você teve uma sacada dessa, será sucesso!

Obrigado, mano!

 

Lançada a 

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

.

[KhayrusS]

Lançada a

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

.

disponível no maven:

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

 

[BezneR]

 

Lançada a

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

.

disponível no maven:

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

 

Foi testada com quantos jogadores online?

[KhayrusS]

 

Foi testada com quantos jogadores online?

Não foi realizado testes relacionados a quantidade de jogadores online. Esse tipo de teste sairia do escopo do projeto, além de ser um teste difícil de realizar, difícil de mensurar e altamente custoso. Os testes são realizados utilizando

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

. O último teste que realizei, há um tempo, foram considerados 5000 usuários concorrentes enviando 10000 pacotes,  os pacotes foram entregues em menos de 1s. Infelizmente tive um problema com a infraestrutura que utilizei pro teste, e acabei perdendo os dados. No momento, estou um pouco sem tempo pra provisionar tudo outra vez e realizar um novo teste com a última versão, mas assim que der realizarei.

[KhayrusS]

Versão atualizada no post inicial.

[]'s

[KhayrusS]

Tópico atualizado com a Release 2.2.0

[Grundor]

Em 25/09/2018 at 15:57, KhayrusS disse:

 

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

 

 

 

Eu não sei se você sabe interpretar essas informações do jmeter, mas vou tentar sintetizar aqui pra você:

 

No primeiro caso usando o Selector, você tem uma variação  quase na mesma proporção no Throughput de 1000 (998 falha de 2 que não foi computado) para 2000(falha de 1 que não foi computado) players (50%)  porém a variação de 2000 para 4000 é quase a mesma, ali está o ponto que dá lag, o Throughput deveria crescer de forma proporcional ao Throughput, então pode-se concluir que o limite nessa sua configuração é por volta de 2000 players (se o pacote fosse estável e constante, mas sabemos que é variado então pode variar pra mais ou menos). É natural que assim que você aumentar a quantidade de usuários você tenha aumento de Throughput, pois significa que vc tem mais usuários e precisa enviar mais requisições.

No caso com o MMOCore Assíncrono é um pouco diferente temos um Throughput crescendo junto com o número de usuários atingindo o limite de proporção 8:1 com 8 mil usuários, provavelmente por alguma limitação de hardware ou rede (que só se sanaria com uma escala horizontal dos recursos de hardware). O que representa um ganho muito bom!  Olhando por alto,  além de um tempo de resposta menor  por ser assíncrono é normal já que a conexão é terminada antes do processamento, o  Desvio Padrão bem estável também até 8000 mil usuários, quebrando somente em algum lugar entre 8000 e 32000 .

Arrisco que o ganho do  MMOCore Assíncrono é cerca de 5x ou 6x maior em comparação ao Selector e tenho certeza que da pra polir mais isso ai. Players que jogarem em servidores com essa tecnologia certamente terão uma experiência muito mais fluída de jogo.

 

 

@KhayrusS Seria interessante linkar esse tópico no readme do projeto , ajudaria o fórum certamente

[KhayrusS]

@Grundor Obrigado pelas observações . Ainda tenho algumas modificações pra fazer no tópico, mas meu tempo anda curto pra fazer algo elaborado que acrescente um pouco de valor.

 

18 horas atrás, Grundor disse:

@KhayrusS Seria interessante linkar esse tópico no readme do projeto , ajudaria o fórum certamente

Assim que fizer o próximo commit adicionarei 

[Shawbruno]

tem alguma rev hj free e paga que utiliza o metodo assincrono ?

[KhayrusS]

Nova Versão disponível

O conteúdo está oculto, favor efetuar login ou se cadastrar!

• Entre
• ou
• Cadastre-se

Em 30/08/2019 at 12:08, Shawbruno disse:

tem alguma rev hj free e paga que utiliza o metodo assincrono ?

Existem alguns projetos privados utilizando. O único projeto acessível que eu tenho conhecimento é esse:

 

 

[Shawbruno]

Mas em interlude @kharyusS ?