WN시리즈도 이제 벌써 8까지 도달했습니다. WN8을 소개하면서 개발자들은 지금까지 나온 WN시리즈 중에서 가장 정확한 정보를 제공할 것이다라고 밝혔습니다. 개발자들은 WN8을 제대로 사용하기 위한 몇몇 절차도 내놓았습니다만, 과연 이들은 사실만을 말하고 있는 것일까요?

다음은 WN8 위키에서 발췌한 안내문입니다.

 

인용구 

WN8은 각 경기에서 플레이어의 공헌도를 측정합니다. 또한 동시에 계정을 검색하면서 스킬을 측정할만한 쓸만한 정보를 추출하려 하기 때문에 WN8을 훌륭한 측정 장치라고 말하는 것은 무리가 있습니다. WN8은 다음 승률, 참전 숫자, 평균 전차 단계 만을 집중적으로 살펴보며, 전적의 평가 혹은 다른 사람과 소대를 맺거나 다른 사람의 전투 기록을 보는 것을 확인하지 않기 때문입니다. 이는 WN8가 타이밍, 우선도 높은 전차, 협력 혹은 개인의 판단력을 측정할 수 없기 때문입니다.

 

또한 이어지는 “측정기의 한계와 그 타당성” 그리고 항상 반복되는 “우리가 어떻게 할 수 있는게 없다” 라는 답변들 왜 이런 답변이 나오느냐고요? 이들이 이미 자신의 공식에 심각한 문제가 있다는 것을 알고 있다는 것입니다. 하지만 여전히 여러분은 WN8를 사용하고 싶을 것입니다. 왜냐면 우리들 자신도 타당한 이피션시를 산출할 수 있는 공식을 알지 못하기 때문입니다.

 

경전차들에게 있어 WN8는 최악의 측정기입니다. 도움으로 입힌 피해는 API 수치로 간주되지 않기 때문에 WN8의 공식에는 포함되지 않습니다. 이 것 하나만으로도 WN8는 경전차 전차장에게는 쓸모 없는 장치라는 것을 알 수 있습니다.

WN8의 결함은 생각보다 깊이 박혀있습니다. 한번 보시죠

 

1) WN8는 점령 수치를 측정하지 않습니다. 점령 수치가 전투에 미친 영향을 선별할 수 없기 때문입니다. 강습전 방어를 제외하고 게임을 양분하는 가장 큰 승리 요건을 그냥 무시해버렸다는 겁니다. 그리고 숙련된 전차장이 전황을 파악하고 필요한 시점에 시작된 점령 수치를 전차장의 실력으로 측정하지 못합니다. 이건 크나큰 오류입니다.

 

2) 소대의 성적을 측정하지 못합니다.

 

3) 서버 등의 문제로 롤백된 경우 그 내용을 측정하지 못합니다. 개발자 스스로 과거내역이 측정의 타당성을 저해하는 주요한 요소임을 인정했음에도 말입니다.

 

4) 승률 조작을 측정하지 못합니다. 스텟은 조작에 완전히 말려드는데, WN8는 다른 WN시리즈와 마찬가지로 이러한 조작 여부를 전혀 탐지 못합니다.

 

하루 종일이라도 문제점에 대해서 지적할 수 있지만 결국 결론은 이겁니다. WN8은 정작 전투 중 일어난 중요한 사건에 대해서 측정할 수 있는 방법이 없다는 겁니다.

 

이 친구들이 차트나 계수의 상관관계에 대해서 언급하길 그렇게 좋아하니 한번 위키의 WN8에 대해서 들여다봅시다. 단순히 들여다보면 괜찮아 보입니다. 승률이 높은 사람은 높게 나올 거고 낮은 사람은 낮게 나올 겁니다. 하지만 그런건 지금 전적만 봐도 바로 나옵니다. 그렇다면 WN8는 실력이 굉장히 유사한 플레이어를 어떻게 구분하는가?

WOTLabs.net을 사용해서 북미, 유럽, 동아시아 상위 랭킹 10위의 플레이어들의 성적을 불러왔습니다. 자, WN8는 이런 분포를 보여주었습니다.

 

 

 

 

r = 0.073746 r square = 0.005438

 

이게 무슨 뜻인가?

 

r은 상관 계수입니다. r이 1이나 -1에 가까울 수록 상관성은 커집니다. r이 0에 가깝다는건 상관성이 낮다는 것입니다. 즉, 만약 r = 0.0737746이라고 한다면 거의 상관성이 없는 겁니다.

r square는 더 심합니다. r square는 2가지 변수에 대한 상관성을 제시합니다. WN8에 따르면, 이들 각 서버 상위 랭커 10인의 수치는 무려 0.54% 심지어 1%에도 못 미치는 수준입니다.

 

이걸 단순한 실패라고 부를 수 있을까요? 우린 모두 전차장의 실력이 승리에 영향을 주는 요소라고 알고 있지만, WN8는 그렇지 않은 모양입니다. 심지어는 저기 동떨어져있는 랭커를 이상 변수라고 쳐서 제외하고 계산해도 여전히 3%입니다.

부디 여러분 WN8나 다른 실력 측정기 따위는 무시하십시오. 각 개인의 실력을 측정 하는 데에 이것만큼 무가치한 장치는 없을 겁니다. 그리고 개발자 자신도 말했다시피 뭘 어떻게 해볼 수 있는게 없다고 했으니까요


http://arotg.kr/?p=1728