PGR21.com
- PGR21 관련된 질문 및 건의는 [건의 게시판]을 이용바랍니다.
- (2013년 3월 이전) 오래된 질문글은 [이전 질문 게시판]에 있습니다.
통합 규정을 준수해 주십시오. (2015.12.25.)
Date 2024/08/16 15:28:50
Name 한루나
Subject [질문] 게임결과 분석툴 개발(크롤링) 질문
안녕하세요. 개발자가 아닌데, 최근 게임 제작에 재미를 붙이면서 chatgpt로 코드를 짜고 만들어 보고 있습니다.
구현하고 싶은 기능 중에 게임 랭킹을 만드는 부분이 있는데요,
웹에서 게임 기록을 조회 가능한데, 이것을 크롤링하는 부분에서 애를 먹고 있습니다.

요약하면, 스타크래프트2는 각 맵이나 모드에서 실행되는 공개 방의 게임 결과를 모니터링하여 웹에 송출하고 있습니다.
이 데이터를 취합하여 유저간 MMR을 구축하는 것이 제 목표입니다.

대상 사이트는 아래이고,
https://sc2arcade.com/map/3/175107/lobbies-history
위 사이트의 개별 게임마다 details를 클릭하면 플레이어와 승패가 노출됩니다.
이 정보를 크롤링할 수 있을까요? F12를 눌러서 소스를 봐도 마땅히 연결되는 것이 없어서..

혹시 고수분들께서, 이것이 간단히 가능한 일이다, 개발자의 도움 없이는(chatgpt를 잘쓴다고 하더라도) 어렵다 간단히 감만 알려주셔도 큰 도움이 될 것 같습니다!
혹시 간단히 만들어주실 수 있는 분 계시다면 소액의 보수를 드리고 의뢰드릴 수도 있습니다!

통합규정 1.3 이용안내 인용

"Pgr은 '명문화된 삭제규정'이 반드시 필요하지 않은 분을 환영합니다.
법 없이도 사는 사람, 남에게 상처를 주지 않으면서 같이 이야기 나눌 수 있는 분이면 좋겠습니다."
안군시대
24/08/16 15:43
수정 아이콘
f12 뉼러서 네트워크쪽을 보니까 정보를 xhr 형식으로 긁어올 수 있군요.

https://sc2arcade.com/api/lobbies/history?regionId=3&mapId=175107&includeMatchResult=true&limit=20
위의 주소를 GET으로 열면 json 형태로 정보를 가져옵니다. 각 파라미터들이 지역, 맵 등등을 지정하는 것 같고요.
이걸 이용하면 전적 데이터를 가져올 순 있겠지만, 이런식으로 사용하는 게 좋지는 않을 것 같아요. 저 사이트에 도움은 안되고 DB만 긁어가는 셈이라..

아, 저 사이트에서 API를 공식 제공하고 있군요.
https://api.sc2arcade.com/docs/api/index.html
여기 API 명세가 있으니, 이걸 이용하시면 될 듯 합니다.
한루나
24/08/16 16:03
수정 아이콘
댓글 대단히 감사드립니다.
API 명세를 실시간으로 연동해서 지속적으로 MMR을 업데이트하도록 구현하는 것도 가능할까요?
개발 지식이 없다보니..ㅠㅠ 따로 쪽지 드리겠습니다!
우울한구름
24/08/16 15:45
수정 아이콘
모바일로만 쓱 보긴 했는데, 저 정도면 셀레니움 써서 하시면 어렵지 않게 되긴 할겁니다. 아니면 어느정도 수집을 생각하시는 모르겠는데, 메인 페이지에서 디테일스의 주소를 수집한 다음에 디테일스 페이지의 정보를 따오셔도 되구요.
한루나
24/08/16 16:05
수정 아이콘
감사합니다! 제가 아직 개발 지식 없다보니 진도를 나가기가 쉽지 않네요 ㅠㅠ 우선 윗 댓글로 말씀주신 내용을 시도해보겠습니다.
상상속의동물기린
24/08/17 03:19
수정 아이콘
크롤링만이 목적이면 WebZip 같은 도구를 사용하셔도 됩니다.
크롤링 할 때 주의하실 점 중의 하나가 politeness (즉, 너무 빨리 대량의 문서를 긁어오지 않는 것)인데 그런 부분도 잘 챙겨줍니다.
html 파일, css 파일, js 파일 다 따로 떼어서 다운 받아주니 일단 시작하시기엔 좋을 겁니다.
한루나
24/08/17 15:53
수정 아이콘
감사드립니다!
해당 사이트의 소스 구조를 분석해서 어느 부분의 데이터를 따와야되는지 부분에서 막히고 있었습니다 ㅜ 말씀주신 프로그램 잘 활용해 보겠습니다!
목록 삭게로! 맨위로
번호 제목 이름 날짜 조회
178115 [질문] 24인치 고주사율 모니터 추천 부탁드립니다 쏘쏘쏘1991 24/10/03 1991
178114 [질문] 형님들, 와이프가 친정간다는데 어쩌죠? [36] 인생을살아주세요4886 24/10/03 4886
178113 [질문] 광고 촬영용으로 차량을 대여하면 어느정도 금액을 받으면 될까요? [9] Payment Required2956 24/10/03 2956
178112 [질문] 폰화면 컴퓨터 연결 질문입니다 [6] 제니2140 24/10/03 2140
178111 [질문] 가평 볼거리 추천부탁드립니다 [2] 유니꽃2852 24/10/03 2852
178109 [질문] 육아 질문입니다.(기저귀 떼기) [22] 싸구려신사3817 24/10/02 3817
178108 [질문] 흑백요리사 흑대백 팀대전 질문드립니다(스포 주의) [7] 포커페쑤3095 24/10/02 3095
178107 [질문] 서양은 중고교나 대학, 공무원 시험볼 때 오픈북으로 시험을 치는지요...? [6] nexon2735 24/10/02 2735
178106 [질문] 냉장고 부품(?)의 정체가 궁금합니다. [2] 던멜1721 24/10/02 1721
178105 [질문] 미래에 택시비 어떻게 계산할까요? [1] 어센틱1885 24/10/02 1885
178103 [질문] 소설 추천 부탁드립니다. [16] 행복을 찾아서1477 24/10/02 1477
178102 [질문] RAM 불량 관련 질문 입니다 [2] 카즈하2589 24/10/02 2589
178101 [질문] 라이젠 5600G 발로란트 문제 없나요? [3] 지구돌기1751 24/10/02 1751
178100 [질문] 월즈일정 궁금증 [13] 알마1542 24/10/02 1542
178099 [질문] 노트북 추천 부탁드립니다 [7] 김경호1545 24/10/02 1545
178098 [질문] 저소득 노령자 주택 보조 정책 [7] FreeRider1951 24/10/02 1951
178097 [질문] 이런 상황이라면 자산분배를 어떻게 하시겠습니까? [10] 펩시제로라임2382 24/10/02 2382
178096 [질문] 네이버 멤버쉽 요기요 배달 무료는 요기요 재가입 해야 하나요? [6] 빵pro점쟁이1920 24/10/02 1920
178095 [질문] 교통사고 질문입니다. [6] 송운화2649 24/10/02 2649
178094 [질문] 원화/달러/위안 -> 마카오 파타카 환전문의 [2] 오징어개임1507 24/10/02 1507
178093 [질문] 부부 자동차 2대 소유 보험 및 세금 관련 [5] Part.32026 24/10/02 2026
178092 [질문] 윈도우 재설치 질문 [6] 장헌이도2347 24/10/01 2347
178091 [질문] 상속 포기 질문 좀 드립니다. [13] luvsic3456 24/10/01 3456
목록 이전 다음
댓글

+ : 최근 1시간내에 달린 댓글
+ : 최근 2시간내에 달린 댓글
맨 위로