|
:: 게시판
:: 이전 게시판
|
- PGR21 관련된 질문 및 건의는 [건의 게시판]을 이용바랍니다.
- (2013년 3월 이전) 오래된 질문글은 [이전 질문 게시판]에 있습니다. 통합 규정을 준수해 주십시오. (2015.12.25.)
통합규정 1.3 이용안내 인용"Pgr은 '명문화된 삭제규정'이 반드시 필요하지 않은 분을 환영합니다.법 없이도 사는 사람, 남에게 상처를 주지 않으면서 같이 이야기 나눌 수 있는 분이면 좋겠습니다."
24/08/16 15:43
f12 뉼러서 네트워크쪽을 보니까 정보를 xhr 형식으로 긁어올 수 있군요.
https://sc2arcade.com/api/lobbies/history?regionId=3&mapId=175107&includeMatchResult=true&limit=20 위의 주소를 GET으로 열면 json 형태로 정보를 가져옵니다. 각 파라미터들이 지역, 맵 등등을 지정하는 것 같고요. 이걸 이용하면 전적 데이터를 가져올 순 있겠지만, 이런식으로 사용하는 게 좋지는 않을 것 같아요. 저 사이트에 도움은 안되고 DB만 긁어가는 셈이라.. 아, 저 사이트에서 API를 공식 제공하고 있군요. https://api.sc2arcade.com/docs/api/index.html 여기 API 명세가 있으니, 이걸 이용하시면 될 듯 합니다.
24/08/16 16:03
댓글 대단히 감사드립니다.
API 명세를 실시간으로 연동해서 지속적으로 MMR을 업데이트하도록 구현하는 것도 가능할까요? 개발 지식이 없다보니..ㅠㅠ 따로 쪽지 드리겠습니다!
24/08/16 15:45
모바일로만 쓱 보긴 했는데, 저 정도면 셀레니움 써서 하시면 어렵지 않게 되긴 할겁니다. 아니면 어느정도 수집을 생각하시는 모르겠는데, 메인 페이지에서 디테일스의 주소를 수집한 다음에 디테일스 페이지의 정보를 따오셔도 되구요.
24/08/17 03:19
크롤링만이 목적이면 WebZip 같은 도구를 사용하셔도 됩니다.
크롤링 할 때 주의하실 점 중의 하나가 politeness (즉, 너무 빨리 대량의 문서를 긁어오지 않는 것)인데 그런 부분도 잘 챙겨줍니다. html 파일, css 파일, js 파일 다 따로 떼어서 다운 받아주니 일단 시작하시기엔 좋을 겁니다.
24/08/17 15:53
감사드립니다!
해당 사이트의 소스 구조를 분석해서 어느 부분의 데이터를 따와야되는지 부분에서 막히고 있었습니다 ㅜ 말씀주신 프로그램 잘 활용해 보겠습니다!
|
||||||||||