🔗 URL의 비밀? URL 수정하여 원하는 결과에 바로 접근해보기

웹에서 보기 | 지난 뉴스레터 보기

안녕하세요, 리스틀리입니다.😀

지난 뉴스레터에서는 목록페이지 속 각 상세페이지에 접근할 수 있는 URL을 어떻게 얻을 수 있는지 그 내용을 다뤄 보았습니다. 지난 뉴스레터 바로가기

오늘은 웹페이지의 URL을 바탕으로 그 구조를 살펴보고, URL을 직접 수정해 원하는 결과 페이지에 접근해 본 후, 이를 바탕으로 그룹추출까지 진행해보려고 합니다.

그룹추출을 해보신 분이라면, 이 영상 59초부터의 설명처럼 ‘페이지 뒤의 숫자를 바꿔서 입력하라’는 도움말을 접해보신 적이 있을거에요.

https://example.com/category/all?page=1

https://example.com/category/all?page=2

https://example.com/category/all?page=3

...

위의 예시와 같이 각 페이지에 직접 접속하여 URL을 복사/붙여넣기 하지 않고도 페이지마다 반복되거나, 변경되는 값을 활용해 원하는 URL을 생성하실 수 있습니다.

그렇다면, URL에서 페이지 말고도 어떤 정보를 바꿔볼 수 있을까요? 오늘은 그 응용 버전을 준비해 보았습니다.🤗

URL의 구조?

들어가기에 앞서 URL의 구조를 간단하게 살펴볼게요.

1. 프로토콜 (Protocol): https

웹 페이지에 접근하기 위해 사용하는 규칙의 종류를 나타냅니다. 일반적으로 http, https가 많이 쓰입니다.

2. 도메인 (Domain): www.example.com

웹사이트의 주소로, 서버의 위치를 나타냅니다. 이는 인터넷 상에서 웹 페이지를 찾기 위한 기본 주소 역할을 합니다.

3. 경로 (Path): /category/all/

서버 내에서 특정 페이지나 자료의 위치를 가리키며, 예시 URL의 경우 'category'라는 디렉토리 내의 'all'이라는 페이지를 지정합니다.

4. 매개변수 ( Parameters): ?article=1004&page=1

* 이 부분은 “?” 뒤에 위치하며, 서버에 특정 데이터를 요청하는 데 사용됩니다. 파라미터들은 &로 구분됩니다. 각 파라미터는 키와 값의 쌍으로 이루어져 있습니다.

* 변수=값&변수=값&.... 형태로 작성됩니다.

* 위 예시에서 알 수 있는 정보는 “1페이지에 위치해 있는 ‘1004’게시글” 이라는 내용입니다.

......

앗.. 익숙하지 않은 단어들이 너무 많다!! 😣

사실 구조와 각 구간의 명칭보다는 페이지를 이동해보며 ‘바뀌는 값'에 집중해보는 쪽이 훨씬 이해하기 쉬우실거에요.

한 웹사이트를 기준으로 예시를 들어보겠습니다.

위 이미지는 어떤 경매 사이트에서 2023년 / 아파트 / 서울 강남구로 필터를 설정한 후 나타난 검색 결과입니다. 이 페이지의 URL을 살펴보면 다음과 같아요.

https://www.example.com/auction/search/?case_number_year=2023&km_status=all&mul_ type%5B%5D=121&addr1%5B%5D=서울&addr2%5B%5D=강남구&current_page=1&records _per_page=100

제가 위에 필터를 설정한 2023년 / 아파트 / 서울 강남구라는 필터값이 URL에서 '2023', '121(해당 사이트에서 아파트를 지칭하는 코드)’, '서울', '강남구' 라는 파라미터 값으로 반영되어 있는 것을 알 수 있었습니다.

여기서 다른 설정을 그대로 두고 지역과 물건 용도만 필터를 바꿔볼까요?

https://www.example.com/auction/search/?case_number_year=2023&km_status=all&mul_ type%5B%5D=111&addr1%5B%5D=서울&addr2%5B%5D=성북구&current_page=1&records _per_page=100