끄적끄적_개발노트

  • 홈
  • 태그
  • 방명록

web crawler 1

[BE] Scraping (스크래핑) & Crawling (크롤링) 개념

스크랩 (Scrap) 주로 신문 기사 등을 오려서 모으는 것을 '스크랩' 이라 표현하곤 했다. 사전에는 스크랩의 뜻을 아래와 같이 표현하고 있다. 이 처럼 '필요한 글' 이나 '사진' 을 오려 내는 일을 '스크랩' 이라 하며 이를 웹 페이지에서 함수(기능) 등을 이용하여 구현해 놓은 것을 (웹)스크래핑 이라고 한다. 위의 내용은 현재 접속한 나의 블로그의 메인 페이지 html 문서 header 에 들어있는 meta tag 들이다. 내 블로그 페이지 (https://bans.tistory.com) 를 복사하여 (혹은, 다른 링크를) 다른 곳 (카카오톡, 디스코드, 블로그 등등)에 링크했을 때 해당 플랫폼에 이렇게 해당 페이지의 정보가 뜨는 것을 본 적 있을 것이다. 이러한 이미지 / 간략한 설명 글은 해당..

BE/Javascriptㅤ|ㅤTypescript 2022.07.15
1
더보기
프로필사진

기록을 남기는 만큼 나도 축적된다. 정말 먹어도 돼지는 되지 않을까

  • 분류 전체보기 (48)
    • Project Management (11)
      • PM (3)
      • 회고 (8)
    • Network (12)
      • API (1)
      • HTTP (3)
      • WEB BROWSER (2)
      • OSI 7 Layers (5)
      • Network Infrastructure (1)
    • FE (3)
      • React (2)
      • About Design (1)
    • BE (12)
      • Javascriptㅤ|ㅤTypescript (9)
      • Database (3)
    • Dev Tools (5)
      • Git | Github (2)
      • ELK Stack (3)
    • Software Architecture (1)
    • About Dev Ind (4)

Tag

daily, 지속적인 통합, external level, 지속적인 배포, mysql 사용자 권한 부여, 부하 분산, internal level, mysql 사용자 암호 설정, conceptual level, 배포 자동화, Nest Framework, JavaScript, typescript, Cloudbuild, 3단계 데이터 구조, Network, ES6, HTTP, Object Relational Mapping, 타입스크립트란,

최근글과 인기글

  • 최근글
  • 인기글

최근댓글

공지사항

페이스북 트위터 플러그인

  • Facebook
  • Twitter

Archives

Calendar

«   2025/07   »
일 월 화 수 목 금 토
1 2 3 4 5
6 7 8 9 10 11 12
13 14 15 16 17 18 19
20 21 22 23 24 25 26
27 28 29 30 31

방문자수Total

  • Today :
  • Yesterday :

Copyright © Kakao Corp. All rights reserved.

티스토리툴바