# cheerio
[PROJECT] Lets Git It (3) : My Service Logic
사이드 프로젝트 - Lets Git It : My Service Logic
오픈그래프 태그 스크래핑 실습
공식 사이트npmFast, flexible, and lean implementation of core jQuery designed specifically for the serverjQuery를 서버사이드에 맞게 수정한 것jQuery와 유사하게 동작하므로 기존에 사용하던
오픈그래프 태그 스크래핑
스크래핑 시스템이나 웹사이트에 있는 데이터 중 필요한 데이터만 추출 및 가공하여 제공하게 되는 기술 어떤 특정한 웹 사이트에 가서 그 사이트의 HTML을 긁어오는 것 Open Graph protocol Open Graph 프로토콜은 소셜그래프(소셜 네트워크의 특성
DAY09
model() 메소드를 사용하여 문자열과 schema를 전달하여 model을 생성첫번째 인자는 해당 collection의 단수적 표현을 나타내는 문자열 find는 보통 모든 데이터를 조회할 때 사용되며, findOne 은 특정 데이터만 조회할 때 자주 사용다른 사이트
Property 'children' does not exist on type 'Node'.ts(2339)
puppeteer로 동적인 페이지의 컨텐츠를 가져와서 cheerio로 문자를 추출하려고 했다.typescript에서 rows\[0].children\[0]의 type은 Node인데 여기엔 children 속성이 없다고 에러를 발생시켰다.테스트 코드로 디버깅해보면 결과가
[남도학숙 식단 어플] 2. Node.js를 로그인이 필요한 페이지 크롤링 하기
🙏 크롤링이란? 나는 현재 남도 학숙(지역 학사)에 살고 있다. 그렇게 아침과 저녁을 보통 학숙에서 나오는 밥을 먹는데, 매번 식사 메뉴를 확인하기 위해서는 아래와 같은 과정을 거쳐야 했다. 핸드폰 크롬에 남도학숙 검색. 남도학숙 사이트에서 남도학숙 학사관리 시스템
Scraping & Crawling?? 뭔데?
Scraping? Crawling? 너가 좋아하는 웹페이지 불러올수 있어!! 뭐? 캡쳐하면 그만이라고? 우리는 개발자인데..??커몬~~
TS1110 Type expected 에러 발생
node_modules/cheerio/lib/types.d.ts:8:36 - error TS1110: Type expected.typeScript 버전과 해당 모듈의 버전 호환 문제최신 버전의 TypeScript 를 설치
<ERROR> cheerio 사용시 unable to verify the first certificate 발생
cheerio 사용시 https 크롤링이 안될 때, http로는 파싱이 안될 때 error code는 아래와 같다.code: 'UNABLE_TO_VERIFY_LEAF_SIGNATURE'https://github.com/kokarn/KokBot/issues/26
[TIL] 20.12.16
리액트 토이프로젝트 '알바비를 계산해줘'최저시급 값 크롤링1) 네이버에서 현재의 최저시급 값을 가져올 것이다.2) DOM 구조를 보면 input_won 클래스 > input_wrap 클래스 > \_wageInput 클래스의 value 값으로 현재(2020.12.16)
Node.js 배치 크롤러 만들어보기
타겟사이트 : (전력거래소) https://www.kpx.or.kr/ 시뮬레이션 : 전력거래소에서오늘의 SMP, 오늘의 REC를 하루에 한번씩 긁어오는 간단한 배치 크롤러를 구현해봅니다.node v13.8.0package.jsonnodeCrawling 디렉토리
[개인프로젝트] SmartWallpaperFinder
1. 개요 배경화면 크롤링 사이트입니다. alpacoders라는 대형 Wallpaper 사이트를 자주 이용하는 편인데 키워드를 검색했을 때, 30개씩 정보를 보여주고 다음페이지를 클릭해서 넘어가야지만 다음 정보를 가져오는데에 불편함을 느껴 키워드를 검색했을 때 클릭하는 번거로움 없이 한눈에 이미지들을 보면 좋을 것 같다는 생각에 웹사이트를 기획해보았습니다....
Typescript와 Express로 재밌는 무언가를 만들어보자!(3)
서론 지난 포스트에서 프로젝트 세팅을 모두 끝마쳤습니다! 이제 실제로 멋진 Typescript Express 크롤러를 만들어볼 차례입니다. 어서 개발하러 가시죠! 1. 크롤러의 작동원리 크롤러의 작동원리는 사실 정말 별 것도 없습니다. 우리가 일반적으로 웹 서핑을 할 때 보는 웹 페이지들은 다들 알고 계시는 것처럼 HTML과 CSS, 자바스크립트로 동작하...
Typescript와 Express로 재밌는 무언가를 만들어보자!(1)
서론 안녕하세요! Medium에서 글을 쓰다가 코드는 안예뻐쁘고, github gist를 쓰기엔 귀찮아서 velog로 찾아온 사람입니다. 이상한 소리는 집어치우고, 서론이지만 본론으로 들어가봅시다. 저는 원래 Typescript(I love TS)와 React를 좋아