걸어다니는 전동차 개발자 이야기

[크롤링이란?] 1) 거미줄을 기어다니듯 정보를 수집한다 2) 어디에 활용될까?1> 데이터 분석 2> 웹 사이트 자동화 3> 인공지능 학습 데이터 4> 기타 활용 사례 3) 웹 페이지는 어떻게 보나요?1> HTTP 통신이 발생함 2> 웹 사이트는 응답을 HTML로 해준다 3) 크롤링은 css 선택자를 통해서 데이터를 수집한다4) 정적 웹 크롤링 작업 * 2가지 작업이 필요하다1> 데이터 받아오기2> 데이터 뽑아오기 => 대화형 코드 실행 문서 3> requests를 다운받기: HTTP 요청 라이브러리예요. 쉽게 말하면, 파이썬으로 인터넷에서 웹페이지나 API 데이터를 가져올 때 씁니다. 4> bs4도 설치 / 기초 설치에는 bs4와 requests가 필수! : 두 개 다 html에서 정보를 가..

자작시 한방울의 비 조차 내리지 않던 무더운 여름밤들려오는 창밖 너머 소리에주황빛 태양이 남색 구름으로 뒤덮혔다. 창 밖을 하염없이 바라보다불어오는 바람에 너의 향기를 쫓아 떠나간 너의 모습을 잡아도빗 속에 넌 숨어버려서소리쳐 불러봐도 들리지 않은듯 무심한 표정 우린 서로 사랑했고, 이젠 추억 뿐이네빗방울은 하염없이 연주하고빗 속의 그녀를 위해 마지막 곡을 지휘할 뿐 눈길을 피하는 여자흔들리는 눈빛의 남자우린 서로 사랑했었지만, 정말 추억 뿐이네

프로젝트를 하면서 대국민 서비스라 서버에서 해당 오류가 많이 나타났다. 그래서 찾아보니 이런 원인과 현상이 존재했다. => 잦은 입출력 호출 현상 * 해결방법은 다양하다. / 무시하는게 많은데 중복 요청을 막는게 좋은 것 같다. ex) 로딩바 참고 : https://born-dev.tistory.com/28