최소 단어 이상 선택하여야 합니다.
최대 10 단어까지만 선택 가능합니다.
다음과 같은 기능을 한번의 로그인으로 사용 할 수 있습니다.
NTIS 바로가기멀티미디어학회논문지 = Journal of Korea Multimedia Society, v.21 no.2, 2018년, pp.199 - 209
배성원 (Dept. of Division of Computer Engineering, Dongseo University) , 이현동 (Industry Academy Cooperation Foundation, Dongseo University) , 조대수 (Dept. of Division of Computer Engineering, Dongseo University)
Recently, services provided to consumers are increasingly being combined with big data such as low-priced shopping, customized advertisement, and product recommendation. With the increasing importance of big data, the web crawler that collects data from the web has also become important. However, th...
* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.
핵심어 | 질문 | 논문에서 추출한 답변 |
---|---|---|
자바스크립트 함수를 사용하면 웹크롤링을 할 때 무슨 문제가 있는가? | 이 주소를 통해서 웹 크롤러는 웹 사이트에 접근을 할 수 있다. 문제는 자바스크립트 함수를 사용하면 URL 주소를 은닉할 수 있기 때문에 은닉된 URL에 대해서는 기존의 웹크롤러는 접근하여 수집할 수 없다. 두 번째 문제점은 기존의 크롤러가 태그 및 텍스트와 같은 정형 데이터와 비디오, 오디오와 같은 비정형 데이터를 구분해서 수집에는 한계가 존재한다. | |
웹크롤러는 무엇인가? | 이로 인해 웹상에서 데이터를 자동으로 수집하는 웹크롤러에 대한 중요성 또한 높아지고 있다. 하이퍼링크로 웹 사이트들이 거미줄처럼 연결되어 있는 웹 환경에서 텍스트, 이미지, 동영상 등 웹 문서에 내포하고 있는 자료를 수집하고 하이퍼링크를 통해 다른 웹 사이트에 접근하여 다시 자료수집을 하는 자동화 프로그램을 웹크롤러라고 한다. | |
빅 데이터의 중요성이 커짐으로 인해 데이터를 모으기 위해 무엇이 중요해지고 있는가? | 최근 빅 데이터를 활용한 최저가 쇼핑, 맞춤형 광고, 상품 추천 등 빅 데이터를 기반으로 다양한 분야의 서비스와 접목되면서 빅 데이터에 대한 중요성은 더욱 커지고 있다. 이로 인해 웹상에서 데이터를 자동으로 수집하는 웹크롤러에 대한 중요성 또한 높아지고 있다. 하이퍼링크로 웹 사이트들이 거미줄처럼 연결되어 있는 웹 환경에서 텍스트, 이미지, 동영상 등 웹 문서에 내포하고 있는 자료를 수집하고 하이퍼링크를 통해 다른 웹 사이트에 접근하여 다시 자료수집을 하는 자동화 프로그램을 웹크롤러라고 한다. |
*원문 PDF 파일 및 링크정보가 존재하지 않을 경우 KISTI DDS 시스템에서 제공하는 원문복사서비스를 사용할 수 있습니다.
출판사/학술단체 등이 한시적으로 특별한 프로모션 또는 일정기간 경과 후 접근을 허용하여, 출판사/학술단체 등의 사이트에서 이용 가능한 논문
※ AI-Helper는 부적절한 답변을 할 수 있습니다.