A Model-Based Approach for Crawling Rich Internet Applications

Source

• Evernote/IFTTT Feedly/A Model-Based Approach for Crawling Rich Internet Applications.md

Summary

AJAX 기반의 리치 인터넷 애플리케이션(RIA)은 기존 크롤링 기술로는 탐색이 어렵습니다. 본 논문은 RIA의 검색 및 테스트를 위해 ‘모델 기반 크롤링(model-based crawling)’ 방법론을 제안합니다. 이를 ‘하이퍼큐브 전략(hypercube strategy)‘으로 구현하여, 기존 너비 우선, 깊이 우선, 탐욕적 전략과 성능을 비교 평가했습니다.

Key Points

• AJAX 등 신기술로 인한 RIA의 기존 크롤링 기술 한계 지적
• RIA 탐색을 위한 ‘모델 기반 크롤링’ 방법론 제안
• 구체적 구현 예시인 ‘하이퍼큐브 전략’ 제시
• 기존 표준 크롤링 전략(BFS, DFS, Greedy)과의 성능 비교

Related

• Rich Internet Applications(RIA) 연구의 체계적 매핑 연구(10 년간)

• 감성 분석 중심 웹 크롤링 (Sentiment-Focused Web Crawling)

• Wireless Networks Design in the Era of Deep Learning Model-Based, AI-Based, or Both

• Model-Driven Optimization of Opportunistic Routing

• HTTP 기반 애플리케이션 방화벽 정책 분석

• A survey on concept drift adaptation

• 모바일 검색의 미래: Aggregated Search

• Quora 기술 스택 및 아키텍처 분석

• 반응형 웹과 컨텐츠 전략

• 제한된 합리성 사용자의 지향점 기반 학습을 통한 네트워크 기술 확산 동역학

• Rich Vehicle Routing Problem (VRP) Survey

• A Top-Down Approach for Video Summarization

• 가역 회로의 합성과 최적화: 서베이

• 인터넷 혼잡 제어기의 버퍼링 동역학 및 안정성

• AGC 및 다중 스타일 학습을 통한 소형 키워드 스포팅

• Discrete Bayesian Network Classifiers: A Survey

• DARPA, 인터넷(IP) 비의존형 모바일 Ad Hoc 네트워크 솔루션 공모

• 인터넷 경제 생태계의 진화 (Evolution of the Internet Economic Ecosystem)

• 인터넷 지도 (Map of the Internet)

• Electrical-Packet Network for Data Centers

• 사회 컴퓨팅 연구의 진화 특성화

• 인프라 네트워크의 이동성 관리 (Mobility Management in Infrastructure Networks)

• 지속 가능한 인터넷 (Sustainable Internet)

• Eureka: Edge-Based Discovery of Training Data for Machine Learning

• Deep Learning in Speech Synthesis (Google Research Talk)

• 네트워크의 4가지 속성 (4 Characteristics of Network)

• 세계 모든 나라가 북유럽 모델을 채택할 수 있을까

• Dynamic Collective Work: 게스트 편집자 서문

• 기계학습 고급 컨셉 및 연구자 조언 (노영균 교수 특강)

• A Model for Context in the Design of Open Production Communities

• 중국 전통 인맥 네트워크의 진화 모델

• 진화적 네트워크 분석: 서베이 (Evolutionary Network Analysis: A Survey)

• 루비로 배우는 객체지향 디자인

• 동적 스타 네트워크에서 다중 유형 객체의 공진화 (Co-Evolution of Multi-Typed Objects in Dynamic Star Networks)

• 소프트웨어 진화 법칙의 진화: 체계적 문헌 검토 기반 논의

• KPCB)

• Broadly Available Broadband

• 이동성 모델 분류 체계 및 조사 (A Taxonomy and Survey of Microscopic Mobility Models)

• A survey of trust in social networks

• 네트워크의 이중성 (Duality of Network)

• Science in the Cloud

• 가상화 기술의 역할 및 IEEE Internet Computing 특집호 개요

• 쉽게 풀어쓴 딥러닝(Deep Learning)의 거의 모든 것

• 모바일 학습(m-learning) 애플리케이션 및 기술의 현황 분석

• 이미지 검색의 20 년간 진화: 수천 개에서 수십억 개 데이터셋으로

• P2P 산업의 성장 측정 및 전망 (2014)

• Checker Architectures Survey

• Cloud Computing: Survey on Energy Efficiency

• Social-Network-Sourced Big Data Analytics

• Survey of local algorithms

• Temporal Information Retrieval (TIR) Survey Overview

• Extending Net-Centricity to Coalition Operations

• Knowledge Systems for Coalition Operations

• ERP 시스템의 핵심 성공 요인(CSFs): 지난 10 년간 연구 리뷰

• GPU 에너지 효율성 분석 및 개선 방법론 조사