memex 데이터 모으기 Darkweb data collection - ATOL, hprobe 다크웹 상 데이터 크롤링 - 민감한 데이터 검색 -> 구글처럼 검색
다크웹 데이터 수집은 어려웠었다 onion/tor browser 설치하면 되었음
리눅스세팅 + 프록시세팅 ㄴ세팅 잘못하면 네트워크 맛이 간 문제 있었음
ahmia, ATOL
atom - 가장 먼저 만들어진 다크웹 서치, 크롤링 엔진
다크웹 데잉터 수집 -> 탐지 ->
암호화폐 거래 수집은 쉬움..
DB 저장하는게 터질 정도
터지는거 조사하다보니 -> SNS 활발하지 않음
트위터, 페이스북, 인스타그램, 카카오, 네이비 -> 분석만 잘하면 인사이트를 찾을수있지않을까 다크웹 페이지 - shadow broker
트랜잭션 추적 유사도 따라가기
손은 그려야함...
shadowbroker - 워너크라이
데이터 분석 automation ->
데이터 분석을 위해서 botent C&C 김수키악성코드 등...
Google/Twitter/Darkweb 검색 -> 습득정보나열 -> 중요정보 나열 -> 연결해서 돈을 보낼 수 있는 루트 파악
구조화된 정보로 만들고 싶음.. -> 정보의 연결 ' 파편화된 정보를 연결하여 구조화된 정보로 만들자 -> 그래프 구조(Graph 구조) ㄴ 정보의 그래프를 만들어 필요한 것을 찾아보자 -> Automation 지식 그래프를 처음 접해서 만듬..(2013, 2014)