[토론논의] 트래픽으로 쓰이는 각 프로그램에 대해서...
김수한8
조회 : 4,913
요즘 나오는 대부분의 프로그램들은 셀레니움을 사용한 것인데,
이런 프로그램으로 트래픽 작업을 할경우, 한가지 조심해야 할 것이 있습니다.
보통 트래픽 작업을 하실때면, vpn 으로 아이피 변경,그리고 쿠키 제거 필수인데요,
사실 아이피,쿠키만 제거해서 문제 없으면 너무 쉬운거고요,
이 2 가지만 가지고 해볼라고 하면 N 사는 모르겠으나
페이스북,구글등 해외 메이저 사이트들을 상대로 막말로 씨알도 안먹힙니다.
해외 사이트들은 브라우저 지문(Browser fingerprint) 이라는 것을 심각하게 고려해야 되는데요,
쉽지 않습니다.
브라우저 지문이 무엇이냐면, 사실 웹사이트가 자바스크립 몇개 집어 넣으면, 접속한 컴퓨터 정보를 모으는 것인데요,
이게,어떤경우는 몇백만 심지어 몇천만분의 1 로 접속한 컴퓨터의 유닉성을 가져가 버립니다.
한 컴퓨터로 작업하게 되면, 당연히 블락걸리겠죠.
또한 셀레니움을 사용한 웹 트래픽 프로그램일 경우 단 몇줄의 자바스크립트로 보통 웹사이트가 '셀레니움 클로러' 인지 알아 낼수 있습니다.
N사 같은 경우, 셀레니움 자동로그인 캡챠로 막아 버린게 이런 케이스 입니다.
저 또한 사실 이쪽 트래픽쪽에 관심이 있어서, 알아보고 있는 데요...
여기서 정보를 좀 나누었으면 합니다.
물론 노하우성이 있어서 쉽지 않겠으나, 저도 좀 풀어 놓을테니,같이 공유좀 했으면 합니다.
먼저 현재 N 사 연관이가 궁금합니다. 수작업으로 문제가 되는 키워드를 제거 하는 걸까요?
아니면 알고리즘적으로 자동화 하여 필터링을 하고 있는 건가요?
수작업이면,수작업 멈출 때 까지 답이 없는 것이고, 알고리즘이면 충분히 답은 있을 것 같은데요,
보통 올라가고 나서 없어지나요?, 그렇다면 수작업일 확율이 조금 높습니다.
댓글로 정보좀 나누었으면 합니다.
