User-Agent 변경과 --lang 옵션을 활용한 탐지 우회웹 자동화를 수행할 때, 많은 사이트들은 Selenium을 사용하는 브라우저를 감지하여 차단합니다. 특히, Cloudflare와 같은 보안 서비스는 특정 패턴을 감지하여 봇 트래픽을 차단하는데, 이 과정에서 User-Agent가 중요한 역할을 합니다. User-Agent는 나의 접속이 어디서 왔는지를 변경하는 역할을 하신다고 생각하면 됩니다.UserAgent를 직접 실습 해보기에는 BeautifulSoup가 매우 편리하고 쉽기 때문에 BeautifulSoup 사용하여 실습 하는 방법도 추천합니다. UserAgent를 사용하게 된다면 나의 출처가 Python이 아닌 Chrome으로 변경할 수 있는 장점이 있습니다.   이번 게시글에서는 Sele..

웹 자동화를 위해 Selenium을 사용할 때, 많은 웹사이트들이 Selenium을 사용하는 브라우저를 탐지하고 차단하는 것을 경험한 적이 있을 것입니다. 특히, Cloudflare와 같은 보안 서비스는 자동화된 요청을 감지하고 CAPTCHA를 띄우거나 접근을 차단하는 경우가 많습니다. 이 문제를 해결하는 방법 중 하나가 바로 --disable-blink-features=AutomationControlled 옵션을 사용하는 것입니다. 이번 포스팅에서는 이 옵션이 무엇이며, 어떻게 동작하는지 그리고 Selenium 탐지를 어떻게 우회할 수 있는지에 대해 자세히 알아보겠습니다. 또한 실제로 적용했던 부분을 보여드리겠습니다. 1. AutomationControlled란 무엇인가?먼저, AutomationCon..