본문 바로가기
반응형

programming/WebAutomation3

selenium / 셀레니움 사용법 크롤링과 스크래핑 자동화를 위한 단계 웹페이지를 자동화하는데 셀레니움 ( selenium ) 은 강력한 도구이다. 웹페이지에 표시된 모든 요소에 접근이 가능하며, 자동화를 통해 크롤링과 스크래핑이 가능하다. 그렇기에 자동화를 위한 8가지의 단계가 필요하다. 단계는 줄어들 수도 있고, 늘어날 수도 있다. 또한, 웹페이지가 로딩되는 시간을 고려한 대기전략은 중요하다. 지금의 웹페이지들은 동적이며, 가변적이기에 셀레니움을 사용하더라도 고려해야 할 내용들이 많다. 다만, 웹페이지의 경고문구는 잘 살펴보자. 도구는 강력하지만, 도구를 사용하는 사용자의 책임도 존재한다. selenium 셀레니움 사용법 크롤링 자동화를 위한 단계 셀레니움 ( selenium ) 은 웹 애플리케이션를 자동으로 테스트하는 툴이다. 엄연히 툴이지만, 크롤링과 스크래핑에도 많.. 2024. 2. 14.
c# 셀레니움 설치 nuget 패키지 라이브러리 사용하기 C#으로 웹자동화를 하기 위해선 nuget 패키지 관리자를 이용해 셀레니움 ( selenium ) 웹드라이버를 설치해야 한다. 웹드라이버가 설치되면 코드를 작성하고 실행하면 웹브라우저가 나타나 웹페이지들을 자동으로 탐색하는 것을 볼 수 있다. 각 페이지의 요소들도 접근이 가능하기 때문에 지금의 크롤링 또는 스크래핑에도 이용된다. 단, 보안툴이 있거나 데이터의 수집을 금지하는 곳도 있기 때문에 먼저 웹사이트의 정책을 확인해 보도록 한다. C# 셀레니움의 시작 nuget 라이브러리 설치하기 C# 에서 셀레니움 ( Selenium ) 을 사용하려면 먼저 셀레니움 라이브러리가 필요하다. C# 을 한다면 당연히 비주얼 스튜디오 ( Visual Studio ) 을 사용할 것이며, nuget 을 알고 있을 것이다. .. 2024. 2. 8.
웹자동화 C# 셀레니움이란 웹 애플리케이션 테스트 오픈소스 프레임워크 셀레니움은 웹사이트를 탐색하는 자동화 테스트 도구이다. C# 과 연동하여 사용할 수도 있다. 누겟 패키지 관리자에서 셀레니움 라이브러리를 설치하고 튜토리얼에서 시키는 대로만 해도 간단히 웹자동화를 할 수 있다. 하지만, 셀레니움의 막강한 기능이 독이 될 수도 있으니 무분별한 크롤링이나 스크래핑 등은 자제하도록 하자. 단순히 웹에 있는 콘텐츠를 수집하기에는 셀레니움은 아깝다는 생각도 있다. 웹자동화 / C# 셀레니움이란 웹 애플리케이션 테스트 오픈소스 프레임워크 회사일과 블로그를 병행하니 피곤함이 생긴다. 그렇기에 몸을 좀 추수릴 수 있는 대안을 찾아보았는데 웹자동화란 분야가 있었다. 웹자동화는 영어로 Web Automation 이라 하고, 검색을 해보면 꽤 많은 샘플코드나 블로그나 웹사이트 등에 활용할 .. 2023. 9. 8.
반응형