Tự động hoá trình duyệt

• Có bản miễn phí

• Thực chất là dùng trên local nên chắc có thể crack được

• GitHub - angrykoala/awesome-browser-automation: Curated list of awesome browser automation tools and resources

• GitHub - lorien/awesome-web-scraping: List of libraries, tools and APIs for web scraping and data processing.

• -:

  • Thử kiếm backend API trước rồi mới phải đi cào bằng frontend
  • Tự động hoá trình duyệt

• Puppeteer, Playwright:

  • Puppeteer
  • Gần như mọi lệnh đều là async, vì nó phải giao tiếp với trình duyệt
  • locator chỉ xác định chiến lược để tìm đến element chứ không đi tìm ngay
  • locator không cần tới await vì nó chỉ báo là mình sẽ chọn element nào, chứ chưa thực sự chọn nó. Khi nào có hành động cụ thể thì mới thực sự chọn
  • Playwright chuyên cho việc kiểm thử và do Microsoft viết. Puppeteer do Google viết

• Selenium:

  • Remote Control được sinh ra để giải quyết vấn đề Same-Origin Policy
  • Selenium bao gồm IDE, Remote Control, WebDriver và Grid. Selenium 1 thực ra là Remote Control. Selenium 2 thực ra là Remote Control có thêm WebDriver