[{"data":1,"prerenderedAt":20},["ShallowReactive",2],{"blog-post-vi-xu-ly-phan-trang-va-lap-du-lieu-broma":3},{"slug":4,"lang":5,"title":6,"summary":7,"date":8,"tags":9,"tag_slugs":15,"thumbnail_url":16,"translations":17,"body":18,"asset_base":19},"xu-ly-phan-trang-va-lap-du-lieu-broma","vi","Xử lý phân trang và lặp dữ liệu trong Broma: từ danh sách đến chi tiết","Hướng dẫn chi tiết cách xây dựng quy trình Broma duyệt qua nhiều trang phân trang, lặp từng mục và trích xuất dữ liệu chi tiết bằng vòng lặp, selector bền và biểu thức JavaScript.","2026-11-09",[10,11,12,13,14],"broma","automation","pagination","loops","javascript",[10,11,12,13,14],"https:\u002F\u002Fblog-api.bromaapp.com\u002Fapi\u002Fblog\u002Fposts\u002Fxu-ly-phan-trang-va-lap-du-lieu-broma\u002Fthumbnail.svg?lang=vi",[5],"## Tại sao cần xử lý phân trang trong Broma?\n\nNhiều trang web thương mại điện tử, dashboard báo cáo hay danh sách bài viết chỉ hiển thị một số lượng bản ghi cố định trên mỗi trang. Nếu chỉ tự động hóa trang đầu tiên, bạn sẽ bỏ lỡ phần lớn dữ liệu. Broma cho phép tạo quy trình lặp (loop) qua các trang, sau đó lặp tiếp theo các mục trong trang để mở trang chi tiết, lấy thông tin và lưu lại – tất cả mà không cần viết mã phức tạp.\n\n## Kiến trúc quy trình: vòng lặp ngoài và vòng lặp trong\n\nQuy trình điển hình gồm hai cấp độ lặp:\n\n1. **Vòng lặp ngoài** – duyệt qua các trang phân trang (trang 1, 2, 3…).\n2. **Vòng lặp trong** – trên mỗi trang, duyệt qua danh sách các mục (sản phẩm, đơn hàng, bài viết…).\n\nCách tách biệt này giúp dễ dàng bảo trì: khi trang web thay đổi cách hiển thị trang, bạn chỉ sửa vòng lặp ngoài; khi cấu trúc mục thay đổi, bạn chỉ sửa vòng lặp trong.\n\n### Bước 1: Mở trang danh sách đầu tiên\n\n- Thêm hành động **Open URL** với địa chỉ trang danh sách (ví dụ `https:\u002F\u002Fshop.example.com\u002Fproducts?page=1`).\n- Thêm **Wait for element** chọn container danh sách (ví dụ `css=.product-grid`).\n\n### Bước 2: Lấy selector cho nút “Trang tiếp theo” và kiểm tra tồn tại\n\n- Dùng **Inspect** trong Broma để chọn nút phân trang (thường là `a.next-page` hoặc `button[aria-label=\"Next\"]`).\n- Lưu selector vào biến `nextPageSelector` (Broma cho phép lưu giá trị vào **Variable**).\n- Thêm **If element exists** với selector `nextPageSelector` để quyết định có tiếp tục lặp hay dừng.\n\n### Bước 3: Vòng lặp while – duyệt qua các trang\n\nBroma không có từ khóa `while` nhưng bạn có thể mô phỏng bằng **Loop** + **Branch**:\n\n```json\nLoop (max 100 iterations)\n  If element exists (nextPageSelector)\n    Click (nextPageSelector)\n    Wait for element (.product-grid)\n  Else\n    Break loop\n```\n\n- Đặt giới hạn an toàn (max 100) để tránh lặp vô tận nếu selector bị sai.\n- Sau mỗi click, chờ container danh sách tải xong trước khi sang vòng lặp trong.\n\n### Bước 4: Trong mỗi trang, lặp qua danh sách sản phẩm\n\n- Sử dụng **Loop over elements** với selector mục (ví dụ `css=.product-card`).\n- Bên trong loop, Broma tự động đặt biến `currentElement` trỏ đến phần tử hiện tại.\n- Thêm **Click** trên `currentElement` (hoặc link chi tiết bên trong) để mở trang chi tiết.\n- Thêm **Wait for element** chọn vùng chi tiết (ví dụ `css=.product-detail`).\n\n### Bước 5: Mở trang chi tiết, trích xuất dữ liệu, lưu\n\n| Hành động | Mô tả |\n|---|---|\n| **Get text** | Lấy tên sản phẩm (`css=.detail-title`) → biến `name`. |\n| **Get attribute** | Lấy giá (`css=.price@data-value`) → biến `price`. |\n| **Get text** | Lấy mô tả (`css=.description`) → biến `desc`. |\n| **Run JavaScript** | Gom các biến thành object JSON (xem phần dưới). |\n| **Write file** | Ghi dòng JSON vào `products.ndjson` (append). |\n| **Close tab** | Đóng tab chi tiết để quay lại trang danh sách. |\n\n#### Ví dụ biểu thức JavaScript (bước Run JavaScript)\n\n```js\n\u002F\u002F Broma cung cấp các biến qua đối tượng `vars`\nreturn JSON.stringify({\n  name: vars.name,\n  price: Number(vars.price),\n  description: vars.desc.trim(),\n  sourceUrl: window.location.href,\n  scrapedAt: new Date().toISOString()\n});\n```\n\nKết quả là một chuỗi JSON mỗi dòng, dễ dàng import vào BigQuery, Elasticsearch hoặc xử lý bằng Python.\n\n## Xử lý tải động (infinite scroll) – thay thế nút phân trang\n\nMột số trang không có nút “Trang tiếp theo” mà tải thêm khi cuộn. Cách làm trong Broma:\n\n1. **Loop** (max 50 lần).\n2. **Scroll to bottom** (`window.scrollTo(0, document.body.scrollHeight)`).\n3. **Wait for element** xuất hiện mục mới (ví dụ `css=.product-card:last-child`).\n4. **If element count not increased** → **Break loop**.\n\n```json\nLoop (max 50)\n  Run JavaScript: window.scrollTo(0, document.body.scrollHeight)\n  Wait 2s\n  Run JavaScript: return document.querySelectorAll('.product-card').length\n  If variable `currentCount` == variable `previousCount`\n    Break loop\n  Set variable `previousCount` = `currentCount`\n```\n\nSau khi cuộn xong, bạn tiếp tục **Loop over elements** như bình thường.\n\n## Biểu thức JavaScript để gom dữ liệu và chuyển đổi\n\nNgoài việc tạo JSON, bạn có thể dùng JS để:\n- **Làm sạch giá**: `priceStr.replace(\u002F[^\\d.]\u002Fg, '')`.\n- **Chuẩn hóa ngày**: `new Date(dateStr).toISOString()`.\n- **Tính toán**: `quantity * unitPrice`.\n\nVí dụ làm sạch giá:\n\n```js\nconst raw = vars.rawPrice; \u002F\u002F ví dụ \"₫ 1.234.567\"\nconst clean = Number(raw.replace(\u002F[^\\d]\u002Fg, ''));\nreturn clean;\n```\n\nLưu kết quả vào biến `priceClean` và dùng tiếp trong các bước sau.\n\n## Xử lý lỗi và thử lại (retry)\n\nMạng không ổn định hoặc trang tải chậm có thể làm quy trình hỏng. Broma cung cấp **Try \u002F Catch** (khối **Try** – **Catch**) và **Retry** trên từng hành động:\n\n- Bọc **Click** nút “Trang tiếp theo” trong **Try**. Nếu thất bại, **Catch** ghi log và **Wait 5s** rồi **Retry** tối đa 3 lần.\n- Trên **Open URL** trang chi tiết, bật tùy chọn **Retry on failure** (3 lần, delay 3s).\n\n```json\nTry\n  Click (nextPageSelector)\n  Wait for element (.product-grid)\nCatch\n  Log error\n  Wait 5s\n  Retry (max 3)\n```\n\n## Lưu kết quả: xuất ra CSV \u002F Google Sheets\n\nSau khi chạy xong, file `products.ndjson` chứa hàng nghìn dòng JSON. Bạn có thể:\n- Dùng **Run JavaScript** đọc file, parse từng dòng, push vào mảng và ghi ra CSV (`csv-stringify`).\n- Hoặc dùng công cụ dòng lệnh `ndjson-to-csv` (ngoài Broma) để chuyển đổi nhanh.\n\nVí dụ chuyển đổi trong Broma (chạy sau khi loop kết thúc):\n\n```js\nconst fs = require('fs');\nconst lines = fs.readFileSync('products.ndjson', 'utf8').trim().split('\\n');\nconst records = lines.map(l => JSON.parse(l));\nconst header = Object.keys(records[0]).join(',');\nconst rows = records.map(r => Object.values(r).map(v => `\"${String(v).replace(\u002F\"\u002Fg, '\"\"')}\"`).join(','));\nfs.writeFileSync('products.csv', [header, ...rows].join('\\n'));\n```\n\n> Lưu ý: Broma chạy trên máy cục bộ, nên `require('fs')` khả dụng trong bước **Run JavaScript**.\n\n## Mẹo tối ưu hiệu suất\n\n- **Giới hạn số tab đồng thời**: Broma mặc định mở tab mới cho mỗi trang chi tiết. Nếu danh sách lớn, hãy bật **Reuse tab** (tái sử dụng tab) để giảm bộ nhớ.\n- **Tắt tải hình ảnh**: Trong **Browser profile** chọn **Block images** – giảm băng thông và tải trang nhanh hơn.\n- **Sử dụng selector dựa trên attribute ổn định** (`data-testid`, `aria-label`) thay vì class CSS dễ thay đổi.\n- **Chạy batch vào ban đêm**: Lên lịch (Schedule) chạy lúc 02:00 để tránh ảnh hưởng công việc ban ngày.\n- **Lưu log chi tiết**: Bật **Run log** mức **Debug** để dễ dàng truy vết khi trang web thay đổi.\n\n## Kết luận\n\nViệc kết hợp vòng lặp ngoài (phân trang) và vòng lặp trong (danh sách mục) cùng với biểu thức JavaScript linh hoạt cho phép Broma thu thập dữ liệu quy mô lớn từ các trang web có phân trang phức tạp – từ danh sách sản phẩm, đơn hàng, bài viết đến báo cáo nội bộ. Các kỹ thuật trên (selector bền, retry, infinite scroll, xuất CSV) giúp quy trình ổn định, dễ bảo trì và có thể tái sử dụng cho nhiều dự án khác nhau. Hãy bắt đầu bằng một trang danh sách nhỏ, kiểm tra từng bước, sau đó mở rộng sang toàn bộ hệ thống dữ liệu của bạn.\n","https:\u002F\u002Fblog-api.bromaapp.com\u002Fapi\u002Fblog\u002Fposts\u002Fxu-ly-phan-trang-va-lap-du-lieu-broma\u002Fassets",1794729626349]