Puppeteerを使用してWebスクレイピングを少ししようとしていますが、スクリプトは探しているセレクタを見つけることができないようです。基本的にこのコード:
const puppeteer = require('puppeteer');
let scrape = async () => {
const year = 18;
const browser = await puppeteer.launch({headless: false});
const page = await browser.newPage();
await page.goto('https://cobbcounty.org/index.php?option=com_wrapper&view=wrapper&Itemid=2008');
await page.waitFor(5000);
var id = '';
for(i=0;i<10000;i++){
id = i;
await page.click('#txtCase');
await page.keyboard.type(year + '-P-' + id);
await page.select('#lstDoc','Estate');
}
}
scrape().then((value) => {
console.log('script ended');
});
私にこのエラーを与えています:
(node:31125) UnhandledPromiseRejectionWarning: AssertionError
[ERR_ASSERTION]: No node found for selector: #txtCase
私が知る限り、#txtCaseはページ上の実際のセレクターなので、操り人形師がそれを見つけられない理由はわかりません。誰かが私に間違っていることを説明できるなら、それは本当に役に立ちます。
私が知る限り、#txtCaseはページ上の実際のセレクターなので、操り人形師がそれを見つけられない理由はわかりません。
ページをロードし、コンソールを使用してその要素を見つけてみてください。
document.querySelector('#txtCase')
null
ありません。右クリックしてそのテキストフィールドを検査すると表示されることはわかっていますが、iframeにネストされています。そのフレームにアクセスし、ボタンを見つけてクリックする必要があります。
const frame = await page.frames().find(f => f.name() === 'iframe');
const button = await frame.$('#txtCase');
button.click();
そのボタンはiframe内にネストされています(ページ自体はclick
onなどの関数にアクセスしたり実行したりできません)。ページの goto as here でiFrameのURLをターゲットにする必要があります。