Πίσω στο Crawler
Σύνδεση Knoon AI με Crawler (Web Intelligence) για αυτοματοποίηση ροών εργασίας AI.
Fetch a web page and return extracted content with high chances of succeeding and not being blocked.
webIntelligenceCrawlerScrapeUrl
ΒΕΤΑ
Άδειες
Δεν υπάρχουν αντικείμενα για εμφάνιση.
Προαιρετικές άδειες
Δεν υπάρχουν αντικείμενα για εμφάνιση.
Παράμετροι
| Όνομα | Τύπος | Περιγραφή | Απαραίτητο |
|---|---|---|---|
| url | mustache | Public URL to scrape (e.g. "https://example.com/article"). | Ναι |
| formats | array (mustache) | Optional list of formats to return (e.g. ["markdown","html"]). Defaults to ["markdown"]. | Όχι |
| onlyMainContent | boolean | If true, attempts to return only the primary page content. | Όχι |
| waitFor | mustache | Optional wait time in milliseconds before scraping (e.g. "2000"). | Όχι |
| timeout | mustache | Optional timeout in milliseconds for the scrape request. | Όχι |
Επιστροφές
| Όνομα | Τύπος | Περιγραφή |
|---|---|---|
| status | string | OK or ERROR. |
| url | string | The scraped URL. |
| content.markdown | string | Markdown content when available. |
| content.html | string | HTML content when available. |
| content.text | string | Plain text content when available. |
| metadata | object | Metadata when available. |
| links | array | Extracted links when available (shape may vary by source; commonly URL strings). |