AIに渡すWebデータ、ちゃんと取れてる? スクレイパーの修復もAIに任せてみた
欠損したスクレイピング結果をAIがどう扱うかを検証し、Bright Data Scraper StudioとCLIによる修正、対象Collectorの確認で見えた課題をまとめました。
Archive
気になるキーワードやテーマから、読みたい記事を。
欠損したスクレイピング結果をAIがどう扱うかを検証し、Bright Data Scraper StudioとCLIによる修正、対象Collectorの確認で見えた課題をまとめました。
Bright DataのSkillを使ったQiita記事収集CLIでHTTP 402が発生。Codexによる原因の切り分けとBrowser APIへの切り替え、2ページ45件の取得までを記録しました。
Bright Data Scraper StudioのSelf-Healingを実際のダッシュボードのv1・v2・v3で検証し、どこまで修復を任せられるのか、どこから作り直すべきかを記録しました。
Bright Data Scraper Studioで自然言語からスクレイパーを生成し、40件取得された問題をSelf-Healingで10件に直した検証記録です。
DifyとBright DataのLLM Scraperを使い、ChatGPTとGeminiがブランドや製品をどう推薦するかを自動診断するGEO分析ワークフローを紹介します。
DifyとBright DataのLLM Scraperを使い、技術選定に必要な競合比較・言及頻度分析・構造化レポート生成を自動化するワークフローを紹介します。
LLMアプリ開発プラットフォーム「Dify」と,Bright DataのSERP APIを連携させ、ターゲットキーワードから「今アプローチすべき企業」を自動抽出し、営業メールを自動生成するワークフローを構築します。
ミニマルデザインの本質と、なぜシンプルであることが大切なのかを考察します。
Astroの強力な機能を活用して、パフォーマンスに優れたブログサイトを構築する方法を解説します。
このブログで使える記法とコンポーネントの使い方を解説します。Markdown記法からカスタムコンポーネントまで、美しい記事を書くためのすべてを紹介します。
このブログを始めた理由と、これからどんなことを発信していくのかについてお話しします。
Webサイトを高速化するための基本的なテクニックを解説します。
純粋なCSSとJavaScriptで実装する、浮遊する気泡エフェクトのチュートリアル
TypeScriptの基本的な型システムを理解し、バグの少ないコードを書くためのガイド
ユーティリティファーストのCSSフレームワーク、Tailwindの実践的な使い方
Astroフレームワークを使って高速なブログサイトを構築する方法を解説します。
日々のコーディングをより効率的にするためのヒントとツール
useState, useEffectから始めるReact Hooks入門
GitHub Flowを中心としたブランチ戦略とPRのベストプラクティス
キーワードを短くするか、カテゴリ・タグの条件を外してみてください。