Developer Tool2024

Web Content Scraping Tool

規制環境でも必要情報へ到達するための、ブックマークレット型スクレイピングツール。

JavaScriptDOM ScrapingData ParsingBookmarkletRegulation EvasionSite
Web Content Scraping Tool

Overview

サイトが規制されても大丈夫。ブックマークレットから規制を突破して、学校に対抗しよう!

実装の背景、主要機能、運用上の注意点をREADMEの読み味で整理しています。

Background

  • プロジェクト: Webコンテンツスクレイピングツール
  • 目的: 短文サマリーではなく、再利用しやすい実装ドキュメントとして残す
  • 方針: デモ向け説明よりも、実装意図と運用条件を優先

Key Features

機能

  • api.allorigins.winを使ってサイトのコンテンツを取得
  • これ自体はサイトじゃないからブロックの確率はかなり低い
  • ブックマークレットがMDMでブロックされていない限り、使える
  • DOMスクレイピングで、サイトのデータを解析して閲覧

Tech Stack

  • JavaScript
  • DOM Scraping
  • Data Parsing
  • Bookmarklet
  • Regulation Evasion
  • Site
  • js
  • DOMスクレイピング
  • データ解析
  • ブックマークレット
  • 規制回避

Implementation Notes

  • 実装は速度優先で小さく回し、必要に応じて段階的に機能追加
  • ユーザー体験を壊しやすい箇所(同期、権限、外部API制約)を先に固定
  • 学習用途と実運用用途の境界を明示し、用途に応じて使い分ける設計

Links

Screenshots

Web Content Scraping Tool Web Content Scraping Tool Web Content Scraping Tool