＜コード全文＞Webスクレイピング応用・完結編

【Webスクレイピング応用・完結編】複数ページ巡回(クローリング)とPandas/Matplotlibでの分析・可視化 🤖で紹介した内容について、コード全文を記載します。

コメント

コメントを投稿

このブログの人気の投稿

タイトルまとめ

環境構築 これで迷わない！WindowsでPython環境構築する一番やさしい方法 #0 【Python初心者向け】venvでスッキリ環境構築！プロジェクトごとの独立性を保つ秘訣 #1 超入門〜入門 【Python超入門】プログラミングで計算してみよう！四則演算と便利な算術演算子を徹底解説 #2 【Python超入門】プログラミングの第一歩！「変数」とは？使い方と命名ルールを優しく解説 #3 【Python入門】プログラムの流れを自由自在に！if文を使った条件分岐を徹底マスター #4 【Python入門】繰り返し処理をマスター！for文・while文の基本と使い分けを徹底解説 #5 【Python入門】コードを整理整頓！関数の作り方と使い方をマスターしよう (def, 引数, 戻り値) #6 【Python入門】オブジェクト指向の扉を開こう！クラスの基本と作り方・使い方 (class, __init__, メソッド) #7 【Python入門】クラッシュしないプログラムへ！エラーハンドリング(try-except-else-finally-raise)完全ガイド #8 中級へ向けて > OOP(オブジェクト指向プログラミング) 【Python中級への道】OOPの真髄！クラスの「継承」でコードを再利用・拡張しよう (親クラス・子クラス・super) #8 【Python中級編】OOPの魔法！ポリモーフィズム（多態性）で柔軟なコードを書こう #9 【Python中級編】OOPの守護神！カプセル化で安全なクラスを作ろう (データ隠蔽・プロパティ) #10 標準ライブラリ紹介 【Python標準ライブラリ入門 第1回】日付と時刻を自由自在に！datetimeモジュール徹底活用術 【Python標準ライブラリ入門 第2回】偶然をプログラムに！randomモジュールで乱数を使いこなそう 【Python標準ライブラリ入門 第3回】データ交換の標準！jsonモジュールでJSONを自由自在に扱おう 【Python標準ライブラリ入門 第4回】ファイル・ディレクトリ操作の達人になろう！osモジュール徹底ガイド 【Python標準ライブラリ入門 第5回】表データ処理の相棒！csvモジュールでCSVファイルを自在に操ろう 📊 【Python標準ライブラリ入門 第6回】ファイル操作を極...
続きを読む

【Pythonで学ぶ地理計算】mathライブラリで2点間の方位角を計算する基礎 🌍

「東京駅から見て、大阪城はどの方角にあるんだろう？」 「2つの緯度経度の情報から、片方がもう片方から見てどの方角にあるか、角度で知りたい！」 「地図アプリみたいな計算って、Pythonでどうやってやるの？」 こんにちは！ Pythonプログラミング探検隊、隊長のPythonistaです！ 今回から始まる新シリーズでは、プログラミングと地理情報を組み合わせた、少し専門的で非常に面白い「地理空間計算」の世界に足を踏み入れます。 その第一歩として、今回は 「2つの地点の緯度経度から、始点から見た終点の方位角（ほういかく）を計算する方法」 を探求します。方位角とは、 真北を0度として、時計回りに測った角度 のことです。例えば、真東は90度、真南は180度、真西は270度となります。 この計算を、まずは外部ライブラリを使わずに、Pythonに標準で付属している math モジュール だけを使って実装してみます。三角関数など少し数学的な要素も出てきますが、その原理を理解することで、より深く地理計算の世界を楽しめるようになりますよ。さあ、Pythonで地球を舞台にした計算を始めましょう！ 1. 計算の考え方：地球を「完全な球」として捉える 今回私たちが行う計算は、地球を「完全な球体」と仮定した 球面三角法（きゅうめんさんかくほう） という考え方に基づいています。※詳しくは wikipediaの説明 をご覧ください。 実際の地球は、赤道方向に少し膨らんだ「回転楕円体」に近い形をしていますが、多くのアプリケーションや、特に2点間の距離がそれほど長くない場合には、この「完全な球」というモデルでも非常に精度の良い近似計算が可能です。何より、このモデルは計算の基本的な原理を理解するのに最適です。 2. 方位角計算の「材料」たち 方位角を計算する数式は少し複雑に見えるかもしれませんが、必要な「材料」となるPythonの機能は非常にシンプルです。 2.1. 緯度経度とラジアン (Radian) 私たちが普段使う角度の単位は「度（°）」ですが、Pythonの math モジュールに含まれる三角関数（ sin , cos など）は、角度の単位として 「ラジアン (radian)」 を使います。そのため、計算を始める前に、まず緯度と経度を度からラジアンに変換する必...
続きを読む

【Matplotlib文字化け解決】Windows/Ubuntu対応！日本語をちゃんと表示する設定方法 📝

イメージ
「Matplotlibでグラフを作って、いざタイトルやラベルに日本語を入れたら、四角い豆腐（□□□）だらけに…！」 「 findfont: Font family not found っていうエラーが出て、どうすればいいか分からない…」 「毎回コードに長いフォントパスを書くのは面倒！根本的に解決したい！」 こんにちは！ Pythonデータ可視化探検隊、隊長のPythonistaです！ Matplotlibでデータを可視化できるようになった！と喜びも束の間、多くの日本人学習者がぶつかる大きな壁、それが 日本語の文字化け問題 です。せっかく作った綺麗なグラフも、ラベルが文字化けしていたら台無しですよね。 ご安心ください！この問題は、一度設定してしまえば恒久的に解決できます。この記事では、なぜ文字化けが起きるのかという根本的な原因から、 Windows 11 と Linux (Ubuntu) それぞれの環境で、Matplotlibの日本語表示を綺麗にするための設定方法を、ステップバイステップで徹底的に解説していきます。もう文字化けで悩むのは終わりにしましょう！ 1. なぜ文字化けは起きるのか？そのメカニズム Matplotlibが日本語を表示しようとすると文字化けが起きる主な理由は、 Matplotlibがデフォルトで使用するフォントに、日本語の文字（グリフ）が含まれていないから です。 プログラムが「日本語フォントが見つからない！」となると、代替の英語フォント（例: DejaVu Sans）で日本語を描画しようと試みます。しかし、その英語フォントは「あ」や「漢」といった文字の形を知らないため、代わりに「□」（豆腐と呼ばれることがあります）を表示してしまうのです。 解決策は、Matplotlibに対して「この日本語フォントを使ってね！」と、PCにインストールされている日本語フォントの存在を教えてあげることです。これからその具体的な手順を見ていきましょう。 2. 【Windows 11編】日本語表示の解決策 Windowsには、標準で多くの日本語フォントがインストールされています。ここでは、一般的に利用可能な「Yu Gothic」（游ゴシック）や「Meiryo」（メイリオ）を使う方法を解説します。 ステップ1：matplotlibrc...
続きを読む