地理ラボ　データ分析

プログラミング

: プログラミング
文字コード（ASCII・Shift-JIS・Unicode・UTF-8）
データ, 自然言語処理
コンピュータ上で文書ファイルを開く際に文字コードを正しく指定しないと文字化けして文字が読めない状態になります。このページでは、文字コードとは何かと代表的な文字コード（ASCII, Shift-JIS, ...

: プログラミング
正規表現による文字指定（Unicodeの並び順に則した指定）
コード, データ, データ加工, 自然言語処理
正規表現を使用して数字やカタカナなどを文字種を指定する際には、文字コードの並びの最初と最後の文字を使って「0-9」といった指定の仕方をします。このページでは、ひらがなやカタカナといった文字種ごとに並び ...

: プログラミング
PDFからテーブルデータを取得
コード, スクレイピング, データ加工
前回、国土交通省のウェブサイトから高速道路の日次交通量のPDFファイルをダウンロードしました。今回はダウンロードしたPDFを読み込み、PDFファイルの中にある表（テーブルデータ）を取得してCSVに保存 ...

: プログラミング
日別に分かれた大量のPDFからデータを取得
コード, スクレイピング, データ加工
ここでは、PythonのBeautifulSoupとurllibパッケージを使用して大量のPDFをダウンロードする実装について紹介します。手動で保存するには数が多すぎる場合も、ウェブサイトがきれいに構 ...