ツール・コマンド・データ処理
CSV・テキストデータの処理とデータベース構築
- CSV ファイルの処理,Excel ファイルを CSV ファイルに変換,CSV ファイルの変換,CSV ファイルから SQL テーブル定義と INSERT 文を生成(csvkit を使用)
【要約】csvkitを用いて、in2csvコマンドによるExcelファイルからCSVへの変換、CSVの形式変換、およびCSVからのSQLテーブル定義とINSERT文の生成などの手順を解説しています。 - CSV ファイルに対して SQL 問い合わせを実行
【要約】CSVにSQL問い合わせを実行する手法を紹介しています。SQLite3、pandasql、csvkit、csvdb、q等の各ツールにおける具体的なコマンド例やSQL文の実行手順を解説します。 - CSV ファイルに対する SQL 問い合わせの性能確認(Ubuntu で,SQLite 3,pandasql,csvkit,TicklishHoneyBee/csvdb を使用)
【要約】Ubuntu環境において、SQLite 3、pandasql、csvkit、csvdbの4つのツールを用い、CSVファイルに対するSQL問い合わせの実行速度を比較・検証する性能確認の記録です。 - ランダムデータの合成(CSV ファイルの生成,SQLite 3 データベースの生成)
【要約】CSV形式の乱数データを生成し、csvkit等のツールを用いてSQLite3データベースを構築するまでの手順と実行コマンド(Ubuntu環境)を解説しています。
PythonによるExcel操作とデータ形式変換
- Python で Excel ファイルを扱う(Python,Win32 を使用)
【要約】pywin32(win32com)を用いてCOM経由でExcelを操作し、セルの値や関数の入力、シート名変更などをPythonプログラムから実行する手順を解説しています。 - Python で Excel ファイルを扱う(Python,agate-excel を使用)
【要約】Pythonのagate-excelライブラリを用いて、Excelファイルからデータを読み込み、データ分析や処理を行うためのプログラム例と環境構築の手順を解説しています。 - XML2JSON のインストール(Ubuntu 上)
XML2JSON は,XMLファイルとJSONファイルの相互変換を簡単に行える perl 用のライブラリ.
【要約】Ubuntu環境で、XMLとJSONの相互変換を行うPerl用ライブラリ「XML2JSON」のインストール手順を解説。CPANモジュールやソースからのビルド・テスト・インストール方法を網羅しています。
画像・動画処理と物体検出
- 動画ファイルのコマンド等
【要約】FFmpegやAvidemux等のツールを用い、動画の形式変換、サムネイル作成、音声除去など、コマンドラインを中心とした動画ファイルの確認・処理手順を解説しています。 - 画像ファイルのコマンド等
【要約】ImageMagickのidentifyやconvertコマンドを利用し、画像情報の取得、ファイル形式の変換、拡大縮小、切り出しなどをコマンドラインで処理する手順を解説しています。 - BMP 連番画像を TIFF 連番画像に変換(Windows 上のソフトウェアを利用)
【要約】Windows用画像変換ソフト「Batch goo!」を利用して、複数のBMP連番画像を一度の操作でTIFF連番画像へと一括変換する、効率的な処理手順について解説しています。 - パノラマ画像
【要約】オープンソースの画像合成ツール「Hugin」を使用し、複数の画像を繋ぎ合わせて1枚のパノラマ画像を生成し、TIFF形式で出力するまでの具体的な操作手順を解説しています。 - 画像の特徴点
【要約】Python環境においてOpenCVライブラリを利用し、画像データから特徴点を抽出・検出して可視化するための具体的なプログラム実行手順と前準備について解説しています。 - RetinaNet を用いた物体検出(Python, Keras を使用)
【要約】KerasとRetinaNetを用いた物体検出手順を解説。GitやPython、Windsurfの導入から、ライブラリのインストール、画像認識のコード例まで具体的に説明しています。