ビッグデータの世界で注目を集めるファイルフォーマットの一つがParquet。データを圧縮させて保持するだけでなく、読み込みやデータの抽出で高いパフォーマンスも誇ります。MATLABでもR2019aからparquetreadとparquetDatastoreなどが登場しましたが、圧縮形式に注意が必要です。
MATLABでWebサーバーに対してファイルアップロードしたいとき、意外と情報が無くて苦戦したので備忘録を作りました。webwriteでは困難なのでmatlab.net.httpのFileProviderを使うと簡単にできました。Node.jsのサーバーで動作確認もしてみます。
地理空間を含むポリゴンデータが複数ある際に、ポリゴンの外郭を求める方法をMATLABのコードで紹介します。R2023a時点ではMapping Toolboxでそのままできないので、地理テーブルをgeotable2tableでテーブルに変換しMATLAB本体のunionを使うのがミソです。
地理空間情報のポリゴンの中にあるか外にあるかを判定したいとき、MATLABではMapping ToolboxのR2022aで導入されたisinterior関数で簡単に計算できるようになりました。国勢調査の東京都のポリゴンを使って動かすコードの説明も付けています。
AWSクラウドに構築したAlmaLinuxにMATLAB環境を構築する手順を説明します。インストーラーを使わずにMPMコマンドを使ってコマンドラインでMATLABをインストールし、必要なAlmaLinuxのパッケージをdnfで追加していく手順を順に紹介します。
※2022/11/28 更新：R2022bで直接スレッドワーカー数を指定可能に。MATLABの並列処理で、R2020aから使えるようになったスレッドベースの並列プール。ワーカー数を指定するオプションがなく、デフォルトでは物理コア数と同じ数のワーカーが立ち上がりますが、あることでワーカー数を指定できるようになります。
シェープファイルを読み取って可視化するのって、プログラミングだと以外と面倒だったりしますが、MATLABではMapping Toolboxが非常に強力です。政府統計データ窓口のe-Statから国勢調査のシェープファイルをダウンロードして、可視化するまでの手順を示します。
クラスターサーバーでHTCondor を使ったジョブスケジューラでMATLAB の処理をしたかったのですが、意外と情報が無くて躓いたので備忘録としてまとめています。
MATLAB のMapping Toolbox no
R2021b 新機能で、readgeotable という関数が登場しました。 位置情報を含むテーブルを直接読み込めるようになっていて、GPX ファイルにも対応しています。Apple Watch のヘルスデータをエクスポートするとワークアウトのデータがGPX で出力されますので、早速試してみました。
コロナ禍で在宅ワークになった方も多いと思いますが、気になるのは健康状態。この記事ではiPhoneとApple Watchでのヘルスケアデータを使って健康状態を解析する事例を紹介しています。コロナ前後での歩数の傾向分析、在宅ワークで運動量を増やすための工夫について書いています。
最近の投稿
【iPhone】15 Pro Maxの0.5倍の超広角、5倍の光学ズームレンズの写りの違い2024/01/07
【MATLAB】Parquetファイルの読み込み・書き込みは圧縮形式に注意2023/07/28
【情報処理技術者試験】コツをつかめば難しくない、システムアーキテクト試験の対策2023/07/16
【MATLAB】FileProviderを使ってWebサーバーにファイルをアップロード2023/05/28
日立の「データ分析の教科書」の4.6節のテキスト解析のサンプルを実施して躓いたところ2023/05/09
【Python】wordcloudで画像に合わせてカスタムスタイルでワードクラウド作成2023/05/03
【MATLAB】複数の地理空間ポリゴンの外郭を取得する方法2023/04/20
【AWS】LightsailのWordPressをWP Migrationで移行2023/04/17
人気の記事
ソニーのミラーレスカメラ「α7iv」でAPS-Cクロップをするには？ミラーレスのフルサイズカメラでAPS-C相当サイズの撮影ができます。1.5倍にズーム率が上がる？と思って試してみましたが、画像サイズが小さくので、解像...
extra data after last expected columnエラーPostgreSQLでCSVをCOPYしようとすると 前回の記事でPostgreSQLの「データの中に引用符のない復帰記号がありました」エラーについて...
【Apple Watch】ずっとONになっている位置情報を止めるにはApple Watchを使い始めたら、ペアリングしたiPhoneの位置情報サービスがずっとONになっていませんか？位置情報がずっと有効だとバッテリーの...
【Apple Watch】ヘルスケアデータをエクスポートして色々といじれるようになるまでApple Watchのヘルスケアデータをエクスポート 以前の記事でApple Watchについて書きました。会社の景品でいただいてから、毎日装着して...
【AWS】EC2インスタンスでAlmaLinuxを使う手順CentOSの代替として注目されているLinuxがAlmaLinux。Red Hat Enterprise Linux (RHEL)と互換性があり商用...
頼む、JDBCのバージョンとJDBCドライバーのバージョンを勘違いしないでデータベースに頼れる存在のJDBCドライバー データベースにアクセスするとき、JDBCドライバーを使うことが多いと思います。データベースによってはC+...
商用で使える日本全国の都道府県ポリゴンShapefileは？意外と無い、商用で使える都道府県のポリゴン 先月の記事に東京都のポリゴンデータ(Shapefile)を使った地図描画を紹介しました。 そのときは東京都...
【NodeJS】Webサーバーをエラーで止めない方法NodeJSでWebサーバーを立てると フロントエンドでJavaScriptやTypeScriptを使っていると、バックエンドもJavaScriptで...