データサイエンス」カテゴリーアーカイブ

ScrapyによるWebクローラーの開発


ScrapyはWebサイトのクローリングとスクレイピングのための、Pythonで実装されたフレームワークです。スクレイピングはWebページから情報を抽出する技術であり、クローリングはWebページのリンクを辿りながら情報を取得する技術です。
Scrapyを使用して、指定したサイト内の画像ファイルとその画像が貼られたページのURLリストをMySQLのデータベースに格納するWebクローラーを開発します。
続きを読む

Darknet YOLOをPythonで使う


前回はVisual Studioでビルドしたdarknet.exeを使用して、石造物に刻まれた文字の学習と検出の実験をしました。
Darknet YOLOはDLL版をビルドすることによりAPIの利用が可能になります。独自のAIアプリケーションを開発する際には、exeファイルをコマンドとして起動するよりも適しています。また、Python用のラッパーも用意されています。
そこで今回は、指定したフォルダから月待塔の写っている画像ファイルを探し出す簡単なPythonプログラムを作成することとします。
続きを読む

深層学習による石造物の分類


「雑草という名の草はない」という言葉がよく知られている一方で、道端に生えている草の多くは名前が知られていません。同じように、路傍に立つ古い石造物も、今となってはそれが何なのか知らない人が多くて残念です。
民間信仰に基づいて造立された石造物の分類は、専門家でも一筋縄ではいかないものです。それは、民間信仰そのものの成り立ちが、複雑な歴史的背景を持つことによります。
そこで、あまり深い所には立ち入らず、月待信仰に基づいて造立された月待塔について、画像から分類を試みます。月待塔は月待行事をおこなった「アタリ日」によって分類することができ、塔のどこかに「十九夜」や「二十三夜」のように刻まれているので、これらの文字によって容易に分類することができるのです。
今回構築したシステムで実際に二十三夜塔を認識させた例は以下のようになります。


「三夜」の上にある「サ」のような文字は「廿」です。二十三夜塔は、単に「三夜」と刻まれたり、「念三夜」「廿三夜」「二十三夜」「弐十三夜」と刻まれるなど、さまざまなパターンがありますが、今回は「三夜」の部分だけを認識させることとしました。
続きを読む

LODチャレンジ2019入賞のお知らせ

2019年11月8日
合同会社 緑IT事務所

LODチャレンジ2019入賞のお知らせ

Linked Open Data チャレンジ Japan 2019において、当社代表 小池隆の作品「月待塔オープンデータの可視化」がデータ分析・可視化部門 優秀賞を、「3D石造物データ」がオープンサイエンス賞を受賞したことをお知らせ致します。

Linked Open Data チャレンジ Japan 2019 受賞作品発表

【本件に関するお問合せ】
合同会社 緑IT事務所
Mail:
URL: https://midoriit.com

SfMによる3Dモデルの作成(3)


SfM/MVS(フォトグラメトリ)による3Dモデル作成を始めて4ヶ月あまり経ち、Wikimedia Commonsで公開している石造物の3Dモデルも7件になりました。作成手順も試行錯誤を重ねて改善し、初期に作成した五神名地神塔は粗が目立つようになったため再作成しました。そこで、現時点での3Dモデル作成手順についてまとめます。

五神名地神塔(横浜市旭区)
続きを読む