このレンズレスAIカメラは、テキストプロンプトだけで写真を「撮る」ことができる

masapoco
投稿日
2023年6月7日 8:36
head web

スマホのカメラは多眼レンズのトレンドを歩んでいるが、そもそも「カメラにレンズは必要なのだろうか?」という、全く異なる前提からレンズのないカメラも開発されている事はご存じだろうか?日本においても、東京工業大学によってレンズレスカメラが開発されている。これは、被写体から発せられた光がシート状の特殊なマスクを通して符号化され、センサー上にパターンとして投影され、それを機械学習によって従来の写真のように再構築するものだ。被写体の光を受けるという意味では、従来のカメラの流れを汲んだものだ。

だが、今回オランダのデザイナーBjørn Karmann氏がRaspberry Piを用いて開発したカメラは、更にぶっ飛んでいる。これは、ユーザーの位置情報と、入力された文字情報をAIによって処理する事によって写真を“生成”するのだ。

Karmann氏は先週、自身のパッションアートプロジェクト「Paragraphica」をツイートで紹介した。「プロトタイプは完全に動作しており、アナログカメラに似たデータ範囲とAI画像設定をコントロールできる物理的なダイヤルを備えている」と彼は述べている。

Paragraphicaは、従来のカメラと同様に、3つのダイヤルで写真の見た目に影響するデータやAIのパラメーターをコントロールすることが出来る。ユーザーは、1つ目のダイヤルで、カメラが周囲の場所やデータを検索する半径(メートル)を設定することが出来る。2つ目のダイヤルは、写真にノイズを加えたり減らしたりするものだ。3つ目のダイヤルで、ユーザーがテキストの指示/プロンプトにどれだけ忠実にカメラを従わせるかを決めることが出来る。

光を必要としないため、レンズも必要ない

撮影者の居場所がわかってしまうので、プライバシーが心配という意見もあったが、このカメラは概ね好評だった。カメラの動作にはインターネットが必要で、気象データにアクセスし、GPSでユーザーの位置を把握する。この種のモデルとしては初めて、現在、Stability AIのテキストから画像へのStable Diffusionモデルが使用されている。このモデルは、テキストによるプロンプトをもとに画像を生成するものだ。

結果として得られる「写真」は、単なるスナップショットではなく、あなたの場所と、おそらくAIモデルがその場所をどのように「見て」いるかを、複雑かつ微妙に反映したものだと、Karmann氏はブログ記事で述べている。

その場所から連想される感情や気分を写真に収めることができるのだが、撮影者が見た風景そのままには撮影できない。

Karmann氏は、この製品を商品化したり、写真に挑戦したりする意図はないと明言する。彼の製品は、むしろ創造的緊張の時代におけるAIの役割に疑問を投げかけているのだ。

正面から見ると、赤い触手が飛び出しているようで、ちょっと不気味な見た目だ。これは、地下で生活し、狩りをする星鼻のモグラからインスピレーションを得たという。この動物は、指のような触角で世界を認識するように進化し、珍しい知的な “見る”方法を獲得したと、ブログでKarmann氏は詳しく説明している。


Source



この記事が面白かったら是非シェアをお願いします!


  • mira ar mario
    次の記事

    Apple、USJのマリオカートアトラクション向け技術を提供しているARスタートアップMiraを買収

    2023年6月7日 10:48
  • 前の記事

    英国海軍、GPSに代わる“量子ナビゲーション”システムの初試験に成功

    2023年6月7日 6:32
    submarine
この記事を書いた人
masapoco

コメントを残す

メールアドレスが公開されることはありません。 が付いている欄は必須項目です


おすすめ記事

  • openai

    OpenAI、15秒の音声サンプルから感情豊かで自然な音声を合成できる「Voice Engine」を発表

  • a04c35e8e555c1cc7ae1d6a5f3159856

    MicrosoftとOpenAI、1000億ドル以上をかけて超人的AI開発のためのスーパーコンピューター「Stargate」を開発する計画

  • Sam Altman TechCrunch SF 2019 Day 2 Oct 3 cropped cropped

    ベンチャーキャピタリスト、OpenAIのSam Altman氏を“誇大妄想的”と非難

  • google logo image

    Googleが非営利団体を対象に2000万ドルの資金を提供し生成AI活用を支援

  • Pixel 8 in Rose.max 936x936.format webp

    Google、方針を転換しPixel 8にもGemini NanoによるオンデバイスAI機能を搭載へ

今読まれている記事