オンラインサービス（人工知能関連）

Web ページによる説明

チャットボット，翻訳，画像の合成，欠損の補充，イメージ・インペインティング，イメージ・アウトペインティング

• ChatGPT，AskYourPDF プラグインを用いて PDF ファイルの下調べ
  
• ドキュメント・チャットにファイルをアップロードし，質問応答システムをオンライン実行（チャットボットによる質問応答システム）
  
• DocsBot にファイルをアップロードし，質問応答システムをオンライン実行（チャットボットによる質問応答システム）
• DeepL API 認証キーの取得と動作確認（人工知能による翻訳）
• ビデオを他人の顔に入れ替える（Simple DeepFace を使用，Google Colab 上での実行）

  人物写真、人物動画からの人物動画の合成

• オンラインサービス Waifu Labs を使ってみる

  アニメ絵キャラクタ顔の生成

• DALL E をオンラインで使ってみる

  画像生成，画像の欠損の補充，イメージ・インペインティング，イメージ・アウトペインティング

• 画像のセグメンテーション（TensorFlow のチュートリアルのサイト）

情報サイト（外部ページのリンク）

• Papers With Code

  https://paperswithcode.com/

• Hugging Face

  https://huggingface.co/

• HuggingFace Datasets library

  https://colab.research.google.com/github/huggingface/datasets/blob/main/notebooks/Overview.ipynb

• GitHub の HuggingFace の Transformer

  https://github.com/huggingface/transformers

• OSF | Theory of Mind May Have Spontaneously Emerged in Large Language Models

  コジンスキー氏らによる Theory of Mind の例題（プログラムのソースコードなど）

  https://osf.io/csdhb/

オンラインデモ，オンライン実行（外部ページのリンク）

ニューラルネットワーク

• 畳み込みニューラルネットワーク（オンラインデモ）

  https://poloclub.github.io/cnn-explainer/

  CNN Explainer　ジョージア工科大学 Polo Club．畳み込み層などの仕組みをビジュアルに学ぶことができるサイト

画像理解

• セグメンテーション, OneFormer, オンラインデモ

  https://huggingface.co/spaces/shi-labs/OneFormer

• 顔検出，物体検出，画像分類，テキストエリア検出，テキスト検出（オンラインデモ）

  URL：https://cloud.google.com/vision/docs/drag-and-drop

• セグメンテーション（modified U-Net を使用。TenforFlowを使用）（オンラインデモ）

  https://colab.research.google.com/github/tensorflow/docs/blob/master/site/en/tutorials/images/segmentation.ipynb#scrollTo=P_mu0SAbt40Q

  

ポイント・トラッキング（Point tracking）

• CoTracker のデモ（Google Colaboratory）

  https://colab.research.google.com/github/facebookresearch/co-tracker/blob/master/notebooks/demo.ipynb

  
• CoTracker の Hugging Face のデモ

  https://huggingface.co/spaces/facebook/cotracker

  

MOT

• Yolo tracking デモ（MOT）（Google Colaboratory のページ）

  公式の Google Colaboratory 上のデモページ: https://colab.research.google.com/drive/18nIqkBr68TkK8dHdarxTco6svHUJGggY?usp=sharing#scrollTo=RyXr0xsZB897

• Cutie のビデオオブジェクトセグメンテーションのデモ（Google Colaboratory のページ）

  公式の Google Colaboratory 上のデモページ: https://colab.research.google.com/drive/1yo43XTbjxuWA7XgCUO9qxAi7wBI6HzvP?usp=sharing#scrollTo=qYv3kbaQT2w4

  URL: https://hkchengrex.github.io/Cutie

  
  
  

姿勢推定

• LART デモ（姿勢推定）（Google Colaboratory のページ）

  https://colab.research.google.com/drive/1QRLqEAePmgS41v0KQwf87G_Ss_BLhPYs?usp=sharing#scrollTo=XMEwLrhnx58K

  https://www.pexels.com/video/group-of-boys-plays-soccer-in-a-soccer-field-2932301/ で公開されている動画を使用したときの結果

ゼロショットの物体検出，セグメンテーション

• SAM （ゼロショットのセグメンテーション）のオンラインデモ

  https://segment-anything.com/demo#

  「Upload an image」により，画像のアップロードが可能

  
• Grounding DINO （ゼロショットの物体検出）のオンラインデモ（Hugging Face 上）

  https://huggingface.co/spaces/IDEA-Research/Grounded-SAM

  
  
• Grounding DINO （ゼロショットの物体検出）のオンラインデモ（Google Colaboratory 上）: https://colab.research.google.com/github/roboflow-ai/notebooks/blob/main/notebooks/zero-shot-object-detection-with-grounding-dino.ipynb
  
• HQ-SAM （ゼロショットのセグメンテーション）のオンラインデモ（Hugging Face上）: https://huggingface.co/spaces/sam-hq-team/sam-hq
  
• HQ-SAM （ゼロショットのセグメンテーション）のオンラインデモ（Google Colaboratory 上）: https://colab.research.google.com/drive/1QwAbn5hsdqKOD5niuBzuqQX4eLCbNKFL?usp=sharing
  

直線検知

• ELSED による直線検知（オンラインデモ）

  ELSEDは 線分検知の一手法．2021年発表．

  https://colab.research.google.com/github/iago-suarez/ELSED/blob/main/Python_ELSED.ipynb

  

イメージ・マッチング

• GlueStick 法によるイメージ・マッチング（オンラインデモ）

  https://colab.research.google.com/github/cvg/GlueStick/blob/main/gluestick_matching_demo.ipynb

  
  

画像編集

• Edit Anything のページ，オンラインデモ

  https://www.editanything.ai/

  
  

Diffusion モデル

• Huggging Face の Stable Diffusion 3 Medium デモ

  https://huggingface.co/spaces/stabilityai/stable-diffusion-3-medium

  Prompt

  photorealistic, hyper-detailed, 8K resolution, ultra-wide panoramic view, golden hour lighting, Japanese coastal scene, autumn season foreground and left: expansive ocean view, calm sea extending to the horizon, occupying the entire left side of the image center: long, uninterrupted stretch of dry sandy beach, extending far into the distance, golden sand glistening in the morning light far distance: snow-capped mountains clearly visible despite being hazy, creating a striking contrast with the beach composition: clear visual path from the foreground beach to the distant mountains, emphasizing the vast expanse and depth of the scene right side: dense autumn forest, mix of evergreen and deciduous trees with vibrant fall colors middle distance: gentle rolling hills between the beach and mountains, covered in autumn foliage sky: clear autumn sky with minimal clouds, soft morning light atmosphere: crisp autumn air, sense of tranquility and immense space additional details: subtle wave patterns on the wet sand near the water's edge a few seagulls flying over the ocean light sea breeze visible in the movement of beach grass near the forest edge. style: hyper-realistic landscape photography, emphasis on the vastness of the scene and the visual connection between the beach and distant mountains

  negative prompt

  people, buildings, man-made structures, boats, vehicles, pollution, litter, urban elements, power lines, roads, text, logos, artifacts, distortions, low quality, blurry, noise, grain, oversaturation, unrealistic colors, cartoon style, anime style, illustration, painting style, sketchy, abstract, surreal elements, dark or stormy weather, night scene

  
• SDXL Lightning - by fal.ai

  https://fastsdxl.ai/

  【関連する外部ページ】 https://sub.thursdai.news/p/thursdai-feb-22nd-groq-near-instant

  

  使用したプロンプト: You are standing on a sandy beach by the sea. The sand beneath your feet tickles the soles of your feet, imparting a pleasant warmth. To your left lies the vast sea, its rippling surface reflecting the sunlight, twinkling brightly. If you turn your eyes to the right, you can see a forest teeming with trees. The colors of autumn have descended upon the trees, and the varicolored leaves look even more beautiful in the sunlight. Looking far into the distance, you can see a chain of mountains. Wispy clouds shroud the mountain peaks, and beyond them, you can see snow-capped mountains. The sight makes your heart leap with joy. The sky is clear and blue, and the sunlight caresses your skin warmly. The wind slowly flows, carrying the scent of the sea to you. This day is for doing nothing but playing on the beach. The beautiful scenery – all these fill your heart and stir a bright desire to play.

• プロンプトからの画像生成, Stable Diffusion XL, SDXL 1.0: A Leap Forward in AI Image Generation のオンラインデモ

  https://clipdrop.co/text-to-image

  
• Stable Diffusion Online のページ，オンラインデモ

  Stable Diffusion による Text-to-Image （テキストからの画像合成）

  「Enter your prompt」のところに，英語でキーワードや文章を入れて Enter キー　（あるいは Generate Image をクリック），混雑しているときはしばらく待つ．

  https://stablediffusionweb.com/

  

  使用したプロンプト: You are standing on a sandy beach by the sea. The sand beneath your feet tickles the soles of your feet, imparting a pleasant warmth. To your left lies the vast sea, its rippling surface reflecting the sunlight, twinkling brightly. If you turn your eyes to the right, you can see a forest teeming with trees. The colors of autumn have descended upon the trees, and the varicolored leaves look even more beautiful in the sunlight. Looking far into the distance, you can see a chain of mountains. Wispy clouds shroud the mountain peaks, and beyond them, you can see snow-capped mountains. The sight makes your heart leap with joy. The sky is clear and blue, and the sunlight caresses your skin warmly. The wind slowly flows, carrying the scent of the sea to you. This day is for doing nothing but playing on the beach. The beautiful scenery – all these fill your heart and stir a bright desire to play.

• Stable Diffusion 2-1 のページ（Hugging Face 上），オンラインデモ

  Stable Diffusion 2.1 による Text-to-Image （テキストからの画像合成）,

  「Enter your prompt」のところに，英語でキーワードや文章を入れて Enter キー　（あるいは Generate Image をクリック），混雑しているときはしばらく待つ．

  https://huggingface.co/spaces/stabilityai/stable-diffusion

  

  使用したプロンプト: You are standing on a sandy beach by the sea. The sand beneath your feet tickles the soles of your feet, imparting a pleasant warmth. To your left lies the vast sea, its rippling surface reflecting the sunlight, twinkling brightly. If you turn your eyes to the right, you can see a forest teeming with trees. The colors of autumn have descended upon the trees, and the varicolored leaves look even more beautiful in the sunlight. Looking far into the distance, you can see a chain of mountains. Wispy clouds shroud the mountain peaks, and beyond them, you can see snow-capped mountains. The sight makes your heart leap with joy. The sky is clear and blue, and the sunlight caresses your skin warmly. The wind slowly flows, carrying the scent of the sea to you. This day is for doing nothing but playing on the beach. The beautiful scenery – all these fill your heart and stir a bright desire to play.

• stability-ai/stable-diffusion のページ（replicate 上）

  Stable Diffusion v2 による Text-to-Image （テキストからの画像合成）,

  https://replicate.com/stability-ai/stable-diffusion

  

  【関連する外部ページ】

  • replicate / cog-stable-diffusion の GitHub のページ: https://github.com/replicate/cog-stable-diffusion
  • replicate の Explorer のページ: https://replicate.com/explore

  使用したプロンプト: You are standing on a sandy beach by the sea. The sand beneath your feet tickles the soles of your feet, imparting a pleasant warmth. To your left lies the vast sea, its rippling surface reflecting the sunlight, twinkling brightly. If you turn your eyes to the right, you can see a forest teeming with trees. The colors of autumn have descended upon the trees, and the varicolored leaves look even more beautiful in the sunlight. Looking far into the distance, you can see a chain of mountains. Wispy clouds shroud the mountain peaks, and beyond them, you can see snow-capped mountains. The sight makes your heart leap with joy. The sky is clear and blue, and the sunlight caresses your skin warmly. The wind slowly flows, carrying the scent of the sea to you. This day is for doing nothing but playing on the beach. The beautiful scenery – all these fill your heart and stir a bright desire to play.

• cjwbw/anything-v4.0 のページ（replicate 上），

  Stable Diffusion による Text-to-Image （テキストからの画像合成）．アニメ風の画像を生成する．

  「prompt」，「negative_prompt」のところに，英語でキーワードや文章を入れて実行．

  https://replicate.com/cjwbw/anything-v4.0

  

  使用したプロンプト: You are standing on a sandy beach by the sea. The sand beneath your feet tickles the soles of your feet, imparting a pleasant warmth. To your left lies the vast sea, its rippling surface reflecting the sunlight, twinkling brightly. If you turn your eyes to the right, you can see a forest teeming with trees. The colors of autumn have descended upon the trees, and the varicolored leaves look even more beautiful in the sunlight. Looking far into the distance, you can see a chain of mountains. Wispy clouds shroud the mountain peaks, and beyond them, you can see snow-capped mountains. The sight makes your heart leap with joy. The sky is clear and blue, and the sunlight caresses your skin warmly. The wind slowly flows, carrying the scent of the sea to you. This day is for doing nothing but playing on the beach. The beautiful scenery – all these fill your heart and stir a bright desire to play.

  【関連する外部ページ】

  • replicate の Explorer のページ: https://replicate.com/explore
• Stable Doodle (ClipDrop が提供するサービス）

  https://clipdrop.co/stable-doodle

  スケッチと英語のプロンプトを与えると画像を生成するサービス． 無料で1時間に4枚までの生成が可能．

  
• cjwbw/anything-v3.0 のページ（replicate 上），

  Stable Diffusion による Text-to-Image （テキストからの画像合成）．アニメ風の画像を生成する．

  「prompt」，「negative_prompt」のところに，英語でキーワードや文章を入れて実行．

  https://replicate.com/cjwbw/anything-v3.0

  

  【関連する外部ページ】

  • replicate の Explorer のページ: https://replicate.com/explore
• cjwbw/waifu-diffusion のページ（replicate 上），

  Stable Diffusion による Text-to-Image （テキストからの画像合成）．

  「prompt」のところに，英語でキーワードや文章を入れて実行．

  https://replicate.com/cjwbw/waifu-diffusion

  

  【関連する外部ページ】

  • replicate の Explorer のページ: https://replicate.com/explore
• Scribble Diffusion のページ，オンラインデモ

  Scribble Diffusion によるスケッチとテキストからの画像合成

  「Enter your prompt」のところに，英語でキーワードや文章を入れて Enter キー　（あるいは Go をクリック），混雑しているときはしばらく待つ．

  https://scribblediffusion.com/

  
• andreasjansson/stable-diffusion-animation のページ （replicate 上），

  ２つのプロンプトを保管することにより，Stable Diffision の動画を生成

  「prompt_start」，「prompt_end」のところに，英語でキーワードや文章を入れて実行．

  https://replicate.com/andreasjansson/stable-diffusion-animation

  

  【関連する外部ページ】

  • andreasjansson / cog-stable-diffusion の GitHub のページ: https://github.com/andreasjansson/cog-stable-diffusion/tree/animate
  • replicate の Explorer のページ: https://replicate.com/explore

画像生成，イラスト生成

• プロンプトからの画像生成, OpenJourney のオンラインデモ

  https://replicate.com/prompthero/openjourney

  
• プロンプトからの画像生成, DALL E （オンラインデモ）

  「Edit prompt or view more images」をクリック，メニューで選ぶ

  URL: https://openai.com/blog/dall-e

  
• プロンプトからの画像生成, Craiyon (DALL E mini) （Hugging Face 上のオンラインデモ）

  「What image do you want to generate」のところに，英語でキーワード，文章を入れて Enter キー　（あるいは Generate Image をクリック），混雑しているときはしばらく待つ．

  URL: https://www.craiyon.com/

  
• DALL-E mini, オンラインデモ

  https://huggingface.co/spaces/dalle-mini/dalle-mini

• アニメ絵キャラクタ画像の生成, Waifu Labs （オンラインサービス）

  Waifu Labs の URL: https://waifulabs.com/

  
• 画像の変換 Instruct-pix2pix

  https://huggingface.co/spaces/timbrooks/instruct-pix2pix

顔画像の生成

• Which Face is Real? のページ, 顔画像の生成 （オンラインデモ）

  顔画像で，どちらが実在で，どちらがフェイクかのクイズを行う．

  https://www.whichfaceisreal.com/

  

清書，模倣，画像のあてはめ

• Variational Auto-Encoder デモ（オンラインデモ）

  人工知能で，スケッチを増やす．

  https://magenta.tensorflow.org/sketch-rnn-demo

  スクロールして，「Variational Auto-Encoder」のところ

  文献: David Ha, Douglas Eck, A Neural Representation of Sketch Drawings, https://arxiv.org/pdf/1704.03477.pdf

• edges2cats デモ（オンラインデモ）

  人工知能で，手書きの線に猫の画像をあてはめる．

  https://affinelayer.com/pixsrv/index.html

  スクロールして「edges2cats」を探す． 「Clear」をクリックして消す． 猫を手書きして「process」をクリック．

• AutoDraw （オンラインデモ）

  人間の下書きを，人工知能が清書する．「Start Drawing」をクリック．

  https://www.autodraw.com/

３次元モデルの生成

• Text-to-3D の公式のオンラインデモ（Google Colaboratory）: https://colab.research.google.com/github/camenduru/dreamgaussian-colab/blob/main/dreamgaussian_colab.ipynb

  Google Colaboratory なので，英語の「プロンプト」を各自で修正して実行可能． そして，処理結果（３次元データ）は，簡単な操作でダウンロードできる．

  プログラム

  

  処理結果（３次元データ）を Blender で表示したスクリーンショット:

  

  処理結果（３次元データ）: icecream_mesh.obj, icecream_mesh.mtl, icecream_mesh_albedo.png, icecream_model.ply

  処理結果のスクリーンショット（動画）: icecream.mp4

• DreamGaussian の Image-to-3D の公式のオンラインデモ（Google Colaboratory）: https://colab.research.google.com/drive/1sLpYmmLS209-e5eHgcuqdryFRRO6ZhFS?usp=sharing

  写真１枚から，テクスチャ付きの立体データを生成

  元画像

  

  中間結果（左），最終結果のスクリーンショット（右）

  

  処理結果（３次元データ）: b.obj, b.mtl, b_albedo.png

  処理結果のスクリーンショット（動画）:

  b.mp4

  使い方のヒント

  • Google Colaboratory を使用している
  • 前準備として画像ファイルを準備．ファイル名は英語が良い（a.jpg, b.png）のように
  • 上のページで「ランタイム」，「すべてのセルを実行」で実行開始．途中で，画像ファイルを１つアップロード．
  • 無料版のGoogle Colaboratoryを使っている場合などは，GPU のメモリ不足でエラーが出る場合がある．エラーが出た場合，「ランタイム」，「すべてのセルを実行」で実行を１，２回程度繰り返すと，うまく行く場合が多い．実行のたびに，GPU のメモリの量が変わり，GPUのメモリが多く割り当てられる場合があるため．
• Point E - a Hugging Face Space by openai のページ

  https://huggingface.co/spaces/openai/point-e

  
• TinyNERF （３次元モデルの生成）

  Google Colaboratory のページ

  https://colab.research.google.com/github/bmild/nerf/blob/master/tiny_nerf.ipynb

• instant-ngp （３次元モデルの生成）

  Google Colaboratory のページ

  https://github.com/NVlabs/instant-ngp/blob/master/notebooks/instant_ngp.ipynb

ChatGPT

• OpenAI の ChatGPT のアカウント取得

  https://chat.openai.com/auth/login

• OpenAI の ChatGPT, オンライン

  https://openai.com/blog/chatgpt/

• talkai のサービス

  https://talkai.info/

  ChatGPT の派生サービス． 登録不要，期間限定で無料のようです．

Chat

• OpenChat のデモ: https://openchat.team/ja

Chain of Thought

• WebLangChain: https://weblangchain.vercel.app/
  

LLM

• LLM Visualization: https://bbycroft.net/llm

音声認識，音声合成

• 音声からの文字起こし Whisper - a Hugging Face Space by openai

  https://huggingface.co/spaces/openai/whisper

• Prime Voice AI, IIElevenLabs

  登録必要

  https://beta.elevenlabs.io/

• DeepL, 翻訳

  人工知能による翻訳，多言語，Word や PowerPoint の翻訳も可能

  https://www.deepl.com/ja/translator

• DeepL, 校正

  英語，ドイツ語の校正

  https://www.deepl.com/write

• grammarly, 英文校正

  https://www.psycheng.com/entry/2021/08/21/psychology_research_tool

文書のレイアウト

• Interactive demo: Document Layout Analysis with DiT （Hugging Face 上のデモ）

  https://huggingface.co/spaces/nielsr/dit-document-layout-analysis

  

  【文献】 Chengyi Wang, Sanyuan Chen, Yu Wu, Ziqiang Zhang, Long Zhou, Shujie Liu, Zhuo Chen, Yanqing Liu, Huaming Wang, Jinyu Li, Lei He, Sheng Zhao, Furu, Neural Codec Language Models are Zero-Shot Text to Speech Synthesizers, CoRR, abs/2301.02111, 2023.

作曲（有料サービスを含む）

• MusicGen のデモ（Hugging Face 上）

  https://huggingface.co/spaces/facebook/MusicGen"

  
• amper, 作曲（基本，有料）

  https://www.ampermusic.com/

• AI Music Generator, 作曲（基本，有料）

  https://soundful.com/

音楽

Infinite Drum Machine, https://experiments.withgoogle.com/ai/drum-machine/view/

Maroofy (楽曲の検索), https://maroofy.com/

関連

人工知能を使っているものではないと考えられるが，関連するもの

• 音声合成デモ，https://imaginary.github.io/pink-trombone/index.html?lang=en

  口腔，鼻腔を操作して音声合成を行うデモ．

  
• https://ffmpeg.lav.io/