ChatGPTならOCRから翻訳まで一気にこなす！やることは「スマホで撮って送るだけ」

ChatGPTの画像解析の性能がいまいちだったのはもう過去の話。 GPT-4oへのアップデートにより、画像を読み込ませて回答を生成する活用の幅が大きく広がりました。この記事では、主にスマホで写真をとって活用できる方法を紹介します。 ChatGPTならOCRから翻訳まで一気にこなす！やることは「スマホで撮って送るだけ」

「これ何？ どうやって使うの？」を写真を送るだけで解決する

キーワード検索では、そもそも入力する言葉がわからないと調べられませんよね。現在は画像検索もできるようになりましたが、答えが1つ出たらさらに検索をかけたり、関連サイトをチェックしたりする必要があります。 ChatGPTなら、追加の質問を投げかけることで、分析や問題の解決方法まで得ることができます。 以前筆者は、昔使っていたPCに内蔵されていたSSDからデータを取り出すため、現在使っているPCへの接続を試みたことがあります。 そのSSDは以前使っていたPCが故障したため取り出したままだったのですが、改めて見ると見たことのない端子がついていました。そこで、これを写真に撮ってChatGPTに調べてもらいました。 メッセージアプリに写真とテキストを送るのと同じように、ChatGPTに読み込ませます。 ChatGPTの回答から、この端子の名前と変換できるアダプターがあることがわかりました。 実際にその機器を購入し試してみましたが、残念ながらSSDの中身が壊れていたためデータは確認できませんでした。ですが、物の名前がわからない場合でも写真を撮って送ることで解決策が見つかることがわかったのは大きな収穫です。 ChatGPTなしでは、おそらく1人でここまで対応するのは難しかったかもしれません。

写真からテキスト化も◎。翻訳だってしてくれる！

次に、OCR（光学文字認識）としての活用です。 以前は、文字が書かれているスクリーンショットを読み込ませても、正しくテキストに表せませんでした。ところが、最新バージョンではスキャンの性能が格段にアップしています。 試しに、製品の取扱説明書を読み込ませてみました。 記載されている通りに読み取ってくれます。 また、英語の説明書も読み取り、直接翻訳してもらうことができます。 海外旅行に行った際、空港の表示やレストランのメニューを読み取って使えそうですね。オンでもオフでも幅広く活用できるでしょう。