Google Bard、Copilotで紙の洋書も一瞬で翻訳

こんにちは棚橋です。

先ほどX(Twitter)でこんな投稿が流れてきました。

THE STREET PHOTOGRAPHER’S MANUAL

とても良い本で、ストリートフォトグラフィーの撮り方だけでなく、概念、考え方も書かれている。買ってから少しずつ見直したりして読んでいるのだけれど、英語すぎて本当に少しずつだった。… pic.twitter.com/6dhBiDvJYi

— MASA (@masaphoto9) January 3, 2024

これは画期的ですね！

ChatGPT Plusの機能に、自分独自のChat botが作れる「My GPTs」というものがあります。

この機能を使ってフォトグラファーのMASAさんが素晴らしいGPTsを作成してくれました。

写真やデザインに関する洋書をスマホで撮影して、その写真をアップロードするだけで、英文の翻訳、抽出、要約、解説をしてくれるというものです。

ChatGPT - Book transfer

とても便利ですよね。
私も実際に使ってみたのですが、テキストを正確に抽出して翻訳してくれたのでとても感動しました。

しかしこのGPTsは現状ではChatGPT Plus課金者しか利用できないのがネックです。

そこで無料ユーザー向けにChatGPTの代替として「Google Bard」をお勧めします。

Google BardはGoogle社が提供している生成AIチャットで、Googleアカウントさえあれば誰でも無料で利用することがあります。

今回Bardで使用することができる洋書翻訳プロンプトを作成したのでご利用ください。
記事の最後に置いておきますので、是非最後までご覧ください。

使い方は簡単です。
プロンプトを入力して、翻訳したい画像をアップロードするだけ。

今回はこちらの本を使いました。
Ernst Haas 「New York in Color 1952-1962」の表紙の織り込み部分に書いてある、プロフィール文で試してみます。

Google Bardに飛んだら、画像をアップロードします。

こんな感じで入力します。

出力結果

Step 1: 画像から英文をテキストとして抽出

アップロードされた画像から抽出した英文は、次のとおりです。

Ernst Haas New York in Color 1952-1962 Ernst Haas's color works reveal the photographer's remarkable genius and remind us on every page why we love New York. Born in 1921 in Vienna, Haas immigrated to the United States in 1951, making New York his home for the rest of his life. Leaving behind a war-torn continent, Haas used the new medium of color photography to capture a city pulsing with energy and humanity on every block. Haas, a member of the famed Magnum Photos cooperative, who would go on to become the fourth president of the agency, is widely considered a pioneer of color photography and a master of Kodachrome film. Some of the photographs included here appeared in the first color issue of Life magazine, in 1953. His one-man exhibition at the Museum of Modern Art (MoMA), New York, in 1962, was the institution's first on color photography. As these photographs demonstrate, he was unparalleled at capturing mid-century New York, in both its grit and glory. One of the most accomplished photographers of the twentieth century, Haas transgresses the borders between the artistic and the everyday; through his lens, street detritus and torn posters are reimagined as abstractions, and all matters of New York-commuters, street peddlers, taxi cabs-brim with lyricism and dramatic tension. Inside these pages you'll find many photographs that were never before published in a book, and some that have never been seen outside of Haas's archive. They have a lasting impact on what we, and the world, see as distinctly New York. Ernst Haas's New York City color photographs are both a tribute to a bygone era in the city's history and a proclamation of his buoyant vision of the future. They continue to resonate, now seemingly more than ever.

Step 2: 抽出したテキストを日本語訳

上記の英文を日本語に訳すと、次のようになります。

エルンスト・ハース ニュー・ヨーク・カラー 1952-1962

エルンスト・ハースのカラー作品は、写真家の驚くべき才能を明らかにし、私たちがニューヨークを愛する理由をページごとに思い出させてくれる。

1921年にウィーンで生まれたハースは、1951年にアメリカに移住し、残りの人生をニューヨークに住み続けた。戦争で荒廃した大陸を後にし、ハースは新しいメディアであるカラー写真を使って、あらゆるブロックで活気に満ちた人間性を湛えた街を捉えた。ハースは、名門マグナム・フォトス協会の会員であり、後に同協会の第四代会長となる。彼は、カラー写真のパイオニアであり、コダクロームフィルムの巨匠として広く知られている。ここに収録されている写真のいくつかは、1953年にライフ誌の最初のカラー号に掲載された。1962年にニューヨーク近代美術館（MoMA）で開催された彼の個展は、同館のカラー写真に関する最初の展覧会となった。これらの写真が示すように、彼は中世のニューヨークを、その泥臭さと栄光の両方で捉えることに並ぶ者がなかった。

20世紀で最も優れた写真家の一人であるハースは、芸術と日常の境界を越え、彼のレンズを通して、通りの残骸や破れたポスターが抽象画として再解釈され、ニューヨークのあらゆる事柄、通勤者、露天商、タクシーが抒情性と劇的な緊張感に満ちている。これらのページの中には、これまで本に掲載されたことのないものや、ハースのアーカイブの外で見たことのないものも多く、私たちや世界がニューヨークの特徴として捉えるものに永続的な影響を与えている。

エルンスト・ハースのニューヨーク市のカラー写真は、街の過去の時代への賛辞であると同時に、彼の活気に満ちた未来への宣言でもある。それらは、今、これまで以上に共鳴し続けている。

Step 3: 日本語訳をさらに要約

上記の日本語訳をさらに要約すると、次のようになります。
エルンスト・ハースは、20世紀を代表するカラー写真家である。
ハースは、戦争で荒廃した大陸を後にし、ニューヨークの活気に満ちたエネルギーと人間性を捉えた。
ハースは、カラー写真のパイオニアであり、コダクロームフィルムの巨匠として知られ、ニューヨークの泥臭さと栄光を両方とも捉えることに並ぶ者がなかった。
ハースは、芸術と日常の境界を越え、通りの残骸や破れたポスターを抽象画として再解釈し、ニューヨークのあらゆる事柄に抒情性と劇的な緊張感を与えた。
ハースのニューヨーク市のカラー写真は、ニューヨークの過去の時代への賛辞であると同時に、彼の活気に満ちた未来への宣言でもある。

ハースのニューヨーク市のカラー写真は、今なお世界中の人々に愛され続けています。彼の作品は、ニューヨークの魅力を再発見させてくれる、まさに「ニューヨークの詩」と言えるでしょう。

いかがでしょう?とても便利ですよね。
DeepLの翻訳と比較してみます。

エルンスト・ハースのカラー作品は、この写真家の卓越した才能を明らかにし、私たちがニューヨークを愛する理由をすべてのページで思い出させてくれる。
1921年にウィーンで生まれたハースは、1951年にアメリカに移住し、ニューヨークを生涯の故郷とした。戦争で荒廃した大陸を後にしたハースは、カラー写真という新しいメディアを使い、すべてのブロックにエネルギーと人間性が脈打つ街を撮影した。
有名なマグナム・フォトのメンバーであり、後にマグナム・フォトの4代目社長となるハースは、カラー写真のパイオニアであり、コダクロームフィルムの名手として広く知られている。ここに収録された写真の一部は、1953年に『ライフ』誌の最初のカラー号に掲載された。1962年にニューヨーク近代美術館（MoMA）で開催された彼の個展は、同館初のカラー写真展となった。これらの写真が示すように、彼はミッドセンチュリーのニューヨークを、その厳しさと栄光の両面から捉えた比類なき写真家であった。
20世紀で最も優れた写真家の一人であるハースは、芸術と日常の境界を越えている。彼のレンズを通して、路上の残骸や破れたポスターは抽象画として再構築され、ニューヨークのあらゆる事柄（通勤客、露天商、タクシー）は、叙情性と劇的な緊張感に満ちている。
このページには、これまで写真集として出版されたことのない写真や、ハースのアーカイブ以外では見たことのない写真が多数掲載されている。これらの写真は、私たちが、そして世界が、ニューヨーク独特のものとして見るものに、永続的な影響を与えている。
エルンスト・ハースのニューヨークのカラー写真は、ニューヨークの歴史における過ぎ去りし時代へのオマージュであると同時に、彼の明るい未来像の宣言でもある。これらの写真は、かつてないほどに、今なお共鳴し続けている。

翻訳ツールとして有名なDeepLの日本語訳と比較しても、Bardの英文テキスト抽出、翻訳はかなり精度が高いと思います。

皆さんも是非活用してみてください。

※出力が途中で切れてしまう場合は次の会話で「続きをお願いします」と入力すると、続きから出力してくれます。

{
 "prompt": {
  "Step1": "アップロードした画像から英文をテキストとして抽出してください。",
  "Step2": "抽出したテキストを日本語訳してください。",
  "Step3": "日本語訳をさらに要約してください。"
 }
}

追記(2024年1月4日)

ChatGPT、Bardの他にMicrosoftのCopilot（Bingチャット）でもテキスト抽出が可能でした。
CopilotはChatGPT Plusと同様にGPT-4が使えて、無料で誰でも使えるので是非活用してみてください。

Copilot(Bing)の出力

こんにちは、これはBingです。画像からの英文抽出、日本語訳、要約の3つのステップをお手伝いします。😊

Step1: 画像から抽出した英文は以下の通りです。

Ernst Haas's color works reveal the photographer's remarkable genius and remind us on every page why we love New York.

Born in 1921 in Vienna, Haas immigrated to the United States in 1951, making New York his home for the rest of his life. Leaving behind a war-torn continent, Haas used the new medium of color photography to capture a city pulsing with energy and humanity on every block. Haas, a member of the famed Magnum Photos cooperative, who would go on to become the fourth president of the agency, is widely considered a pioneer of color photography and a master of Kodachrome film. Some of the photographs included here appeared in the first color issue of Life magazine, in 1953. His one-man exhibition at Museum Of Modern Art (MoMA), New York ,in 1962 was institution’s first on color photography . As these photographs demonstrate , he was unparalleled at capturing mid-century New York ,in both its grit and glory .

One Of The Most Accomplished Photographers Of The Twentieth Century ,Haas Transgresses The Borders Between Artistic And Everyday ; Through His Lens , Street Detritus And Town Posters Are Reimagined As Abstractions And All Matters Of New York – Commuters , Street Peddlers,Taxi Cabs – Brim With Lyricalism And Dramatic Tension . Inside These Pages You’ll Find Many Photographs That Were Never Before Published In A Book ,And Some That Have Never Been Seen Outside Of Hass’s Archive . They Have A Lasting Impact On What We See And World As Distinctly New York.


Step2: 抽出した英文を日本語に翻訳した結果は以下の通りです。
エルンスト・ハースのカラー作品は、写真家の驚くべき才能を明らかにし、私たちがニューヨークを愛する理由を、ページごとに思い出させてくれます。

1921年にウィーンで生まれたハースは、1951年にアメリカに移住し、その後の人生をニューヨークで過ごしました。戦火によって荒廃した大陸を後にし、ハースは新しいメディアであるカラー写真を使って、一区画ごとにエネルギーと人間性に満ちた街を捉えました。有名なマグナム・フォトのメンバーであり、後に同社の第4代会長になるハースは、カラー写真の先駆者であり、コダクロームフィルムの名手と広く認められています。ここに収められた写真の一部は、1953年に発行されたライフ誌の初のカラー号に掲載されました。彼の個展は、1962年にニューヨークの近代美術館（MoMA）で開催され、同館初のカラー写真展となりました。これらの写真は、彼が20世紀中頃のニューヨークを、その荒々しさと栄光の両方で捉えることに他の追随を許さないことを示しています。

20世紀最高の写真家の一人であるハースは、芸術的なものと日常的なものの境界を越えています。彼のレンズを通して、街のゴミやポスターは抽象化され、ニューヨークのあらゆるもの――通勤者、露店商、タクシー――は抒情性と劇的な緊張感に満ちています。このページの中には、今まで本に掲載されたことのない写真や、ハースのアーカイブの外に出たことのない写真も多くあります。それらは、私たちが見るものや、ニューヨークという独特の世界に、永続的な影響を与えています。


Step3: 日本語訳を要約した結果は以下の通りです。
エルンスト・ハースは、カラー写真の先駆者であり、ニューヨークのエネルギーと人間性を鮮やかに表現した写真家です。彼の作品は、ライフ誌や近代美術館で紹介され、芸術的なものと日常的なものの境界を越えています。彼のアーカイブには、今まで見ることのできなかった貴重な写真が多くあります。

この記事が良いと思ったら、いいねをよろしくお願いします！