東京大学大学院 情報学環・学際情報学府 The University of Tokyo III / GSII

研究Research

July 5, 2018

人工知能 を使った「 記憶の解凍 」 ワークショップ"Reboot Memories" Workshop Series Using Artificial Intelligence Technology

上に掲載した,沖縄の女性二人が談笑している白黒写真は,朝日新聞社のカメラマンが1935年に撮影したものです。それに対してカラー写真は,人工知能技術*1で自動カラー化したのち,さらに画像処理ソフトによる色補正を加えたものです。白黒写真では「凍りついて」いた人物の印象が,カラー化写真では「解凍」され,息づき始めるような印象を受けないでしょうか。

渡邉英徳研究室では「記憶の解凍」をテーマに据え,デジタルアーカイブの制作・白黒写真のカラー化などに取り組んでいます。このたびその一環として,一般参加者を対象とした「記憶の解凍」ワークショップを,日本新聞博物館(横浜市中区)にて,2018年5月26日と6月23日(沖縄慰霊の日)に開催しました。

日本新聞博物館では,1935年に撮影された,戦前の沖縄の写真の企画展「よみがえる沖縄 1935」展が開催中です。会場では,渡邉英徳研究室がカラー化した写真を含め,約100点の白黒写真が展示されています。

今回の「記憶の解凍」ワークショップでは,まずカラー化技術の講習を行ない,次いでカラー化された写真をもとにした,対話の場を設けました。第一回は参加者が持参した古写真を,第二回は会場に展示されている白黒写真を対象としました。ワークショップでは渡邉英徳研究室の学生がチューターを務めました。

カラー化の最初のステップである,写真の非接触スキャンと自動着彩の工程は,スマートフォンのみで完結します。参加者からは,とても簡単な着彩作業にもかかわらず,もともとの白黒写真の印象が劇変することに対し,驚きの声があがっていました。

その後,各自が作成したカラー写真をディスプレイで鑑賞しながら,それぞれの写真の思い出について語りあう場を設けました。亡くなった肉親の思い出,かつて訪れた異国の風景,白黒でしか知らなかった戦前の街などについて,会話が盛り上がりました。

このように,過去の資料の「凍りついた」イメージを,最新技術で「解凍」し,コミュニケーションを創発することによって,過去の記憶が未来に継承されます。その詳細についてはこちらの論文をご覧ください。私たちは,こうした「記憶の解凍」の活動を,今後も展開していく予定です。

The Japan Timesに,渡邉英徳研究室と広島女学院高校が共同で取り組んでいる「記憶の解凍」プロジェクトの記事が掲載されました。ぜひ,お読みいただければと思います。

記事:渡邉英徳(教授)

*1 Satoshi Iizuka, Edgar Simo-Serra, Hiroshi Ishikawa: “Let there be Color!: Joint End-to-end Learning of Global and Local Image Priors for Automatic Image Colorization with Simultaneous Classification.”; ACM Transaction on Graphics (Proc. of SIGGRAPH), Vol. 35, No. 4, #110, 2016.

There are two photographs above. A black-and-white photograph of two Okinawan women was taken by a photographer of the Asahi Shimbun Newspaper in 1935. A color photograph was colorized by artificial intelligence technology*1 and image processing software. Like this example, the impression of the person is “frozen” in a black-and-white photograph. However, we can “reboot” that impression and add reality with AI technology.

The research theme of the Hidenori Watanave Laboratory is “Rebooting Memories”. This work includes the creation of digital archives, and the colorization of black-and-white photographs. As a part of this research, a workshop series on “Rebooting Memories” was held for general participants at the Nippon Newspaper Museum (Naka Ward, Yokohama City) on 26th May and 23rd June (Okinawa Memorial Day), 2018.

A special exhibition called “Revibed Okinawa 1935” is being held at the Nippon Newspaper Museum. It is a photographic exhibition of daily life in Okinawa taken in 1935 before WWII. At the venue, about 100 black-and-white photographs including the colorized photographs by the Hidenori Watanave Laboratory are on display.

In the workshops, participants were first of all taught the coloring techniques. This was followed by a time for participants to dialogue, surrounding the colorized photos. The subject of colorization of the first workshop was photographs brought by participants, and the second workshop’s was photographs of pre-war Okinawa. In the workshops, students from Hidenori Watanave Laboratory served as tutors.

The first step of colorization is very simple. It includes non-contact scanning and automatic colorization, and is completed only with smartphones. Participants were very surprised that the impressions of black-and-white photographs were changed dramatically by a very simple process.

After that, a place was set up to talk about memories of each photograph while viewing colorized photographs created by the participants. There was excited conversation about memories of deceased fellows, the landscape of foreign countries previously visited, prewar cities only known in black and white, among other topics.

We plan to continue activity on “Rebooting Memories” to increase the information value of by converting “stocked” records in society into “flowing” images, thus transmitting past memories to the future based on emerging communication. Please refer to our paper for more details.

An article about the “Rebooting Memories” project co-worked by the Hidenori Watanave Laboratory and Hiroshima Jogakuin High School was published in “The Japan Times”. I hope you will read it.

Text: Hidenori Watanave (Professor)
Proofreading: David Buist (Project Senior Specialist)

*1 Satoshi Iizuka, Edgar Simo-Serra, Hiroshi Ishikawa: “Let there be Color!: Joint End-to-end Learning of Global and Local Image Priors for Automatic Image Colorization with Simultaneous Classification.”; ACM Transaction on Graphics (Proc. of SIGGRAPH), Vol. 35, No. 4, #110, 2016.


主担当教員Associated Faculty Members

教授

渡邉 英徳
  • 文化・人間情報学コース
  • 先端表現情報学コース

Professor

WATANAVE, Hidenori
  • Cultural and human information studies course
  • Emerging design and informatics course