讓日本知名漫畫家都驚奇的塗鴉 APP-訪談 RakugakiAR 開發團隊

讓日本知名漫畫家都驚奇的塗鴉 APP-訪談 RakugakiAR 開發團隊

更新於 發佈於 閱讀時間約 5 分鐘

在全球疫情嚴峻之時,Whatever 發表一款 APP「 RakugakiAR 」(中譯:塗鴉 AR ),不論塗鴉在筆記本或白板或任何地方,掃描後就能讓塗鴉注入生命力,也吸引《海賊王》作者尾田榮一郎分享,享受為塗鴉注入生命的效果。

RakugakiAR 可讓塗鴉動起來,還能餵食、戳戳它等方式跟塗鴉互動。

RakugakiAR 可讓塗鴉動起來,還能餵食、戳戳它等方式跟塗鴉互動。

聽說 RakugakiAR 這個想法,從發想到實際執行出來長達 10 年之久,好奇當初這個想法怎麼開始的?

SO:其實這個想法源自於 2010 年,我們還在 Coconoe(ココノヱ)公司自己開發製作的「擊墜王遊戲」時。幾年後,我們收到遊戲公司 SEGA 邀約合作,共同開發一款可以在卡片上繪製戰鬥機的遊戲機台;透過機台的相機拍攝卡片上的塗鴉,讓塗鴉成為遊戲的元素之一。機台也會根據塗鴉的顏色、大小、形狀等,調整遊戲參數如攻擊力、防禦力、速度,並進行對戰。

可以讓自己的塗鴉成為遊戲的角色之一,不管對大人還小孩來說,應該都是很特別的體驗呢!

SO:沒錯,後來我們陸續開發了魚類與動物版本,但是動物有四肢,跟戰鬥機或魚類不同;為了讓動物版本的使用體驗上更自然,我們開發了可以檢測 2D 關節的獨特技術「Honeborn」。這個技術可以分辨塗鴉的四肢,並自動將骨頭、關節放進塗鴉中。

雖然開發細節是秘密,但為了確保任何塗鴉都可以自然地移動,我們花了不少時間測試協調性,即使不是很精美的塗鴉,動起來也很生動自然呢!

Honeborn技術運用在Rakugaki動物園,讓動物塗鴉的四肢能像動物般自然擺動。

聽起來,這個技術已經在其他地方使用一段時間了,是什麼契機讓你們決定開發AR 版本呢?

SO:主要是 2017 年 iPhone 發布了 AR Kit,讓 iPhone 能夠進行空間識別,手機上產出 AR 內容變得更加容易。我想說如果將 Honeborn 的技術結合 AR,也許能夠創造出一些有趣的體驗,但因為有其他的工作,所以一直沒有很專心的開發。

一直到 2020 年疫情嚴峻、不太適合外出的時候,當時公司許多案子暫停,突然有了空閒時間,這時公司有同事說:「如果在家能玩點東西就好了」。所以我們決定繼續開發 RakugakiAR,讓所有人在家就可以體驗。如果不是在這樣的時空背景,RakugakiAR 可能就不會發布了。

RakugakiAR 可繪製不同形狀、顏色、大小等塗鴉,讓它們透過手機跟你在同一個空間動起來。

RakugakiAR 可繪製不同形狀、顏色、大小等塗鴉,讓它們透過手機跟你在同一個空間動起來。

在疫情影響之下,還能有著要讓大眾在家不無聊的想法,果然是天生的創意人!那在開發 RakugakiAR 時,有沒有遇到困難?

岡田:應該是讓塗鴉從相同的位置,出現在手機畫面上,因為塗鴉的準確性在體驗過程中是重要的,而且線條需要清楚並連在一起,才能確保體驗的完整性。

在之前的開發經驗中,影像處理容易受到燈光和人影的影響,如果體驗過程中移動相機,就得重新設置參數;還好 iPhone 有良好的相機性能,即使在環境變數較多時掃描,也能輕易地讓使用者移動相機,讀取塗鴉圖像與位置。

另外,我們也考量到 APP 運作效能,確保可以同時進行影像、AR、3D 物件、螢幕錄影等處理,也不會影響體驗速度。當時我們畫了很多不同的塗鴉測試,有些人還畫了非常複雜的塗鴉,工程師們都快哭了(笑)。

你們覺得「RakugakiAR」受這麼多人喜歡的原因是什麼?

岡田:我認為我們累積至今的經驗和專業知識,創造出簡單的「一鍵式掃描」,無論大人小孩都很容易享受到塗鴉的樂趣。

只要將螢幕中框線對準塗鴉,按下掃瞄鍵就能跑進你的手機裡,還能跟它們互動!

只要將螢幕中框線對準塗鴉,按下掃瞄鍵就能跑進你的手機裡,還能跟它們互動!

SO:我想是「享受和我的畫在同一個空間」的感覺。記得 APP 上線後幾天,世界著名的日本漫畫《海賊王》作者尾田榮一郎,也在官方 X(原:Twitter)上發布使用 RakugakiAR 的影片,享受為塗鴉注入生命的效果。

當然還有大家的支持,我們沒想到它會有如此大的迴響(笑)。

謝謝 SO 跟岡田分享這麼多開發過程的故事與辛苦,也讓我們對於 RakugakiAR 有更多的暸解,感謝兩位今天的分享。


成員介紹

創意總監  So

創意總監 So



So
主要透過設計領域著手裝置藝術、程式設計及 DTM。曾獲頒坎城影展、iF DESIGN AWARD、日本文化廳媒體藝術祭、ADC等日本國內外設計獎。


岡田 隆志  互動工程師

岡田 隆志 互動工程師





岡田 隆志
負責互動程式開發與動態圖像系統。
多次動畫案中參與給予專業協助並獲讚賞。







App Details
名稱:RakugakiAR
系統支援:iOS/iPadOS 12.0 以上版本,Android OS 8.0 以上

聯絡我們
合作邀請:hello@whatever.co 
Whatever 官網:https://whatever.co/

avatar-img
Whatever Taipei的沙龍
5會員
4內容數
留言
avatar-img
留言分享你的想法!
Whatever Taipei的沙龍 的其他內容
Whatever 與博報堂子公司 SIX 從2015年起,共同開發具裝飾性與新形態的視聽體驗的 Lyric Speaker,是一款可將歌詞與歌曲一起投影出來的新一代音響。。這個調和視覺及聽覺的音樂體驗創意,在播放音樂時,歌詞隨著音樂的旋律搖擺,歌詞能自動判斷歌詞中的情感,投射在透明螢幕上,讓不少媒體
2022 年六本木藝術之夜,WHATEVER 東京與紐約辦公室同仁,共同開發 MoAR(Museum of AR)- 以建築物為畫布的藝廊。使用者拿起 iPhone 直接掃描 WHEREVER 大樓外牆上的 QR code,不需下載任何 APP 或開啟瀏覽器,就可以在 AR 中觀賞不同藝術家的作品。
Whatever Taipei 在今年推出了第一個自社開發的產品「Don’t Drink Me」,是以台灣手搖飲為主題的創意泡澡球,有「珍珠奶茶」、「芒果冰沙」、「芋頭牛奶」三種口味。我們來訪問開發團隊,暸解「Don’t Drink Me」泡澡球的開發過程。 Whatever Taipei 是一間文
Whatever 與博報堂子公司 SIX 從2015年起,共同開發具裝飾性與新形態的視聽體驗的 Lyric Speaker,是一款可將歌詞與歌曲一起投影出來的新一代音響。。這個調和視覺及聽覺的音樂體驗創意,在播放音樂時,歌詞隨著音樂的旋律搖擺,歌詞能自動判斷歌詞中的情感,投射在透明螢幕上,讓不少媒體
2022 年六本木藝術之夜,WHATEVER 東京與紐約辦公室同仁,共同開發 MoAR(Museum of AR)- 以建築物為畫布的藝廊。使用者拿起 iPhone 直接掃描 WHEREVER 大樓外牆上的 QR code,不需下載任何 APP 或開啟瀏覽器,就可以在 AR 中觀賞不同藝術家的作品。
Whatever Taipei 在今年推出了第一個自社開發的產品「Don’t Drink Me」,是以台灣手搖飲為主題的創意泡澡球,有「珍珠奶茶」、「芒果冰沙」、「芋頭牛奶」三種口味。我們來訪問開發團隊,暸解「Don’t Drink Me」泡澡球的開發過程。 Whatever Taipei 是一間文