讓日本知名漫畫家都驚奇的塗鴉 APP-訪談 RakugakiAR 開發團隊

更新於 發佈於 閱讀時間約 4 分鐘

在全球疫情嚴峻之時,Whatever 發表一款 APP「 RakugakiAR 」(中譯:塗鴉 AR ),不論塗鴉在筆記本或白板或任何地方,掃描後就能讓塗鴉注入生命力,也吸引《海賊王》作者尾田榮一郎分享,享受為塗鴉注入生命的效果。

RakugakiAR 可讓塗鴉動起來,還能餵食、戳戳它等方式跟塗鴉互動。

RakugakiAR 可讓塗鴉動起來,還能餵食、戳戳它等方式跟塗鴉互動。

聽說 RakugakiAR 這個想法,從發想到實際執行出來長達 10 年之久,好奇當初這個想法怎麼開始的?

SO:其實這個想法源自於 2010 年,我們還在 Coconoe(ココノヱ)公司自己開發製作的「擊墜王遊戲」時。幾年後,我們收到遊戲公司 SEGA 邀約合作,共同開發一款可以在卡片上繪製戰鬥機的遊戲機台;透過機台的相機拍攝卡片上的塗鴉,讓塗鴉成為遊戲的元素之一。機台也會根據塗鴉的顏色、大小、形狀等,調整遊戲參數如攻擊力、防禦力、速度,並進行對戰。

可以讓自己的塗鴉成為遊戲的角色之一,不管對大人還小孩來說,應該都是很特別的體驗呢!

SO:沒錯,後來我們陸續開發了魚類與動物版本,但是動物有四肢,跟戰鬥機或魚類不同;為了讓動物版本的使用體驗上更自然,我們開發了可以檢測 2D 關節的獨特技術「Honeborn」。這個技術可以分辨塗鴉的四肢,並自動將骨頭、關節放進塗鴉中。

雖然開發細節是秘密,但為了確保任何塗鴉都可以自然地移動,我們花了不少時間測試協調性,即使不是很精美的塗鴉,動起來也很生動自然呢!

Honeborn技術運用在Rakugaki動物園,讓動物塗鴉的四肢能像動物般自然擺動。

聽起來,這個技術已經在其他地方使用一段時間了,是什麼契機讓你們決定開發AR 版本呢?

SO:主要是 2017 年 iPhone 發布了 AR Kit,讓 iPhone 能夠進行空間識別,手機上產出 AR 內容變得更加容易。我想說如果將 Honeborn 的技術結合 AR,也許能夠創造出一些有趣的體驗,但因為有其他的工作,所以一直沒有很專心的開發。

一直到 2020 年疫情嚴峻、不太適合外出的時候,當時公司許多案子暫停,突然有了空閒時間,這時公司有同事說:「如果在家能玩點東西就好了」。所以我們決定繼續開發 RakugakiAR,讓所有人在家就可以體驗。如果不是在這樣的時空背景,RakugakiAR 可能就不會發布了。

RakugakiAR 可繪製不同形狀、顏色、大小等塗鴉,讓它們透過手機跟你在同一個空間動起來。

RakugakiAR 可繪製不同形狀、顏色、大小等塗鴉,讓它們透過手機跟你在同一個空間動起來。

在疫情影響之下,還能有著要讓大眾在家不無聊的想法,果然是天生的創意人!那在開發 RakugakiAR 時,有沒有遇到困難?

岡田:應該是讓塗鴉從相同的位置,出現在手機畫面上,因為塗鴉的準確性在體驗過程中是重要的,而且線條需要清楚並連在一起,才能確保體驗的完整性。

在之前的開發經驗中,影像處理容易受到燈光和人影的影響,如果體驗過程中移動相機,就得重新設置參數;還好 iPhone 有良好的相機性能,即使在環境變數較多時掃描,也能輕易地讓使用者移動相機,讀取塗鴉圖像與位置。

另外,我們也考量到 APP 運作效能,確保可以同時進行影像、AR、3D 物件、螢幕錄影等處理,也不會影響體驗速度。當時我們畫了很多不同的塗鴉測試,有些人還畫了非常複雜的塗鴉,工程師們都快哭了(笑)。

你們覺得「RakugakiAR」受這麼多人喜歡的原因是什麼?

岡田:我認為我們累積至今的經驗和專業知識,創造出簡單的「一鍵式掃描」,無論大人小孩都很容易享受到塗鴉的樂趣。

只要將螢幕中框線對準塗鴉,按下掃瞄鍵就能跑進你的手機裡,還能跟它們互動!

只要將螢幕中框線對準塗鴉,按下掃瞄鍵就能跑進你的手機裡,還能跟它們互動!

SO:我想是「享受和我的畫在同一個空間」的感覺。記得 APP 上線後幾天,世界著名的日本漫畫《海賊王》作者尾田榮一郎,也在官方 X(原:Twitter)上發布使用 RakugakiAR 的影片,享受為塗鴉注入生命的效果。

當然還有大家的支持,我們沒想到它會有如此大的迴響(笑)。

謝謝 SO 跟岡田分享這麼多開發過程的故事與辛苦,也讓我們對於 RakugakiAR 有更多的暸解,感謝兩位今天的分享。


成員介紹

創意總監  So

創意總監 So



So
主要透過設計領域著手裝置藝術、程式設計及 DTM。曾獲頒坎城影展、iF DESIGN AWARD、日本文化廳媒體藝術祭、ADC等日本國內外設計獎。


岡田 隆志  互動工程師

岡田 隆志 互動工程師





岡田 隆志
負責互動程式開發與動態圖像系統。
多次動畫案中參與給予專業協助並獲讚賞。







App Details
名稱:RakugakiAR
系統支援:iOS/iPadOS 12.0 以上版本,Android OS 8.0 以上

聯絡我們
合作邀請:hello@whatever.co 
Whatever 官網:https://whatever.co/

留言0
查看全部
avatar-img
發表第一個留言支持創作者!
Whatever Taipei的沙龍 的其他內容
Whatever Taipei 在今年推出了第一個自社開發的產品「Don’t Drink Me」,是以台灣手搖飲為主題的創意泡澡球,有「珍珠奶茶」、「芒果冰沙」、「芋頭牛奶」三種口味。我們來訪問開發團隊,暸解「Don’t Drink Me」泡澡球的開發過程。 Whatever Taipei 是一間文
Whatever Taipei 在今年推出了第一個自社開發的產品「Don’t Drink Me」,是以台灣手搖飲為主題的創意泡澡球,有「珍珠奶茶」、「芒果冰沙」、「芋頭牛奶」三種口味。我們來訪問開發團隊,暸解「Don’t Drink Me」泡澡球的開發過程。 Whatever Taipei 是一間文
你可能也想看
Google News 追蹤
Thumbnail
隨著理財資訊的普及,越來越多台灣人不再將資產侷限於台股,而是將視野拓展到國際市場。特別是美國市場,其豐富的理財選擇,讓不少人開始思考將資金配置於海外市場的可能性。 然而,要參與美國市場並不只是盲目跟隨標的這麼簡單,而是需要策略和方式,尤其對新手而言,除了選股以外還會遇到語言、開戶流程、Ap
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
《PokeRoGue》是款同人製作的網頁遊戲,收錄了1-9全世代的寶可夢,也包括例如雙打、太晶化、極巨化、蛋招、糖果(GO)等本傳元素,還有如寶可夢基因融合等。部分和本傳稍有不同(例如給了部份寶可夢的蛋招增加打點),但對原作足夠了解還是好些,像是屬性剋制、配招、物攻特攻、速度線、NPC邏輯等等
Thumbnail
■你聽過塗鴉筆記嗎? 從小喜歡畫圖也喜歡做筆記的我,直到2015年閱讀了《直覺式塗鴉筆記》一書,才打開我對「塗鴉筆記」的認識,也才赫然發現,原來筆記可以圖文並茂,原來筆記可以充滿個人風格與樂趣. ◼︎什麼是塗鴉筆記? 首先關於「塗鴉筆記」,根據有「塗鴉筆記之父」之稱的麥克.羅德所述:塗
Thumbnail
@十年前,非常羨慕網路遊戲中,畫得美輪美奐的插畫,諸如龍,騎士,獅鷲怪物等等的電腦繪圖插畫。剛開始自己存錢買一塊日本的電腦繪圖板,想看youtube的電腦繪圖教學來畫,結果就畫成下面左邊那幅很好笑的德行(疑似幼稚園塗鴉)。 @後來有一次陪朋友去巨匠電腦報名,莫名其妙被櫃台小姐鼓動,用每期兩千元
Thumbnail
朋友說:「小精靈很適合當牌卡耶!」,我把這一年多畫的小精靈,變成牌卡了!!大家想到就能用line抽牌!
Thumbnail
安西子 記得全台瘋抓寶可夢的情景嗎?     一群來自四方互不認識的人自動聚在某處,低著頭用手指快速按壓手機,心裡盼望能抓到心想的模偶,偶爾和旁邊同好交換心得、互通有無,有些入迷者甚至用好幾個手機架設排面,便於快速操作,及時抓取想要的魔怪
Thumbnail
故事開始,前一陣子找到以前上電腦課時,用MIT App inventor復刻經典的Zelda薩爾達跟Pokemon寶可夢的GBA遊戲,然後突然靈光一閃,決定挑戰在一年內寫完一本小說。 簡單說明工具: 本體內容結構,用AI跟大量閱讀輔助構思劇情 選擇性影響結局,用Twine2構思不同選擇與相對應
Thumbnail
這個作品就沒有小說甚麼的想法了,原本是想畫漩渦而已,但中間那部份我畫到煩了,就突然靈光一閃,把中間的部分改成眼睛;記得以前友人看到這作品時,還問我壓力是不是很大,但我自己是感覺沒有甚麼壓力啦~
Thumbnail
充滿想像力、形形色色小機器人,剪紙、摺紙技巧,才是Ed n'Robot studio動畫的特色,AR、VR與XR則是由動畫作品進一步後製而成的副產品。
Thumbnail
人工智慧生成內容(AIGC)的崛起,AI在文字、圖像、產品文案等方面的應用正掀起波瀾。本文分享了使用ChatGPT進行文案撰寫以及對於咒語格式與最佳內容認知的觀察。不過,使用者的專業程度對合作成果至關重要。另外,文章觸及使用AI工具提供的功能性應用,以及在創作和發展方面的潛力。
Thumbnail
我們的手作商店終於開張了!為了這一刻,我們整整規劃了一年。我們甚至寫了滿滿一本鉛筆稿,上面是物件的主題、顏色材質、大小形狀、我們的To-Do List、誰會喜歡它們、想帶給人的感覺等等。
Thumbnail
隨著理財資訊的普及,越來越多台灣人不再將資產侷限於台股,而是將視野拓展到國際市場。特別是美國市場,其豐富的理財選擇,讓不少人開始思考將資金配置於海外市場的可能性。 然而,要參與美國市場並不只是盲目跟隨標的這麼簡單,而是需要策略和方式,尤其對新手而言,除了選股以外還會遇到語言、開戶流程、Ap
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
《PokeRoGue》是款同人製作的網頁遊戲,收錄了1-9全世代的寶可夢,也包括例如雙打、太晶化、極巨化、蛋招、糖果(GO)等本傳元素,還有如寶可夢基因融合等。部分和本傳稍有不同(例如給了部份寶可夢的蛋招增加打點),但對原作足夠了解還是好些,像是屬性剋制、配招、物攻特攻、速度線、NPC邏輯等等
Thumbnail
■你聽過塗鴉筆記嗎? 從小喜歡畫圖也喜歡做筆記的我,直到2015年閱讀了《直覺式塗鴉筆記》一書,才打開我對「塗鴉筆記」的認識,也才赫然發現,原來筆記可以圖文並茂,原來筆記可以充滿個人風格與樂趣. ◼︎什麼是塗鴉筆記? 首先關於「塗鴉筆記」,根據有「塗鴉筆記之父」之稱的麥克.羅德所述:塗
Thumbnail
@十年前,非常羨慕網路遊戲中,畫得美輪美奐的插畫,諸如龍,騎士,獅鷲怪物等等的電腦繪圖插畫。剛開始自己存錢買一塊日本的電腦繪圖板,想看youtube的電腦繪圖教學來畫,結果就畫成下面左邊那幅很好笑的德行(疑似幼稚園塗鴉)。 @後來有一次陪朋友去巨匠電腦報名,莫名其妙被櫃台小姐鼓動,用每期兩千元
Thumbnail
朋友說:「小精靈很適合當牌卡耶!」,我把這一年多畫的小精靈,變成牌卡了!!大家想到就能用line抽牌!
Thumbnail
安西子 記得全台瘋抓寶可夢的情景嗎?     一群來自四方互不認識的人自動聚在某處,低著頭用手指快速按壓手機,心裡盼望能抓到心想的模偶,偶爾和旁邊同好交換心得、互通有無,有些入迷者甚至用好幾個手機架設排面,便於快速操作,及時抓取想要的魔怪
Thumbnail
故事開始,前一陣子找到以前上電腦課時,用MIT App inventor復刻經典的Zelda薩爾達跟Pokemon寶可夢的GBA遊戲,然後突然靈光一閃,決定挑戰在一年內寫完一本小說。 簡單說明工具: 本體內容結構,用AI跟大量閱讀輔助構思劇情 選擇性影響結局,用Twine2構思不同選擇與相對應
Thumbnail
這個作品就沒有小說甚麼的想法了,原本是想畫漩渦而已,但中間那部份我畫到煩了,就突然靈光一閃,把中間的部分改成眼睛;記得以前友人看到這作品時,還問我壓力是不是很大,但我自己是感覺沒有甚麼壓力啦~
Thumbnail
充滿想像力、形形色色小機器人,剪紙、摺紙技巧,才是Ed n'Robot studio動畫的特色,AR、VR與XR則是由動畫作品進一步後製而成的副產品。
Thumbnail
人工智慧生成內容(AIGC)的崛起,AI在文字、圖像、產品文案等方面的應用正掀起波瀾。本文分享了使用ChatGPT進行文案撰寫以及對於咒語格式與最佳內容認知的觀察。不過,使用者的專業程度對合作成果至關重要。另外,文章觸及使用AI工具提供的功能性應用,以及在創作和發展方面的潛力。
Thumbnail
我們的手作商店終於開張了!為了這一刻,我們整整規劃了一年。我們甚至寫了滿滿一本鉛筆稿,上面是物件的主題、顏色材質、大小形狀、我們的To-Do List、誰會喜歡它們、想帶給人的感覺等等。