今天嘗試用GPT在codesandbox上建立了一個可以進行影片品質檢核的網站,能把影片中的錯誤截圖下來,再自動匯出成word檔,給設計人員修改,詳細的功能有:
- 可以在網站上匯入影片
- 按下按鍵C自動影片截圖
- 截圖後影片自動暫停
- 有說明欄位,自行輸入截圖要修改的文字描述,方便後續給設計人員看
- 將這些截圖和要說明欄文字匯出成html檔案,再改檔名成DOC檔
目前以上功能都有成功,下禮拜要再進行:
- 截圖欄位和說明欄位排版更美觀
- doc檔內的文字和截圖排版也還不對
- 如何讓其他同事都可以用到這個網站
未來希望說明欄位可以用瀏覽器內建的語音辨識,直接語音轉文字,做做看。
更進一步的話是使用OpenAI Whisper API功能,更人工智能自動判斷截圖所代表的錯誤內容,自動產生文字,但這方面要怎麼做超出目前能力所及,還要再研究。
這樣的功能似乎也可以用來幫老師改學生作文了XD