Look2Learn 看見就學會:結合眼動選字、圖片記憶與在地語料的公務英語學習工具
B 智慧治理
- 申請編號
- 175
- 隊名
- alphabet
- 聯絡人
- 粘瑛月 ・0980608161 ・a0980608161@gmail.com
AI 輔助評估
摘要
以網路攝影機眼動追蹤加熱鍵,在公務人員螢幕上即時彈出AI生成的英文單字圖卡與公務例句,供第一線人員零碎時間學英語。
實質空洞
否
— 有技術細節但場域與分工空白
卡詞
是
治理樣板
否
既有作品
否
性別影響
全無性別考量;第一線櫃檯多為女性,卻未分析其工作負荷與鏡頭監看感受,眼動校正對化妝、眼鏡的誤差亦未提及。
DEI
視障、斜視、眼球震顫者無法用眼動;假設使用者已能閱讀英文;外籍民眾實多為東南亞語系,英語中心思維,新住民語言僅列「未來」。
STS·社會影響
把雙語政策的負擔轉嫁到個別基層人員的零碎時間;學習紀錄可能變成考核工具;問題陳述是泛用學習層,硬套到公務場域,高雄機關僅「優先洽談」。
AI 使用
AI依螢幕語境生成釋義與公務例句,無審核機制與錯誤責任;AWS「AI DATA TRAINING」用途不明;回答AI工具欄位卻改寫產品簡介,未交代提案階段實際用了哪些AI。
資安隱私
只承諾人臉影像不上傳,但熱鍵會擷取螢幕周圍文字送AI,戶政、區公所螢幕上的民眾個資將外流至雲端;工作時段持續開啟攝影機亦形同監控。
初審
| 總分 | 可行性 | 社會影響力 | 創新性 | 提案團隊多元性 | 資料治理思維 |
|---|---|---|---|---|---|
| 3.00 | 3 | 0 | 6 | 2 | 4 |
評語
眼動儀對目視目標的判斷有誤差,還要校正。為什麼不用確定的操作方式(如滑鼠鍵盤)來學英文?
筆記
(無)
初審會議筆記
(無)
工作坊
筆記
(無)
決審
| 總分 | 可行性 | 社會影響力 | 創新性 | 實作進程驗證 |
|---|---|---|---|---|
| (無) | (無) | (無) | (無) | (無) |
入選
否
評語
(無)
筆記
(無)
同主題提案(主題 32:語音導覽與語言學習)
- #88 AI 農遊語音導覽平台:用故事、諺語與鄉土風情串起農業旅遊體驗
- #175 Look2Learn 看見就學會:結合眼動選字、圖片記憶與在地語料的公務英語學習工具
壹、隊名及題目
一、隊名
alphabet
二、題目
Look2Learn 看見就學會:結合眼動選字、圖片記憶與在地語料的公務英語學習工具
三、提案對應之徵件構面
智慧治理
四、團隊要解決的問題?
大量具有價值的數位知識都是以英文呈現,例如技術文件、研究資料、軟體介面、教育內容、專業資訊,以及日常網路上的各種內容。 當學習者遇到不熟悉的英文單字或句子時,目前常見的學習流程其實非常零碎: 看到不懂的內容 → 停下正在做的事情 → 選取或複製文字 → 開啟翻譯工具、字典或 AI → 輸入問題 → 閱讀解釋 → 再回到原本正在做的事情。 真正的問題並不是「沒有解釋工具」,而是每一次取得解釋的過程,都會不斷打斷原本正在發生的學習活動。 傳統語言學習 App 又產生另一種分離:使用者必須刻意進入一個「學習環境」,再去學習事先安排好的教材。 我們提出的是另一種模式: 學習應該發生在一個人原本正在做的事情裡面。 我們不希望使用者為了學英文,不斷離開正在進行的工作或活動。 因此,我們建立一個「英語學習層(English Learning Layer)」,讓它存在於使用者正常的數位活動
五、本提案是否屬於尚未進行、且尚未成立標案、未申請政府相關預算之計畫,階段性計畫亦同
是
六、前題若選否,請敘明招標機關、計畫名稱、計畫工作內容與本次精進內容
貳、聯絡人資訊
聯絡人姓名
粘瑛月
聯絡人電話
0980608161
電子信箱(Email)
a0980608161@gmail.com
參、提案內容說明
一、可行性
(一)已有隊員人數(含聯絡人)
3
(二)團隊成員及任務分工?
(三)參賽隊員中是否有「歷屆獲獎團隊或初審入選者」?
否
(四)參賽隊員中是否有其他之獲獎證明?
否
(五)請說明您的提案「已使用」哪些相關資料?
政府開放資料:「行政院人事總處相關資料集部分」,經確認該機關可公開資料目前已上架至「人事行政總處」、「政府開放資料平臺」
自備資料:網路可使用學習圖片
(六)請說明您的提案「後續驗證期間」預計使用哪些相關資料?
政府開放資料:政府開放資料:第一線服務人員最常遇到的英文溝通情境。 2. 經機關確認的標準中英文服務用語。 3. 民眾常見問題的分類及出現頻率。 4. 公務人員最常用錯或最不熟悉的英文詞彙。
自備資料:
(七)除了上述資料外,是否有需要哪些機關的未開放資料?
否,沒有其他機關的未開放資料需求
(八)針對上述(欄位(五~七))之資料預計應用方式?
第一階段的公共服務應用,將聚焦在: 降低數位學習環境中的英文取得障礙。 適合的試辦場域,包括臺灣現有的: 數位機會中心(Digital Opportunity Center,DOC); 公共學習空間; 圖書館; 學校; 或其他類似的社區學習場所。 這些地方原本就已經提供數位設備與學習支持。 English Learning Layer 可以在既有環境中增加一層新的能力,而不需要要求使用者另外進入一套新的英語課程。 例如,一名學習者可以直接使用一般電腦瀏覽教育、工作或專業資訊。 當畫面中出現不熟悉的英文時,就在那一刻立即要求系統協助。 長期而言,這項公共服務並不是要取代老師,也不是要取代正式英語教育。
(九)請說明提案預計實證及落地場域為何,如在中央或地方機關、產業或NPO/NGO等,如何導入公共服務運作?
第一階段預計選擇一個地方政府服務場域,例如: • 區公所。 • 戶政事務所。 • 市民聯合服務中心。 • 觀光服務中心。 • 公共圖書館。 • 公務人員教育訓練單位。 優先洽談高雄市政府所屬機關,並以第一線服務人員為主要測試對象。
(十)請說明提案實作期程規劃 (入選後至決審期間)?
時間:2026年9月底前 工作內容: • 邀請10至20名使用者測試。 • 測試眼動選字準確度。 • 蒐集操作及隱私回饋。 • 修正介面及功能。 • 完成提案文件、原型及展示影片。 第五階段:入選後場域實證 時間:2026年9月至10月 工作內容: • 擴充在地公務詞彙。 • 招募20至30名公務人員。 • 進行四週測試。 • 完成語料管理後臺。 • 收集學習及使用結果。 第六階段:成果整理及決審準備 時間:2026年10月至11月 工作內容: • 分析使用前後差異。 • 完成個資、資安及法規檢查。 • 整理合作單位意見。 • 完成成果簡報及現場展示。
二、社會影響力
(一)請說明您的具體解決方案?
English Learning Layer 結合四個核心元件: 視線定位 + 使用者意圖 + 智慧解釋 + 學習記憶 A. 視線定位:知道使用者正在看什麼 系統透過眼動追蹤技術,持續估算使用者在螢幕上的注視位置。完成校正後,即可將視線位置與畫面中的英文文字對應,判斷使用者正在看的單字或句子。 因此,使用者不必移動滑鼠、反白文字、複製內容或另外輸入問題。 視線負責回答:「我現在指的是什麼?」 B. 按鍵確認:知道使用者什麼時候需要幫助 「看到一個單字」並不代表「看不懂這個單字」,因此系統不會單靠眼動自動判斷使用者是否需要協助。 我們刻意將「視線定位」與「學習意圖」分開。 當使用者遇到不理解的英文內容時,只需按下一個按鍵(hotkey),系統便會立即: 根據視線位置找出正在看的單字或句子; 取得周圍文字作為語境; 由 AI 判斷該字詞在當下情境中的意思; 即時顯示適合的解
(二)提案是否回應公民許願池 ?
否
(三)前題若選是,請點選回應之願望名稱
(四)請說明您認為本次提案內容可帶來的影響與效益?
預期成果 1. 完成可操作的眼動選字及hotkey圖片單字卡。 2. 建立至少500筆具有資料來源的在地公務英語語料。 3. 完成20至30名公務人員的四週測試。 4. 每名測試者平均每週使用至少三次。 5. 測試後目標單字正確率提升20%以上。 6. 70%以上使用者認為操作容易。 7. 80%以上使用者認為內容與工作或生活有關。 8. AI產生的教材可追溯資料來源,或清楚標示為AI產生。 9. 原始攝影機畫面預設不上傳、不保存。 對公共服務的效益 • 讓公務人員利用零碎時間學英文。 • 降低第一線人員面對外籍民眾時的壓力。 • 把政府雙語資料轉成可以每天使用的教材。 • 找出不同機關最需要補強的英文情境。 • 改善政府服務對外籍居民及旅客的友善程度。 • 降低基層及偏鄉人員取得英語學習資源的門檻。 對社會的效益 未來可將系統開放給學生、老師及市民使用,讓政府已整理的雙語資料成為全民使用
(五)請說明本提案是否具備可複製性及擴散性?
可以。 系統採用「共通功能加地方語料包」的方式。 共通功能包括: • 眼動選字。 • hotkey圖片卡。 • 每日複習。 • AI英語助手。 • 語料管理。 • 隱私及資安設定。 不同地區只需更換或增加: • 地名。 • 機關名稱。 • 公共設施名稱。 • 地方服務項目。 • 文化及觀光詞彙。 • 各單位專業用語。 未來可擴散至: • 中央部會。 • 各縣市政府。 • 區公所及戶政事務所。 • 警察、消防及觀光單位。 • 圖書館。 • 學校及社區大學。 • 偏鄉數位學習據點。 後續也可增加日語、越南語、印尼語及泰語版本。
三、創新性
(一)請說明本次提案內容跨領域合作或服務與技術之創新程度
本提案的產品概念、使用流程、眼動選字與hotkey圖片學習方式、在地語料整合方法及場域應用規劃,均由團隊自行設計。 系統開發會使用政府開放資料、開源程式、AI模型及合法授權圖片。所有非團隊自行製作的資料及工具,都會依照授權條件使用,並標明來源及用途。 補充說明: 核心提案及整合設計為團隊原創,但系統會使用政府開放資料、開源工具及合法授權素材。
(二)請說明提案預計使用之工具或平台?
提案預計使用之工具及平台如下:1.政府資料開放平臺:蒐集機關名稱及雙語詞彙,建立在地公務語料庫及情境教材,並記錄來源、授權與更新日期。2.國家教育研究院樂詞網:查核中英文專業詞彙、同義詞及難度分類。3.國發會雙語資源:參考雙語政策及公務英語內容。4.WebGazer.js:進行網路攝影機眼動追蹤與注視位置估算。5.MediaPipe:辨識眼睛、臉部及協助眼動校正。6.Tesseract OCR:辨識圖片及文件文字,找出注視單字。7.依個資法設計告知、同意、保存及刪除機制。8.依政府生成式AI指引及AI風險管理規範,落實個資與機密保護、人工確認、風險測試及修正。9.依著作權法及授權條款使用圖片、文字、語音及教材,並保存素材來源紀錄。
(三)是否有使用AI工具?
是
(四)前題若選是,請詳實說明提案階段使用 AI 工具之名稱、使用功能及目的與範圍
Look2Learn是一套以公務人員及第一線服務人員為主要使用者的AI英語學習工具。 使用者閱讀網頁、電子文件或螢幕內容時,系統透過攝影機估算視線位置,判斷使用者正在看的英文單字。按下hotkey後,畫面立即顯示圖片、中文意思、發音、一般生活例句及公務情境例句,不需要另外搜尋或離開原本的畫面。 系統會整合政府公開雙語詞彙、地方地名、申辦用語及公共服務資料,並依照使用者的英文程度、工作內容及學習紀錄,安排每日五分鐘練習。 攝影機影像原則上只在使用者裝置內處理,不保存或上傳原始人臉畫面。使用者也可以關閉攝影機,改用滑鼠或鍵盤選字。 第一階段將與地方政府服務場域合作,測試眼動選字準確度、單字記憶成效、操作便利性及使用者對隱私設計的接受程度。完成測試後,可透過地方語料包的方式擴散至其他縣市、政府機關、學校及公共學習場域。Look2Learn將以長期獨立專案持續發展,並以雙層網站連結一般使用者與技術
四、團隊輔導需求調查
(一)若入圍初選,期待主辦單位提供之協助?
協助調整作品架構及服務模式
協助確認應用場域可行性
協助確認預期使用者(TA)是否需調整
協助建議資料應用項目是否需要調整
協助跨機關資料取得
協助跨機關溝通合作(非資料面)
專門領域諮詢建議: 學術領域
(二)若入圍初選,是否需要算力平台或雲端協力業者資源?
是
(三)前題若選是,請說明需要何種算力平台(係指數位發展部數位產業署-數位產業跨域軟體基盤暨數位服務躍升計畫)或雲端協力業者(GCP或AWS或Azure或國網中心)之資源及預計應用內容
AWS:(應用內容:AI DATA TRAINING)
五、參考文獻或資料引用來源說明
(一)提案內容是否全為原創內容,或有部分引用相關資料來源?
是,全為原創內容無引用。
(二)前題若選否,請說明本提案中所引用之資料來源及其應用環節,建議以條列方式簡述。
團隊成員
| 單位類型 | 姓名 | 單位與職稱 | 工作項目 |
|---|---|---|---|
| 民間單位與個人 | 蔡大山 | 開遠建設有限公司管理部助理 | 主要提案單位 |
| 民間單位與個人 | 粘瑛月 | 開遠建設有限公司管理部經理 | 主要提案單位 |
| 學校 | 吳思佩 | 元智大學資訊管理系教授 | 次要(合作)提案單位 |
資料需求
無資料。