2022-004期主題概覽

  • 【台評動態】 2022年10~12月活動花絮 │ 2023年1~3月活動預告
  • 【新知專欄】 運用第三方數據資料,導引大學校務決策分析之探討
  • 【國際視野】 台評會參與APQN 2022年會暨國際研討會,發表跨境學生學習成效調查結果
  • 【IR文摘】 學界近親繁殖對個人與大學之學術生產力影響

本期內容發布於《台評ePaper》網站,使用者可於網站中訂閱、取消訂閱或瀏覽電子報;台評會另提供本期《台評ePaper》PDF檔下載,有需要者可直接點選連結以下載檔案。

 

 

  • 111.10.05 線上參與HEEACT 2022「高等教育品保組織的發展與品保趨勢國際研討會」,由傅勝利榮譽理事長以「Change and Development of International QA Agency」為題發表專題演講
  • 111.10.06 教育部「111年度審查地方政府辦理社區大學業務暨全國社區大學申請獎勵」實務工作坊(成果觀摩)
  • 111.10.07 台泰日專業評鑑機構視訊會議
  • 111.10.14 【111年度奧亞運特定體育團體訪評計畫】協會說明會
  • 111.10.24 技專校院第2期高等教育深耕計畫規劃提報作業說明會
  • 111.10.31 【110年度非奧亞運特定體育團體訪評計畫】第2、第3場工作坊
  • 111.11 科技校院校務評鑑指標專家諮詢作業
  • 111.1112 【111年度奧亞運特定體育團體訪評計畫】實地訪評
  • 111.11.08 線上參與日本JUAA接受INQAAHE GGP Review實地評鑑之國際夥伴座談活動
  • 111.11.09 教育部112年度「建置區域產業人才及技術培育基地計畫」徵件說明會
  • 111.11.17 教育部「112年度審查地方政府辦理社區大學業務暨全國社區大學申請獎勵」草案說明會
  • 111.11.24 「111年度特定體育團體(大專體總與高中體總)輔導訪視及考評計畫」協會說明會
  • 111.11.2426 赴新加坡參與「APQN 2022學術研討會暨年會」並發表論文
  • 111.11.30 線上參與INQAAHE辦理之International Standards and Guidelines for Quality Assurance in Higher Education說明會
  • 111.11~12 【技專校院實習課程績效評量實施計畫】實地訪評
  • 111.11~112.01 【111學年度技專校院評鑑實施計畫】實地評鑑
  • 111.12.12 協助教育部辦理英國文化協會之「大專校院學生雙語化學習執行成效評估研究」學校說明會

     

     

      

      

 

  • 112.01.06 完成【TIRC計畫】111學年度全國大專新生學習適應調查活動
  • 112.01.13 台泰日專業評鑑機構視訊會議
  • 112.01 完成【111學年度技專校院評鑑實施計畫】實地評鑑作業
  • 112.03 日本JUAA來臺蒞臨本會進行國際交流

 


運用第三方數據資料,導引大學校務決策分析之探討

梁啓暉/國立臺灣科技大學研究發展處校務研究與發展中心

近年來各大學校開始積極投入校務研究(Institutional Research, IR),透過科學化統計,從繁多的數據資料歸納出可視化的分析結果,用來盤點學校的優勢以及可加強之處,進而輔助擬訂未來推進方向,解決學校當前所遇到的疑難雜症。而我們如何透過第三方之客觀數據結合分析校務現況,從中發現學校發展的脈絡走向,進而探討研究出適宜學校精進決策與推行作法,便是當前可探討之項目。

社會大眾對大學排名的高度重視

觀察這幾年的學校發展趨勢,不難發現各大專校院間對「大學排名」的重視與日俱增,實際上隨著早年教育政策的推行使得國民高等教育普及化,連帶大專校院數量也隨之擴展,大學學位時至今日已如同基本學歷一般,也正是在人人有大學可讀的時空背景下,社會大眾將更關注於審視學校的各項品質是否優良,而最常被提及的審視依據便是各項「大學排名」,如世界大學排名、亞洲大學排名、就業力排名等多種排名,而隨著永續議題持續發酵,聯合國於2015年宣布「永續發展目標」(Sustainable Development Goals, SDGs),而大學排名中更新興了所謂的影響力排名(Impact Rankings)。

目前各項大學排名評比項目多是將學校於學術的表現、對產業的影響力、教學品質的評估,乃至於對社會國家、對國際間的貢獻等多元面向之數據實績全部納入考量,並透過第三方數據分析規則對學校績效表現進行排序。而發布各項排名之機構通常會由新聞媒體等獨立機構進行,現行分別以QS公司(Quacquarelli Symonds, QS)與英國「泰晤士高等教育」(Times Higher Education, THE)所發布之大學排名廣為大眾所知,而國內同樣有如天下雜誌、遠見雜誌等知名媒體企業所調查統計企業最愛等排名項目,皆是大眾作為評斷學校是否具競爭力的依據。

少子化對於學校招生之衝擊

因本國連年生育率下降,少子化的衝擊日益明顯,目前全國大專校院都面臨著招生率的考驗,根據教育部統計處資料顯示,110學年度大專校院(含公私立)總數共計為149所,儘管大專校院總數已有逐年減少趨勢,但學生生源數已大不如前,就目前招生現況而言仍是不樂觀。

教育部統計處保守預估125學年度僅餘約18萬6千名左右的大學新生入學,而在110學年度尚有22萬3千名新生,15年間將銳減近4萬名新生,面對幾乎已成定局的招生難題,學校需儘早針對生源進行分析,並結合學校的認知優勢,以擬定招生的應對策略。

盤點資料來源,分析彙整數據

為使策略擬定有所依據,就需採納統整多方數據、資料來源作為校務分析彙整所用,然而上文提到大眾對於大學排名的高度專注,學校可針對現行較具公信力的國內外大學排名機構之評比規則進行分析,少子化之應對策略同樣可由公正之第三方數據協助擬定。

一、QS大學排名項目與其指標

QS目前發布的大學排名包括世界大學排名、學科領域排名、區域大學排名(如亞洲、美國、阿拉伯、拉丁美洲等區域性排名)、畢業生就業力排名等多項不同排名,其中國內較注重的世界大學排名與亞洲大學排名評比指標可大致分為4類:聲譽影響力(Reputation)、學術研究(Research)、教學(Teaching)與國際化(Intl.)。而現行的學科領域排名則較單純分為學術聲譽(Academic Reputation)、雇主聲譽(Employer Reputation)、論文平均引用數(Citation per Paper)和H指數(H-index),但依不同學科領域會有不同比例。

從評比項目中不難察覺QS排名指標對於學校的聲望表現、國際化程度、教學品質等十分重視,以現行規則之世界大學排名為例,其聲譽表現即占總分數的50%(包含學術聲譽40%與雇主聲譽10%),學術聲譽中更將國外學者票數進行加權計算、師生比與教師平均引用數各占20%,國際師生總占10%,可見QS評比系統對於學校間國際化合作之偏重,學校亦能從歷年來各項指標的評比分數以及與目標的差距,進行推估分析。

此外,QS就業力排名則透過雇主聲望(Employer Reputation, 30%)、校友成就(Alumni Outcome, 25%)、學校與雇主合作關係(Partnerships with Employers per Faculty, 25%)、雇主與學生之聯繫(Employer/Student Connections, 10%)、畢業生就業率(Graduate Employment Rate, 10%)等指標,對學校培育學生之就業成果進行排名。

二、THE大學排名項目與其指標

泰晤士高等教育(THE)排名系統同樣包含世界大學排名、學科領域排名、區域性大學排名、就業力評比,以及與永續發展目標SDGs相關的影響力排名(Impact Rankings)等項目。目前用以評比世界大學排名的指標項目分為5大類:教學情況(Teaching, 30%)、研究成果(Research, 30%)、論文引用表現(Citations, 30%)、國際化程度(International outlook, 7.5%)以及產業收入(Industry income, 2.5%),後再從中細分為13項指標,其學科領域排名也是依據此13項指標進行評比,只是在分數比例上略有不同。根據THE世界大學的指標比例中可以看出,學術與研究影響力是THE評比學校的重要項目,更顯示出THE排名系統對於學校學術能量表現的重視。

THE另一項受到國內關注的「影響力排名(Impact Rankings)」,分別依據學術研究(Research)、管控表現(Stewardship)、對外擴展(Outreach)以及教學能力(Teaching)等4大面向進行評比,也是目前唯一根據聯合國所訂立之17項永續發展目標所評估的世界大學績效,目前學術研究之資料來源主要與Elsevier合作,統計學校發表之研究主題是否有對應到永續目標,另外學校也能主動提供該校對於SDGs之貢獻作為,並附上可查證的公開證據,THE都將納入衡量評比。

三、國內大學排名評比

除了國外機構所進行的大學排名,國內亦有相關機構發布臺灣各大學排名,每年公布同樣引起社會大眾、學校與企業關注,尤以《天下雜誌》辦理的「天下USR大學公民調查排名」、《Cheers快樂工作人雜誌》的「大企業最愛大學生總排行」,與《遠見雜誌》調查的「企業最愛大學生排行榜」、「台灣年度最佳大學」等較具社會討論度。

相比於國外機構,國內排名評比會更直覺反映出大學教育與臺灣企業關係之發展現況,著重於臺灣本土之貢獻與參與程度,如「天下USR大學公民調查排名」是以大學治理、社會參與、環境永續、教學承諾等4大面向進行評比;《遠見雜誌》的企業最愛調查也發現「務實性大學」在疫情後逐漸崛起,此類評選指標與調查後之趨勢呈現,都將作為校務分析之考量依據,協助擬定策略。

四、社團法人台灣評鑑協會之數據資料

除了國內外的學校評比之外,最核心且直觀的參考值仍是數據資料,有鑑於數據資訊量日益龐大、資料來源繁多複雜,需適時透過客觀第三方的數據統整,用以協助校務分析。社團法人台灣評鑑協會(簡稱台評會)為臺灣具有公信力評鑑機制的非營利性專業評鑑組織,除提供評鑑服務之外,亦辦理「台灣校務精進協作計畫」(Taiwan Institutional Research Cooperation, TIRC),此計畫為透過統整如教育部、內政部等政府機關之公開資料,進行整合性的數據分析與比較,學校可透過加入此計畫獲得多項IR分析報告,如註冊率、生源分析、教職員與研究成果等,以此為擬定推動學校各項策略之依據。

透過數據分析,支持校務策略推動

在我們釐清學校現行或將來會遇到的問題,以及盤點國內外學校可使用的數據資源與參考依據後,建議學校可從下述幾個面向著手進行:

一、修訂學校研發成果獎勵相關法規,鼓勵教師學術研發

從世界大學排名指標依據來看,學術研發的成果表現與學校在國際間之影響力擁有高度相關,故學校可透過修訂研究成果獎勵辦法,使得教師在學術研究成就上能獲得對應之鼓勵,激發學校的技術能量,不論是對學校整體發展或是排名表現都有良好幫助。

二、淨零減碳發布永續宣言

全球對於永續發展的重視程度與日俱增,不分國內外皆將永續目標作為評斷學校是否符合世界趨勢之依據,也直接影響學校對外的形象聲譽,故建議學校可針對環境友好、淨零減碳面向著手,釋出良好願景與擬訂永續宣言,有利於學校聲譽在國內外之提升。

三、推動師生在地與國際實踐,鼓勵教師進行SDGs相關研究

承上述世界對於永續發展的重視,學校各項績效表現直接反映在世界大學排名、影響力排名等評比機制,可建議學校鼓勵教師進行SDGs之相關研究,一方面累積學校之技術能量,再者對校譽也能有所助益;此外根據排名資料的面向,重視學校責任實踐不僅可精進學校之整體發展,亦能加強對外之印象,故學校需擬定並推動在地與國際之實踐策略。

四、運用學生來源分析,扎根潛在高中職

為因應少子化的衝擊,學校可藉由TIRC所提供之高中高職生源分析,瞭解現有之新生來源的組成比例、歷年來相關科系人數消長趨勢、全國境外學生分析等資料,供學校進一步規劃招生策略,對於學校目標之高中職學群向下扎根,如辦理職涯分析、學校介紹等講座,亦或提早辦理暑期課程,讓目標學生先行瞭解學校之優勢,進而提高學校招生率。

五、外籍學生與外籍校友意見回饋,協助完善學校國際生支援系統

國際化發展將是評比學校表現之績效指標,為使學校在國際化程度的提升,建議可從外籍學生以及外籍校友進行意見回饋調查,從反饋中獲得對學校國際生支援措施的精進方向,可令學校國際化面向更占優勢;另則,外籍校友若返回其國家企業就職,亦可為母校進行推薦宣傳,對學校於國際聲望之表現同樣有正向影響。

隨著數位化時代到來與資通訊技術的飛快演進,不僅大大影響人類的作業模式,更在資訊數據爆炸的推波助瀾下,數據分析儼然成為各大機關進行決策的重要依據之一,對於學校校務治理而言亦是如此,本文透過可公開獲取之第三方數據與具公信力之評比指標,透過校務分析協助學校進行校務推動策略之擬定,然而策略擬定也應因時制宜做出理性評估,除參考數據呈現外,也要針對學校的屬性進行調整,找出適宜之路方能事半功倍、突破難題。

資料來源:教育部統計處國家發展委員會教育部大專校院校務資訊公開平臺QS官方網站THE官方網站天下雜誌官網遠見大學排行榜

 


台評會參與APQN 2022年會暨國際研討會,發表跨境學生學習成效調查結果

  今(2022)年度「亞太品質保證網絡」(Asia-Pacific Quality Network,APQN)在全球歷經兩年多嚴重特殊傳染性肺炎(COVID-19)疫情影響下,11月24至27日於新加坡辦理實體年會暨國際研討會,主題為「亞太地區於COVID-19疫情期間及過後之高等教育品質保證」(Quality Assurance for Higher Education under the COVID-19 Pandemic and beyond in the Asia-Pacific Region)。

  社團法人台灣評鑑協會除赴新加坡參與實體會議,亦獲邀於研討會中發表跨境實務研究成果「改善學生對教學方法之體驗:亞太區域四地之比較研究」(Improving Student Experience of Teaching Methods: Learning from a Comparative Study of Four Asia-Pacific Regions)。該研究計畫由台評會主導,與日本「公益財團法人大學基準協會」(Japan University Accreditation Association,JUAA)、泰國「國家教育標準與品質評估局」(Office for National Education Standards and Quality Assessment,ONESQA)及國立越南大學胡志明分校教育認證中心(Centre for Education Accreditation, Vietnam National University - Ho Chi Minh City,CEA VNU-HCM)跨境合作,完成學生學習成效與滿意度調查,藉由問卷分析結果瞭解臺灣、日本、泰國、越南四地大專生之學習效能,彼此學習各自的長處,並發現自身的問題及盲點,以精進課程教學品質。研討會上由周穎利副秘書長及林惠玲資深經理代表4個合作機構發表研究成果,並與其他各國講者一同和在場的與會者進行座談,透過意見交流與討論互動,為國際策略規劃提供新的發展契機,尋求未來更多元面向之合作展望。

 


《IR文摘》係整理國際上已發表有關校務研究之文章,摘錄其重點供學校相關人員瞭解更深度的IR研究與應用,以完整建構校務研究的發想脈絡,進而激盪出更具體且持續深化之實踐內涵。

學界近親繁殖對個人與大學之學術生產力影響

【摘要】

人工智慧在學術界的應用是高等教育體系最近的熱門話題。在教學中使用ChatGPT具有提高學生參與度、促進團隊合作與提高學術普及性等多項優點。然而,ChatGPT強大功能的背後也帶來許多挑戰和隱憂,特別是抄襲與學術誠信相關的議題。本文重點在探討,當高教師生普遍使用ChatGPT後,其潛在的風險和利益,因而引發的學術欺騙行為,以及檢測與防止此類濫用的困難。最後,本文提出了一系列方案供大學參考和採用,包括制定政策和規範程序、提供培訓和輔導,並藉各種方法來檢測和防止作弊,以確保ChatGPT在高教領域之妥善應用。

本期內容摘錄整理自:Karadag, Engin and S. Koza Ciftci (2022), “Deepening the Effects of the Academic Inbreeding: Its Impact on Individual and Institutional Research Productivity,” Research in Higher Education, 63, pp.1015-1036.

台評會另提供完整摘錄內容供【TIRC】成員學校參閱,有需要之成員學校可至計畫網站《會員專區》中之《下載中心》下載。