星期二, 19 5 月, 2026
https://download-betway.com

最 受 歡 迎

Perspective Box 透視箱

Google 和加州大學柏克萊分校的新式 Actor-Critic 演算法,快速在真實世界訓練機器人

相比傳統方式需要工程人員手動設計機器人每個動作的精確參數,AI 時代的研究人員有全自動化、廣闊前景的新學習方式:深度強化學習可讓機器人從經驗、與世界的互動直接學習行為,因為可藉助通用化的神經網路表示,處理複雜的感測器輸入。然而,許多現有的強化學習演算法都需要幾天、幾週甚至更久時間的真實世界數據,才能收斂到比較理想的動作。更重要的是,這樣的系統很難在複雜的機器人系統使用(比如多足機器人)。系統的探索學習過程很容易會損傷到機器人的零件,同時還難以調節超參數,許多安全方面的考量也可能帶來更多限制。近期,Google AI 與加州大學柏克萊分校合作研發一種新的強化學習演算法 Soft Actor-Critic(SAC)。這是一種穩定、高效的深度強化學習演算法,高度符合機器人實驗的需求,也非常適合真實世界的機器人技能學習。重點是,SAC 的學習效率夠高,可在數小時內學會解決真實世界的機器人問題,且同一套超參數可在多種不同環境工作。Google AI 撰寫部落格文章介紹了 SAC 背後的研究工作,也介紹了相關實驗結果。在真實世界學習機器人的要求真實世界的機器人實驗有一些重大挑戰,比如硬體失效和人工重置會導致數據流中斷,以及需要讓探索學習過程平滑,避免快速機械磨損或撞擊破壞,這都對演算法理論和演算法實現增加額外的限制,包括以下(但不限於): 有較高的樣本效率,以降低學習時間。 需要調節的超參數數量盡量少。 能在不同的場景重複使用已採集的數據(也稱為「無策略學習」)。 確保探索學習過程不損壞硬體。 Soft Actor-CriticSoft Actor-Critic 是基於最大熵強化學習開發的,這是一種嘗試讓預期回報最大化(標準的強化學習目標),同時也讓策略的熵最大化的框架。熵更高的策略有更高隨機性,直覺看來,這意味著最大熵強化學習會學習取得高回報的策略中,具最高隨機性的策略。為什麼在機器人學習這是件好事呢?明顯的原因是,最大熵優化的策略會更強健:如果策略在訓練過程中能允許高度隨機的動作,那麼它在測試時候也就更有可能順利應付預期外的擾動。不過更穩當的理由是,最大熵訓練不僅提高演算法對超參數的強健性,也可以提高採樣效率。Soft Actor-Critic 會學習一個隨機策略,這個策略會把狀態映射到動作及一個...

世界先進攜手交大,AI 提升晶圓製造效率與良率

世界先進今天宣布,委託國立交通大學進行 AI 晶圓表面瑕疵偵測研究計畫,開發一個人工智慧發展平台,協助智慧製造與智慧管理,並有效提升晶圓製造效率與良率。

無人機真如此威猛?淺談雙亞戰爭中遊蕩彈藥的應用

自今年 9 月開打的雙亞戰爭(Nagorny-Karabakh War)相當引人注目,尤其是無人機在戰場上的運用不斷受到吹捧,不過事實上,真的有那麼厲害嗎?此戰對於現代戰爭又帶來了怎樣的啟示。

三星申請專利教 AI 學會「看人臉色」,這或許能多賣幾件衣服

比語言更真實的表情,會幫助 AI 更懂你。三星正在訓練 AI 從你的臉部表情,而不光是從嘴巴獲取更多資訊。8 月 19 日,三星向世界智慧財產權辦公室提交一份專利。文件顯示,三星有意將這份專利技術用於辨識消費者的表情,這將延伸出很大的空間,比如三星目前看到的機會是,可在線下門市放置搭載這種演算法的裝置,然後透過辨識表情了解顧客對一件商品的真實想法。這意味著未來除了透過售貨員口頭詢問,或品牌商發放調查問卷,AI 在你看到一件商品的瞬間,就能看透你的好惡。透過這些數據總結出規律,可用於指導商品的生產設計及選品上貨。三星專利說明解釋,這項技術基於深度學習演算法,將在用戶注視鏡頭時辨識並分析他們的表情。三星說,目前三星的演算法可辨識驚喜、快樂、憤怒和悲傷、高興等 6 種表情。至於如何使用,三星舉例說,商家尤其是販售服飾的店家,可使用這套技術讓商品更受人喜愛。其他科技巨頭也在研發這項技術,比如微軟。微軟小冰研究人員表示,除了話語,微小表情、動作、音調等同樣能透露很多訊息,甚至這些訊息會更真實,不會「心口不一」。「比如當一個人面對面詢問你的意見,你可能會用點頭而不是語言表示認同」。「又比如當一個男生面帶微笑對你說『我們分手吧』,跟面帶哀傷的說『我們分手吧』,可能傳達完全兩個不同意思。」實際交流場景中,人類的微小表情和動作透露了大量訊息。語言、表情和動作融合在一起,AI 會更容易讀懂人類,甚至取悅人類。透過辨識表情賣貨只是一小步開端性的設想,當 AI 越懂人類,AI 落實的商業空間也會成倍擴展。(本文由 36Kr 授權轉載;首圖來源:shutterstock)

星戰終曲首日開片冠軍!即將橫掃周末票房

轉載從: 開眼電影網星戰終曲首日開片冠軍!即將橫掃周末票房 《STAR WARS:天行者的崛起》全台首日票房已達到近1350萬台幣的好成績,毫無懸念的成為開片票房冠軍!朝聖的粉絲中也不免有著許多知名的網紅、藝人,一致認為最終章不但場面精彩、劇情上的安排更將會是喜愛星戰的影迷都能感到滿意的完美收尾! ...

現代牙科集團透過購併活動積極拓展事業版圖

現代牙科集團(Modern Dental Group)近幾年積極購併,活動持續延燒到 2017 年,最新的購併對象為一間丹麥假牙產業佔有領導地位的牙技所(或稱義齒加工廠) Schmidt Dentalkeramik APS,交易價值約 85 萬歐元,並已於 2017 年 1 月 1 日完成支付,此次收購案將持續鞏固該集團在歐洲假牙市場的地位,並進一步拓展歐洲現有的行銷通路。為確保整合過程順利,Schmidt Dentalkeramik 的管理層將會繼續留任。

電影

時尚

科技新知

近期文章

Instagram

melbet