1. <tr id='10pbt'><strong id='10pbt'></strong><small id='10pbt'></small><button id='10pbt'></button><li id='10pbt'><noscript id='10pbt'><big id='10pbt'></big><dt id='10pbt'></dt></noscript></li></tr><ol id='10pbt'><table id='10pbt'><blockquote id='10pbt'><tbody id='10pbt'></tbody></blockquote></table></ol><u id='10pbt'></u><kbd id='10pbt'><kbd id='10pbt'></kbd></kbd>

    <fieldset id='10pbt'></fieldset>
      <acronym id='10pbt'><em id='10pbt'></em><td id='10pbt'><div id='10pbt'></div></td></acronym><address id='10pbt'><big id='10pbt'><big id='10pbt'></big><legend id='10pbt'></legend></big></address>
      <span id='10pbt'></span>

        <i id='10pbt'><div id='10pbt'><ins id='10pbt'></ins></div></i>

        <i id='10pbt'></i>
      1. <ins id='10pbt'></ins>

        <code id='10pbt'><strong id='10pbt'></strong></code>
        <dl id='10pbt'></dl>

        1. 深研院信息工程學院鄒月嫻教授課題組在人工智能頂級會議AAAI上發表論文

          • 时间:
          • 浏览:14
          • 来源:在线观看免费视频_在线观看肉片H影院_在线观看深夜福利视频

            最近,視覺和語言的多模態任務,例如圖像字幕和視覺問題解答(VQA),引起瞭學術界和工業界的廣泛興趣。但是,大多數現有的模型都專註於單個任務。深圳研究生院信息工程學院鄒月嫻教授課題組研究發現,這些任務存在一定的相似性,因此認為如果模型可以同時考慮這些多模態問題,則可以共同學習來自不同任務的不同知識,並且很有可能提高每個任務的效能。

            近日,鄒月嫻課題組的研究“Federated Learning for Vision-and-Language Grounding Problems”被在美國紐約舉行的第34屆人工智能發展協會(AAAI)人工智能會議(AAAI Conference on Artificial Intelligence, AAAI 2020)接收發表並以口頭匯報(Oral)的形式進行瞭展示。該研究成果提出瞭一種聯邦學習框架,可以從不同的任務中獲得各種類型的圖像表示,然後將它們融合在一起以形成細粒度的圖像表示。這些圖像表示融合瞭來自不同視覺和語言的多模態問題的有用圖像表示,因此在單個任務中比單獨的原始圖像表示強大得多。為瞭學習這種圖像表示,該課題組提出瞭對齊(Aligning)、集成(Integrating)和映射(Mapping)、網絡(aimNet)。aimNet由一個對齊模塊,一個集成模塊和一個映射模塊組成(如下圖)。

          課題組提出的集中式模型aimNet

            其中,對齊模塊通過對提取的視覺和文本特征進行相互關註來構建對齊的圖像表示,其能為顯著圖像區域提供瞭更清晰的語義描述。接下來,集成模塊著重於通過自我註意機制集成視覺和文本特征,該機制捕獲顯著區域的分組和屬性的搭配。最後,映射模塊由兩層非線性層組成,用於將學習到的細粒度圖像表示映射到特定任務的特征域。各課題組提出的模塊充分利用瞭圖像中的所有有效信息,並將其作為輸入傳遞給解碼器,以生成有意義的句子或給出問題的準確答案。該課題組在兩個圖像字幕數據集和一個VQA數據集上,以及相應的三個聯邦學習設置上,包括水平聯合學習,垂直聯合學習和聯合遷移學習,進行實驗用於驗證該課題組的動機以及所提出方法的有效性。

            2019級碩士生劉峰林為該論文第一作者,鄒月嫻為通訊作者,該工作得到瞭數字視頻編解碼技術國傢工程實驗室、深圳市發改委(數據科學與智能計算學科發展計劃)和Aoto-PKUSZ聯合實驗室的支持。

          猜你喜欢

          同濟檢測統籌做好疫情防控及復工復產,為國傢重點項目保駕護航

          為深入貫徹落實習近平總書記在統籌推進新冠肺炎疫情防控和經濟社會發展工作部署會議上的講話精神及黨中央、國務院、上海市、同濟大學、控股公司的決策部署,同濟檢測在毫不放松疫情防控各項

          2020-06-12

          黃恩華任江西師范大學黨委書記

          4月23日上午,江西師范大學召開幹部大會,省委組織部副部長,省委非公經濟組織與社會組織工委書記周訓天天看影院國同志出席會議,宣佈省委關於江西師范大學主要負責同志職務調整決定:黃

          2020-06-12

          安徽省教育廳:2020年專升本招生計劃增加兩倍

          為使參加2020年專升本考試招生的考生能夠及時、準確、全面地瞭解我省普通高職(專科)層次升入本科教育培養工作實施方案,現就考生關註的問題,進行解釋與回答,以期待指導廣大考生順利

          2020-06-12

          擴大中小學幼兒園教師招聘規模——穩就業強師資一舉兩得

          就業是最大的民生,受疫情影響,高校畢業生就業問題更引起全社會高度關註。在此背景下,人力資源和社會保障部、教育部等聯合發佈《關於做好2020年中小學幼兒園教師公開招聘有關工作的通

          2020-06-12

          政協委員、河南農業大學校長張改平:為中小學生減負,也要為大學生增壓

          中小學生減負問題多年來一直是社會關註的焦點問題,也是基礎教育改革和發展面臨的重大問題。教育部等九部委2018年聯合印發《中小學生減負措施》,明確並強化政府、學校、校外培訓機構、

          2020-06-12