資料介紹
機器學習領域內(nèi)的多數(shù)模型均需要通過迭代計算以求解其最優(yōu)參數(shù),而MapReduce模型在迭代計算中的缺陷不足導致其在迭代計算中無法得到廣泛應用。為解決上述矛盾,基于MapReduce模型提出并實現(xiàn)了一種可用于模型參數(shù)求解的并行迭代模型MRI。MRI模型在保持Map以及Reduce階段的基礎上,新增了Iterate階段以及相關通信協(xié)議,實現(xiàn)了迭代過程中模型參數(shù)的更新、分發(fā)與迭代控制;通過對MapReduce狀態(tài)機進行增強,實現(xiàn)了節(jié)點任務的重用,避免了迭代過程中節(jié)點任務重復創(chuàng)建、初始化以及回收帶來的性能開銷;在任務節(jié)點實現(xiàn)了數(shù)據(jù)緩存,保障了數(shù)據(jù)的本地性,并在Map節(jié)點增加了基于內(nèi)存的塊緩存機制,進一步提高訓練集加載效率,以提高整體迭代效率。基于梯度下降算法的實驗結果表明:MRI模型在并行迭代計算方面性能優(yōu)于MapReduce模型。
- 面向移動終端圖像顏色顯示的節(jié)能模型 5次下載
- 面向學分銀行的區(qū)塊鏈學習成果管控模型綜述 5次下載
- 基于MapReduce并行處理的機電特種設備故障診斷 13次下載
- 面向雙目立體視覺的迭代式局部顏色校正方法 5次下載
- 面向人臉識別的FusNet網(wǎng)絡模型 8次下載
- 基于MapReduce的時間序列索引及數(shù)據(jù)查詢 7次下載
- 一種面向MapReduce的中間數(shù)據(jù)傳輸流水線優(yōu)化機制 4次下載
- 聲子BTE方程迭代求解在GPU上的并行加速方案 24次下載
- 基于MapReduce和加權網(wǎng)絡信息熵的DBWGIE-MR算法 11次下載
- 基于迭代膨脹卷積神經(jīng)網(wǎng)絡與ATT的實體名識別方法 6次下載
- MapReduce連接查詢的IO代價研究 0次下載
- 基于MapReduce的新會話識別方法 0次下載
- 基于MapReduce的并行化軌跡壓縮方法 0次下載
- 面向大數(shù)據(jù)的并行分類混合算法研究 0次下載
- 算法隱含并行性的物理模型
- 基于PyTorch的模型并行分布式訓練Megatron解析 3195次閱讀
- 大模型分布式訓練并行技術(一)-概述 1531次閱讀
- 圖解大模型訓練之:Megatron源碼解讀2,模型并行 4680次閱讀
- 以Gpipe作為流水線并行的范例進行介紹 1128次閱讀
- 基于動量的迭代算法來構造對抗擾動以攻擊黑盒和白盒模型 5681次閱讀
- 基于OpenMP的電磁場FDTD并行方法的程序設計 1255次閱讀
- 一種基于MapReduce模型的并行化k-medoids聚類算法 5377次閱讀
- PRAM模型、BSP模型、LogP模型優(yōu)缺點分析 1.6w次閱讀
- mapreduce二次排序_ mapreduce二次排序原理 6297次閱讀
- mapreduce工作原理圖文詳解_Map、Reduce任務中Shuffle和排序 8575次閱讀
- mapreduce的應用開發(fā)步驟 4806次閱讀
- 詳解MapReduce的模式、算法和用例 2443次閱讀
- mapreduce編程實例 1.1w次閱讀
- 什么是mapreduce_mapreduce工作原理_mapreduce_mapreduce邏輯模型圖 2.5w次閱讀
- 基于FPGA的并行硬件ECC模型的設計 5944次閱讀
下載排行
本周
- 1DC電源插座圖紙
- 0.67 MB | 2次下載 | 免費
- 2AN158 GD32VW553 Wi-Fi開發(fā)指南
- 1.51MB | 2次下載 | 免費
- 3AN148 GD32VW553射頻硬件開發(fā)指南
- 2.07MB | 1次下載 | 免費
- 4AN111-LTC3219用戶指南
- 84.32KB | 次下載 | 免費
- 5AN153-用于電源系統(tǒng)管理的Linduino
- 1.38MB | 次下載 | 免費
- 6AN-283: Σ-Δ型ADC和DAC[中文版]
- 677.86KB | 次下載 | 免費
- 7SM2018E 支持可控硅調(diào)光線性恒流控制芯片
- 402.24 KB | 次下載 | 免費
- 8AN-1308: 電流檢測放大器共模階躍響應
- 545.42KB | 次下載 | 免費
本月
- 1ADI高性能電源管理解決方案
- 2.43 MB | 450次下載 | 免費
- 2免費開源CC3D飛控資料(電路圖&PCB源文件、BOM、
- 5.67 MB | 138次下載 | 1 積分
- 3基于STM32單片機智能手環(huán)心率計步器體溫顯示設計
- 0.10 MB | 130次下載 | 免費
- 4使用單片機實現(xiàn)七人表決器的程序和仿真資料免費下載
- 2.96 MB | 44次下載 | 免費
- 53314A函數(shù)發(fā)生器維修手冊
- 16.30 MB | 31次下載 | 免費
- 6美的電磁爐維修手冊大全
- 1.56 MB | 24次下載 | 5 積分
- 7如何正確測試電源的紋波
- 0.36 MB | 17次下載 | 免費
- 8感應筆電路圖
- 0.06 MB | 10次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935121次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關降壓/升壓雙向直流/直流轉換器 PCB layout 設計
- 1.48MB | 420062次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233088次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191367次下載 | 10 積分
- 5十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183335次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81581次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73810次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65988次下載 | 10 積分
評論