Om Deep CollabNet
V dannoj rabote, naprawlennoj na uluchshenie obucheniq glubokih nejronnyh setej, predlagaetsq set' CollabNet, kotoraq sostoit iz nowogo metoda wstawki nowyh skrytyh sloew w nejronnye seti tipa Deep FeedForward, wdohnowlennogo stekowymi awtoänkoderami. Nowaq forma wstawki schitaetsq sowmestnoj i naprawlena na uluchshenie obucheniq po srawneniü s podhodami, osnowannymi na stekowyh awtoänkoderah. V ätom nowom podhode wstawka sloq wypolnqetsq skoordinirowanno i postepenno, sohranqq pod kontrolem razrabotchika wliqnie ätogo nowogo sloq na obuchenie, a ne sluchajnym i stohasticheskim obrazom, kak pri tradicionnom summirowanii. Vzaimodejstwie, predlozhennoe w dannoj rabote, zaklüchaetsq w tom, chtoby zastawit' nowyj wstawlennyj sloj prodolzhat' obuchenie, poluchennoe predyduschimi sloqmi, bez uscherba dlq global'nogo obucheniq seti. Takim obrazom, wnow' wstawlennyj sloj sotrudnichaet s predyduschimi sloqmi, i ansambl' rabotaet bolee soglasowanno s obucheniem. CollabNet byla protestirowana na baze dannyh real'noj problemy, poluchiw udowletworitel'nye i mnogoobeschaüschie rezul'taty.
Vis mer