面試分享!商湯科技感知算法工程師一面復(fù)盤
來源:投稿 作者:LSC
編輯:學(xué)姐
自我介紹
介紹自己的項(xiàng)目
Inception網(wǎng)絡(luò)的核心模塊是什么,有什么用
Inception模塊的核心思想就是將不同的尺度的信息特征以并行分支的方式結(jié)合在一起,經(jīng)過不同卷積層處理的結(jié)果矩陣在深度這個(gè)維度拼接起來,形成一個(gè)更深的矩陣。Inception模塊可以反復(fù)疊堆形成更大的網(wǎng)絡(luò),它可以對(duì)網(wǎng)絡(luò)的深度和寬度進(jìn)行高效的擴(kuò)充,在提升深度學(xué)習(xí)網(wǎng)絡(luò)準(zhǔn)確率的同時(shí)防止過擬合現(xiàn)象的發(fā)生。
上采樣和下采樣
上采樣就是放大圖像的操作,也叫圖像插值。下采樣反之,是縮小圖像的操作,也叫降采樣。
上采樣的方法有(1)插值法(最鄰近插值、雙線性插值等) (2)轉(zhuǎn)置卷積(又稱為反卷積) (3)上池化(unpooling)等。
下采樣的方法有(1)卷積和(2)池化
https://blog.csdn.net/jackzhang11/article/details/105046217/
反卷積 插值法
反卷積:反卷積就是卷積,只是中間padding了下,然后再做卷積。也叫做轉(zhuǎn)置卷積,只能還原原來的特征圖大小,而不是原來的值。在進(jìn)行反卷積的時(shí)候設(shè)置的stride并不是指反卷積在進(jìn)行卷積時(shí)候卷積核的移動(dòng)步長,而是被卷積矩陣填充的padding。通過反卷積并不能還原之間的矩陣,只能從大小上進(jìn)行還原,反卷積的本質(zhì)還是卷積,只是在進(jìn)行卷積之前,會(huì)進(jìn)行一個(gè)自動(dòng)的padding補(bǔ)充0,從而使得輸出的矩陣和指定輸出的矩陣的shape相同。
https://www.cnblogs.com/eilearn/p/9125177.html

插值法有很多種,最常見的是雙線性插值,是對(duì)線性插值在二維直角網(wǎng)格上的擴(kuò)展,用于對(duì)雙變量函數(shù)(例如x 和y)進(jìn)行插值。其核心思想是在兩個(gè)方向分別進(jìn)行一次線性插值。

https://zhuanlan.zhihu.com/p/361430532
https://blog.csdn.net/qq_34919792/article/details/102697817
全局池化
是對(duì)[C,W, H]的張量變成[1,1, H]的張量的操作。
Yolo算法中用到的數(shù)據(jù)增強(qiáng)
MixUp,圖像對(duì)及其標(biāo)簽的凸疊加,構(gòu)建了虛擬的樣本。
https://blog.csdn.net/m0_52073096/article/details/120677075
CutMix,通過從一個(gè)圖像中切割一部分并將其粘貼到增強(qiáng)圖像上來組合圖像,使用了兩張圖片。
Mosaic,將4張圖片以隨機(jī)縮放、隨機(jī)裁剪、隨機(jī)排布的方式進(jìn)行拼接。最主要的方式。
其他常見的數(shù)據(jù)增強(qiáng)。
Yolov5相比之前的改進(jìn)之處
采用GIOU_Loss做Bounding box的損失函數(shù)。
輸入端采用了Mosaic數(shù)據(jù)增強(qiáng)、自適應(yīng)錨框計(jì)算、自適應(yīng)圖片縮放等tricks。
Yolov5的Neck結(jié)構(gòu)采用FPN+PAN的結(jié)構(gòu),還采用借鑒CSPnet設(shè)計(jì)的CSP2結(jié)構(gòu),加強(qiáng)網(wǎng)絡(luò)特征融合的能力。
Backbone采用了CSPDarkNet53網(wǎng)絡(luò),還使用了focus操作。
https://zhuanlan.zhihu.com/p/172121380
https://zhuanlan.zhihu.com/p/186014243
目標(biāo)檢測中的Presicion和recall怎么算


https://zhuanlan.zhihu.com/p/478461060
目標(biāo)檢測的AP怎么求
AP(Average Precision) 用11點(diǎn)法、近似面積法求得。
以Presicion為縱坐標(biāo)、以recall為橫坐標(biāo)。將置信度最高到最低的值排序?qū)⑵潆x散化,對(duì)應(yīng)的bbox對(duì)應(yīng)的p和r標(biāo)在圖上,進(jìn)行計(jì)算。
用代碼計(jì)算IOU
問了行業(yè)的前景、求職規(guī)劃,實(shí)習(xí)能學(xué)到什么東西
如果沒有頂會(huì)論文,不要沖計(jì)算機(jī)視覺,建議換一個(gè)賽道。
除非有很優(yōu)秀的競賽、實(shí)習(xí)經(jīng)歷或者大型項(xiàng)目,可以試一下。
同學(xué)們關(guān)注一下【學(xué)姐帶你玩AI】公眾號(hào)
最近學(xué)姐每周都會(huì)分享大佬們的面試經(jīng)驗(yàn)!對(duì)找工作的同學(xué)很有幫助哦
后臺(tái)回復(fù)“簡歷”領(lǐng)取算法工程師萬能簡歷公式