當(dāng)我們首次在網(wǎng)絡(luò)上接觸到國外先進(jìn)算法IDtracker，以及在《最強(qiáng)大腦》電視欄目中看到北京大學(xué)Dr.魏使用的開源工具DeepLabCut，我們無比興奮，因?yàn)檫@些跟蹤技術(shù)將為運(yùn)動(dòng)科學(xué)以及實(shí)驗(yàn)室里的動(dòng)物行為跟蹤帶來變革，開啟了對動(dòng)作捕捉進(jìn)行計(jì)算機(jī)建模的新時(shí)代。同時(shí)，基于被動(dòng)及主動(dòng)標(biāo)記的技術(shù)更是讓快速精準(zhǔn)的動(dòng)物運(yùn)動(dòng)和交互行為跟蹤成為了可能。

然而，驚喜之余，我們也發(fā)現(xiàn)了這2款工具的一些缺陷，一是效率低下，電腦資源消耗很嚴(yán)重，不能實(shí)時(shí)分析，二則這2個(gè)工具不能同時(shí)呈現(xiàn)，三則因?yàn)檫@2個(gè)工具開源的屬性，不可避免的存在諸多隱藏的bug及準(zhǔn)確率無法有效保證。基于以上這些現(xiàn)象，并綜合我們多年積累的圖像AI算法經(jīng)驗(yàn)，SocialTrack AI多動(dòng)物交互行為分析軟件應(yīng)運(yùn)而生，同時(shí)軟件著力重點(diǎn)解決了以上“痛點(diǎn)”。

二、產(chǎn)品介紹

SocialTrack AI是我們使用人工智能AI算法的第一款軟件，可以定量和定性地測量單個(gè)場地中多只動(dòng)物的攻擊行為與社交行為。該軟件在開放場中捕獲并跟蹤這些動(dòng)物（小鼠或大鼠），并自動(dòng)確定它們之間的各種攻擊行為或社交互動(dòng)行為。

該系統(tǒng)可以自動(dòng)確定是否有任何兩只動(dòng)物正在積極地接近對方，一只正在追逐另一只，或者與另一只在打架（攻擊）。另外，當(dāng)動(dòng)物之間沒有直接互動(dòng)時(shí)，SocialTrack AI可以將動(dòng)物視為不動(dòng)，或獨(dú)立探索而不考慮其他動(dòng)物。它還可以測量一只動(dòng)物正在觀看或跟蹤另一只動(dòng)物的動(dòng)作的凝視事件。

SocialTrack AI在分析兩只動(dòng)物之間的攻擊性社會行為方面具有幾個(gè)獨(dú)特而重要的功能。首先，當(dāng)多只動(dòng)物在顏色與個(gè)體大小沒有明顯差異的情況下，通過我們強(qiáng)大的AI功能即可實(shí)時(shí)準(zhǔn)確區(qū)分動(dòng)物的ID編號，知道他們誰是誰，系統(tǒng)就可以區(qū)分兩種動(dòng)物而無需人工著色（標(biāo)記）它們。即使兩只動(dòng)物聚在一起然后分開，系統(tǒng)也會自動(dòng)確定誰是誰。該系統(tǒng)即使在多動(dòng)物接觸時(shí)也可以自動(dòng)區(qū)分兩只動(dòng)物，這是一個(gè)極其重要的功能。

SocialTrack AI不僅在實(shí)時(shí)區(qū)分動(dòng)物ID號上的表現(xiàn)卓越非凡，它在標(biāo)記識別每只動(dòng)物的關(guān)鍵體位點(diǎn)上的表現(xiàn)同樣驚人，可以同時(shí)且實(shí)時(shí)跟蹤多只老鼠的鼻尖、眼睛（耳朵）、輪廓重心、后肢（四肢）及尾巴等，即使多只老鼠交互在一起的時(shí)候，也能盡可能的保持完整性。

三、應(yīng)用

• 攻擊性（ Aggression）

• 社交凝視/焦慮（Social Staring/Anxiety）

• 居民入侵者分析（Resident Intruder Analysis）

四、技術(shù)特點(diǎn)

1.能夠在同一場景下區(qū)分2只或者2只以上動(dòng)物的身份編號，4只及以上需單獨(dú)訓(xùn)練模型；

2.可以自動(dòng)識別動(dòng)物骨骼關(guān)鍵點(diǎn)，包括但不限于鼻尖、眼睛（耳朵）、輪廓重心、后肢（四肢）及尾巴；

3.軟件支持實(shí)時(shí)分析和離線分析2種模式；

4.第三方信號觸發(fā)功能，可與光遺傳、鈣成像等實(shí)驗(yàn)同步記錄；

5.全自動(dòng)識別、分析功能，實(shí)驗(yàn)過程不需用戶介入；

6.支持時(shí)間分段數(shù)據(jù)輸出；

7.同一場景下的多只動(dòng)物無需染色標(biāo)記、個(gè)體大小無差異，都能夠?qū)崟r(shí)跟蹤；

8.強(qiáng)大的排除干擾功能，對變化光照和非均勻光照自適應(yīng)，支持自適應(yīng)實(shí)驗(yàn)場景的動(dòng)物模型訓(xùn)練，可應(yīng)用于多場景；

9.提供已分析實(shí)驗(yàn)的雙擊復(fù)驗(yàn)、數(shù)據(jù)可視化及智能糾錯(cuò)的功能，方面后期實(shí)驗(yàn)校準(zhǔn)；

10.批處理模式允許無需用戶介入連續(xù)處理多個(gè)視頻；

11.可免費(fèi)訓(xùn)練個(gè)性化、定制化實(shí)驗(yàn)場景的動(dòng)物模型；

五、測試指標(biāo)

常規(guī)指標(biāo)：每只老鼠的運(yùn)動(dòng)路程、平均速度、靜止時(shí)間等指標(biāo)

特色指標(biāo)：反應(yīng)老鼠之間的攻擊行為和社交行為：Body Sniffing、Head Sniffing、Anogenital Sniffing、Above (Crawling)、Following、Attack、WalkAlone、StandAlone、StandTogether等