一 .開(kāi)發(fā)背景

當(dāng)我們**在網(wǎng)絡(luò)上接觸到國(guó)外先進(jìn)算法 IDtracker，以及在《*強(qiáng)大腦》電視欄 目中看到北京大學(xué) Dr.魏使用的開(kāi)源工具 DeepLab Cut，我們無(wú)比興奮，因?yàn)檫@些 跟蹤技術(shù)將為運(yùn)動(dòng)科學(xué)以及實(shí)驗(yàn)室里的動(dòng)物行為跟蹤帶來(lái)變革，開(kāi)啟了對(duì)動(dòng)作捕 捉進(jìn)行計(jì)算機(jī)建模的新時(shí)代。同時(shí)，基于被動(dòng)及主動(dòng)標(biāo)記的技術(shù)更是讓快速精準(zhǔn)的動(dòng)物運(yùn)動(dòng)和交互行為跟蹤成為了可能。
然而，驚喜之余，我們也發(fā)現(xiàn)了這 2 款工具的一些缺陷，一是效率低下，電腦資 源消耗很?chē)?yán)重，不能實(shí)時(shí)分析， 二則這 2 個(gè)工具不能同時(shí)呈現(xiàn)， 三則因?yàn)檫@ 2 個(gè)工具開(kāi)源的屬性，不可避免的存在諸多隱藏的 bug 及準(zhǔn)確率無(wú)法有效保證 。 基于以上這些現(xiàn)象，并綜合我們多年積累的圖像 AI 算法經(jīng)驗(yàn)，SocialTrack AI 多動(dòng)物交互行為分析軟件應(yīng)運(yùn)而生， 同時(shí)軟件著力重點(diǎn)解決了以上“痛點(diǎn) ”。

二.產(chǎn)品介紹
SocialTrack AI 是我們使用人工智能 AI 算法的**款軟件，可以定量和定性地測(cè)量單個(gè)場(chǎng)地中多只動(dòng)物的攻擊行為與社交行為。該軟件在開(kāi)放場(chǎng)中捕獲并跟蹤這些動(dòng)物（小鼠或大鼠） ，并自動(dòng)確定它們之間的各種攻擊行為或社交互動(dòng)行為。
該系統(tǒng)可以自動(dòng)確定是否有任何兩只動(dòng)物正在積極地接近對(duì)方，一只正在追逐另 一 只， 或者與另一 只在打架（攻擊） 。 另外， 當(dāng)動(dòng)物之間沒(méi)有直接互動(dòng)時(shí)， SocialTrack AI 可以將動(dòng)物視為不動(dòng)，或獨(dú)立探索而不考慮其他動(dòng)物。它還可以測(cè)量一只動(dòng)物正在觀看或跟蹤另一只動(dòng)物的動(dòng)作的凝視事件。
SocialTrack AI 在分析兩只動(dòng)物之間的攻擊性社會(huì)行為方面具有幾個(gè)獨(dú)特而重要 的功能。首先，當(dāng)多只動(dòng)物在顏色與個(gè)體大小沒(méi)有明顯差異的情況下，通過(guò)我們 強(qiáng)大的AI 功能即可實(shí)時(shí)準(zhǔn)確區(qū)分動(dòng)物的 ID 編號(hào)，知道他們誰(shuí)是誰(shuí)，系統(tǒng)就可以 區(qū)分兩種動(dòng)物而無(wú)需人工著色（標(biāo)記） 它們 。 即使兩只動(dòng)物聚在一起然后分開(kāi)， 系統(tǒng)也會(huì)自動(dòng)確定誰(shuí)是誰(shuí) 。該系統(tǒng)即使在多動(dòng)物接觸時(shí)也可以自動(dòng)區(qū)分兩只動(dòng)物，這是一個(gè)極其重要的功能。
SocialTrack AI 不僅在實(shí)時(shí)區(qū)分動(dòng)物 ID 號(hào)上的表現(xiàn)**非凡， 它在標(biāo)記識(shí)別每只 動(dòng)物的關(guān)鍵體位點(diǎn)上的表現(xiàn)同樣驚人，可以同時(shí)且實(shí)時(shí)跟蹤多只老鼠的鼻尖、眼 睛（耳朵）、輪廓重心、后肢（四肢）及尾巴等，即使多只老鼠交互在一起的時(shí)候，也能盡可能的保持完整性。

三.應(yīng)用
?  攻擊性（ Aggression）
? 社交凝視/焦慮（Social Staring/Anxiety）
?  居民入侵者分析（Resident Intruder Analysis）

四.技術(shù)特點(diǎn)
1.能夠在同一場(chǎng)景下區(qū)分 2 只或者2 只以上動(dòng)物的身份編號(hào)，4 只及以上需單獨(dú)訓(xùn)練模型；
2.可以自動(dòng)識(shí)別動(dòng)物骨骼關(guān)鍵點(diǎn)，包括但不限于鼻尖、眼睛（耳朵） 、輪廓重心、后肢（四肢）及尾巴；
3.軟件支持實(shí)時(shí)分析和離線分析 2種模式；
4.第三方信號(hào)觸發(fā)功能，可與光遺傳、鈣成像等實(shí)驗(yàn)同步記錄；
5.全自動(dòng)識(shí)別、分析功能，實(shí)驗(yàn)過(guò)程不需用戶介入；
6.支持時(shí)間分段數(shù)據(jù)輸出；
7.同一場(chǎng)景下的多只動(dòng)物無(wú)需染色標(biāo)記、個(gè)體大小無(wú)差異，都能夠?qū)崟r(shí)跟蹤；
8.強(qiáng)大的排除干擾功能，對(duì)變化光照和非均勻光照自適應(yīng)，支持自適應(yīng)實(shí)驗(yàn)場(chǎng)景的動(dòng)物模型訓(xùn)練，可應(yīng)用于多場(chǎng)景；
9.提供已分析實(shí)驗(yàn)的雙擊復(fù)驗(yàn)、數(shù)據(jù)可視化及智能糾錯(cuò)的功能，方面后期實(shí)驗(yàn)校準(zhǔn)；
10.批處理模式允許無(wú)需用戶介入連續(xù)處理多個(gè)視頻；
11.可免費(fèi)訓(xùn)練個(gè)性化、定制化實(shí)驗(yàn)場(chǎng)景的動(dòng)物模型；

五.測(cè)試指標(biāo)
常規(guī)指標(biāo) ：每只老鼠的運(yùn)動(dòng)路程、平均速度、靜止時(shí)間等指標(biāo)
特色指標(biāo) ：反應(yīng)老鼠之間的攻擊行為和社交行為：Body Sniffing、Head Sniffing、 Anogenital Sniffing、Above (Crawling)、Following、Attack、WalkAlone、StandAlone、
StandTogether 等