日韩人妻字幕在线,久久国产视频在线看,欧美激情亚洲视频国产精品,中文字幕乱码怡人三级,久久久久久人妻精品一区二区,日韩欧美黄色免费完整,免费观看美女呻吟啪啪的视频,人妻人妻videos人妻,夜夜色视频在线观看

醫(yī)療器械法規(guī)、注冊、臨床、體系認證、信息系統(tǒng)一站式服務
24×7服務熱線:0571-86198618 簡體中文 ENGLISH
當前位置:網(wǎng)站首頁>關(guān)于我們>新聞動態(tài)
人工智能醫(yī)療器械注冊審查指導原則(征求意見稿)
發(fā)布日期:2021-06-05 12:09瀏覽次數(shù):3724次
為進一步規(guī)范人工智能醫(yī)療器械生存周期過程質(zhì)控要求和注冊申報資料要求,并統(tǒng)一審評要求,藥監(jiān)總局基于《深度學習輔助決策醫(yī)療器械軟件審評要點》,結(jié)合產(chǎn)品審評經(jīng)驗積累和監(jiān)管科學研究成果,編寫了《人工智能醫(yī)療器械注冊審查指導原則?(征求意見稿)》,即日起公開征求意見。

引言:為進一步規(guī)范人工智能醫(yī)療器械生存周期過程質(zhì)控要求和注冊申報資料要求,并統(tǒng)一審評要求,藥監(jiān)總局基于《深度學習輔助決策醫(yī)療器械軟件審評要點》,結(jié)合產(chǎn)品審評經(jīng)驗積累和監(jiān)管科學研究成果,編寫了《人工智能醫(yī)療器械注冊審查指導原則(征求意見稿)》,即日起公開征求意見。

人工智能醫(yī)療器械注冊審查指導原則.jpg

人工智能醫(yī)療器械注冊審查指導原則

(征求意見稿)

 

本指導原則旨在指導注冊人建立人工智能醫(yī)療器械生存周期過程和準備人工智能醫(yī)療器械注冊申報資料,同時規(guī)范人工智能醫(yī)療器械技術(shù)審評要求。

本指導原則是對人工智能醫(yī)療器械的一般要求。注冊人應依據(jù)產(chǎn)品具體特性和風險程度確定本指導原則具體內(nèi)容的適用性,若不適用應詳述理由。注冊人也可采用其他滿足法規(guī)要求的替代方法,但應提供詳盡的支持資料。

本指導原則是在現(xiàn)行法規(guī)、強制性標準體系以及當前科技能力、認知水平下制定的,隨著法規(guī)、強制性標準體系的不斷完善以及科技能力、認知水平的不斷發(fā)展,本指導原則相關(guān)內(nèi)容也將適時調(diào)整。

本指導原則是供注冊人、審評人員和檢查人員使用的指導文件,不涉及行政審批事項,亦不作為法規(guī)強制執(zhí)行,應在遵循相關(guān)法規(guī)的前提下使用本指導原則。

本指導原則作為數(shù)字醫(yī)療指導原則體系的重要組成部分,遵循醫(yī)療器械軟件、醫(yī)療器械網(wǎng)絡安全、移動醫(yī)療器械、醫(yī)療器械人因設計、醫(yī)療器械獨立軟件生產(chǎn)質(zhì)量現(xiàn)場檢查等數(shù)字醫(yī)療相關(guān)指導原則要求。

本指導原則是人工智能醫(yī)療器械的通用指導原則,其他含有人工智能技術(shù)的醫(yī)療器械指導原則可在本指導原則基礎(chǔ)上結(jié)合具體情況進行有針對性的調(diào)整、修改和完善。采用人工智能技術(shù)進行醫(yī)療器械的設計、生產(chǎn),亦可參考本指導原則適用要求。

一、適用范圍

本指導原則適用于人工智能醫(yī)療器械(含體外診斷醫(yī)療器械)的注冊申報,包括第二類、第三類人工智能獨立軟件和含有人工智能軟件組件的醫(yī)療器械。

本指導原則也可用作人工智能醫(yī)療器械體系核查的參考。

二、主要概念

(一)人工智能醫(yī)療器械

本指導原則所述人工智能醫(yī)療器械是指基于“醫(yī)療器械數(shù)據(jù)”,采用人工智能技術(shù)實現(xiàn)其預期用途的醫(yī)療器械。

醫(yī)療器械數(shù)據(jù)是指醫(yī)療器械產(chǎn)生的客觀醫(yī)療數(shù)據(jù),如醫(yī)學影像設備產(chǎn)生的醫(yī)學圖像數(shù)據(jù)(如X射線、CT、MRI、超聲等圖像)、醫(yī)用電子設備產(chǎn)生的生理參數(shù)數(shù)據(jù)(如心電、腦電、血壓、無創(chuàng)血糖等波形數(shù)據(jù))、體外診斷設備產(chǎn)生的體外診斷數(shù)據(jù)(如病理圖像、顯微圖像、有創(chuàng)血糖波形數(shù)據(jù)等);通用設備產(chǎn)生的用于醫(yī)療用途的客觀數(shù)據(jù)亦屬于醫(yī)療器械數(shù)據(jù),如數(shù)碼相機拍攝的用于皮膚疾病診斷的皮膚照片、健康電子產(chǎn)品采集的用于心臟疾病預警的心電數(shù)據(jù)等?;卺t(yī)療器械數(shù)據(jù)包括單獨使用醫(yī)療器械數(shù)據(jù),或者以醫(yī)療器械數(shù)據(jù)為主聯(lián)合使用非醫(yī)療器械數(shù)據(jù)(如電子病歷、醫(yī)學檢查報告的結(jié)果文本等)。

人工智能是指機器表現(xiàn)出與人類智能相關(guān)行為的能力,通常是指通過感知周圍環(huán)境做出合理行動以達到預期目標的計算機軟件或系統(tǒng)。機器學習是指與人類學習行為相關(guān)的人工智能,通常是指通過整理現(xiàn)有數(shù)據(jù)和/或獲取新數(shù)據(jù)以提升性能的計算機軟件或系統(tǒng)。機器學習雖是人工智能的子集,但卻為人工智能的核心領(lǐng)域,二者當前對于醫(yī)療器械而言含義基本相同,故本指導原則對二者不做嚴格區(qū)分,統(tǒng)一采用人工智能進行表述。

基于非醫(yī)療器械數(shù)據(jù)的醫(yī)學人工智能產(chǎn)品,或者采用人工智能技術(shù)實現(xiàn)非醫(yī)療用途的醫(yī)療器械均非人工智能醫(yī)療器械。醫(yī)學人工智能產(chǎn)品是否屬于人工智能醫(yī)療器械,必要時可申請醫(yī)療器械分類界定。

(二)人工智能醫(yī)療器械類型

從醫(yī)療器械軟件角度,人工智能醫(yī)療器械可分為人工智能獨立軟件和人工智能軟件組件,故其類型劃分可參考醫(yī)療器械軟件指導原則相關(guān)維度。

人工智能醫(yī)療器械從用途角度可分為輔助決策類和非輔助決策類。其中,輔助決策是指通過提供診療活動建議輔助醫(yī)務人員進行臨床決策,如通過異常識別、病灶性質(zhì)判定、自動制定手術(shù)計劃進行輔助分診、輔助檢測、輔助診斷、輔助治療等,相當于醫(yī)務人員的助手。反之即為非輔助決策,包括流程優(yōu)化、診療驅(qū)動,如診療流程簡化、自動測量、三維重建等,相當于醫(yī)務人員的工具。

人工智能醫(yī)療器械從功能角度大體上可分為控制功能、處理功能,處理功能又可分為前處理功能和后處理功能。其中,控制功能是指控制/驅(qū)動醫(yī)療器械硬件運行的功能,如控制機械臂運動等。前處理功能是指采集人體解剖、生理信息生成醫(yī)療器械數(shù)據(jù)過程的處理功能,如成像質(zhì)量改善、成像流程簡化等。后處理功能是指利用醫(yī)療器械數(shù)據(jù)生成診療信息過程的處理功能,如診療流程簡化、自動測量、三維重建、異常識別、病灶性質(zhì)判定、自動制定手術(shù)計劃等。

人工智能醫(yī)療器械從算法角度具有多種類型劃分維度。從學習策略角度可分為有監(jiān)督學習和無監(jiān)督學習,前者需要對訓練數(shù)據(jù)進行標注,如回歸、分類等典型算法,后者無需對訓練數(shù)據(jù)進行標注,如聚類、降維等典型算法,前者對于數(shù)據(jù)標注的要求高于后者。從學習方法角度可分為基于模型的算法和基于數(shù)據(jù)的算法,前者采用統(tǒng)計模型、規(guī)則推理等方法,后者主要基于大數(shù)據(jù)方法,前者對于訓練數(shù)據(jù)量的要求低于后者。從可解釋性角度可分為白盒算法和黑盒算法,前者特征提取需要人為干預,可與現(xiàn)有醫(yī)學知識建立關(guān)聯(lián),后者自動完成特征提取,難與現(xiàn)有醫(yī)學知識建立關(guān)聯(lián),前者可解釋性優(yōu)于后者。

上述類型劃分維度相互交叉,例如:前處理和后處理均可采用不同類型的人工智能算法實現(xiàn)輔助決策、非輔助決策用途。同時,同一維度亦不存在嚴格的劃分界線,例如:在用途方面,通過圖像識別技術(shù)進行流程優(yōu)化則需考慮診療驅(qū)動相關(guān)要求,自動測量結(jié)果若為臨床決策指標則屬于輔助決策范疇;在功能方面,控制功能可與處理功能相結(jié)合,前處理過程可包含后處理功能;在算法方面,有監(jiān)督學習和無監(jiān)督學習可結(jié)合為半監(jiān)督學習,統(tǒng)計模型可基于大數(shù)據(jù),白盒算法和黑盒算法可結(jié)合為灰盒算法。

人工智能醫(yī)療器械可同時采用多種、多個人工智能算法,在前處理、后處理過程中實現(xiàn)輔助決策、非輔助決策用途。因此,應結(jié)合人工智能醫(yī)療器械的預期用途、使用場景、核心功能以及所用算法的類型特點、技術(shù)特征、組合形式開展相應產(chǎn)品質(zhì)控工作,以保證產(chǎn)品的安全有效性。

(三)人工智能算法更新

人工智能算法特別是基于數(shù)據(jù)的算法,具有快速迭代更新的特性。人工智能算法更新屬于軟件更新范疇,故遵循軟件更新的一般原則及要求:人工智能算法更新若影響到人工智能醫(yī)療器械的安全性或有效性則屬于重大軟件更新,應申請許可事項變更;反之,人工智能算法更新若未影響到人工智能醫(yī)療器械的安全性和有效性則屬于輕微軟件更新,通過質(zhì)量管理體系進行控制,無需申請許可事項變更。

人工智能算法更新可分為算法驅(qū)動型更新和數(shù)據(jù)驅(qū)動型更新。其中,算法驅(qū)動型更新是指人工智能醫(yī)療器械所用算法、算法結(jié)構(gòu)、算法流程、算法框架(詳見后文)、輸入輸出等發(fā)生改變,通常屬于重大軟件更新。算法重新訓練即棄用原有訓練數(shù)據(jù)而采用全新訓練數(shù)據(jù)進行算法訓練,亦屬于算法驅(qū)動型更新。

數(shù)據(jù)驅(qū)動型更新是指僅由訓練數(shù)據(jù)量增加而發(fā)生的算法更新。數(shù)據(jù)驅(qū)動型更新是否屬于重大軟件更新原則上以算法性能評估結(jié)果(基于相同測試集)為準,算法性能評估結(jié)果若發(fā)生顯著性改變則屬于重大軟件更新,即算法性能評估結(jié)果與前次注冊相比存在統(tǒng)計學差異,反之屬于輕微軟件更新。

軟件版本命名規(guī)則應涵蓋算法驅(qū)動型更新和數(shù)據(jù)驅(qū)動型更新,明確并區(qū)分重大軟件更新和輕微軟件更新,其中重大軟件更新列舉全部典型情況。

人工智能醫(yī)療器械其他類型的算法更新、軟件更新以及重大軟件更新判定原則詳見醫(yī)療器械軟件指導原則、醫(yī)療器械網(wǎng)絡安全指導原則。軟件版本命名規(guī)則的一般要求詳見醫(yī)療器械軟件指導原則。

三、基本原則

(一)基于算法特性

人工智能技術(shù)從發(fā)展驅(qū)動要素角度實為基于模型/數(shù)據(jù)和算力的算法,其中模型/數(shù)據(jù)是人工智能技術(shù)的基礎(chǔ),算力是人工智能技術(shù)的保證,算法是人工智能技術(shù)的核心。

由于算力所用計算資源本身不屬于監(jiān)管對象,計算資源的監(jiān)管要求取決于其所屬的計算平臺類型(參見后文人工智能芯片要求)。故從監(jiān)管角度出發(fā),人工智能醫(yī)療器械安全有效性評價以算法特性為核心重點關(guān)注其泛化能力,以模型/數(shù)據(jù)為基礎(chǔ)重點關(guān)注其質(zhì)控情況,同時兼顧算力不足與失效的影響及風險。

人工智能算法的類型不同,其算法特性、適用場景也不同,評價重點亦有所側(cè)重;同時,不同類型的人工智能算法可組合使用,需結(jié)合各算法特性和算法組合形式進行整體評價。因此,應結(jié)合人工智能醫(yī)療器械的預期用途、使用場景、核心功能選擇與之相適宜的人工智能算法或算法組合,基于算法特性并結(jié)合風險管理開展相應驗證與確認工作。

以深度學習為例,其是指通過訓練具有多個隱層的神經(jīng)網(wǎng)絡而獲得輸入輸出映射關(guān)系的人工智能算法,實為基于海量數(shù)據(jù)和高算力的黑盒算法。因此,對于采用深度學習技術(shù)的人工智能醫(yī)療器械,重點關(guān)注其算法泛化能力、數(shù)據(jù)質(zhì)控、可解釋性等問題,同時,深度學習若與其他類型的人工智能算法組合使用,還應基于各算法特性重點關(guān)注算法組合的整體評價問題。

人工智能新算法研究處于深入發(fā)展階段,如基于小樣本數(shù)據(jù)、基于弱標注數(shù)據(jù)、基于非結(jié)構(gòu)化數(shù)據(jù)的算法。人工智能醫(yī)療器械若使用人工智能新算法,亦需基于算法特性并結(jié)合風險管理開展相應驗證與確認工作,以保證產(chǎn)品的安全有效性。

(二)風險導向

人工智能醫(yī)療器械的風險水平亦可用軟件安全性級別進行表述,軟件安全性級別越高,其生存周期質(zhì)控要求越嚴格,注冊申報資料越詳盡,具體要求詳見醫(yī)療器械軟件指導原則。

人工智能醫(yī)療器械的軟件安全性級別可基于產(chǎn)品的預期用途、使用場景、核心功能進行綜合判定,其中預期用途主要考慮用途類型、重要程度、緊迫程度等因素,使用場景主要考慮使用場合、疾病特征、適用人群、目標用戶等因素,核心功能主要考慮功能類型、核心算法、輸入輸出、接口等因素。亦可根據(jù)風險管理所確定的風險等級進行判定,軟件安全性級別與風險等級的分級可以不同,但二者存在對應關(guān)系,因此可根據(jù)風險等級來判定軟件安全性級別,但應在采取風險緩解措施之前進行判定

人工智能醫(yī)療器械的主要風險從算法角度包括過擬合和欠擬合,其中過擬合是指算法對于訓練數(shù)據(jù)過度學習而將非普遍規(guī)律作為重要特征,欠擬合是算法對于訓練數(shù)據(jù)學習不充分而遺漏重要特征,均會降低算法泛化能力。從用途角度,輔助決策主要包括假陰性和假陽性,其中假陰性即漏診,可能導致后續(xù)診療活動延誤,特別是要考慮快速進展疾病的診療活動延誤風險,而假陽性即誤診,可能導致后續(xù)不必要的診療活動;非輔助決策從算法設計目標能否得以實現(xiàn)角度,亦可參考輔助決策分為假陰性和假陽性。此外,進口人工智能醫(yī)療器械還需考慮中外差異風險,如中外在人種、流行病學特征、臨床診療規(guī)范等差異。

人工智能醫(yī)療器械應結(jié)合產(chǎn)品的預期用途、使用場景、核心功能開展相應風險管理活動,采取有效的風險控制措施將風險降至可接受水平,并貫穿于人工智能醫(yī)療器械全生命周期過程。

(三)全生命周期管理

注冊人應結(jié)合質(zhì)量管理體系要求,參考軟件、人工智能相關(guān)標準和良好工程實踐,建立人工智能醫(yī)療器械生存周期過程,開展與軟件安全性級別相匹配的產(chǎn)品質(zhì)量保證工作,將風險管理、可追溯分析貫穿于生存周期全程,形成記錄以供體系核查。

上市前應開展充分、適宜、有效的驗證與確認活動,保證算法泛化能力滿足臨床需求,識別可預見風險并將其降至可接受水平,明確產(chǎn)品使用限制(含技術(shù)限制,下同)和必要警示提示信息。上市后持續(xù)開展算法泛化能力研究,結(jié)合用戶投訴、不良事件和召回等情況,識別前期未預見風險并采取有效的風險控制措施將風險降至可接受水平,同時根據(jù)產(chǎn)品更新需求,經(jīng)評估后實施更新活動,開展與之相適宜的驗證與確認活動,保證算法泛化能力持續(xù)滿足臨床需求。

四、人工智能醫(yī)療器械生存周期過程

人工智能醫(yī)療器械生存周期(即生命周期)過程可基于軟件生存周期過程予以建立,具體要求詳見醫(yī)療器械獨立軟件生產(chǎn)質(zhì)量管理規(guī)范及其現(xiàn)場檢查指導原則。

考慮到有監(jiān)督深度學習是當前人工智能醫(yī)療器械的主流算法,故本指導原則以有監(jiān)督深度學習為例詳述人工智能醫(yī)療器械生存周期過程質(zhì)控要求,主要包括需求分析、數(shù)據(jù)收集、算法設計、驗證與確認、更新控制等階段。其他類型的人工智能算法可參照執(zhí)行,不適用內(nèi)容詳述理由并予以記錄。

(一)需求分析

需求分析以臨床需求與風險為導向,結(jié)合產(chǎn)品的預期用途、使用場景、核心功能,綜合考慮法規(guī)、標準、用戶、產(chǎn)品、數(shù)據(jù)、功能、性能、接口、用戶界面、網(wǎng)絡安全、警示提示等需求,重點考慮數(shù)據(jù)收集、算法性能、使用限制等要求。

數(shù)據(jù)收集需考慮數(shù)據(jù)來源的合規(guī)性和多樣性、數(shù)據(jù)分布的科學性和合理性、數(shù)據(jù)質(zhì)控的充分性和有效性。數(shù)據(jù)來源在合規(guī)性基礎(chǔ)上保證多樣性,以提高算法泛化能力,例如:盡可能來源于多家、多地域、多層級的代表性臨床機構(gòu),盡可能來源于多家、多種、多參數(shù)的代表性采集設備。數(shù)據(jù)分布的科學性和合理性需結(jié)合目標疾病流行病學特征予以考慮,包括但不限于疾病構(gòu)成(如分型、分級、分期)、人群分布(如健康、患者,性別、年齡、職業(yè)、地域、生活方式)、統(tǒng)計指標(如發(fā)病率、患病率、治愈率、死亡率、生存率)等情況,以及目標疾病并發(fā)癥與類似疾病的影響情況。數(shù)據(jù)質(zhì)控的充分性和有效性需結(jié)合數(shù)據(jù)采集與數(shù)據(jù)標注的人員、設備、過程等影響因素予以考慮,具體要求詳見后文。

算法性能需結(jié)合臨床實際和產(chǎn)品定位,綜合考慮假陰性與假陽性、重復性與再現(xiàn)性、魯棒性/健壯性等性能指標要求,兼顧不同性能指標的制約關(guān)系,如假陰性與假陽性等。

使用限制需考慮產(chǎn)品禁用、慎用等場景,準確表述產(chǎn)品使用場景,提供必要警示提示信息。

(二)數(shù)據(jù)收集

數(shù)據(jù)收集基于合規(guī)性要求,主要考慮數(shù)據(jù)采集、數(shù)據(jù)整理、數(shù)據(jù)標注、數(shù)據(jù)集構(gòu)建等活動的質(zhì)控要求,以保證數(shù)據(jù)質(zhì)量和算法訓練效果。

1.數(shù)據(jù)采集

數(shù)據(jù)采集需考慮采集設備、采集過程、數(shù)據(jù)脫敏等質(zhì)控要求,并建立數(shù)據(jù)采集操作規(guī)范。數(shù)據(jù)采集亦可使用歷史數(shù)據(jù),需結(jié)合樣本規(guī)模、采集難度等影響因素合理選擇數(shù)據(jù)采集方式。

采集設備質(zhì)控包括采集設備的兼容性和采集特征等要求。兼容性基于數(shù)據(jù)生成方式(直接生成、間接生成)考慮采集設備的兼容性要求,如采集設備的名稱、型號規(guī)格、制造商、性能指標等要求,若無需考慮兼容性要求詳述理由并予以記錄。采集特征考慮采集設備的采集方式(如常規(guī)成像、增強成像)、采集協(xié)議(如MRI成像序列)、采集參數(shù)(如CT加載電壓、加載電流、加載時間、層厚)、采集精度(如分辨率、采樣率)等要求。

采集過程質(zhì)控包括人員管理、采集流程、采集質(zhì)量評估等要求。人員管理考慮采集人員、審核人員的選拔(如職稱、工作年限、工作經(jīng)驗、所在機構(gòu),若有國外人員明確其資質(zhì)要求)、培訓(如培訓材料、培訓方案)、考核(如方法、頻次、指標、通過準則、一致性)等要求。采集流程考慮人員職責、采集步驟、結(jié)果審核等要求。采集質(zhì)量評估考慮評估人員、評估方法、評估指標、通過準則等要求,并記錄評估結(jié)果。

數(shù)據(jù)采集若使用歷史數(shù)據(jù),需列明采集設備及采集特征要求,并開展數(shù)據(jù)采集質(zhì)量評估工作。

采集的數(shù)據(jù)應進行數(shù)據(jù)脫敏以保護患者隱私,數(shù)據(jù)脫敏需明確脫敏的類型(靜態(tài)、動態(tài))、規(guī)則、程度、方法。

2.數(shù)據(jù)整理

脫敏數(shù)據(jù)匯總形成原始數(shù)據(jù)庫,不同模態(tài)的數(shù)據(jù)在原始數(shù)據(jù)庫中需加以區(qū)分(下同)。

數(shù)據(jù)整理基于原始數(shù)據(jù)庫考慮數(shù)據(jù)清洗、數(shù)據(jù)預處理的質(zhì)控要求。數(shù)據(jù)清洗需明確清洗的規(guī)則、方法、結(jié)果,數(shù)據(jù)預處理需明確處理的方法(如濾波、增強、重采樣、尺寸裁剪、均一化等)、結(jié)果。數(shù)據(jù)整理所用軟件工具均需明確名稱、型號規(guī)格、完整版本、制造商、運行環(huán)境,并進行軟件確認。

數(shù)據(jù)經(jīng)整理后形成基礎(chǔ)數(shù)據(jù)庫,需明確樣本類型、樣本量、樣本分布等信息。樣本類型以適用人群為單位可分為單一數(shù)據(jù)、數(shù)據(jù)序列(由多個單一數(shù)據(jù)組成,如結(jié)構(gòu)序列、功能序列、時間序列)。樣本量需考慮樣本規(guī)模的充分性,明確樣本總量確定依據(jù)。樣本分布需考慮樣本的多樣性和偏倚控制問題,依據(jù)疾病構(gòu)成、適用人群、數(shù)據(jù)來源機構(gòu)、采集設備、樣本類型等因素明確數(shù)據(jù)分布情況。

3.數(shù)據(jù)標注

數(shù)據(jù)標注作為有監(jiān)督學習數(shù)據(jù)質(zhì)控的關(guān)鍵環(huán)節(jié),應建立數(shù)據(jù)標注操作規(guī)范,明確標注資源管理、標注過程質(zhì)控、標注質(zhì)量評估等要求。

標注資源管理包括人員管理和基礎(chǔ)設施管理。人員管理考慮標注人員、審核人員和仲裁人員的選拔(如職稱、工作年限、工作經(jīng)驗、所在機構(gòu),若有國外人員明確其資質(zhì)要求)、培訓(如培訓材料、培訓方案)、考核(如方法、頻次、指標、通過準則、一致性)等要求?;A(chǔ)設施管理考慮標注場所(真實場所或模擬場所,模擬場所可根據(jù)產(chǎn)品實際情況調(diào)整模擬程度,詳述調(diào)整理由并予以記錄)、標注環(huán)境條件(如空間、照明、溫度、濕度、氣壓)、標注軟件(名稱、型號規(guī)格、完整版本、制造商、運行環(huán)境、軟件確認)等要求。

標注過程質(zhì)控包括人員職責(如資質(zhì)、數(shù)量、職責)、標注規(guī)則(如臨床指南、專家共識、專家評議、文獻分析)、標注流程(如標注對象、標注形式、標注輪次、標注步驟、結(jié)果審核)、分歧處理(如仲裁人員、仲裁方式)、可追溯性(如數(shù)據(jù)、操作)等要求。

標注質(zhì)量評估包括評估人員、評估方法、評估指標、通過準則等要求,并記錄評估結(jié)果。

數(shù)據(jù)經(jīng)標注后形成標注數(shù)據(jù)庫,其樣本類型可分為數(shù)據(jù)塊(如圖像區(qū)域、數(shù)據(jù)片段)、單一數(shù)據(jù)(由多個數(shù)據(jù)塊組成)、數(shù)據(jù)序列(由多個單一數(shù)據(jù)組成)。樣本量、樣本分布等要求及風險考量與基礎(chǔ)數(shù)據(jù)庫相同。

數(shù)據(jù)標注可使用自動標注軟件,但自動標注結(jié)果不得直接使用,應由標注人員審核后方可使用;同時,自動標注軟件亦需明確名稱、型號規(guī)格、完整版本、制造商、運行環(huán)境等信息,并進行軟件確認。

4.數(shù)據(jù)集構(gòu)建

基于標注數(shù)據(jù)庫構(gòu)建訓練集(用于算法訓練)、調(diào)優(yōu)集[1](若有,用于算法超參數(shù)調(diào)優(yōu))、測試集(用于算法性能評估),明確訓練集、調(diào)優(yōu)集、測試集的劃分方法、劃分依據(jù)、數(shù)據(jù)分配比例。訓練集需保證樣本分布具有均衡性,測試集、調(diào)優(yōu)集原則上需保證樣本分布符合臨床實際情況,訓練集、調(diào)優(yōu)集、測試集的樣本應兩兩無交集并通過查重予以驗證。

為解決樣本分布不滿足預期的問題,可對訓練集、調(diào)優(yōu)集小樣本量數(shù)據(jù)進行擴增,原則上不得對測試集進行數(shù)據(jù)擴增,對抗測試(詳見后文)除外。數(shù)據(jù)擴增需明確擴增的對象、方式(離線、在線)、方法(如翻轉(zhuǎn)、旋轉(zhuǎn)、鏡像、平移、縮放、濾波、生成對抗網(wǎng)絡等)、倍數(shù),擴增倍數(shù)過大應考慮數(shù)據(jù)偏倚的影響及風險。若采用生成對抗網(wǎng)絡(詳見后文)進行數(shù)據(jù)擴增,需明確算法基本信息以及算法選用依據(jù)。

數(shù)據(jù)經(jīng)擴增后形成擴增數(shù)據(jù)庫,需列表對比擴增數(shù)據(jù)庫與標注數(shù)據(jù)庫在樣本量、樣本分布(注明擴增倍數(shù))等差異,以證實擴增數(shù)據(jù)庫樣本量的充分性以及樣本分布的合理性。

(三)算法設計

人工智能算法作為人工智能醫(yī)療器械的核心,其設計主要考慮算法選擇、算法訓練、算法性能評估等要求。對于黑盒算法,算法設計應開展算法性能影響因素分析,同時建議與現(xiàn)有醫(yī)學知識[2]建立關(guān)聯(lián),以提升算法可解釋性。

1.算法選擇

算法選擇提供所用算法的名稱、類型、結(jié)構(gòu)(如層數(shù)、參數(shù)規(guī)模)、輸入輸出、流程圖、算法框架(含自研框架、現(xiàn)成框架)、運行環(huán)境等基本信息,并明確算法選用依據(jù),包括選用的理由和基本原則。

若組合使用遷移學習(詳見后文)、強化學習(詳見后文),亦需提供算法基本信息以及算法選用依據(jù)。

2.算法訓練

算法訓練需基于訓練集、調(diào)優(yōu)集進行訓練和調(diào)優(yōu),考慮評估指標、訓練方法、訓練目標、調(diào)優(yōu)方法、訓練數(shù)據(jù)量-評估指標曲線等要求。

評估指標建議根據(jù)臨床需求進行選擇,輔助決策可選擇敏感性、特異性等指標,非輔助決策可選擇圖像質(zhì)量、測量準確性等指標。訓練方法包括但不限于留出法和交叉驗證法,若組合使用聯(lián)邦學習(詳見后文)亦需明確算法選用依據(jù),并提供算法基本信息。訓練目標根據(jù)臨床情況詳述目標確定依據(jù),提供ROC曲線等證據(jù)予以證實。調(diào)優(yōu)方法明確優(yōu)化策略和實現(xiàn)方法。訓練數(shù)據(jù)量-評估指標曲線用于證實算法訓練的充分性和有效性。

3.算法性能評估

算法性能評估作為軟件驗證的重要組成部分,需基于測試集對算法設計結(jié)果進行評估,綜合考慮假陰性與假陽性、重復性與再現(xiàn)性、魯棒性/健壯性等評估要求,以證實算法性能滿足算法設計目標,并作為軟件驗證、軟件確認的基礎(chǔ)。亦可基于第三方數(shù)據(jù)庫(詳見后文)開展算法性能評估。

同時,開展算法性能影響因素分析以提升算法可解釋性,詳述影響算法性能的主要因素及其影響程度,如采集設備、采集參數(shù)、疾病構(gòu)成、病變特征等因素,基于分析結(jié)果明確產(chǎn)品使用限制和必要警示提示信息。

此外,根據(jù)產(chǎn)品實際情況開展壓力測試(詳見后文)、對抗測試等測試,以全面深入評估算法性能。

(四)驗證與確認

1.軟件驗證

軟件驗證是指通過提供客觀證據(jù)認定軟件開發(fā)、軟件更新某一階段的輸出滿足輸入要求,包括軟件驗證測試(單元測試、集成測試、系統(tǒng)測試)、設計評審等系列活動。

軟件驗證通過法規(guī)、標準、用戶、產(chǎn)品、數(shù)據(jù)、功能、性能、接口、用戶界面、網(wǎng)絡安全、警示提示等測試,驗證軟件的安全有效性,并作為軟件確認的基礎(chǔ)。

2.軟件確認

軟件確認是指通過提供客觀證據(jù)認定軟件滿足用戶需求和預期目的,包括軟件確認測試(用戶測試)、臨床評價、設計評審等系列活動。根據(jù)產(chǎn)品實際情況,軟件確認方式可單一使用,亦可組合使用。

軟件確認測試基于軟件需求在真實或模擬使用場景下予以開展,亦可基于測評數(shù)據(jù)庫(詳見后文)予以開展。

臨床評價基本原則詳見醫(yī)療器械軟件指導原則,對于非輔助決策類功能,可基于核心功能開展同品種醫(yī)療器械比對,全新的功能、算法和用途原則上均需開展臨床評價;對于輔助決策類功能,需基于核心算法開展同品種醫(yī)療器械比對,所選同品種醫(yī)療器械的臨床證據(jù)需基于臨床試驗(可使用歷史數(shù)據(jù)),全新的功能、算法和用途原則上均需開展臨床試驗。具體要求詳見臨床評價、臨床試驗設計、境外臨床試驗數(shù)據(jù)接受等通用指導原則,以及人工智能醫(yī)療器械臨床評價等專用指導原則。

同時,開展算法性能比較分析,詳述各類測試場景(含臨床評價)算法性能變異度較大的原因,基于分析結(jié)果明確產(chǎn)品使用限制和必要警示提示信息。

最后,結(jié)合算法訓練、算法性能評估、臨床評價等結(jié)果開展算法性能綜合評價,針對訓練樣本量和測試樣本量過少、測試結(jié)果明顯低于算法設計目標、算法性能變異度過大等情況,對產(chǎn)品的適用范圍、使用場景、核心功能進行必要限制。

(五)更新控制

人工智能醫(yī)療器械若發(fā)生算法更新、軟件更新,均應當按照質(zhì)量管理體系的要求,開展與算法更新、軟件更新的類型、內(nèi)容和程度相適宜的驗證與確認活動,將風險管理、可追溯分析貫穿于更新全程,形成記錄以供體系核查。

對于算法更新,無論算法驅(qū)動型更新還是數(shù)據(jù)驅(qū)動型更新,均應開展算法性能評估、臨床評價等驗證與確認活動,以保證算法更新的安全有效性。對于軟件更新,具體要求詳見醫(yī)療器械軟件指導原則、醫(yī)療器械獨立軟件生產(chǎn)質(zhì)量現(xiàn)場檢查指導原則。

總之,人工智能醫(yī)療器械所含的每個人工智能算法,均應獨立開展需求分析、數(shù)據(jù)收集、算法設計、驗證與確認、更新控制等活動,同時考慮人工智能算法組合的整體評價要求,以保證產(chǎn)品的安全有效性。

前期已開發(fā)的人工智能醫(yī)療器械若不滿足本指導原則的適用要求,應開展差距分析并予以記錄,明確產(chǎn)品使用限制和必要警示提示信息。必要時采取補救措施,以滿足質(zhì)量管理體系要求,并保證產(chǎn)品的安全有效性。

五、技術(shù)考量

(一)注冊單元與檢測單元

人工智能醫(yī)療器械的注冊單元與檢測單元劃分原則詳見醫(yī)療器械軟件指導原則,人工智能獨立軟件、人工智能軟件組件分別參照獨立軟件、軟件組件的要求。

若軟件核心功能相同但核心算法類型不同,則每類核心算法均需在產(chǎn)品技術(shù)要求中注明并檢測。

(二)網(wǎng)絡安全與數(shù)據(jù)安全

人工智能醫(yī)療器械應結(jié)合預期用途、使用場景、核心功能,基于保密性、完整性、可得性等網(wǎng)絡安全特性,確定網(wǎng)絡安全能力建設要求,以應對網(wǎng)絡攻擊和數(shù)據(jù)竊取等網(wǎng)絡威脅,如算法框架漏洞攻擊、數(shù)據(jù)污染等。具體要求詳見醫(yī)療器械網(wǎng)絡安全指導原則。

除此之外,還應在人工智能醫(yī)療器械全生命周期過程中考慮數(shù)據(jù)安全問題,包括上市前設計開發(fā)階段和上市后使用階段。數(shù)據(jù)轉(zhuǎn)移需明確轉(zhuǎn)移方法、數(shù)據(jù)污染防護措施、數(shù)據(jù)銷毀等要求。數(shù)據(jù)整理、數(shù)據(jù)集構(gòu)建、算法訓練、算法性能評估、軟件驗證等內(nèi)部活動需在封閉網(wǎng)絡環(huán)境下開展以防止數(shù)據(jù)污染。數(shù)據(jù)標注、軟件確認等涉及外方的活動需明確數(shù)據(jù)污染防護措施,特別是在開放網(wǎng)絡環(huán)境下。各數(shù)據(jù)庫(集)均需進行數(shù)據(jù)備份,明確備份的方法、頻次、數(shù)據(jù)恢復方法。數(shù)據(jù)采集、上市后使用需考慮臨床機構(gòu)關(guān)于網(wǎng)絡安全與數(shù)據(jù)安全的接口要求。

(三)移動計算與云計算

人工智能醫(yī)療器械若使用移動計算、云計算等技術(shù),遵循相關(guān)指導原則要求。具體而言,移動計算相關(guān)要求詳見移動醫(yī)療器械指導原則,云計算相關(guān)要求詳見醫(yī)療器械軟件指導原則,移動計算與云計算的網(wǎng)絡安全相關(guān)要求詳見醫(yī)療器械網(wǎng)絡安全指導原則。

(四)人因設計與可用性

人工智能醫(yī)療器械建議加強用戶接口人因設計以提升可用性,并將用戶錯誤使用的風險降至可接受水平,特別是對軟件用戶界面。具體要求詳見醫(yī)療器械人因設計相關(guān)指導原則。

(五)壓力測試

本指導原則所述壓力測試[3]是指采用罕見或特殊臨床真實數(shù)據(jù)樣本開展的算法性能測試,側(cè)重于評估算法泛化能力的極限。

注冊人應根據(jù)產(chǎn)品實際情況開展壓力測試,以全面深入評估算法性能。若未開展相應測試或測試結(jié)果不佳,均需對產(chǎn)品的適用范圍、使用場景、核心功能進行必要限制,并在說明書中明確產(chǎn)品使用限制和必要警示提示信息。

(六)對抗測試

本指導原則所述對抗測試是指基于臨床真實數(shù)據(jù)樣本利用數(shù)據(jù)擾動、生成對抗網(wǎng)絡等技術(shù)產(chǎn)生對抗樣本,并采用對抗樣本開展的算法性能測試,側(cè)重于評估算法的魯棒性/健壯性。

若條件具備,建議注冊人開展對抗測試,以全面深入評估算法性能。若未開展相應測試或測試結(jié)果不佳,均需明確產(chǎn)品使用限制和必要警示提示信息。

(七)第三方數(shù)據(jù)庫

第三方數(shù)據(jù)庫可用于算法性能評估,但其類型、用途等情況各不相同,未必能夠完全滿足軟件確認測試的要求。因此,使用第三方數(shù)據(jù)庫進行軟件確認測試,應評估其滿足軟件確認測試的充分性、適宜性和有效性。

可用于軟件確認測試的第三方數(shù)據(jù)庫即為測評數(shù)據(jù)庫。測評數(shù)據(jù)庫除滿足數(shù)據(jù)庫通用要求(如數(shù)據(jù)管理、網(wǎng)絡安全與數(shù)據(jù)安全、可擴展性等)外,還應滿足以下專用要求。

1.權(quán)威性:測評數(shù)據(jù)庫的數(shù)據(jù)采集、數(shù)據(jù)標注及其質(zhì)控工作應由相應臨床專業(yè)領(lǐng)域的權(quán)威機構(gòu)(如國家臨床醫(yī)學研究中心)負責,以保證數(shù)據(jù)準確性;標注人員、審核人員、仲裁人員需具備與其崗位職責相匹配的臨床實踐經(jīng)驗。

2.科學性:測評數(shù)據(jù)庫的數(shù)據(jù)樣本均應為臨床真實數(shù)據(jù),不得進行數(shù)據(jù)擴增;樣本分布符合目標疾病流行病學特征情況,樣本總量基于目標疾病流行病學統(tǒng)計指標、測試抽樣誤差控制要求,通過統(tǒng)計學計算予以確定;單次測試原則上根據(jù)測評數(shù)據(jù)庫樣本分布情況等比例隨機抽取測試樣本,且其樣本量滿足測試抽樣誤差控制要求。

3.規(guī)范性:測評數(shù)據(jù)庫的數(shù)據(jù)采集、數(shù)據(jù)脫敏、數(shù)據(jù)清洗、數(shù)據(jù)預處理、數(shù)據(jù)標注、數(shù)據(jù)更換、數(shù)據(jù)管理、數(shù)據(jù)安全保證等數(shù)據(jù)治理活動以及測評活動均應建立質(zhì)控程序文件,并滿足可追溯性要求。

4.多樣性:測評數(shù)據(jù)庫的樣本應來源于多家、多地域、多層級的代表性臨床機構(gòu)以及多家、多種、多參數(shù)的代表性采集設備,以保證數(shù)據(jù)多樣性能夠滿足算法泛化能力評估要求;若條件具備,測評數(shù)據(jù)庫可包含適當比例的罕見或特殊臨床真實數(shù)據(jù)樣本,以便開展壓力測試深入評估算法泛化能力的極限。

5.封閉性:測評數(shù)據(jù)庫應封閉管理,樣本總量需遠大于單次測試樣本量,測評活動亦需封閉管理,以保證算法性能評價的客觀性、公正性、公平性。

6.動態(tài)性:測評數(shù)據(jù)庫應定期更換一定比例的數(shù)據(jù)樣本,以保證其具備持續(xù)的多樣性和封閉性;數(shù)據(jù)更換的頻率、比例需有確定依據(jù),并滿足規(guī)范性要求;更換出庫的數(shù)據(jù)樣本由測評數(shù)據(jù)庫責任方自行確定其處理方案。

基于測評數(shù)據(jù)庫,利用數(shù)據(jù)擾動、生成對抗網(wǎng)絡等技術(shù),可衍生出對抗測評數(shù)據(jù)庫。若條件具備,建議基于測評數(shù)據(jù)庫建設對抗測評數(shù)據(jù)庫,以全面深入評價算法性能。

第三方數(shù)據(jù)庫經(jīng)評估符合要求后可成為測評數(shù)據(jù)庫(含對抗測評數(shù)據(jù)庫),測評數(shù)據(jù)庫名錄另行制定并動態(tài)調(diào)整。

公開數(shù)據(jù)庫因不具備封閉性而不能用作測評數(shù)據(jù)庫,但可用于算法性能評估,若用于算法訓練應重新進行質(zhì)量評估。使用公開數(shù)據(jù)庫應根據(jù)其使用情況開展必要評估工作,并在注冊申報資料中予以說明。

其他類型第三方數(shù)據(jù)庫可參照測評數(shù)據(jù)庫和公開數(shù)據(jù)庫的要求予以使用,同時考慮其適用場景、數(shù)據(jù)質(zhì)量評估、時效性等要求。

(八)基于模型的算法

基于模型的算法對于訓練數(shù)據(jù)的數(shù)量要求相對較低,通常為白盒算法,特征提取需要人為干預,可與現(xiàn)有醫(yī)學知識建立關(guān)聯(lián),可解釋性相對較高。

對于此類算法,有監(jiān)督學習的模型/數(shù)據(jù)質(zhì)控要求參照有監(jiān)督深度學習執(zhí)行,不適用內(nèi)容詳述理由并予以記錄。同理,無監(jiān)督學習的模型/數(shù)據(jù)質(zhì)控要求亦參照有監(jiān)督深度學習執(zhí)行,其中數(shù)據(jù)標注不適用,其余不適用內(nèi)容詳述理由并予以記錄。

此類算法無論有監(jiān)督學習還是無監(jiān)督學習,均需明確特征信息,包括但不限于特征分類(如人口統(tǒng)計學、生物學、形態(tài)學)、特征屬性(如形態(tài)、紋理、性質(zhì)、尺寸、邊界)、特征展現(xiàn)方式(如形狀、尺寸、邊界、顏色、數(shù)量)等信息。

(九)遷移學習

遷移學習是指將在某領(lǐng)域或任務學習到的模型應用于不同但相關(guān)的領(lǐng)域或任務的人工智能算法,如將在自然圖像領(lǐng)域?qū)W習形成的模型應用于醫(yī)學圖像領(lǐng)域。遷移學習主要包括基于特征和基于模型的算法,并可與深度學習、聯(lián)邦學習等人工智能算法組合使用。

人工智能醫(yī)療器械若使用遷移學習算法,注冊申報資料需明確算法的名稱、類型、輸入輸出、流程圖、運行環(huán)境等基本信息以及算法選用依據(jù),并根據(jù)遷移學習的類型及其算法特性提供預訓練模型的數(shù)據(jù)集構(gòu)建、驗證與確認等資料。

(十)強化學習

強化學習是指基于行動與環(huán)境的交互,實現(xiàn)行動從環(huán)境所獲累積獎勵最大化的人工智能算法,采用“試錯”的學習策略。強化學習從不同角度具有不同類型劃分維度,如有模型與無模型的算法、基于策略和基于價值的算法等,并可與深度學習等人工智能算法組合使用。

人工智能醫(yī)療器械若使用強化學習算法,注冊申報資料需明確算法的名稱、類型、輸入輸出、流程圖、運行環(huán)境等基本信息以及算法選用依據(jù),并根據(jù)強化學習類型及其算法特性提供算法驗證與確認資料。

(十一)聯(lián)邦學習

聯(lián)邦學習是基于多個數(shù)據(jù)源協(xié)同建立學習模型的人工智能算法,即每個數(shù)據(jù)源獨立進行本地數(shù)據(jù)學習,通過交換數(shù)據(jù)模型共同建立學習模型,實為分布式算法訓練技術(shù),亦屬于隱私計算技術(shù)。聯(lián)邦學習主要包括橫向聯(lián)邦(基于樣本)和縱向聯(lián)邦(基于特征)等算法,并可與遷移學習等人工智能算法組合使用。

人工智能醫(yī)療器械若使用聯(lián)邦學習算法等隱私計算技術(shù)進行算法訓練,注冊申報資料需明確算法的名稱、類型、輸入輸出、流程圖、運行環(huán)境等基本信息以及算法選用依據(jù),并根據(jù)聯(lián)邦學習等隱私計算技術(shù)的算法類型及其算法特性提供算法驗證與確認資料。

(十二)生成對抗網(wǎng)絡

生成對抗網(wǎng)絡是通過生成器和判別器的互相博弈學習而產(chǎn)生與臨床真實數(shù)據(jù)類似樣本的人工智能算法,主要用于數(shù)據(jù)擴增或者對抗測試的樣本生成,并可與深度學習等人工智能算法組合使用。

人工智能醫(yī)療器械若使用生成對抗網(wǎng)絡進行數(shù)據(jù)擴增,注冊申報資料需明確算法的名稱、類型、輸入輸出、流程圖、運行環(huán)境等基本信息以及算法選用依據(jù),并根據(jù)生成對抗網(wǎng)絡類型及其算法特性提供算法驗證與確認資料。

(十三)基于數(shù)據(jù)的無監(jiān)督學習

基于數(shù)據(jù)的無監(jiān)督學習具備自學習的能力,在臨床機構(gòu)部署后可通過持續(xù)學習該臨床機構(gòu)的數(shù)據(jù)而進行產(chǎn)品快速更新。此時,臨床機構(gòu)亦成為產(chǎn)品開發(fā)者,與注冊人共同承擔產(chǎn)品質(zhì)量責任和法律責任;同時,此種更新對于產(chǎn)品安全有效性的影響具有高度不確定性,特別是人工智能黑盒算法。

因此,在當前法律法規(guī)體系和技術(shù)水平條件下,基于數(shù)據(jù)的無監(jiān)督學習應關(guān)閉自學習功能,或者雖開放自學習功能但不得投入臨床使用,即臨床始終使用產(chǎn)品原有功能,自學習功能僅用于算法訓練或臨床科研。

注冊人應按照質(zhì)量管理體系要求,對自學習功能所產(chǎn)生的產(chǎn)品更新的安全有效性進行驗證與確認,若適用還應根據(jù)法律法規(guī)要求申請許可事項變更,待批準后方能將自學習功能所產(chǎn)生的產(chǎn)品更新投入臨床使用。

(十四)人工智能算法框架

人工智能算法框架從開發(fā)者角度可分為自研算法框架和現(xiàn)成算法框架,其中自研算法框架即注冊人自行研發(fā)的算法框架,屬于自研軟件范疇;現(xiàn)成算法框架是指注冊人所使用的由第三方開發(fā)的算法框架(如TensorflowPyTorch等),視為現(xiàn)成軟件,現(xiàn)成算法框架開發(fā)者視為醫(yī)療器械供應商。

人工智能算法框架更新包括產(chǎn)品更新(即更換算法框架)、版本更新、補丁更新,其中產(chǎn)品更新、非效率型版本更新對于人工智能醫(yī)療器械而言屬于重大軟件更新,效率型版本更新(即運算效率單純提高)、補丁更新對于人工智能醫(yī)療器械而言一般屬于輕微軟件更新,除非影響到人工智能醫(yī)療器械的安全性或有效性。人工智能算法框架同時發(fā)生多種類型的更新,同樣遵循風險從高原則。

人工智能算法框架可參照自研軟件、現(xiàn)成軟件相關(guān)要求提交相應注冊申報資料,均需明確算法框架的名稱、類型(自研框架、現(xiàn)成框架)、型號規(guī)格、完整版本、制造商等信息。

(十五)人工智能芯片

人工智能芯片作為計算資源的組成部分,本身不屬于監(jiān)管對象,需要根據(jù)其所屬的計算平臺類型考慮監(jiān)管要求。對于人工智能獨立軟件,人工智能芯片屬于通用計算平臺的組成部分,不屬于產(chǎn)品結(jié)構(gòu)組成,作為軟件運行環(huán)境予以考慮。對于人工智能軟件組件,人工智能芯片屬于醫(yī)用計算平臺的組成部分,屬于產(chǎn)品結(jié)構(gòu)組成,需與產(chǎn)品進行整體評價。

無論何種情況,使用人工智能芯片均應在注冊申報資料中明確其名稱、型號規(guī)格、制造商、性能指標等信息。

六、算法研究資料

(一)算法研究報告

算法研究報告適用于人工智能算法或算法組合的初次發(fā)布和再次發(fā)布,包括算法基本信息、算法風險管理、算法需求規(guī)范、數(shù)據(jù)質(zhì)控、算法訓練、算法驗證與確認、算法可追溯性分析、結(jié)論等內(nèi)容,不適用內(nèi)容詳述理由。

1.算法基本信息

明確算法的名稱、類型、結(jié)構(gòu)、輸入輸出、流程圖、算法框架、運行環(huán)境等基本信息以及算法選用依據(jù)。

其中,算法類型從學習策略、學習方法、可解釋性等角度明確算法特性。算法結(jié)構(gòu)明確算法的層數(shù)、參數(shù)規(guī)模等超參數(shù)信息。算法框架明確所用人工智能算法框架的基本信息,包括名稱、類型(自研框架、現(xiàn)成框架)、型號規(guī)格、完整版本、制造商等信息。運行環(huán)境明確算法正常運行所需的典型運行環(huán)境,包括硬件配置、外部軟件環(huán)境、網(wǎng)絡條件;若使用人工智能芯片需明確其名稱、型號規(guī)格、制造商、性能指標等信息。算法選用依據(jù)詳述人工智能算法或算法組合選用的理由和基本原則。

2.算法風險管理

明確算法的軟件安全性級別(輕微、中等、嚴重)并詳述判定理由。提供算法風險管理資料,明確過擬合與欠擬合、假陰性與假陽性、數(shù)據(jù)擴增與數(shù)據(jù)偏倚等風險的控制措施。若無單獨文檔可提供軟件風險管理資料,并注明算法風險管理所在位置。

3.算法需求規(guī)范

提供算法需求規(guī)范,若無單獨文檔可提供軟件需求規(guī)范,并注明算法需求所在位置。

4.數(shù)據(jù)質(zhì)控

提供數(shù)據(jù)來源合規(guī)性聲明,列明數(shù)據(jù)來源機構(gòu)的名稱、所在地域、數(shù)據(jù)收集量、倫理批件編號等信息。

提供數(shù)據(jù)采集操作規(guī)范,根據(jù)數(shù)據(jù)采集方式明確采集設備、采集過程、數(shù)據(jù)脫敏等質(zhì)控要求。

提供數(shù)據(jù)標注操作規(guī)范,明確數(shù)據(jù)整理、標注資源管理、標注過程質(zhì)控、標注質(zhì)量評估、數(shù)據(jù)安全保證等要求。

若適用,提供數(shù)據(jù)擴增情況說明,明確擴增的對象、方式、方法、倍數(shù)等信息。

依據(jù)疾病構(gòu)成、適用人群、數(shù)據(jù)來源機構(gòu)、采集設備、樣本類型等因素提供原始數(shù)據(jù)庫、基礎(chǔ)數(shù)據(jù)庫、標注數(shù)據(jù)庫、擴增數(shù)據(jù)庫的數(shù)據(jù)分布情況。

若數(shù)據(jù)來自公開數(shù)據(jù)庫,提供公開數(shù)據(jù)庫的基本信息(如名稱、創(chuàng)建者、數(shù)據(jù)總量等)和使用情況(如數(shù)據(jù)使用量、數(shù)據(jù)質(zhì)量評估、數(shù)據(jù)分布等)。

5.算法訓練

依據(jù)疾病構(gòu)成、適用人群、數(shù)據(jù)來源機構(gòu)、采集設備、樣本類型等因素提供訓練集、調(diào)優(yōu)集的數(shù)據(jù)分布情況。

明確算法訓練所用的評估指標、訓練方法、訓練目標、調(diào)優(yōu)方法,提供ROC曲線證明訓練目標滿足臨床要求,提供訓練數(shù)據(jù)量-評估指標曲線以證實算法訓練的充分性和有效性。

6.算法驗證與確認

依據(jù)疾病構(gòu)成、適用人群、數(shù)據(jù)來源機構(gòu)、采集設備、樣本類型等因素提供測試集的數(shù)據(jù)分布情況。

提供假陰性與假陽性、重復性與再現(xiàn)性、魯棒性/健壯性等算法性能指標評估結(jié)果,以證明算法性能滿足算法設計目標。

若使用第三方數(shù)據(jù)庫開展算法性能評估,提供第三方數(shù)據(jù)庫的基本信息(如名稱、創(chuàng)建者、數(shù)據(jù)總量等)和使用情況(如測試數(shù)據(jù)樣本量、評估指標、評估結(jié)果等)。

若適用,提供算法性能影響因素分析報告,明確影響算法性能的主要因素及其影響程度,以及產(chǎn)品使用限制和必要警示提示信息。

若適用,提供壓力測試、對抗測試等測試報告。若未開展相應測試或測試結(jié)果不佳,均需明確產(chǎn)品使用限制和必要警示提示信息。

若基于測評數(shù)據(jù)庫進行算法確認,提供測評數(shù)據(jù)庫的基本信息(如名稱、創(chuàng)建者、數(shù)據(jù)總量等)和使用情況(如評估指標、評估結(jié)果等)。若基于臨床評價方式進行算法確認,指向臨床評價資料即可。

提供上述各類測試場景(含臨床評價)下的算法性能評估結(jié)果比較分析報告,明確產(chǎn)品使用限制和必要警示提示信息。

7.算法可追溯性分析

提供算法可追溯性分析報告,即追溯算法需求、算法設計、源代碼(明確軟件單元名稱即可)、算法測試、算法風險管理的關(guān)系表。

若無單獨文檔可提供軟件可追溯性分析報告,并注明算法可追溯性分析所在位置。

8.結(jié)論

簡述算法性能綜合評價結(jié)果,明確對產(chǎn)品的適用范圍、使用場景、核心功能所做的必要限制,并判定人工智能算法或算法組合的安全有效性是否滿足要求。

(二)算法更新研究報告

算法更新研究報告僅適用于人工智能算法或算法組合的再次發(fā)布,在算法研究報告相應內(nèi)容中明確算法更新情況。

其中,算法基本信息描述申報算法情況,若適用詳述與前次注冊相比的變化情況;算法風險管理、算法需求規(guī)范、數(shù)據(jù)質(zhì)控、算法訓練、算法驗證與確認、算法可追溯性分析描述算法更新的具體情況;結(jié)論簡述算法性能綜合評價結(jié)果,并判定人工智能算法或算法組合更新的安全有效性是否滿足要求。

七、注冊申報資料補充說明

注冊申報資料應在符合醫(yī)療器械注冊申報資料要求等文件要求基礎(chǔ)上,滿足醫(yī)療器械軟件、醫(yī)療器械網(wǎng)絡安全、移動醫(yī)療器械等相關(guān)指導原則要求,同時需要重點關(guān)注以下要求。

(一)產(chǎn)品注冊

1. 申請表信息

1)人工智能獨立軟件

產(chǎn)品名稱應符合通用名稱命名規(guī)范要求,通常體現(xiàn)輸入數(shù)據(jù)(如CT圖像、眼底照片)、目標疾病(含病變、疾病的屬性)、預期用途(如輔助分診、輔助檢測、輔助診斷)等特征詞。

適用范圍基于預期用途、使用場景、核心功能予以規(guī)范,包括但不限于處理對象、目標疾病、臨床用途、適用人群、目標用戶、使用場所、采集設備要求、使用限制等內(nèi)容。

2)人工智能軟件組件

人工智能軟件組件通常無需在注冊證載明信息中體現(xiàn)。其軟件功能名稱可參照人工智能獨立軟件要求。若有,適用范圍體現(xiàn)輔助決策類軟件功能的情況。

2. 算法研究資料

在軟件研究資料中以算法為單位,提交每個人工智能算法的算法研究報告,具體要求詳見第六章。

3. 產(chǎn)品技術(shù)要求

產(chǎn)品技術(shù)要求若含有基于測評數(shù)據(jù)庫測試的性能指標,應明確測評數(shù)據(jù)庫的基本信息(如名稱、型號規(guī)格、完整版本、責任方等)。

基于其他類型第三方數(shù)據(jù)庫測試的性能指標,原則上無需在產(chǎn)品技術(shù)要求中體現(xiàn)。

4. 說明書

根據(jù)算法性能綜合評價結(jié)果,對產(chǎn)品的適用范圍、使用場景、核心功能進行必要限制,并在說明書中明確產(chǎn)品使用限制和必要警示提示信息。若適用,明確數(shù)據(jù)采集設備和數(shù)據(jù)采集過程相關(guān)要求。

對于輔助決策類產(chǎn)品,說明書應明確人工智能算法的算法性能評估總結(jié)(測試集基本信息、評估指標與結(jié)果)、臨床評價總結(jié)(臨床數(shù)據(jù)基本信息、評價指標與結(jié)果)、決策指標定義(或提供決策指標定義所依據(jù)的臨床指南、專家共識等參考文獻)等信息。此時若采用基于數(shù)據(jù)的人工智能算法,說明書還應補充算法訓練總結(jié)信息(訓練集基本信息、訓練指標與結(jié)果)。

若產(chǎn)品采用人工智能黑盒算法,根據(jù)算法影響因素分析報告,在說明書中明確產(chǎn)品使用限制和必要警示提示信息。

對于軟件安全性級別為嚴重級別的產(chǎn)品,原則上需提供用戶培訓材料。

(二)許可事項變更

1. 算法研究資料

根據(jù)人工智能算法的更新情況,在軟件研究資料中以算法為單位,提交每個人工智能算法的算法更新研究報告(或算法研究報告),具體要求詳見第六章。

2. 產(chǎn)品技術(shù)要求

若適用,產(chǎn)品技術(shù)要求變更對比表需體現(xiàn)測評數(shù)據(jù)庫的變化情況。

3. 說明書

若適用,提交用戶培訓材料。

(三)延續(xù)注冊

延續(xù)注冊通常無需提交算法相關(guān)研究資料。若適用,根據(jù)注冊證“備注”所載明的要求提交相應算法研究資料。

八、編寫單位

本指導原則編寫單位為國家藥品監(jiān)督管理局醫(yī)療器械技術(shù)審評中心。

九、參考文獻

[1] 國家藥品監(jiān)督管理局. 醫(yī)療器械注冊管理辦法(修訂草案征求意見稿),2021.3

[2] 國家食品藥品監(jiān)督管理總局. 醫(yī)療器械說明書和標簽管理規(guī)定(總局令第6號),2014.7

[3] 國家藥品監(jiān)督管理局. 醫(yī)療器械注冊申報資料要求和批準證明文件格式(修訂草案征求意見稿),2021.5

[4] 國家藥品監(jiān)督管理局. 醫(yī)療器械主文檔登記事項(2021年第36公告),2021.3

[5] 國家藥品監(jiān)督管理局. 醫(yī)療器械通用名稱命名指導原則(2019年第99號通告),2019.12

[6] 國家藥品監(jiān)督管理局. 醫(yī)療器械安全和性能的基本原則(2020年第18號通告)2020.3

[7] 國家藥品監(jiān)督管理局. 醫(yī)療器械臨床評價技術(shù)指導原則(征求意見稿),2021.5

[8] 國家藥品監(jiān)督管理局醫(yī)療器械技術(shù)審評中心. 醫(yī)療器械軟件技術(shù)審查指導原則(第二版)(征求意見稿),2020.6

[9] 國家藥品監(jiān)督管理局醫(yī)療器械技術(shù)審評中心. 醫(yī)療器械網(wǎng)絡安全技術(shù)審查指導原則(第二版)(征求意見稿),2020.9

[10] 國家食品藥品監(jiān)督管理總局. 移動醫(yī)療器械注冊技術(shù)審查指導原則2017年第222號通告)2017.12

[11] 國家藥品監(jiān)督管理局醫(yī)療器械技術(shù)審評中心. 醫(yī)療器械人因設計技術(shù)審查指導原則(報批稿),2020.10

[12] 國家藥品監(jiān)督管理局醫(yī)療器械技術(shù)審評中心. 人工智能醫(yī)療器械臨床評價技術(shù)審查指導原則(草稿),2021.

[13] 國家藥品監(jiān)督管理局醫(yī)療器械技術(shù)審評中心. 肺結(jié)節(jié)CT影像輔助決策軟件注冊技術(shù)審查指導原則(草稿),2021.

[14] 國家藥品監(jiān)督管理局醫(yī)療器械技術(shù)審評中心. 肺結(jié)節(jié)CT影像輔助決策軟件臨床評價技術(shù)審查指導原則(草稿),2021.

[15] 國家藥品監(jiān)督管理局醫(yī)療器械技術(shù)審評中心. 眼底照片輔助決策軟件注冊技術(shù)審查指導原則(草稿),2021.

[16] 國家藥品監(jiān)督管理局醫(yī)療器械技術(shù)審評中心. 眼底照片輔助決策軟件臨床評價技術(shù)審查指導原則(草稿),2021.

[17] 國家藥品監(jiān)督管理局醫(yī)療器械技術(shù)審評中心. 深度學習輔助決策醫(yī)療器械軟件審評要點(2019年第7號通告),2019.7

[18] 國家藥品監(jiān)督管理局醫(yī)療器械技術(shù)審評中心. 肺炎CT影像輔助分診與評估軟件審評要點(試行)(2020年第8號通告),2020.3

[19] 國家食品藥品監(jiān)督管理總局. 醫(yī)療器械生產(chǎn)質(zhì)量管理規(guī)范2014年第64號公告),2014.12

[20] 國家藥品監(jiān)督管理局. 醫(yī)療器械生產(chǎn)質(zhì)量管理規(guī)范附錄獨立軟件2019年第43號通告),2019.7

[21] 國家藥品監(jiān)督管理局. 醫(yī)療器械生產(chǎn)質(zhì)量管理規(guī)范獨立軟件現(xiàn)場檢查指導原則(藥監(jiān)綜械管〔202057號),2020.5

[22] 國家藥品監(jiān)督管理局標準管理中心. 人工智能類醫(yī)用軟件產(chǎn)品分類界定指導原則(征求意見稿),2021.4

[23] 國家藥品監(jiān)督管理局標準管理中心. 輔助決策類醫(yī)用軟件產(chǎn)品分類界定指導原則(征求意見稿),2021.6

[24] 國家衛(wèi)生健康委員會. 人工智能輔助診斷技術(shù)管理規(guī)范(國衛(wèi)辦醫(yī)發(fā)〔20177號),2017.2

[25] 國家衛(wèi)生健康委員會. 人工智能輔助診斷技術(shù)臨床應用質(zhì)量控制指標(國衛(wèi)辦醫(yī)發(fā)20177),2017.2

[26] 國家衛(wèi)生健康委員會. 人工智能輔助治療技術(shù)管理規(guī)范(國衛(wèi)辦醫(yī)發(fā)20177),2017.2

[27] 國家衛(wèi)生健康委員會. 人工智能輔助治療技術(shù)臨床應用質(zhì)量控制指標(國衛(wèi)辦醫(yī)發(fā)20177),2017.2

[28] YY/T 0287-2017 醫(yī)療器械 質(zhì)量管理體系 用于法規(guī)的要求

[29] YY/T 0316-2016 醫(yī)療器械 風險管理對醫(yī)療器械的應用

[30] YY/T 0664-2020 醫(yī)療器械軟件 軟件生存周期過程

[31] YY/T 1406.1-2016 醫(yī)療器械軟件 1部分:YY/T 0316應用于醫(yī)療器械軟件的指南

[32] YY/T 人工智能醫(yī)療器械質(zhì)量要求和評價 1部分:術(shù)語(報批稿),2020.

[33] YY/T 人工智能醫(yī)療器械質(zhì)量要求和評價 2部分:數(shù)據(jù)集通用要求(報批稿),2020.

[34] YY/T 人工智能醫(yī)療器械質(zhì)量要求和評價 3部分:數(shù)據(jù)標注通用要求(草稿),2021.

[35] YY/T 人工智能醫(yī)療器械 肺部影像輔助分析軟件 算法性能測試方法(草稿),2021.

[36] AIMDICP-WG6-2020-001 基于眼底彩照的糖尿病視網(wǎng)膜病變輔助決策產(chǎn)品性能指標和測試方法,2020.7

[37] AIMDICP-WG6-2020-002 基于胸部CT的肺結(jié)節(jié)影像輔助決策產(chǎn)品性能指標和測試方法,2020.7

[38] AIMDICP-WG12-2021-001 醫(yī)學人工智能技術(shù)學名詞(草稿),2021.

[39] FDA. Computer-Assisted Detection Devices Applied to Radiology Images and Radiology Device Data, 2012.7

[40] FDA. Considerations for Computer-Assisted Detection Devices Applied to Radiology Images and Radiology Device Data, 2012.7

[41] FDA. Proposed Regulatory Framework for Modifications to Artificial Intelligence/Machine Learning (AI/ML) - Based Software as a Medical Device (SaMD) Draft, 2019.5

[42] FDA. Artificial Intelligence and Machine Learning(AI/ ML) Software as a Medical Device(SaMD) Action Plan, 2021.1

[43] 人工智能醫(yī)療器械創(chuàng)新合作平臺. www.aimd.org.cn

[44] IMDRF AIMD. www.imdrf.org/workitems/wi-aimd.asp

[45] ITU&WHO AI4H. www.itu.int/go/fgai4h



Copyright © 2018 醫(yī)療器械注冊技術(shù)咨詢 浙ICP備18025678號 技術(shù)支持:熙和網(wǎng)絡

新聞動態(tài)
日本韩国国产一级片| av天堂网在线播放| 久久久久久国产精品一区二区| 日韩中文少妇字幕| 中文字幕人妻国产91| 久久久精品亚洲一区二区三区| 国产97色在线免费看| 美女亚洲第一区二区| 欧洲国产伦久久久久久久| 亚洲熟妇欲色一区一区三区| 成人熟女人妻在线电影| 熟女人妻中文字幕欧美日韩| 丰满大屁股熟妇偷拍| 亚洲av在线观看播放| 国产又粗又爽又大又黄视频| 蜜桃视频日韩欧美北条麻妃| 日韩精品视频三级| 日韩av一区二区三区蜜桃| 中文字幕人妻熟女| 久久久亚洲熟妇熟女ⅹxx| 99蜜桃人妻免费在线看| 日韩av高清电影手机在线观看| 日本萝莉三级电影| 精品久久久havxxx蜜桃| 亚洲国产欧美精品久久久久| 国产又粗又猛又爽又黄的视频网站| 国产一二三区不在卡| 蜜桃久久久久久久久久久久| 国产日韩av网站在线观看| 日韩国产自拍偷拍| 大香蕉久久久久在线伊人| 欧美oldman色老头| 中文字幕人妻熟女一区二区| 人妻精品人妻一区二区三区四五| 久久久久久综合国语对白| 日本熟妇免费一区二区三区| 色婷婷 激情五月| 欧美v日韩v亚洲v最新| 大香蕉久久久久在线伊人| 麻豆成人免费视频一区二区| 精品久久久havxxx蜜桃| 亚洲欧美日韩wwwc0m666| 日本少妇好色视频| 999热这里只有精品视频| 欧美精品久久久999久久久| 九九热视频精彩在线| 欧美日韩私拍福利视频| 夜福利视频免费观看| 亚洲少妇人妻系列| 久久综合网站亚洲av| av中文字幕人妻丝袜在线| 91精品国产久久久久久| 2020国产成人精品视频vr| 精品91爱爱中文字幕| 人妻精品人妻一区二区三区四五| 午夜中文字幕a区b| 国产91精品天堂在线观看| 亚洲天堂国产免费| 天天操天天爱天天操天天爱| 国产一区二区三区四区99| 国产一二三区不在卡| 制服丝袜 亚洲一区二区三区| 超碰成人手机免费在线观看| 在线播放日韩av不卡| 白石茉莉奈一区二区av| 天天射天天干天天爱| 欧美熟妇大bbwsex| 丁香婷婷激情啪啪综合五月天| 色五五月五月开亚洲婷婷| 91夜色私人影院在线观看| 凹凸国产av熟女白浆| 久久 偷拍视频 亚洲| 日韩av高清电影手机在线观看| 日韩av中文一区| av一区二区在线观看完| 粉嫩一区二区三区在线观看| 黄色大片黄色一级大片| 国产又粗又猛又爽又视频| 亚洲精品国产呦系列| 国产一区二区三区在线h| 丝袜人妻丝袜美腿呻吟| 日本熟妇视频中文字幕有码| 蜜臀99精品国产高清在线观看| 国产成人精品日本亚洲777| 中文字幕成人乱码视频| 人妻还是视频在线播放| 蜜臀99精品国产高清在线观看| 麻豆xxx乱女少妇精品潘甜甜| 国产 日韩 精品 欧美| 精品国产18久久久久久依依影院| 麻豆精品国产一二三免费| 精品人妻午夜在线视频播放| 91人妻人人妻人人妻| 精东果冻视频在线观看| 日韩啪啪 中文字幕| 一区二区三区久久久av| 婷婷激情激情五月天| 久久久久久精品免费免费WE| 日韩成人在线观看视频| 在线免费观看完整版日韩av| 精品少妇久久一区二区三区| 最新在线不卡av| 视频一区二区三区入口| 久久99国产日韩精品久久99| 伊人99久久婷婷国产视频| 国产精品 国内视频| 中文av在线dvd| 成人亚洲一区二区三区在线观看| 亚洲国产av不卡婷婷| 欧美激情中文字幕一区二区| 日韩一级特黄大片亚洲| 天天操一操天天操天天操| 日韩 欧美 一区二区三区| 久久久亚洲熟妇一区二区三区| 婷婷激情综合一区二区| 免费在线观看视频久久| 少妇极品熟妇人妻丰满| 日本久久免费在线观看| 91亚洲精品在线免费观看| 91久久精品国产91久| 高清露脸爆极品白富美av| 伊人久久亚洲av综合网| 久久精品一区二区日韩| 五月婷婷中文字幕免费视频| 日韩啪啪 中文字幕| 色婷婷综合久久久久精品中文| 大吊视频一区二区三区四区| 久久综合色综合88| 丝袜人妻丝袜美腿呻吟| 熟女义母乱码中文字幕| 久久艹中文字幕丝袜| 污视频18在线观看| 国产日韩av一区二区三区四区| 一区二区三区欧美日韩欧美| 日本少妇趟水视频| 日韩欧美亚洲成人网| 天天插天天透天天婷婷| 国产 日韩 欧美片| 五月婷婷中文字幕免费视频| 日本超熟老熟妇网站| 777精品午夜一区二区毛片| 国产 欧美日韩在线视频| 熟女义母乱码中文字幕| 午夜精品久久久久久不卡欧美一级| 亚洲av毛片在线| 熟女阿高潮合集91| 国产精品久久人人爽人人 | 久久久亚洲视频播放| 老鸭窝在线视频免费看| 97精品久久久久中文字幕| 日本一区二区三区久久| 人妻还是视频在线播放| 久久鬼一本到综合88| 亚洲精品日韩在线观看17c| 日韩丝袜一区av| 国产99精品综合电影| 久久精品国产日韩欧美孕妇| 不卡在线一区二区三国产在线视频 | 久久久久久久久久久一级片| 午夜精品一区二区三区四区 | 污在线观看视频一区| 九九热在线播放视频| 乱码久久久久久久电影| 一本久道久久综合综合| 亚洲天堂电影成人| 婷婷在线免费视频观看| 亚洲午夜久久久久影院| 亚洲热青春视频在线| 大香蕉久久久久在线伊人| 伊人99久久婷婷国产视频| 国产一区二区三区四区99| 国产日韩av网站在线观看| 久久久亚洲熟妇熟女ⅹxx| 日韩成人在线观看视频| 少妇极品熟妇人妻丰满| 亚洲热青春视频在线| 97日韩在线免费视频网站| 成人精品一区久久久久| av一本久久久久久| 麻豆资源在线不卡观看| 综合久久精品久久精品| 老熟女av老熟女xx| 亚洲成人av熟妇人妻| 五月婷婷丰满少妇激情六月| 国产又粗又白又嫩又爽| 99精品福利一区二区| 日韩人妻精品免费| 亚洲少妇人妻系列| 日本熟妇免费一区二区三区| 一区二区三区日韩在线观看| 国产女人久久久久久| 精品成人一区二区三区在线不卡| 亚洲热青春视频在线| 女同精品人妻一区二区三区| 亚洲日本成人三级少妇| 91在线观看视频成人| 国产成人av在线无限观看| 男人的天堂精品久久| 蜜桃精品一区二区在线看| 丁香婷婷激情啪啪综合五月天| 亚洲午夜青青草久久久久| 天堂网免费在线电影| 2020精品极品色视频| 蜜臀av国内精品久久久夜夜嗨| 国产成人亚洲综合a∨| 亚洲情色电影网站| 蜜臀99精品国产高清在线观看| 亚洲高清电影一区| 国产亚洲成人av在线播放| 丁香六月激情啪啪啪啪啪啪啪| 最新欧美日韩一区二区| 久久久久久综合国语对白| 婷婷六月天综合久久| 深夜激情五月天久久视频| 激情视频网站久久婷婷| 人妻中文字幕视频| 欧美丰满熟妇乱xxxx| 69久久久久久波多野高潮| 天天操天天爱天天操天天爱| 日本少妇激情视频免费看 | 日本少妇人妻系列| 成人中文字幕在线免费看| 国产男人天堂久久精品| 色秘乱码一区二区三区在线| 日韩三级精品视频| 国产二区中文字幕91| 亚洲欧美日韩国产成人综合| 人人添人人妻人人爽夜欢视69| 最新中文字幕 av| 欧美激情在线久久久| 久久av少妇av高潮| 韩国三级伦理在线视频| 久久久久久99国产精品免费| 美女精品视频一区二区三区 | 五月婷婷开心之中文字幕| 国产成人久久婷婷精品流白浆| 色婷婷 激情五月| 日韩av精彩在线观看| 欧美日韩激情亚洲综合| 国产中文字幕不卡在线| 国产麻豆精品传媒av国产网址| 奇米成人av电影| 999热这里只有精品视频| 亚洲欧美日韩清纯唯美| 日韩视频高清在线观看精品| 丝袜国产日韩另类高清| 精品无人区无码乱码毛片国产| 91精品国产综合久久久蜜臀| 国产小视频在线播放网站 | 国产av一区两区三区| 全部免费特黄特色大片看片| 色婷婷av一区二区三区四川| 一本久道久久综合狠狠| 久久综合亚洲精品五区| 人妻少妇蜜桃视频欧美一区| 深夜激情五月天久久视频| 欧美一区激情大胆在线播放| 大香蕉大香蕉大香蕉最新| 国产一区二三区日韩精品| 中文字幕+乱码av| 在线国产偷拍自拍| 国产精品高潮呻吟久久av无限| 精品人伦一区二区三区四区蜜桃牛| 熟女少妇激情另类综合一区| 人人精品,人人妻| 久久精品久久久久久久久精品| 国产精品久久久久内射| 国产综合精品久久东京热| 国产精品久久人人爽人人| 亚洲精品久久久中文字| 日本六十路xxx| 性色av蜜臀av夜夜嗨av| 8日韩一级一片内射视9一| 国产av一区二区三区四区| 麻豆www久久国产精品| 亚洲欧美国产精品成人 | 91中文字幕在线观看网站| 91老司机在线视频| 国产av一区两区三区| 久久av红桃一区二区禁漫| 日韩国产中文字幕人妻| 五月婷婷激情久久久| 人人妻人人澡人人爽人人sex网| 日韩在线观看视频在线观看| 亚州欧美中文日韩| 熟女少妇水多一区二区三区| 亚洲熟妇aⅴ一区二区| 国产亚洲自拍色老头| 国产视频在线精品视频| 亚洲综合欧美另类尤物| 男人av资源在线观看| 色999日韩精品| 久久人妻少妇av嫩草| 午夜影院成人福利| brazzerss色欧美| 绝色少妇高潮3在线观看| 日韩三级电影大全中文字幕| 久久综合亚洲精品五区| 日日狠狠久久偷偷综合色| 午夜精品一区二区三区91| 成年人在线黄色片片网| 国产av一区二区三区免费观看| 中文字幕麻豆韩日在线| 风流老熟女一区二区三区av| 一区二区三区亚洲人妻| 日韩欧美中文亚洲一区| 九九热精品免费视频观看| 九九视频精品在线免费观看| 中文字幕一区二区不卡高清 | 人妻熟女av一区| 日韩中文亚洲字幕av| 天天看亚洲特黄大片| 日日狠狠久久偷偷综合色| 97超碰在线免费在线观看| 国产麻豆剧传媒精品国产av黑人| 日韩不卡av电影网| 久久久精品亚洲中文字幕| 欧美日韩极品妻在线观看| 91久久久福利视频| 日韩亚洲在线成人| 亚洲精品人码av| 日韩黄色影视大全| www,夜色,com| 黑夜中文字幕首页在线视频| 亚洲精品国产呦系列| 日本第一中文字幕官网| 99热在线只有精品6| 久久 偷拍视频 亚洲| 日韩在线观看视频在线观看| 国产小视频在线播放网站 | 大吊视频一区二区三区四区| 欧美亚日韩一区二区三区| 日本欧美人体视频| avtt天堂网久久精品| 欧美精欧美乱码一二三区| 日韩欧美激情免费无毒| 少妇人妻中文字幕一二三区| 18久久久久久久久久久久久| 国产午夜精品夜夜骚久久久久| 日韩中文少妇字幕| 欧美精品日韩精品亚洲| 精品综合久久久久久久91精品| 国产日本福利在线观看| 国产五月天在线视频| 日韩中文亚洲字幕av| jizzjizz在线观看亚洲| 午在线亚洲男人午在线| 九九热在线播放视频| 日韩精品巨乳中文字幕在线| 成人亚洲一区二区三区在线观看| 成人中文字幕在线免费看| 国产99福利小视频在线播放 | 日本女同性恋激情视频| 丝袜美腿aⅴ一区二区三区| 五月婷婷中文字幕免费视频| 久久综合网站亚洲av| 国产精品久久久精品三级| 久久综合色综合88| 日日狠狠久久偷偷综合色| 老熟女av老熟女xx| 人妻中文字幕视频| 五月免费婷婷影院在线| 日韩av精彩在线观看| 97超碰在线免费在线观看| 超碰国产在线观看91| 欧美一区激情大胆在线播放| 日日摸夜夜添精品人人妻人人| 高清不卡毛片免费观看| 97网在线视频免费播放| 亚洲av日韩在线免费观看| 人妻夜夜爽天天爽欧美色院| 精品综合久久久久久久91精品| 日本少妇激情视频免费看| 日韩一区二区免费av| 日b视频在线免费| 国产美女啪啪18禁| 日韩美女高潮视频网站| 五月婷婷开心之中文字幕| 91精品国产高清自在线| 亚洲精品高清视频在线观看| 久久久激情伦理在线视频| 国产精品中文字幕观看| 欧美激情一区二区三区在线播放| 亚洲男人天堂加勒比| 国产欧美日韩精品视频| 视频一视频二视频三| 99国产婷婷综合在线视频| 欧美日韩免费网站观看| 日韩欧美中文亚洲一区| 看吊视频一区二区三| 日韩三级电影大全中文字幕| 国产精品中文字幕免费| 久久久久亚洲成高清少妇| 五月天,色中文字幕| 国产小视频在线播放网站 | 国产九色91中文在线视频| 久久中文字幕视频字幕| 国产一区日本一区欧美一区| 国产欧美电影一区二区三区| 国产美女一区二区三区四区免费| 欧美色综合天天久久| 夏天香蕉如何保存能放更久| 精品高清在线观看免费观看| 老熟女av老熟女xx| 老鸭窝在线视频免费看| 天天插天天插天天伊人| 精品久久久havxxx蜜桃| 国产熟妇一区二区三区av| 最新在线不卡av| 亚洲情色天堂在线观看| 黑夜中文字幕首页在线视频| 美女亚洲第一区二区| 国产日韩欧美中文在线播放| 九九热在线免费视频观看| 好好的曰com视频在线| 久久中文字幕视频字幕| 国产农村妇女精品极品视频| 91成人一区二区三区| 国产麻豆剧传媒精品国产av黑人| 中文字幕一区三区二区国产| 国产又粗又硬又黄又爽的视频 | 五月婷婷之综合激情在线| 人妻少妇精品一二三区| 精品国产18久久久久久依依影院| 欧美人妻有码中文字幕| 国产美女精品传媒在线观看| 中文字幕欧美精品日韩有码| 日韩av不卡电影在线观看| 欧美日韩久久久久久久久| 亚洲天堂最新版www| 日韩草草草草草草草草草| 国产91久久久久久久免费| 2014天天操一操天天干一干| 国产午夜精品在线免费观看| 国产日韩av网站在线观看| 日韩色图在线影院| 精品人妻午夜在线视频播放| 91在线观看视频成人| 熟妇人妻无乱码中文字幕蜜桃| 海角91成人一区二区三区| 五月天综合av影院| 国产99福利小视频在线播放| 人妻少妇视频在线播放| 男人操女人的大逼逼| 国自产久久久久无码春色影视| 日韩在线视频播放一区二区三区| 日韩色图在线影院| 黑夜中文字幕首页在线视频| 玩弄少妇人妻500系列| 亚洲黄色天堂网站| 中文字幕人妻99| 久久久999视频视频| 最新亚洲黄片av电影| 色婷婷狠狠十八禁久久yy| 中文字幕人妻熟女av| 少妇人妻88久久中文字幕| 国产亚洲自拍色老头| 人人精品,人人妻| 午夜欧美久久久久久久久| 欧美日韩一级在线视频| 成熟丰满熟妇xxxxx丰满| 91香蕉久久久久久| 熟探花啪啪第十场av| 91国产丝袜在线播放九色| 1024你懂得av在线| 成人福利网久久久久久| 人妻熟女中文字幕在线观看| 12av一区二区三区| 东北熟女天天日天天添| 青青青青久久久久久| 人妻熟女中文字幕在线观看| 久久精品免费看网站| 777精品午夜一区二区毛片| 91精选一区二区三区久久久| 日本一本二本三本不卡区| 欲色av蜜臀av性色av三级| 全亚洲最大资源网| 国家卫健委要求各地设黄码医院| 精品999高清视频| 色片在线观看国产| 青青操成人免费视频| 男人做受天堂青青操| 天天看亚洲特黄大片| 精品人妻少妇系列女友系列| 亚洲美女色www色| 在线视频 一区 日| 成人国产av精品麻豆网| 亚洲三级自拍视频| 清纯唯美激情亚洲天堂| 中文字幕一区中文字幕| 奇米成人av电影| 日韩草草草草草草草草草| 岛国福利视频在线观看| 日韩三级精品视频| 免费欧美一二三区| 亚洲av毛片av| 五月天中文字幕在线婷婷| 老熟女av老熟女xx| 国产综合精品久久东京热| 91亚洲精品在线免费观看| 精品乱子伦一区二区| 7788人妻精品免费| 久久综合网站亚洲av| 在线日韩亚洲av电影| 91超碰在线一区二区三区| 3751色一区二区三区| 日韩影片 欧美激情| 绝色少妇高潮3在线观看| 熟妇人妻一区二区三区四区久久久| 99热在线免费这里只有精品| 日韩av成人一区二区三区在线看| 日韩人妻精品免费| 五月婷婷激情在线视频播放| 日韩亚洲在线成人| 亚洲国产成人精品网站 | 在线播放日韩av不卡| 午在线亚洲男人午在线| 激情综合激情五月俺也去淫淫| 亚洲综合欧美另类尤物| 激情久久综合精品久久人妻 | 999热国内精品在线免费视频| 久久亚洲在线精品视频| 在线免费观看完整版日韩av| 国产欧美日韩两性在线观看| 日韩精品巨乳中文字幕在线 | 日本女人性开放视频| 成人精品一区久久久久| 久久久激情伦理在线视频| 91久久人澡人人添人人爽网站| 久久夜夜一区二区三区日韩| 国产精品久久久久久7777| 亚洲熟妇欲色一区一区三区| 中文字幕欧美精品日韩有码| 自拍偷拍 国产精品| 又硬又粗又黄又猛又爽又持久| 最新99热这里只有精品| 人妻丰满熟妇av无码区ll| 国产精品亚洲av资源| 手机在线精品国产| 午夜精品一区二区三区四区| 亚州国产成人精品久久久| 亚洲成人av熟妇人妻| 人人妻人人爽久久久精品软件 | 日本熟妇久久久久久| 九九电影欧美精品免费看| 亚洲男人的天堂av2017| 深夜激情五月天久久视频| 波多野结衣乳喷高潮视频| 国产一区二区青青精品久久 | 东京热日韩电影一区二区| 日韩熟妇人妻中文字幕一区| 日韩中文字幕系列有码精品视频 | 黄色av成人在线观看| 欧美在线视频一区二区三区| 欧美日韩图区一区二区三区| 国产欧美日韩在线激情| 日韩av电影在线播放| 久久鬼一本到综合88| 99国产婷婷综合在线视频| 91夜色私人影院在线观看| 国产成人自拍视频网| 女人18毛片一区二区三区| 亚洲国产av不卡婷婷| 日本婷婷久久久久久久| 丰满的少妇2一区二区| 一区二区三区亚洲人妻| 国产中文字幕手机在线| 一区二区三区久久久av| 老熟女av老熟女xx| 国产美女精品传媒在线观看| 欧美人与动牲交欧美精品| 天天操天天色天天爱| 久久久久黄色片三级伦理| 精品少妇人妻一区二区三区四区 | 国产成人av在线观看入口| 91精品一区二区三区| 丝袜美腿aⅴ一区二区三区| 日韩中文字幕人妻在线视频| 久久99视频完整版| 91超碰在线一区二区三区| 最新在线不卡av| 国产麻豆剧传媒精品国产av黑人| 肥臀大腚沟肥臀大屁股一区二区| 日韩免费视频精品| 日本女人视频网站| 亚洲 欧美 在线 日韩| 久久久久亚洲成高清少妇| 2023av在线视频| 91中文字幕在线观看网站| 中文字幕精品一区二区三区完整版| 亚洲一区二区尻逼| 亚洲av综合有码| 2020国产成人精品视频vr| 97久久碰国产精品夜| 亚洲国产成人精品网站| 免费公开国产五十路视频| 日本人妻制服诱惑| 国产日本福利在线观看| 亚洲日本精品久久久久中文| 日韩一级特黄大片亚洲| 久久久91人妻精品一区二区三区| 国产精品亚洲av资源| 亚洲国产欧美精品久久久久| 人妻一区二区三区88av| 日日夜夜av资源| 国产成人久久婷婷精品流白浆| 日日狠狠久久偷偷综合色| 亚洲久久av97一区| 91在线国产精品免费观看| 国产精品 国内视频| 色婷婷一区二区中文字幕| 欧美久久久久人妻尻禄破| 久久久99视频在线免费观看| 国产精品久久人人爽人人| 日本少妇趟水视频| 激情综合激情五月俺也去淫淫| 国产日产在线观看系列av| 亚洲精选国产视频| 国产九色91中文在线视频| 日韩男女一进一出| 成人黄色免费在线播放| 国产一区日本一区欧美一区| 五月婷婷中文字幕综合网| 成年人黄色在线观看| 久久色综合久久88| 一本色道久久亚洲精品av| 97久久久久久精品人妻一区| 一区二区三区亚洲人妻| 日本女同性恋激情视频| 蜜桃成熟的在线观看视频| 日本一本二本三本不卡区| 亚洲激情在线电影观看| 91久久人澡人人添人人爽网站| 国产剧情在线观看一区二区| 狠狠做深爱婷婷综合激情| 欧美精品久久久999| 国产偷拍自拍久久久| 久久99在线视频观看| 日韩成人一区电影| 777久久久久久久| 久久久久久精品一级片| 久久精品综合一区二区三区| 不卡无在一区二区三区四区| 制服护士jk学生丝袜秘书套装| 亚洲av另类色图在线| 99 re热久久免费视频| 日本女人视频网站| 日本一本二本三本不卡区| 欧美日韩久久久久久久久| 亚洲热青春视频在线| 国产一区二区青青精品久久| 一区二区三区四区高清av| 亚洲丰满性熟妇ⅹxxoo| 天天射天天干天天爱| 一级av黄色大片| 人妻中文字幕一区二三区| 92午夜福利亚洲一区二区| 中文av在线dvd| 精品无人区无码乱码毛片国产| 国产精产国品一二三产区视频| 国产一区二区三区美女在线观看| av最新资源在线观看| 中文字幕亚洲日韩欧美一区| 亚洲日本精品久久久久中文| 人人妻人人澡人人爽人人sex网| 精品久久www人人爽人人| 欧美精品久久久999久久久| 亚洲av另类色图在线| 日本熟妇免费一区二区三区| 人妻激情麻豆综合| 日韩在线一二区不卡| 天天干天天操天天射网| aaa精品视频免费在线| www,夜色,com| 人妻熟女中文字幕电影| 123av中文字幕| 综合亚洲和欧洲一二三四区| 亚洲 欧美 在线 日韩| 中文字幕人妻99| 五月婷婷激情久久久| 中文字幕一区二区三区四区的| 五十路丰满大屁股老熟女| 国产一区二区三区四区99| 91精品一区二区三区| 欧美性色aⅴ欧美综合色| 深夜激情五月天久久视频| 欧美日韩精品在线色图| 天天躁日日躁狠狠躁av中文| 国产成年人精品在线看| 欧美日韩一级在线视频 | 精品国产av色哟哟| 欧美激情中文字幕一区二区| 久久久久9999免费视频| 九九热在线播放视频| 国产中文字幕不卡在线| 日韩午夜小视频合集| 99啪免费观看在线视频| 国产一国产精品免费播放| 亚洲欧美日韩wwwc0m666 | 91夜色私人影院在线观看| 99热在线只有精品6| 亚洲天堂 亚洲第一| 亚洲精选国产视频| 日本女人自摸视频| 亚洲激情国产专区| 日韩成人一区电影| 99精品国产高清久久久久久| 亚洲欧美日韩精品制服| 亚洲天堂电影成人| 日本在线中文字幕一区二区| 免费看av中文字幕| 新久久久久久久久久久免费| 久久久精品亚洲一区二区三区| 日本女人自摸视频| 国产又大又长又粗又猛又爽| 国产日韩av一区二区三区四区 | 国产区资源在线观看| 成人首发男人的天堂久久久 | 中文字幕日韩一区二区三区本高| 日韩美女高潮视频网站| 天天摸天天舔天天干天天操天天揉| 日韩av中文一区| 中文字幕一区二区不卡高清| 欧美美熟妇激情一区二区三区在线 | 操操操操操操操操操操操操影院 | 亚洲欧美精品色多多| 亚洲成人精品国产av| 日韩av高清电影手机在线观看| 色综合久久东京热| 日韩熟妇中文字幕| 日本久久激情视频| 日本东京热最新中文字幕| 久久精品国产亚洲精品166m| 产熟妇一区二区三区aⅴ网站| 蜜臀av精一区二区三区| 欧美激情综合色综合啪啪| 麻豆vpswindows精品| 777久久久久久久| 亚洲成人精品国产av| 丰满的少妇2一区二区| 欧美日韩国产精品欧美| 蜜桃精品一区二区在线看| 国产日韩在线成人免费视频| 久久99精品色婷婷| 日本不卡三区四区| 日韩丝袜一区av| 欧美日韩精品视频第一页| 日本女人性开放视频| 黄色大片黄色一级大片| 色综合久久久久久久综合| 黑夜中文字幕首页在线视频| 国产综合精品久久东京热| 天堂影院在线免费观看| 亚洲三级天堂在线| 日本精品久久久久中文字幕2| 婷婷激情综合一区二区| 日韩最新p片中文字幕av| 午夜伊人狠狠av| 青青青青青青在线播放视频 | 亚洲激情四射五月| 1024你懂得av在线| 国产麻豆剧传媒精品国产av黑人| 色婷婷av一区二区三区四川| 日韩一卡二卡三不卡| 97人澡人人添人人爽欧美| 国产日产在线观看系列av| 国产精品91久久久| 一本久久综合亚洲| 伊人久久中文字幕人妻| 久久久精品亚洲中文字幕| 国产一区二区三区精品公司| a阿v视频在线观看| 日本不卡三区四区| 97久久碰国产精品夜| 一区二区三区日韩在线观看| 九九热精品免费视频观看| 亚洲日本精品久久久久中文| 国产又大又长又粗又猛又爽| 亚洲激情电影一区| 欧美oldman色老头| 日b视频在线免费| 精品乱子伦一区二区| 五月天丁香一区二区三区 | 国产不卡最新在线视频| 久久久久久久久久久一级片| 成年人在线黄色片片网| 午夜精品男人天堂av| 亚洲 欧美 在线 日韩| 一本久道久久综合狠狠| 乱码久久久久久久电影| 91精品色综合久久久蜜桃臀| 亚洲国产区男人本色| 亚洲精选国产视频| 99久久热这里只有精品| 久久精品国产99久久久蜜桃| 全亚洲最大资源网| 午夜伊人狠狠av| 精品人妻少妇系列女友系列| 久久re视频在线免费观看| 少妇高潮久久久久久一代女皇| 欧美成人精品女人久久久| 精品久久久久久一区二| 日本最新的中文字幕| 久久精品免费看网站| 性高潮久久久久久久久久| 久久精品 视频一区| 激情五月天俺也去淫淫 | 国产av自拍亚洲区| 超碰成人手机免费在线观看| 熟探花啪啪第十场av| 制服丝袜 亚洲一区二区三区| 日韩av一级大片| 天天日天天干天天舔天天射| 91老司机在线视频| 国产一区二区三区高清视频| 国产视频日韩欧美一卡二卡| 欧美精品在线小视频| 亚久久久久久久久久久久久久| 国产精品稀缺资源av在线| 国产成人av在线观看入口| 亚洲天堂av日韩在线| 国产乱子伦一区二区三| av成人影院在线播放| 91精品一区二区三区| 亚洲高清精品人妻自拍| 精品人妻巨乳一区二区三区| 久久99热久久99这里有精品| 日韩精品视频三级| 天天躁日日躁狠狠躁av中文| 午夜影院成人福利| 婷婷影院久久激情五月天| 中文字幕一区二区三区四区的| 午夜精品久久久久久不卡欧美一级| 蜜桃视频日韩欧美北条麻妃| 白石茉莉奈一区二区av| 最新99热这里只有精品| 人妻中文字幕高清中出在线视频| 欧美亚洲一区二区三区视频| 黑夜中文字幕首页在线视频| 五月婷婷六月丁香动漫| 国产欧美日韩精品视频| 久久精品动漫一区二区三区| 久草在在线免视频在线观看| 亚洲男人天堂加勒比| 久久中文字幕视频字幕| 精品国产18久久久久久依依影院| 久久精品综合一区二区三区| 成人av在线中文字幕一区| 久久久激情伦理在线视频| 婷婷在线免费视频观看| 日韩国产中文字幕人妻| 2020精品极品色视频| 国产又大又长又粗又猛又爽| 一本色道久久综合亚洲av| 欧美人妻有码中文字幕| 久久久亚洲熟妇熟女内射一区| 日韩精品在线免费观看自拍视频| 99啪免费观看在线视频| 日本第一中文字幕官网| 国产一级av岛国片| 自拍偷拍图片专区| 999国产精品成人| 精品乱子伦一区二区| 国产综合精品久久99之一| 久久久久亚洲成高清少妇| 97久久国产综合网| 黑人操中国女人的逼| 精品高清在线观看免费观看| 日韩在线中文字幕免费| 中文字幕人妻福利一区| 国产精品久久久久久66| 国产97色在线免费看| chinese中国av| 白石茉莉奈一区二区av| 亚洲三级天堂在线| 激情视频网站久久婷婷| 欧美在线视频一区二区三区| 97精品久久久久中文字幕| 日韩av在线电影免费看| 久久精品国产99久久久蜜桃| 久久精品熟女亚洲AV色欲男同| 成人国内精品视频在线观看日韩| 大香蕉大香蕉大香蕉最新| 亚洲情色电影网站| 熟女一区二区三区在线观看视频| www久久久大香蕉| 一区二区三区欧美日韩欧美| 国产成人亚洲综合a∨| 熟女人妻中文字幕欧美日韩| 亚洲男人天堂网在线看| 久久综合色综合88| 成人自拍视频手机免费在线观看| 亚洲欧美日韩精品在线播放| 天天摸天天高潮天天爽| 国内精品国产三级国产a久久| 亚洲欧美日韩久久精品狠狠| 国产美女一区二区三区四区免费| 日本女同性恋激情视频| 欧美国产日韩久久一区| 久久99国产日韩精品久久99| 3751色一区二区三区| 麻豆成人免费视频一区二区| 熟探花啪啪第十场av| 成人国内精品视频在线观看日韩| 日韩精品久久日日躁夜夜| 日韩欧美一级二级三级| 丰满大屁股熟妇偷拍| 国内精品伊人久久久久人妇| 最新欧美日韩一区二区| 欧美成人精品女人久久久| 国产精品一区二区精品视频| 人妻人人澡人人爽夜夜爽| 女同精品人妻一区二区三区| 亚洲午夜久久久久影院| 国产香蕉特级一区二区三区| 一本色道久久综合亚洲av| 欧美激情一区二区三区综合| 黄色亚洲电影网站在线观看| 欧美激情一区二区三区在线播放| 国产成+人+综合+欧美 亚洲| av午夜久久久久久久| 97色伦综合在线欧美视频| 日韩草草草草草草草草草| 欧美日韩私拍福利视频| 亚洲国产欧美精品久久久久| 国产精品久久人人爽人人| 日本熟妇久久久久久| 精品91爱爱中文字幕| 日韩啪啪 中文字幕| 日韩美女高潮视频网站| 国产亚洲精品久久久久久妇女| 国产日韩欧美中文在线播放| 97超碰在线公开在线看免费| 99久在线视频观看| 午夜香蕉一区二区三区| 成年人在线黄色片片网| 日韩av高清无打码在线观看| 国产中文字幕不卡在线| 中文字幕欧美精品日韩有码 | 日韩av有码在线观看| 亚洲熟妇欲色一区一区三区| 精品国产av色哟哟| 欧美日韩特一级大片| 亚洲日本精品久久久久中文| 丰满少妇高潮久久久久久| 91精选一区二区三区久久久| 91人妻无码成人精品一区二区| 国产成人精品在线久久| 中文字幕精品一区二区三区完整版| 超碰97人人看人人爱| 亚洲欧美日韩国产成人综合| 99热这里只有精品色| 在线免费看的黄片视频| 亚洲午夜久久久国产精品| 美日韩av一区二区| 亚洲激情诱惑美女| 亚洲三级天堂在线| 日韩欧美亚洲精品综合| 五十路丰满大屁股老熟女| 国产一国产精品免费播放| 91区二区三区免费看| 中文字幕人妻99| 精品久久久久久一区二| 一区二区三区日韩在线观看| 日韩国产另类欧美在线观看| 成人精品电影一区二区三区 | 色婷婷中文字幕一区二区| 日韩亚洲欧美在线com| 人妻丰满熟妇av无码区ll| www.777麻豆网| 伊人久久亚洲av综合网| 制服护士jk学生丝袜秘书套装| 久久久久黄色片三级伦理| 日韩不卡一区高清视频| 日b视频在线免费| 久久精品国产字幕高潮37| 欧美精品久久久久久aa| 国产农村妇女精品极品视频| 操操操操操操操操操操操操影院 | 2020精品极品色视频| 日本六十路xxx| 国产精品稀缺资源av在线| 成人自拍视频手机免费在线观看| 麻豆碰精品麻豆自拍| 欧美日韩国产精品合集| 国产日韩av一区二区三区四区 | 欧美成人一区二区免| 欧美日韩人妻最新入口| 人妻熟女av一区| 国产尤物在线视精品在亚洲| 自拍偷拍亚洲专区图片| 日韩av区一区二区三| 五月婷婷激情久久久| 人人妻人人爽久久久精品软件| 99精品人妻一区二区三区| 在线免费看的黄片视频| 日韩激情视频在线高清| 国产一区二三区日韩精品| 天堂在线男女av| 欧美熟妇大bbwsex| 九九热在线播放视频| 天天看亚洲特黄大片| 亚洲av香蕉高清在线播放| 日本久久在线一区| 91青青草手机视频在线观看| 一道精品视频一区二区三区视频| 美女精品视频一区二区三区| 国产精品久久久久久久久密臀| 日韩成人在线观看视频| 久久精品免费看网站| 丰满少妇高潮久久久久久| 精品成人一区二区三区在线看片| 色99色.com| 2020精品极品色视频| 国产精产国品一二三产区视频| 少妇极品熟妇人妻丰满| 一本色道久久综合亚洲av| 凹凸国产av熟女白浆| 九九热在线免费视频观看| 亚洲一级一级真人黄大片| 99热这里只有精品色| 日韩av区一区二区三| 少妇人妻一级视频观看| 欲色av蜜臀av性色av三级| 国产麻豆剧传媒精品国产av黑人| 久久精品美女性感国产综合av | 香蕉av蜜臀av一区二区| 国产视频在线看一区| 激情五月综合婷婷欧美| 亚洲高清电影一区| 日韩黄色影视大全| 蜜桃av一区二区视频| 色9933av精品一区| 国产午夜精品在线免费观看| 91中文字幕在线观看网站| 日韩av成人一区二区三区在线看 | 中国巨乳美女的性与色| 日韩中文少妇字幕| 欧美日韩私拍福利视频| 国内一区二区三区在线观看| 熟女少妇激情另类综合一区| 久久亚洲在线精品视频| 中日韩精品无码一区二区三区| 久久精品视频免费视频| 国产偷拍自拍久久久| 一本色道久久亚洲精品av| 亚洲欧美日韩精品在线播放 | 精品一区二区三区熟女少妇| 久久成人熟女热视频| 日本熟妇色97一本在线观看| 日本久久在线一区| 3d动漫精品啪一区二区免费| 日韩欧美中文亚洲一区| 日韩啪啪 中文字幕| 久久天天躁狠狠躁夜夜躁免费观看| 久久综合结合久久狠狠狠97色| 久久大伊人精品视频| 中文字幕第一页婷婷| 色五五月五月开亚洲婷婷| 九九九九九九久久久久久久久久| 国产伦理一区二区久久久久久 | 精品国产av色哟哟| 日韩久久久久久久久久久久久| 国产久精品搜索视频| 亚洲人午夜精品射精日韩| 中文字幕日本激情| 日韩国产中文字幕人妻| 深夜激情五月天久久视频| 人妻精品区三免费视频| 成人国内精品视频在线观看日韩| 2xpxp在线视频| 中文字幕第一页婷婷| 日本少妇好色视频| 一本色道久久综合亚洲av| 欧美精产国品一二三类产品| 99国产婷婷综合在线视频| 国产不卡最新在线视频| 7788人妻精品免费| 色秘乱码一区二区三区在线| 午夜激情四射88| 国产精品美女丝袜一区二区| 中文字幕久久人妻被中出一区精品| 国产农村妇女精品极品视频| 精品久久久久久久毛片微露脸| 国语自产精品视频在线播放| 男人操女人的大逼逼| 亚洲午夜青青草久久久久| 成人首发男人的天堂久久久| 日韩精品日韩精品日韩| 日韩男叉女下面视频| 91精选一区二区三区久久久| avtt天堂网久久精品| 少妇人妻一级视频观看| 污在线观看视频一区| 久久久久69成人精品视频| 在线日韩av永久免费观看 | 国产一区二区三区四区99| 制服丝袜 欧美日韩| 天堂影院在线免费观看| 日韩三级电影大全中文字幕| 婷婷麻豆国产在线观看| 福利视频一区二区 三区| 久久综合九色综合欧洲98| 久久999精品久久久久久| 蜜桃久久久久久久91| 国产一区二区青青精品久久| 熟女一区二区三区在线观看视频| 国产一区二区三区精品公司| 亚洲一区二区五十路熟女激情中出| 青青青在线观看国产| 日韩亚洲欧美在线com| 成人蜜桃美臀九一一区二区三区| 亚洲免费在线久久92| 2xpxp在线视频| 天天插天天透天天婷婷| 最新99热这里只有精品| 女人18毛片一区二区三区| 91香蕉久久久久久| 日本女人自摸视频| 蜜桃久久久久久久91| 丁香婷婷色五月激情综合深爱 | 国产综合精品久久99之一| av一本久久久久久| 国产又大又长又粗又猛又爽| 日韩三级精品视频| 97成人在线视频免费播放| 热久久精品国99热| 日韩欧美国产另类在线观看| 山东熟女高潮嗷嗷叫| 欧美一区二区男人天堂| 夜夜操夜夜操天天操天天操| 日韩啪啪 中文字幕| 乱码久久久久久久电影| 国产视频日韩欧美一卡二卡| 亚洲五月天在线中文字幕在线| 99在线观看视频在线播放| 日韩欧美亚洲三四区| 日韩欧美国产一卡一区| 久久久999国产视频| a阿v视频在线观看| 国产精品三级久久久久精品大全| 精品国产日韩高清毛片| 天天色天天操天天综合网| 国产av一区两区三区| 中日亚洲欧美激情在线| 国产欧美日韩精品视频| 国产精品99久久黑人免费| 亚洲激情在线电影观看| 久久天天躁狠狠躁夜夜av| 日韩欧美色视频在线| 精品国产av色哟哟| 亚洲av成人无网码天堂| 国产精品99久久黑人免费| 亚洲激情网友自拍| 亚洲成人免费av在线播放| 日韩欧美成年一级| 精东果冻视频在线观看| 欧洲国产伦久久久久久久| 国产精品99久久黑人免费| 制服护士jk学生丝袜秘书套装| 97久久国产综合网| 国产美女精品传媒在线观看| 精品尤物女神在线观看| 中文字幕日韩一区二区三区本高 | 丝袜美腿aⅴ一区二区三区| 亚洲国产日韩精品视频| 9999久久久久久久久| 欧美一区二区精品系列| 欧美美熟妇激情一区二区三区在线| 日韩毛片在线视频播放| 激情久久综合精品久久人妻 | 精品人妻巨乳一区二区三区| 色八戒一区二区三区四区| 久久va视频免费观看| 欧美日韩免费网站观看| 国产69堂一区二区三区在线观看| 风流老熟女一区二区三区av | 蜜桃臀久久久蜜桃臀| 国产一区二区青青精品久久 | 青青青青青青在线播放视频 | 国产又粗又猛又爽又黄又大| 最新欧美日韩一区二区| 欧美一区激情大胆在线播放| 国产精品国产成人生活片 | 午夜影院在线精品| 日韩网站在线免费观看| 视频一区二区三区入口| 亚洲午夜青青草久久久久| 2020精品极品色视频| 日日爱亚洲一区av| 欧美一区二区三区午夜91| 免费一区二区三区视频| 国产少妇精品7777| av一本久久久久久| 黄色大片黄色一级大片| 亚洲欧美在线色视频| 中文字幕人妻在线视频| 亚洲国产一区二区三区久久久| 国产成人自拍视频网| 97超碰精品在线观看| 亚洲丝袜在线欧美| 国产精品高潮呻吟久久av无限| 欧美中文字幕在线观看免费| av的天堂男人的天堂| 一区二区三区亚洲人妻| 国产又粗又白又嫩又爽| 91一区区二区三区在线观看91| 日本韩国三级电影片| 天天操天天色天天爱| 麻豆人妻少妇精红桃视频| 五月婷婷大香蕉日韩| 最新中文字幕日韩av| 产熟妇一区二区三区aⅴ网站 | 亚洲av毛片av| 婷婷影院久久激情五月天| 天天干,天天日,天天色| 成人福利网久久久久久| 欧美精品久久久久久aa| 91色porny在线| 久久综合精品伊人色欲17| 成年人在线黄色片片网| 久久的精品一区二区三区| 97超碰在线免费在线观看| 亚洲激情国产专区| 亚洲三级av在线播放| 国产精品年轻夫妻激情啪啪| 久久99在线观看视频| 一本色道久久88综合亚洲精品是 | 国产亚洲成人av在线播放| 中文字幕一区三区二区国产| 欧美久久久久人妻尻禄破| 欧美激情日韩精品久久久| 日韩精品在线免费观看自拍视频| 丁香六月激情啪啪啪啪啪啪啪| 五月激情四射综合| 精品国产日韩高清毛片| 久久视频精品在线视频| 自拍偷拍另类色图| 五月婷婷丁香花开网| 人妻人人干青青草| 天天干天天操天天射天天| 国产一区二区美女视频| 五月婷婷激情在线视频播放| 男人操女人的大逼逼| 国产精品日视频不卡| 欧美成人一区二区免| 日本萝莉三级电影| 国产 日韩 欧美片| 国产综合精品久久东京热| 亚洲av另类色图在线| 中中文字幕五月婷婷| 污在线观看视频一区| 久久精品国产亚洲精品166m| 亚洲欧美日韩国产都市激情| 一区二区三区四区五区日韩| 亚洲av毛片av| 日韩欧美亚洲精品综合| 日本女人自摸视频| 99久草精品视频在线| 亚洲欧美日韩久久精品狠狠| 久久精品熟女亚洲AV色欲男同| 亚洲成人av熟妇人妻| 九九九九九九久久久久久久久久 | 久久久久黄色片三级伦理| 欧美美熟妇激情一区二区三区在线 | 色八戒一区二区三区四区| 999热这里只有精品视频| 久久久久久综合国语对白| 日韩中文字幕一二| 成人中文字幕在线免费看 | 亚洲天堂国产免费| 少妇人妻一级视频观看| 中国巨乳美女的性与色| 激情五月天俺也去淫淫 | 不卡无在一区二区三区四区| 久久av红桃一区二区禁漫| 日韩精品有码自拍| jizzjizz在线观看亚洲| 天天插天天透天天婷婷| 日韩一级特黄大片亚洲| 国产偷拍自拍久久久| 精品久久久久久久毛片微露脸| 国产又粗又猛又爽又黄的视频网站| 国产日韩在线成人免费视频| 亚洲 欧美 在线 日韩| 国产成人自拍视频网| 日韩av有码在线观看| 亚洲欧美日韩清纯唯美| 自拍偷拍 国产精品| 精品久久久久久久久久久换人妻 | 狠狠做深爱婷婷综合激情| 成人中文字幕在线免费看| 色五五月五月开亚洲婷婷| 伊人久久中文字幕人妻| 五月婷婷亚洲综合色| 国产女人久久久久久| 日本少妇激情视频免费看| 国产又粗又硬又大又长又爽| 日韩中文亚洲字幕av| 在线观看日产av网站| 在线观看国产一区亚洲| 日韩不卡一区高清视频| 加勒比东京热综合久久| 久久久9视频免费观看| 日b视频在线免费| 久久久亚洲熟妇熟女内射一区| 国产av天堂亚洲国产av在线| 久久va视频免费观看| 国产一区二区三区在线观看网站| 日韩人妻字幕在线| 91超碰精品日日躁夜夜躁欧美| 久久精品一区二区日韩| 自拍偷拍另类色图| 国产成+人+综合+欧美 亚洲| 在线免费观看完整版日韩av| 最新欧美日韩一区二区| 波婷五月激情五月天| 91精品一区二区三区91人妻| 中文av在线dvd| 国产91精品天堂在线观看| 亚洲激情网友自拍| 午夜影院在线精品| 欧美日韩国产专区一区| 日韩国产自拍偷拍| 蜜臀av国内精品久久久夜夜嗨| 国产精品日视频不卡| 欲色av蜜臀av性色av三级| 亚洲丝袜在线欧美| 日韩欧美一级二级三级| 一本色道久久综合亚洲av| 最新日韩av手机在线观看| 自拍偷拍亚洲专区图片| 99精品福利一区二区| 日韩亚洲欧美在线com| 99久久精品视频免费| 两个97年失恋疗伤在线观看| 日日爱亚洲一区av| 性高潮久久久久久久久久| 国产91精品天堂在线观看| 国产欧美日韩精品视频| 999国内精品视频在线观看 | 绿帽人妻精品一区二区粉嫩av| 99热在线精品这里只有精品| 青青草万部激情影院| 91成人资源在线资源站| 风流老熟女一区二区三区av| 日韩男女一进一出| 熟女一区二区三区在线观看视频| 亚洲 欧美 在线 日韩| 国产又大又长又粗又猛又爽| 欧美激情精品久久久小说| 大香蕉久久久久在线伊人| 91精品一区二区三区| 黄色av网站在线观看免费| 91精品视频一区二区| 久久亚洲午夜一区二区| 看吊视频一区二区三| 国产又粗又猛又爽又视频| 97超碰在线观看日韩| 久久久激情伦理在线视频| 亚洲午夜久久久久影院| 日本女同性恋激情视频| 亚洲熟妇欲色一区一区三区| 91在线国产精品免费观看| 久久999精品久久久久久| 999久久久视频黄色| 看吊视频一区二区三| 蜜桃视频日韩欧美北条麻妃| 日韩中文字幕一二| 精品少妇视频一区二区三区| 国产精品免费视频观看露| 中文日韩欧美第一页| 高清一区二区三区四区免费视频 | av中文字幕在线观看播放| 国产精品稀缺资源av在线| 久久久亚洲熟妇一区二区三区| 乱码午夜久久久99| 8日韩一级一片内射视9一| 3d动漫精品啪一区二区免费| 91色porny在线| 婷婷激情网五月天| 国产午夜精品夜夜骚久久久久| 精品丝袜久久久久久人妻懂色| brazzerss色欧美| 日韩黄色大片中文字幕| 久久综合精品伊人色欲17| 亚洲国产欧美精品久久久久| 天天操天天爱天天操天天爱| 久久久国产精品视频在线| 国产精品99久久黑人免费| 久久久久久伊人婷婷| 亚洲久久av97一区| 日日夜夜av资源| 日韩一区视频播放| 天天干天天玩天天操| 不卡一二三区在线视频| 日韩在线一二区不卡| 91av一区二区三区在线观看| 婷婷激情激情五月天| 欧美日韩激情亚洲综合| 欧美激情日韩精品久久久| 久久天天躁狠狠躁夜夜av| 国产一二三不卡视频| 国产五月天在线视频| 国产精品中文字幕观看| 亚洲欧美日韩久久精品狠狠| 97超碰在线观看日韩| 高清露脸爆极品白富美av| 9999久久久久久久久| 亚洲av日韩在线免费观看| 黄色大片黄色一级大片| 国产999精品999| 中中文字幕五月婷婷| 亚洲熟妇欲色一区一区三区| 国产精品久久久久久成人免费| 中文字幕一区二区人妻5566| 最新国产精品av| 国产91精品天堂在线观看| 欧美色综合天天久久| 在线视频中文字幕 日韩| 亚洲成人三级黄色片| 男人的天堂精品久久| 国产av自拍亚洲区| 熟女少妇一区二区在线观看| 亚洲一区二区三区四区五区福利| 深夜激情五月天久久视频| 最新中文字幕日韩av| 日本女人自摸视频| 精品国产乱码久久久久久精东| 欧美一区激情大胆在线播放| 日韩av成人一区二区三区在线看 | 麻豆vpswindows精品| 精品91爱爱中文字幕|