Core ML 分為計算機視覺、自然語言、語言（轉文字）、聲音識別等框架，分別負責實現對應功能。用戶可以通過 Core ML 在手機上創建模型，并整合到 APP 當中，這意味著 APP 可以使用 Core ML API 和用戶數據進行模型預訓練、微調和推理。Core ML 會綜合利用 CPU、GPU 和神經網絡引擎，同時最大程度地減小內存占用空間和功耗，來優化設備端性能。由于模型嚴格地在用戶設備上，因此無需任何網絡連接，有助于保護用戶數據的私密性和 App 的響應速度。