目标拍摄跟踪开发指南

从API version 20开始，支持使用机械体设备控制器，提供更丰富的拍摄体验，如目标跟踪和自动构图等专业功能，支持第三方应用。

目标拍摄跟踪功能通过机械体设备实现人脸和物体的自动化跟踪，提升拍摄质量和用户体验，助力开发者构建更自动化、高效的拍摄解决方案。

接口介绍

机械体设备控制器API的接口使用指导请参见MechanicManager API参考。

接口名	描述
on(type: 'attachStateChange', callback: Callback<AttachStateChangeInfo>): void	注册attachStateChange事件的回调监听，等待连接状态变化。说明：从API version 20开始支持。
off(type: 'attachStateChange', callback?: Callback<AttachStateChangeInfo>): void	取消注册attachStateChange事件的回调监听。说明：从API version 20开始支持。
getAttachedMechDevices(): MechInfo[]	获取已连接的机械体设备列表。说明：从API version 20开始支持。
setCameraTrackingEnabled(isEnabled: boolean): void	启用或禁用摄像头跟踪。说明：从API version 20开始支持。
getCameraTrackingEnabled(): boolean	检查是否启用了摄像头跟踪。说明：从API version 20开始支持。
on(type: 'trackingStateChange', callback: Callback<TrackingEventInfo>): void	注册trackingStateChange事件的回调监听。说明：从API version 20开始支持。
off(type: 'trackingStateChange', callback?: Callback<TrackingEventInfo>): void	取消注册trackingStateChange事件的回调监听。说明：从API version 20开始支持。
setCameraTrackingLayout(trackingLayout: CameraTrackingLayout): void	设置摄像头跟踪布局。说明：从API version 20开始支持。
getCameraTrackingLayout(): CameraTrackingLayout	获取此机械设备摄像头跟踪布局。说明：从API version 20开始支持。
on(type: 'rotationAxesStatusChange', callback: Callback<RotationAxesStateChangeInfo>): void	注册rotationAxesStatusChange事件的回调监听。说明：从API version 20开始支持。
off(type: 'rotationAxesStatusChange', callback?: Callback<RotationAxesStateChangeInfo>): void	取消注册rotationAxesStatusChange事件的回调监听。说明：从API version 20开始支持。

开发步骤

开发准备

支持Mechanic Kit协议的机械体设备。
若要验证目标跟踪功能，主设备的相机驱动必须支持人脸检测。
请将SDK更新到API 20或以上版本，具体操作参见更新指南。
请确保机械体设备已通过蓝牙与主设备连接。

管理设备连接状态

确保机械体设备连接或断开时，应用能及时响应，支持设备连接状态的动态管理。

导入机械体设备管理模块。

import { mechanicManager } from '@kit.MechanicKit';

获取已连接的机械体列表。

let savedMechanicIds: number[] = [];

try {
const devices = mechanicManager.getAttachedMechDevices();
console.info('Connected devices:', devices);

devices.forEach(device => {
    console.info(`Device ID: ${device.mechId}`);
    console.info(`Device Name: ${device.mechName}`);
    console.info(`Device Type: ${device.mechDeviceType}`);
    
//保存设备类型为GIMBAL_DEVICE的设备的MechId
    if (device.mechDeviceType === mechanicManager.MechDeviceType.GIMBAL_DEVICE) {
    savedMechanicIds.push(device.mechId);
    console.info(`GIMBAL_TYPE device saved ID: ${device.mechId}`);
    } else {
    console.info(`Skip non-gimbal devices: ${device.mechId}`);
    }
});

console.info('List of saved gimbal device IDs:', savedMechanicIds);
} catch (err) {
console.error('Error getting attached devices:', err);
}

监听设备的连接状态变化，以便及时响应。

const attachStateChangeCallback = (info: mechanicManager.AttachStateChangeInfo) => {
if (info.state === mechanicManager.AttachState.ATTACHED) {
    console.info('Device attached:', info.mechInfo);
    // 执行设备连接的相关操作
    handleDeviceAttached(info.mechInfo);
} else if (info.state === mechanicManager.AttachState.DETACHED) {
    console.info('Device detached:', info.mechInfo);
    // 执行设备断开的相关操作
    handleDeviceDetached(info.mechInfo);
}
};

// 注册监听
mechanicManager.on('attachStateChange', attachStateChangeCallback);

处理设备的连接与断开的事件。

function handleDeviceAttached(mechInfo: mechanicManager.MechInfo) {
console.info(`New device is connected: ${mechInfo.mechName} (ID: ${mechInfo.mechId})`);
savedMechanicIds.push(mechInfo.mechId);
// To do sth.
}

function handleDeviceDetached(mechInfo: mechanicManager.MechInfo) {
console.info(`Device disconnected: ${mechInfo.mechName} (ID: ${mechInfo.mechId})`);
savedMechanicIds.filter(id => id !== mechInfo.mechId);
// To do sth.
}

取消连接状态的监听。

// 取消连接状态的监听
mechanicManager.off('attachStateChange', attachStateChangeCallback);

控制设备目标跟踪拍摄

启用目标拍摄功能后，设备将自动识别人脸并进行跟踪拍摄。

启用摄像头的目标拍摄功能。

try {
//检查前判断savedMechIds不为空
// 检查跟踪状态
const isEnabled = mechanicManager.getCameraTrackingEnabled();

if (isEnabled == false) {
    // 开启摄像头跟踪
    mechanicManager.setCameraTrackingEnabled(true);
    console.info('Camera tracking enabled');
}

console.info('Is tracking currently enabled:', isEnabled);
} catch (err) {
console.error('Failed to enable camera tracking:', err);
}

监听相机跟踪状态的变化。

const trackingStateCallback = (eventInfo : mechanicManager.TrackingEventInfo) => {
switch (eventInfo.event) {
    case mechanicManager.TrackingEvent.CAMERA_TRACKING_USER_ENABLED:
    console.info('The user has enabled camera tracking');
    handleTrackingEnabled();
    break;
    case mechanicManager.TrackingEvent.CAMERA_TRACKING_USER_DISABLED:
    console.info('The user has disabled camera tracking');
    handleTrackingDisabled();
    break;
    case mechanicManager.TrackingEvent.CAMERA_TRACKING_LAYOUT_CHANGED:
    console.info('Tracking layout has changed');
    handleLayoutChanged();
    break;
}
};

// 注册跟踪状态监听
mechanicManager.on('trackingStateChange', trackingStateCallback);

处理跟踪状态变化事件。

function handleTrackingEnabled() {
console.info('Handling camera tracking enable events');
// 可以在此处更新UI状态
updateTrackingUI(true);
}

function handleTrackingDisabled() {
console.info('Handling camera tracking disabled events');
// 可以在此处更新UI状态
updateTrackingUI(false);
}

function handleLayoutChanged() {
try {
    const newLayout = mechanicManager.getCameraTrackingLayout();
    console.info('New Tracking Layout:', newLayout);
    // 根据新布局更新UI
    updateLayoutUI(newLayout);
} catch (err) {
    console.error('Failed to get new layout:', err);
}
}

function updateTrackingUI(enabled: boolean) {
// 更新UI显示跟踪状态
// To do sth.
console.info('Update tracking UI status:', enabled);
}

function updateLayoutUI(layout : mechanicManager.CameraTrackingLayout) {
// 更新UI显示布局状态
// To do sth.
console.info('Update layout UI:', layout);
}

取消跟踪状态变化的监听。

// 取消跟踪状态监听
mechanicManager.off('trackingStateChange', trackingStateCallback);

// 或者取消所有跟踪状态监听
mechanicManager.off('trackingStateChange');

调试验证

请按照以下步骤调试验证，确保机械体设备管理功能正常：

建立连接

确保机械体与开发设备已通过蓝牙配对并连接。
将开发设备放置在机械体设备上。

功能验证步骤

设备列表查询：调用 getAttachedMechDevices 接口查询当前已连接的机械体设备列表，验证设备是否正确识别。
目标拍摄跟踪：调用 setCameraTrackingEnabled 启用摄像头目标跟踪功能，使用 getCameraTrackingEnabled 验证状态，测试设备是否能跟随目标自动旋转。

验证结果说明

如果 getAttachedMechDevices 返回设备列表，表示设备识别成功。
如果 getCameraTrackingEnabled 返回真，目标拍摄跟踪启用成功。应用打开相机后，画面中出现人脸时，设备会跟随人脸转动。

你可能感兴趣的鸿蒙文章

openharmony 鸿蒙 Readme-CN

openharmony 鸿蒙 mechanic-kit-intro

openharmony 鸿蒙 rotation-control-guide-sys

openharmony 鸿蒙 camera-tracking-guide