kinect基本手势识别Word文档格式.docx
《kinect基本手势识别Word文档格式.docx》由会员分享,可在线阅读,更多相关《kinect基本手势识别Word文档格式.docx(37页珍藏版)》请在冰豆网上搜索。
X、Y、Z是一个小数,代表待转换的用户手所在位置的宽度,高度和深度值。
Cursor用来存储CursorAdorner类的实例,后面将会讨论,下面的代码展示了KinectCursorEventArgs类的基本结构,其中包含了一些重载的构造器。
publicclassKinectCursorEventArgs:
RoutedEventArgs
{
publicdoubleX{get;
set;
}
publicdoubleY{get;
publicdoubleZ{get;
publicCursorAdornerCursor{get;
publicKinectCursorEventArgs(doublex,doubley)
{
X=x;
Y=y;
publicKinectCursorEventArgs(Pointpoint)
X=point.X;
Y=point.Y;
}
RoutedEventArgs基类有一个构造函数能够接收RoutedEvent作为参数。
这是一个有点特别的签名,WPF中的UIElement使用这种特殊的语法触发事件。
下面的代码是KinectCursorEventArgs类对这一签名的实现,以及其他一些重载方法。
publicKinectCursorEventArgs(RoutedEventroutedEvent):
base(routedEvent){}
publicKinectCursorEventArgs(RoutedEventroutedEvent,doublex,doubley,doublez)
:
base(routedEvent){X=x;
Z=z;
}
publicKinectCursorEventArgs(RoutedEventroutedEvent,Pointpoint)
base(routedEvent){X=point.X;
publicKinectCursorEventArgs(RoutedEventroutedEvent,Pointpoint,doublez)
publicKinectCursorEventArgs(RoutedEventroutedEvent,objectsource)
base(routedEvent,source){}
publicKinectCursorEventArgs(RoutedEventroutedEvent,objectsource,doublex,doubley,doublez)
base(routedEvent,source){X=x;
publicKinectCursorEventArgs(RoutedEventroutedEvent,objectsource,Pointpoint)
base(routedEvent,source){X=point.X;
}publicKinectCursorEventArgs(RoutedEventroutedEvent,objectsource,Pointpoint,doublez)
接下来,要在KinectInput类中创建事件来将消息从KinectCursorManager中传递到可视化控件中去。
这些事件传递的数据类型为KinectCursorEventArgs类型。
在KinectInput类中添加一个KinectCursorEventHandler的代理类型:
(1)添加一个静态的routedevent声明。
(2)添加KinectCursorEnter,KinectCursorLeave,KinectCursorMove,KinectCursorActive和KinectCursorDeactivated事件的add和remove方法。
下面的代码展示了三个和cursor相关的事件,其他的如KinectCursorActivated和KinectCursorDeactivated事件和这个结构相同:
publicdelegatevoidKinectCursorEventHandler(objectsender,KinectCursorEventArgse);
publicstaticclassKinectInput
publicstaticreadonlyRoutedEventKinectCursorEnterEvent=EventManager.RegisterRoutedEvent("
KinectCursorEnter"
RoutingStrategy.Bubble,
typeof(KinectCursorEventHandler),typeof(KinectInput));
publicstaticvoidAddKinectCursorEnterHandler(DependencyObjecto,KinectCursorEventHandlerhandler)
((UIElement)o).AddHandler(KinectCursorEnterEvent,handler);
publicstaticvoidRemoveKinectCursorEnterHandler(DependencyObjecto,KinectCursorEventHandlerhandler)
((UIElement)o).RemoveHandler(KinectCursorEnterEvent,handler);
publicstaticreadonlyRoutedEventKinectCursorLeaveEvent=EventManager.RegisterRoutedEvent("
KinectCursorLeave"
publicstaticvoidAddKinectCursorLeaveHandler(DependencyObjecto,KinectCursorEventHandlerhandler)
((UIElement)o).AddHandler(KinectCursorEnterEvent,handler);
publicstaticvoidRemoveKinectCursorLeaveHandler(DependencyObjecto,KinectCursorEventHandlerhandler)
注意到以上代码中没有声明任何GUI编程中的Click事件。
这是因为在设计控件类库时,Kinect中并没有点击事件,相反Kinect中两个重要的行为是enter和leave。
手势图标可能会移入和移出某一个可视化控件的有效区域。
如果要实现普通GUI控件的点击效果的话,必须在Kinect中对这一事件进行模拟,因为Kinect原生并不支持点击这一行为。
CursorAdorner类用来保存用户手势图标可视化元素,它继承自WPF的Adorner类型。
之所以使用这个类型是因为它有一个特点就是总是在其他元素之上绘制,这在我们的项目中非常有用,因为我们不希望我们的光标会被其他元素遮挡住。
代码如下所示,我们默认的adorner对象将绘制一个默认的可视化元素来代表光标,当然也可以传递一个自定义的可视化元素。
publicclassCursorAdorner:
Adorner
privatereadonlyUIElement_adorningElement;
privateVisualCollection_visualChildren;
privateCanvas_cursorCanvas;
protectedFrameworkElement_cursor;
StroyBoard_gradientStopAnimationStoryboard;
readonlystaticColor_backColor=Colors.White;
readonlystaticColor_foreColor=Colors.Gray;
publicCursorAdorner(FrameworkElementadorningElement)
base(adorningElement)
this._adorningElement=adorningElement;
CreateCursorAdorner();
this.IsHitTestVisible=false;
publicCursorAdorner(FrameworkElementadorningElement,FrameworkElementinnerCursor)
CreateCursorAdorner(innerCursor);
publicFrameworkElementCursorVisual
get{return_cursor;
publicvoidCreateCursorAdorner()
varinnerCursor=CreateCursor();
protectedFrameworkElementCreateCursor()
varbrush=newLinearGradientBrush();
brush.EndPoint=newPoint(0,1);
brush.StartPoint=newPoint(0,0);
brush.GradientStops.Add(newGradientStop(_backColor,1));
brush.GradientStops.Add(newGradientStop(_foreColor,1));
varcursor=newEllipse()
Width=50,
Height=50,
Fill=brush
};
returncursor;
publicvoidCreateCursorAdorner(FrameworkElementinnerCursor)
_visualChildren=newVisualCollection(this);
_cursorCanvas=newCanvas();
_cursor=innerCursor;
_cursorCanvas.Children.Add(this._cursorCanvas);
_visualChildren.Add(this._cursorCanvas);
AdornerLayerlayer=AdornerLayer.GetAdornerLayer(_adorningElement);
layer.Add(this);
因为继承自Adorner基类,我们需要重写某些基类的方法,下面的代码展示了基类中的方法如何和CreateCursorAdorner方法中实例化的_visualChildren和_cursorCanvas字段进行绑定。
protectedoverrideintVisualChildrenCount
get
return_visualChildren.Count;
protectedoverrideVisualGetVisualChild(intindex)
return_visualChildren[index];
protectedoverrideSizeMeasureOverride(Sizeconstraint)
this._cursorCanvas.Measure(constraint);
returnthis._cursorCanvas.DesiredSize;
protectedoverrideSizeArrangeOverride(SizefinalSize)
this._cursorCanvas.Arrange(newRect(finalSize));
returnfinalSize;
CursorAdorner对象也负责找到手所在的正确的位置,该对象的UpdateCursor方法如下,方法接受X,Y坐标位置作为参数。
然后方法在X,Y上加一个偏移量以使得图像的中心在X,Y之上,而不是在图像的边上。
另外,我们提供了该方法的一个重载,该重载告诉光标对象一个特殊的坐标会传进去,所有的普通方法调用UpdateCursor将会被忽略。
当我们在磁性按钮中想忽略基本的手部追踪给用户更好的手势体验时很有用。
publicvoidUpdateCursor(Pointposition,boolisOverride)
{
_isOverriden=isOverride;
_cursor.SetValue(Canvas.LeftProperty,position.X-(_cursor.ActualWidth/2));
_cursor.SetValue(Canvas.LeftProperty,position.Y-(_cursor.ActualHeight/2));
}
publicvoidUpdateCursor(Pointposition)
if(_isOverriden)return;
_cursor.SetValue(Canvas.LeftProperty,position.X-(_cursor.ActualWidth/2));
最后,添加光标对象动画效果。
当Kinect控件需要悬浮于一个元素之上,在用户等待的时候,给用户反馈一些信息告知正在发生的事情,这一点很有好处。
下面了的代码展示了如何使用代码实现动画效果:
publicvirtualvoidAnimateCursor(doublemilliSeconds){
CreateGradientStopAnimation(milliSeconds);
if(_gradientStopAnimationStoryboard!
=null)
_gradientStopAnimationStoryboard.Begin(this,true);
publicvirtualvoidStopCursorAnimation(doublemilliSeconds)
_gradientStopAnimationStoryboard.Stop(this);
publicvirtualvoidCreateGradientStopAnimation(doublemilliSeconds){
NameScope.SetNameScope(this,newNameScope());
varcursor=_cursorasShape;
if(cursor==null)
return;
varbrush=cursor.FillasLinearGradientBrush;
varstop1=brush.GradientStops[0];
varstop2=brush.GradientStops[1];
this.RegisterName("
GradientStop1"
stop1);
GradientStop2"
stop2);
DoubleAnimationoffsetAnimation=newDoubleAnimation();
offsetAnimation.From=1.0;
offsetAnimation.To=0.0;
offsetAnimation.Duration=TimeSpan.FromMilliseconds(milliSeconds);
Storyboard.SetTargetName(offsetAnimation,"
);
Storyboard.SetTargetProperty(offsetAnimation,
newPropertyPath(GradientStop.OffsetProperty));
DoubleAnimationoffsetAnimation2=newDoubleAnimation();
offsetAnimation2.From=1.0;
offsetAnimation2.To=0.0;
offsetAnimation2.Duration=TimeSpan.FromMilliseconds(milliSeconds);
Storyboard.SetTargetName(offsetAnimation2,"
Storyboard.SetTargetProperty(offsetAnimation2,
_gradientStopAnimationStoryboard=newStoryboard();
_gradientStopAnimationStoryboard.Children.Add(offsetAnimation);
_gradientStopAnimationStoryboard.Children.Add(offsetAnimation2);
_gradientStopAnimationStoryboard.Completed+=delegate{_gradientStopAnimationStoryboard.Stop(this);
为了实现KinectCursorManager类,我们需要几个帮助方法,代码如下,GetElementAtScreenPoint方法告诉我们哪个WPF对象位于X,Y坐标下面,在这个高度松散的结构中,GetElementAtScreenPoint方法是主要的引擎,用来从KinectCurosrManager传递消息到自定义控件,并接受这些事件。
另外,我们使用两个方法来确定我们想要追踪的骨骼数据以及我们想要追踪的手。
privatestaticUIElementGetElementAtScreenPoint(Pointpoint,Windowwindow)
if(!
window.IsVisible)
returnnull;
PointwindowPoint=window.PointFromScreen(point);
IInputElementelement=window.InputHitTest(windowPoint);
if(elementisUIElement)
return(UIElement)element;
else
privatestaticSkeletonGetPrimarySkeleton(IEnumerable<
Skeleton>
skeletons)
Skel