cap = cv2.VideoCapture(0)

opencv模块百度百科解释

OpenCV是一个基于Apache2.0许可(开源)发行的跨平台计算机视觉机器学习软件库,可以运行在LinuxWindowsAndroidMac OS操作系统上。 它轻量级而且高效——由一系列 C 函数和少量 C++ 类构成,同时提供了Python、Ruby、MATLAB等语言的接口,实现了图像处理和计算机视觉方面的很多通用算法。

opencv常用函数

详见csdn博客https://blog.csdn.net/Vici__/article/details/100714822
该句中的VideoCapture函数的作用是开启摄像头或者打开视屏文件,参数0的作用是在只有一个摄像头的时候自动连接该摄像头获取视频数据。

begin=time()

该函数的作用是返回当前的时间戳(1970纪元后经过的浮点秒数)。

fps=cap.get(cv2.CAPPROP_FPS),_print(fps)

返回当前视频的帧速率,并将其打印出来。

while循环中的程序的注释

  1. while cap.isOpened():#当摄像头开启时进入循环
  2. ret, frame = cap.read()
  3. #返回当前时刻的读取图片的状态和每一帧的图片
  4. #ret, frame = cap.read()返回值含义:
  5. #参数ret 为True 或者False,代表有没有读取到图片
  6. #第二个参数frame表示截取到一帧的图片
  7. res = cv2.resize(frame, (160, 120), interpolation=cv2.INTER_CUBIC)
  8. #将图片进行尺寸的调整,interpolation=cv2.INTER_CUBIC 表示在图片扩展的时候使用的是INTER_CUBIC这个插值法,不必过度理解
  9. res=RotateClockWise180(res)#将图片顺时针旋转180
  10. res=cv2.flip(res,1)#将上面一句翻转过的图片再进行一次水平翻转
  11. cv2.imshow("frame", res)#将处理过的图片在名为"frame"的窗口中显示出来
  12. cv2.waitKey(1)#waitKey(1)为等待1ms,加上while循环,即为无限等待,窗口在程序运行时不释放
  13. frame = np.array(res, dtype=np.float32)#将图片数据转化为数组,并将数据类型转化为float32,在机器学习中一般使用float32这一数据类型。
  14. camera_data_array = np.expand_dims(frame, axis=0)
  15. #将二维数据拓展成为三维数据,从第一个维度拓展一个维度
  16. prediction_array = model.predict(camera_data_array)#将数据输入神经网络模型得到一个预测值
  17. value = get_max_prob_num(prediction_array)#得到预测值的最大值
  18. print(value)
  19. end=time()#返回当前的时间戳

判断语句和运动函数

使用开始和结束时的时间戳和得到的最大值对机器人的运动进行判定。

  1. if value == 0:
  2. print("forward")
  3. if(end-begin<30):
  4. robot.movement.move_forward()
  5. if(end-begin>30):
  6. robot.movement.move_forward1()
  7. elif value == 1:
  8. print("left")
  9. print(end-begin)
  10. if(end-begin>5 and end-begin<17):
  11. robot.movement.left_ward2()
  12. if(end-begin<30 and end-begin>17 and end-begin>3):
  13. robot.movement.left_ward1()
  14. if(end-begin<3):
  15. robot.movement.turn_left()
  16. if(end-begin>30):
  17. robot.movement.move_forward2()
  18. #robot.movement.left_ward3()
  19. if(end-begin>3 and end-begin<5):
  20. robot.movement.move_forward()
  21. elif value == 2:
  22. print(end-begin)
  23. print("hit")
  24. robot.movement.hit()
  25. break
  26. elif value == 3:
  27. #print("right")
  28. print(end-begin)
  29. if(end-begin<8 and end-begin>3):
  30. if(end-begin<8):
  31. robot.movement.right_ward2()
  32. print("ringt1")
  33. if(end-begin>8):
  34. if(end-begin<30 and end-begin>20):
  35. robot.movement.right_ward3()
  36. #robot.movement.move_forward1()
  37. print("ringt2")
  38. if(end-begin<20):
  39. robot.movement.turn_right()
  40. print("ringt3")
  41. if(end-begin<34 and end-begin>30):
  42. robot.movement.right_ward3()
  43. if(end-begin>34):
  44. #robot.movement.right_ward4()
  45. robot.movement.move_forward2()
  46. if(end-begin<3):
  47. robot.movement.turn_right()
  48. #robot.movement.right_ward2()
  49. print("ringt4")
  50. if value == 4:
  51. if(end-begin<30):
  52. robot.movement.turn_right2()
  53. if(end-begin>30):
  54. robot.movement.hit()
  55. break