8月29日，“ABC SUMMIT 2019百度云智峰会”在北京国家会议中心举行。在技术应用方面，此次大会增设了开发者集市环节，集结了百度开发者中心邀请的国内知名高校开发者，为参会人员带来百度智能云技术的应用展示。

北京大学极客实验室受邀参加百度开发者集市。极客实验室的开发者们带来了三大黑科技——主题智能交互游戏项目，分别是机智惊人的“智能语音垃圾分类”、充满创意的“指尖钢琴”、炫酷的人性化交互式“机械手”。在这里，参会人员可以和开发者近距离沟通，共同讨论一个创意从开始到实现的过程，并充分体验北大极客黑科技的无限魅力。

智能语音垃圾分类

垃圾分类逐渐走入人们的生活，“干垃圾”“湿垃圾”傻傻分不清楚。目前大部分开发者希望通过计算机视觉解决垃圾分类，但视觉方法会受到很多局限，如垃圾的重叠、环境的光线等都会影响分类的准确。因此，我们针对家居、办公等室内环境特别设计了智能语音垃圾桶，只要用户对着麦克风说出要扔的东西，垃圾桶不但可以自动识别出垃圾的种类，同时语音告诉用户、打开对应的垃圾桶。该系统的最前端是一个可以录音的麦克风，麦克风将用户的语音录制成音频。在树莓派主板上运行的程序收音后，调用百度的语音识别API接口，并与“垃圾分类大数据”进行关键词提取、匹配和分类，再调用百度的语音合成接口，将垃圾所属的类别通过音箱告知用户，同时驱动舵机，通过设计好的机械牵引装置将垃圾桶盖打开。

指尖钢琴

“指尖钢琴”旨在将钢琴“搬”到指尖上，使人们能够随时随地演奏钢琴，同时尽可能地还原弹奏钢琴时的真实体验。该项目运用倾斜度传感器和位姿估计算法检测人们的手指弯曲，同时基于ESP32低功耗物联网模块和电脑端、手机端进行WIFI无线连接，再根据不同手势演奏出不同音调、节奏的乐曲。多线程编程支持多用户同时接入，可享受多人合奏的乐趣。

交互式机械手

交互式机械手摒弃了以前机械手单纯对人手动作的模仿，能够与人手的动作进行交互和配合。通过肢体识别和手势识别算法，仿人机械手可以快速识别人的一些动作与手势，同时通过逆运动学模型对机械手的各个关节进行计算，同时设计特定算法实现机械臂的平滑控制，从而对人手的动作进行回应。目前开发的机器手可以和人进行猜拳、比心、RAP、握手等一系列动作。在之后的开发中，交互式机械手不仅仅是一种娱乐，而且能够识别人手动作的内在含义，从而幻化成“第三只手”，在人们需要的时候提供帮助。

极客实验室开发者在开发者集市合影

北京大学极客实验室成立于2016年10月，是一个集学术、应用、实践为一体的跨学科动手实践生态平台。极客实验室主张：跨越边界、专注极致、自律自由、追求真善美。目前第一课堂有12门动手实践学分课，第二课堂有20多个以学生为中心的黑科技、酷艺术、文化创意工坊及品牌讲座项目“星空沙龙”，自成立至今已举办活动300场次，精品课程与精彩活动受到校内外人士一致好评，并已形成独特的北大极客气质风格。极客实验室秉承以学生为中心，以尊重学生兴趣爱好为导向，培养学生跨学科（科技、人文、艺术）动手实践、创新创业的能力，鼓励学生勇担历史使命，为新时代国家发展作贡献，为人类创造美好世界。