×

Mycroft Mark 1开源语音平台的有趣项目

消耗积分:0 | 格式:zip | 大小:0.22 MB | 2022-12-14

刘娟

分享资料个

描述

哈哈哈!圣诞节快乐!

又到了一年中的那个时候,雪,蛋酒,红鼻子驯鹿,曲棍球。. .和降临日历。降临节日历帮助我们倒计时直到圣诞节。我们的降临日历,有一个转折,或者更确切地说是一个声音!这是 Mycroft Mark 1 开源语音平台上一个非常简单有趣的项目。

迈克罗夫特马克 1

语音现在很热门,有很多选择可以尝试。Mycroft 是一个完全开源的平台,您可以进行试验。有几个选项,例如 PiCroft,您可以在自己的 Raspberry Pi 上免费安装。还有 Mark 1,这是一款设计精美的设备,可从Mycroft.ai 获得

几个月前我开始使用 PiCroft 平台,感谢Mycroft.ai的慷慨解囊,我现在有了 Mark 1!

 

这是一项开源工作,并通过其在线论坛得到了一个充满活力且反应迅速的团队和社区的支持。有很多技能可以使用和学习。Python是使用的语言。

在这项技能中,我使用了一个名为 Padatious 的相对较新的功能,它允许您以自然语言格式编写语音命令!Mycroft 每天都在变得更聪明!

与 Mycroft Mark 1 互动

Mark 1 的核心是一个 Raspberry pi 板。这是我将 PiCamera 添加到 Pi 的图片:

 
pYYBAGOYPnCAZQuUAAIAh4shXq0701.jpg
Mycroft Mark 1 的核心是 Raspberry Pi。
 

Mark 1 的背面提供了对所有端口和引脚(PiCamera 端口除外)的访问,您可以连接键盘、鼠标、显示器与 Mark 进行交互,就像与任何其他 RPi 一样。但是,以“无头”方式与 Mark 1 中的 RPi 交互同样容易。只需在桌面上打开一个终端并使用名为ssh 的命令行程序与 Mark 交互。 我在较旧的 iMac 上执行此操作,请参阅下面的屏幕截图。Mycroft 论坛帖子SSH 登录凭据中对如何执行此操作进行了很好的描述。

 
pYYBAGOYPnOABcdVAAGJ0Tg77ng54.jpeg
Mark 1 可以访问除 PiCamera 之外的所有 RPi 端口。
 

当您习惯于指向和单击、窗口等时,熟悉命令行可能会有些挑战。我来自 Commodore 64 一代,因此享受这种类型的交互!有很多工具可以学习和使用。对于编码,我使用了 nano。这是一个简单易用的文本编辑器,随 RPi 一起安装。需要了解的许多命令行实用程序包括:cdrebootlschownchmodrm、cp、mv、pwd。几乎所有这些都需要您使用sudo 调用。所以要小心,尤其是rm-R !!!

当您对这些工具感到满意时,您会喜欢这种编程方式。这很像使用多功能瑞士军刀!

编写自己的技能

Mycroft 技能创建已完整记录:如何添加新技能。Mycroft 文档最近进行了更新,并采用了更具可读性和用户友好的格式,因此我鼓励您去那里深入研究它,MYCROFT.AI DOCUMENTATION。谢谢凯西

在 github 上的MycroftAI / mycroft-skills上有许多示例技能可供学习。我学习并大量借鉴了唱歌技巧

我还在Hackster.io上发布了 Mycroft 项目,这些项目应该可以帮助您了解很多有关在 Mycroft 平台上创建技能的知识:

在下面的描述中,我将仅涉及此技能的亮点,并鼓励大量使用上述资源来学习如何编写自己的技能。

技能

Mycroft 技能位于/opt/mycroft/skills/文件夹中。当您 cd 进入此文件夹并ls 时,您会看到如下内容:

 
pYYBAGOYPnaABrnVAAKIEsJsCS0906.png
这显示了 /opt/mycroft/skills 文件夹的内容。
 

在每个技能文件夹中,都有一些子文件夹和文件构成了技能的主体。Mycroft 技能是用 python 编写的,技能的主要功能在__init__.py文件中。任何可以在 Mark 1 的 RPi 上运行的 python 库都可以用来编写技能。如果您可以用 Python 编写它,那么您的技能就可以做到!

 
pYYBAGOYPnmABvlKAAHWLLgVdNQ648.png
在 ssh 的终端窗口中看到的 hello-world 和 days-unitl-christmas 技能的目录/文件夹结构。
 

上面的屏幕截图显示了 hello-world 技能的文件夹结构。这是一个很好的起始模板,可以用来模拟你的技能。该文件夹下面的文件夹是圣诞节前的技能。由于 mp3 文件和正在开发的这项技能,它有点混乱。我无法让 mp3 文件运行,除非它们位于文件夹中。是的,对于那些在 linux 中的人来说,文件所有者是不同的,但是即使文件所有权和权限都更改为 Mycroft,我仍然无法播放 mp3,除非它们位于此处!

每个技能都由意图组成。Intent 对应于您希望 Mycroft 响应语音命令执行的代码。这些语音命令位于您的词汇文件中。词汇文件名为days.until.christmas.intent ,其内容只是文本:

how many days until christmas
how many days to christmas
when is santa coming
how long unitl christmas
is it christmas yet

意图处理程序,或响应这些语音命令而执行的代码,连接到 vocab 文件,如下所示:

       
def initialize(self):
    self.load_data_files(dirname(__file__))
    self.register_intent_file('days.until.christmas.intent',self.handle_christm    as)

对于这项技能,我使用了 mycroft 平台的一个新功能,称为Padatious:

Padatious 是一个机器学习、基于神经网络的意图解析器它是Adapt 意图解析器的替代方案。与使用小组独特单词的 Adapt 不同,Padatious 是对整个句子进行训练的。

我正在运行 Mycroft 0.9.10 版,它 Padatious 会自动供您使用。

Padatious 极大地简化了为您的意图创建词汇文件并且效果很好。使用 Padatious,您可以像说话一样简单地输入短语,Mycroft 会做出适当的回应。Adapt 效果很好,但需要做很多工作才能确保它正常工作,而 Padatious 让您可以简单地考虑一个人如何用自然语言提出请求。

我遇到的唯一问题是当我在文件中出现“圣诞节是什么时候”这句话时。说,“嘿,Mycroft,圣诞节是什么时候?” 它会回答圣诞节是什么的字典定义。所以我只是删除了这个短语。

Python中的日期和时间

日期和时间计算是代码中非常常见的需求,有时让这些计算正常工作可能具有挑战性。幸运的是,Python 有一个名为datetime的库,它使这些计算变得容易!就像我上面提到的,如果它是python的一部分,你的技能可以做到!在使用datetime进行计算时,要记住的重要一点是过去的日期是“负数”,而未来的日期是“正数”。所以,如果今天是圣诞节前的某个天数,当我们进行计算比较时,结果将是肯定的。技能代码如下:

       
def handle_christmas(self,message):
    today = datetime.date.today()
    christmasDay = datetime.date(today.year, 12, 25)
    # in datetime arthmetic, if a day is in the past, it is 'negative' or less 
    # than today, or less than a day in the future
    # check to see if christmas is past :( if so, correct to next year :(
    if christmasDay < today:
        christmasDay = christmasDay.replace(year=today.year+1)
    daysUntilChristmas = abs(christmasDay - today)

在此之后,我们只需让 Mycroft 说出距离圣诞节还有多少天:

       
self.speak("there are " + str(daysUntilChristmas.days) + " days until christmas")

你能看出这里的问题吗?如果离圣诞节只有一天,Mycroft 仍然会说“天”。另外,Mycroft 应该在圣诞节做一些特别的事情或者说一些特别的事情,对吧。. .? 好吧,离圣诞节只有这么多天了。. .!

为了写这个技巧,我大量借鉴了 Mycroft 的歌唱技巧。您可以而且应该让您的 Mycroft Mark 1 为您唱首歌!然而,在这项技能中,我将歌曲列表读入 python 列表而不是地图。就我而言,我从zedge下载了免版税铃声。这些铃声质量很好,拥有所有流行的最爱,并且长度刚好适合这项技能。

Python 列表的使用使我能够利用随机库中一个名为selection的简洁 Python 函数。我们将列表传递给选择函数,它会从列表中返回一个随机元素!它使代码干净整洁:

       
class DaysUntilChristmasSkill(MycroftSkill):
    def __init__(self):
    ...
        self.songs = [ join(dirname(__file__), "polar_express.mp3"),
                       join(dirname(__file__), "let_it_snow.mp3"),
                       join(dirname(__file__), "holly_jolly_christma.mp3"),
                       join(dirname(__file__), "frosty_the_snowman.mp3"),
                       join(dirname(__file__), "mr_grinch.mp3"),
                       join(dirname(__file__), "sugar_plum.mp3"),
                       join(dirname(__file__), "carol_of_bells.mp3")]
     ...
     def handle_christmas(self,message):        
     ...    
        self.process = play_mp3(choice(self.songs))

样品

它是如何工作的?

2017 年圣诞快乐!

希望你喜欢这个简单而有趣的技能。有一百万种不同的方法可以改进和扩展这项技能。如果你这样做了,请将其发布到 Hackster.io!


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

评论(0)
发评论

下载排行榜

全部0条评论

快来发表一下你的评论吧 !