Udělejte si Mac Hands-Free: část 1

(27. listopadu 2018)

Rozpoznávání hlasu + s Talon .

Podívej, mami, žádné ruce!

AKTUALIZACE 14. 1. 21

Ahoj! Pokud navštěvujete tuto stránku poprvé, moje rada by byla skočit na můj aktualizační příspěvek Talon z roku 2021. Tento příspěvek pravděpodobně ztrácí váš čas.

(

Vytvořte si * počítač * Hands-free

(je to jednodušší než kdy jindy!)

medium.com

)

Co je Talon?

Talon je bezplatný software, který se aktivně vyvíjí , jehož cílem je zajistit provoz vašeho počítače bez použití rukou.

To se v současné době děje pomocí Talon použití tří různých vstupů:

  1. Rozpoznávání řeči
  2. Výměna myši pro sledování očí / hlavy
  3. Rozpoznávání šumu

Abych získal představu o tom, co Talon umí, stručně popište každý vstup.

  1. Rozpoznávání řeči vám umožňuje psát napříč všemi ve vašem desktopovém prostředí.
  2. Náhrada myši vám umožňuje ovládat myš pomocí sledování očí pro velký kurzor skoky a sledování hlavy pro malé opravy kurzoru. Další konfigurací vstupu pro nahrazení myši je myš přiblížení, která se spoléhá pouze na sledování očí.
  3. Rozpoznávání šumu vám umožňuje klikat a táhnout s praskajícími a syčícími zvuky.

Všechny tyto vstupy používají pro práci „soubory kódu Pythonu“ nebo skripty napsané v programovacím jazyce Python. Podle návrhu jsou tyto skripty snadno upravitelné uživatelem nebo komunitou uživatelů Talon . Skripty související s drápy jsou uloženy ve složce uživatele v aplikaci Talon . V závislosti na tom, jaké skripty jsou ve složce uživatele a jak / pokud byly upraveny, může Talon nabývat různých nebo zcela nových funkcí.

Mnoho skriptů sdílí komunita a jsou k dispozici na platformě Github (viz talon\_community úložiště kódu). Talon na mém počítači Mac je směsicí sdílených skriptů s drobnými úpravami ( moje sbírka skriptů ). Jak provést tyto malé úpravy, ukážu vám v pozdějším příspěvku této série.

Takže zpět ke každému ze tří vstupů.

1. Rozpoznávání řeči

Než promluvím o Talonově metodě rozpoznávání řeči – dovolte mi začít velkým obrazem rozpoznávání řeči.

Existují dvě hlavní zásady diktování používané motory pro rozpoznávání řeči:

  • zásada nejprve zadávání dat
  • zásada první příkaz

Zásady, které většina lidí zná, jsou zásadu zadávání dat jako první. V této zásadě bude zadána mluvená fráze, pokud není k provedení příkazu použito speciální slovo nebo fráze (spouštěcí slovo). Toto je zásada používaná Dragon NaturallySpeaking .

Nevýhodou je, že řečový stroj musí rozlišovat mezi tím, co má být text, a tím, co má být příkaz. Dragon spoléhá na kontext, aby vytvořil tento rozdíl, který je nespolehlivý.

nespolehlivost vede mnoho lidí k vytváření smyšlených slov pro názvy příkazů, aby nedocházelo k nedorozuměním v řečovém stroji.

Talon řečový modul převzal zásadu diktování prvního příkazu ze skriptů uživatelů, které byly sdíleny dosud . Zásada first command makes it so that mluvené fráze jsou interpretovány jako příkazy, pokud jsou rozpoznány. To vám dává svobodu používat popisná slova nebo fráze k pojmenování příkazů.

V Talon je možné rozšířit zásadu prvního příkazu o zásadu zadávání dat jako první, abyste využili silné stránky obou přístupů. To se děje dvěma způsoby:

Nejprve pomocí spouštěcího slova. Spouštěcí slova vám umožní snadno diktovat řádek textu v Talon.

Například řekněme: „věta, toto je první příspěvek, který jsem kdy napsal na střední tečku. “ Věta je zde spouštěcí slovo, které vypisuje první slovo velkými písmeny. (Existují i ​​další možná spouštěcí slova.)

Výstup by pak byl:

Toto je první příspěvek, který jsem kdy na médium napsal.

Nevýhodou metody spouštěcího slova je, že je obtížné provést diktát, který je delší než věta, bez použití jiného spouštěcího slova. Což mě vede k druhému způsobu, jak nejprve rozšířit příkaz o vstup dat:

Zadruhé, s Talon Dragon kompatibilitou může používat Dragon jako samostatný režim. To znamená, že můžete přepnout z „režimu Talon“ do „režimu Dragon“ (s těmito frázemi), chcete-li například napsat referát, nebo dělat jakýkoli delší diktát bez použití jiného spouštěcího slova.„Talon mode“ použiji k provádění náročných věcí, jako je procházení internetu, nebo k práci v aplikaci, která není textovým procesorem, jako je Photoshop.

Talon dokáže rozpoznávat řeč bez Dragon , ale pokud máte Dragon nainstalován a spuštěn, automaticky použije Dragons přesnější rozpoznávání řeči.

Existují některé špatné zprávy, které musím sdílet : Dragon Professional Individual pro Mac Prodej ukončen

Ale dobrá zpráva je, že Dragon Professional Individual pro Mac je stále možné zakoupit od prodejců na Amazon a Ebay , do vyprodání zásob. Existují také menší prodejci se zásobami Dragon , jako je Nuance Software Store .

Podle mého názoru jedinou funkcí, která opravdu chybí v samotném Talon , jsou možnosti úpravy dokumentů typu Dragon: korekční nabídky pro vlastní podstatná jména, příkazy pro vložení před / za hlas – zadaná slova, příkazy pro velká písmena zadaných slov. Tyto funkce by však mohly být integrovány do Talon se správným kódem.

A dokonce i bez správného kódu můžete použít Talon volitelný systém nahrazování myší pro provádění stejných příkazů . Bez příkazů to však bude trvat o něco déle.

2. Výměna myši

Pokud chcete používat handsfree, je klíčem k tomu, abyste mohli myš pohodlně a snadno ovládat. Tímto způsobem se drasticky sníží počet příkazů, které musíte použít.

V současné době je k dispozici spousta různých systémů nahrazování myší. Níže jsem popsal každý ze systémů, se kterými jsem obeznámen:

  • Dragons MouseGrid: je těžké to popsat – můžete jej vidět v akci ve videu níže :
Mouse Grid

MouseGrid má problém obzvláště pomalý.

  • Myš se sledováním hlavy: pomocí kamery se sleduje pohyb hlavy osoby – což odpovídá pohybu myši.

Podle mých zkušeností jsou myši sledující hlavu přesné, ale nepříjemné je je používat po delší dobu. Vyžadují, abyste pohybovali hlavou v nepřirozených směrech.

Při klikání se myši sledující hlavu spoléhají buď na dobu setrvání, nebo pomocí přepínačů, jako jsou nožní pedály nebo klávesové zkratky. Pro prodlevu musíte držet hlavu v nepřirozené poloze po určitou dobu, než myš klikne. Používání přepínačů pro mě není tak snadné jako doba setrvání.

  • Myš pro sledování očí: ke sledování pohybu očí se používá kamera – což odpovídá pohybu myši.

I když jsem nepoužíval pouze myši pro sledování očí. Z toho, co jsem slyšel, jsou myši pro sledování očí docela nervózní a nelze je použít s přesností srovnatelnou se standardní počítačovou myší.

Talon se nespoléhá na některou z předchozích metod zcela . Talon používá k ovládání myši fúzi senzorů pro sledování očí a hlavy. Toto je nejlepší způsob ovládání myši, který jsem použil.

Základní Myšlenka spočívá v tom, že pomocí sledování očí provádíte velké skoky kurzorem a poté sledování hlavy pomocí menších korekčních pohybů kurzoru. Talon používá Tobii 4C , a to jak pro sledování očí, tak pro sledování hlavy.

Plug-and-play Tobii 4C

Díky Talon se Tobii 4C stává zařízením typu plug-and-play pro Mac. Pokud navštívíte web Tobii , uvidíte, že je navržen pro PC. Pokud je však zařízení používáno na počítačích Mac s Talon , nejsou k zahájení používání této jedinečné myši potřeba žádné další ovladače ani nic jiného.

Použití fúzní myši se senzorem Talon (špičkový rozpoznávání šumu)

Pro lidi bez ovládání hlavy má Talon také další možnost umístění myši připravená k použití: myš se zoomem. Zoomovací myš vůbec nevyžaduje sledování hlavy. Sledováním tohoto videa získáte lepší představu:

Zoomovací myš (špičková hodnota rozpoznávání šumu)

3. Rozpoznávání šumu

Talon má systém rozpoznávání šumu, který rozpozná zvuky praskání při klepání a syčení při klikání a přetahování nebo výběru textu.

Klikání a tažení pomocí Talon

Ačkoli nejste součástí rozpoznávání šumu, můžete také pomocí příkazů kliknutím nebo tažením proveďte totéž v Talon .

Přizpůsobení & Ceny

Specifikace přizpůsobení

Talon je aktuálně kompatibilní s Mac 10.11 El Capitan (nejstarší), 10.12 Sierra, 10.13 High Sierra a 10.14 Mojave (nejnovější). Existují plány, jak v budoucnu rozšířit Talon na Linux a Windows.

Než půjdu ven a najdu kopii Dragon v6.0, chtěl bych pravděpodobně nejdříve vyzkoušíte Talon vestavěný engine. Podívejte se, jestli se vám to líbí – pokud to nefunguje dostatečně dobře, pak přemýšlejte o nákupu Dragon.

Tobii 4C je poměrně levná alternativa k myškám ve srovnání s některými dalšími možnostmi, jako jsou hardwarové sledovače hlavy, které mohou běžet za více než 400 $.

Pokud jste jako já a hledáte bezplatný projekt Talon , podívejte se na druhý díl této série, kde si přejdu:

  1. Instalace Talon;
  2. Hledání mikrofonu (pokud jej již nemáte); a
  3. Základní výukové programy s Talon

(

Udělejte si svůj Mac Hands-free: Část 2

Instalace Talon. Začínáme.

medium.com

)