Использование диктовки Mac внутри Python

Во-первых, диктовка FnFn — это функция NSText (или, может быть, NSTextView?) элемента управления Cocoa. Если у вас есть один из них, продиктованный текст вставляется в этот элемент управления. (Он также использует существующий текст этого элемента управления для контекста.) С точки зрения приложения, использующего NSTextView, если вы просто создаете стандартное меню «Правка», элемент «Начать диктовку» добавляется в конец с FnFn в качестве ярлыка и все, что продиктовано, отображается как ввод, точно так же, как ввод на клавиатуре, вставка или перетаскивание с помощью мыши или с помощью любого другого метода ввода.

Итак, если у вас нет приложения с графическим интерфейсом, включение диктовки будет бессмысленным, потому что у вас нет возможности получить ввод.

Если у вас есть приложение с графическим интерфейсом, проще всего получить пункт меню через NSMenu и щелкните элемент.

Вы почти наверняка используете какую-то библиотеку с графическим интерфейсом, например PyQt или Tkinter, у которой есть собственный способ доступа к меню вашего приложения. Но если нет, вы можете сделать это напрямую через Cocoa (используя PyObjC, который поставляется с предустановленным Python от Apple, но который вам придется pip install использовать, если вы используете сторонний Python):

import AppKit
mb = AppKit.NSApp.mainMenu()
edit = mb.itemWithTitle_('Edit').submenu()
sd = edit.indexOfItemWithTitle_('Start Dictation')
edit.performActionForItemAtIndex_(sd)

Но если вы пишете консольную программу, которая запускается в терминале (будь то Terminal.app или альтернатива, такая как iTerm), приложение, под которым вы работаете, имеет свой собственный текстовый виджет и меню «Правка», и вместо этого вы можете паразитно использовать его меню. .

Проблема в том, что у вас нет разрешения просто управлять другими приложениями, если это не разрешено пользователем. В более старых версиях OS X это было сделано путем глобального включения «вспомогательных сценариев для специальных возможностей». Начиная с версии 10.10, на вкладке «Конфиденциальность» панели «Безопасность и конфиденциальность» Системных настроек есть якорь «Специальные возможности», в котором есть список приложений, у которых есть разрешения. К счастью, если вас нет в списке, при первой попытке использовать специальные возможности появится всплывающее диалоговое окно, и если пользователь нажмет на него, он запустит Системные настройки, покажет этот якорь, добавит ваш app в список с отключенным флажком и прокрутите его, чтобы все, что нужно сделать пользователю, это установить флажок.

AppleScript для этого:

tell application "System Events"
    click (menu item "Start Dictation" of menu of menu bar item "Edit" 
        of menu bar of (first process whose frontmost is true))
end tell

«Правильный» способ сделать то же самое в Python — через ScriptingBridge, доступ к которому можно получить через PyObjC… но намного проще использовать стороннюю библиотеку appscript:

from appscript import app, its
se = app('System Events')
proc = app.processes[its.frontmost == True]
mi = proc.menu_bars[1].menu_bar_items['Edit'].menus[1].menu_items['Start Dictation']
mi.click()

Если вы действительно хотите отправить клавишу Fn дважды, API-интерфейсы для создания и отправки событий клавиатуры являются частью Quartz Events Services, которые (несмотря на то, что это API CoreFoundation C, а не API Cocoa ObjC) также обернуты PyObjC. Документацию может быть немного сложно понять, но в основном идея заключается в том, что вы создаете событие соответствующего типа, а затем либо отправляете его в определенное приложение, либо в событие, либо в место касания. Таким образом, вы можете создать и отправить общесистемное событие нажатия клавиши Fn, например:

evt = Quartz.CGEventCreateKeyboardEvent(None, 63, True)
Quartz.CGEventPost(Quartz.kCGSessionEventTap, evt)

Чтобы отправить событие нажатия клавиши, просто измените True на False.