Kuinka ohjata Stream Deck -laitetta tekoälyn avulla

Stream Deck 7.4 avaa Stream Deckin ensimmäistä kertaa tekoälyavustajille. MCP-tuen ansiosta tekoälytyökalut voivat nyt muodostaa yhteyden Stream Deckkiin ja käynnistää toimintoja äänen, tekstin tai jopa reaaliaikaisten tapahtumien avulla.

NVIDIA G-Assist on ensimmäinen integroitu sovellus, joka tuo ääniohjauksen Stream Deck -laitteeseen. Sano ”get my stream ready”, ja se yhdistää toimet käynnistääkseen OBS:n, sytyttääkseen valot, käynnistääkseen musiikin ja asettaakseen kohtauksen – kaikki kädet vapaana. Aitum, suosittu automaatioalusta striimareille, on myös integroitumassa, jolloin live-tapahtumat, kuten raidit ja tilaukset, voivat laukaista Stream Deck -toiminnot automaattisesti. Ja koska MCP on avoin standardi, lisää työkaluja on tulossa.

Toimintojen määrittäminen Stream Deck -sovelluksessa tapahtuu edelleen samalla tavalla kuin ennenkin. MCP tarjoaa uusia tapoja aktivoida niitä. Tässä oppaassa kerrotaan, mikä MCP on, miten se otetaan käyttöön ja miten sen käyttö aloitetaan.

MCP on lyhenne sanoista Model Context Protocol. Se on avoin standardi, joka tarjoaa tekoälytyökaluille yhteisen tavan muodostaa yhteys sovelluksiin ja palveluihin.

Ajattele sitä kuin USB:tä. Ennen USB:tä jokainen laite tarvitsi omanlaisen kaapelin ja liittimen. USB loi yhden standardin, joka toimii kaikkien laitteiden kanssa. MCP tekee saman tekoälytyökaluille. Sen sijaan, että jokainen tekoälyavustaja tarvitsisi oman yhteyden jokaiseen sovellukseen, MCP tarjoaa niille yhteisen tavan kommunikoida.

Stream Deck 7.4:n myötä Stream Deck liittyy tähän joukkoon. Tekoäly toimittaa syötteen. Stream Deck suorittaa toimet.

MCP on parhaimmillaan, kun haluat yhdistellä toimintoja tai pitää kädet vapaana.

Yhdessä NVIDIA G-Assist-toiminnon avulla äänestäsi tulee syöttölaite. Sano ”valmistele striimini” ja G-Assist yhdistää toimet avatakseen OBS:n, asettaakseen kohtauksen, sytyttääkseen valot ja käynnistääkseen musiikin. Sano ”lopeta striimi” ja se suorittaa sammutusjärjestyksen. Kätesi eivät koskaan irtoa näppäimistöstä ja hiirestä, eikä sinun tarvitse koskaan irrottaa katsettasi siitä, mitä olet tekemässä.

Yhdessä Aitum-sovelluksen avulla suoratoistosi live-tapahtumat toimivat laukaisijoina sinun sijastasi. Raid saapuu, ja toimet yhdistyvät vaihtamaan kohtauksia, himmentämään valoja ja toistamaan tervetulotoivotuksen. Kanavapisteiden lunastaminen aktivoi ääni-efektin. Tilaus käynnistää tervehdyksen Discordissa. Nämä työnkulut toimivat reaaliajassa ilman, että sinun tarvitsee tehdä mitään.

Koska MCP on avoin standardi, myös tekstipohjaiset tekoälytyökalut, kuten Claude Desktop ja ChatGPT, voivat muodostaa yhteyden ja käynnistää toimintojasi. Lisätietoja niiden määrittämisestä löytyy tämän oppaan myöhemmistä osista.

Mitä enemmän toimintoja lisäät Stream Deck -laitteeseen, sitä enemmän liitetyt tekoälytyökalut voivat yhdistellä niitä ja hyödyntää niitä.

Asennus koostuu kolmesta osasta:

1. Ota MCP käyttöön Stream Deck -sovelluksessa ja valitse, mihin toimintoihin haluat antaa tekoälylle pääsyn. Nämä tallennetaan erilliseen profiiliin nimeltä MCP Actions.
2. Asennat tietokoneellesi pienen sovelluksen nimeltä Elgato MCP Server. Se yhdistää tekoälytyökalusi Stream Deck -sovellukseen.
3. Kerro tekoälytyökalullesi, mistä Elgato MCP Server löytyy.

Kun kaikki on kytketty, voit kirjoittaa tai sanoa komentoja, ja tekoälytyökalusi suorittaa vastaavan Stream Deck -toiminnon. Käydäänpä läpi ne yksi kerrallaan.

1. Avaa Stream Deck -sovellus.
2. Siirry Asetukset-valikkoon ja valitse Yleiset-välilehti.
3. Valitse Elgato MCP -integraatio-kohdassa Ota MCP-toiminnot käyttöön.

Tämä luo erillisen profiilin nimeltä MCP Actions, jonka löydät Stream Deck -sovelluksen yläreunassa olevasta profiilivalikosta.

Vedä toimintoja oikealla olevasta toimintopaneelista profiilin painikkeille, aivan kuten tekisit minkä tahansa muun profiilin kohdalla. Kaikki tänne sijoittamasi toiminnot tulevat käytettäviksi liitetyille tekoälytyökaluille. Muiden profiiliesi toiminnot pysyvät yksityisinä, joten voit hallita tarkasti, mihin tekoälyllä on pääsy.

Mieti, mitä toimintoja käytät työnkulussasi: sovellusten avaaminen, kohtausten vaihtaminen, valaistuksen säätäminen, äänen säätäminen, musiikin toistaminen. Mitä enemmän näitä toimintoja lisäät MCP Actions -profiiliin, sitä paremmin tekoälytyökalusi pystyy yhdistelemään niitä kädet vapaana -työnkulkuiksi.

Jokaisella MCP Actions -profiilin toiminnolla on kuvauskenttä, joka kertoo tekoälylle, mitä toiminto tekee ja milloin sitä käytetään. Tämä on yksi asetusten tärkeimmistä osista, sillä sen perusteella tekoäly päättää, mikä toiminto käynnistetään, kun teet pyynnön.

Jos haluat lisätä kuvauksen, valitse toiminto ja napsauta AI-kuvaketta toiminnon asetuksissa näytön alareunassa. Kirjoita sitten selkeä ja ytimekäs kuvaus.

Jokaisella MCP Actions -profiilin toiminnolla on kuvauskenttä, joka kertoo tekoälylle, mitä toiminto tekee ja milloin sitä käytetään. Tämä on yksi asetusten tärkeimmistä osista, sillä sen perusteella tekoäly päättää, mitä toimintoja se yhdistää, kun teet pyynnön.

Jos haluat lisätä kuvauksen, valitse toiminto ja napsauta AI-kuvaketta toiminnon asetuksissa näytön alareunassa. Kirjoita sitten selkeä ja ytimekäs kuvaus.

Hyvä kuvaus kertoo tekoälylle, mitä toiminto tekee ja milloin se on tarpeen. Jos esimerkiksi lisäät erilliset toiminnot OBS:lle, Key Lightille ja Spotifylle, voit kuvata ne esimerkiksi näin:

• "Tämä avaa OBS Studion. Käytä tätä, kun valmistelet suoratoistoa tai tallennusta."
• "Tämä kytkee Elgato Key Light -valon päälle. Käytä tätä, kun valmistaudut suoratoistoon, tallennukseen tai kameran eteen."
• "Tämä avaa Spotify-sovelluksen. Käytä tätä, kun aloitat suoratoiston tai lähetyksen."

Tällaisissa kuvauksissa riittää, että sanot ”valmistele lähetykseni”. Tekoäly lukee kaikki kuvauksesi, tunnistaa, että OBS, Key Light ja Spotify ovat kaikki käytössä, ja käynnistää ne yhtä aikaa. Sinun ei tarvinnut määrittää tätä yhdistelmää etukäteen. Tekoäly selvitti sen kuvauksista.

Tämä erottaa MCP:n yksittäisen näppäimen painamisesta. Määrität yksittäiset toiminnot kerran ja määrität, mihin kukin niistä on tarkoitettu. Tekoäly hoitaa yhdistelmät sen mukaan, mitä pyydät, joten samaa toimintojoukkoa voidaan yhdistellä eri tavoin ilman, että sinun tarvitsee muuttaa asetuksia.

Ennen kuin yhdistät minkään tekoälytyökalun, tietokoneellesi on asennettava Node.js. Node.js on ilmainen ja laajasti käytetty työkalu, joka toimii monien sovellusten ja palveluiden taustalla. Elgato MCP Server toimii sen avulla, ja sekä G-Assistin että Claude Desktopin asennuspolut edellyttävät sitä.

Jos sinulla ei vielä ole sitä, lataa ja asenna se osoitteesta nodejs.org. Valitse LTS-versio (Long Term Support). Asennusohjelma toimii kuten mikä tahansa muu sovellus. Käynnistä se, noudata ohjeita, ja valmista on. Sinun ei tarvitse määrittää mitään asetuksia tai opetella käyttämään sitä.

Elgato MCP Server yhdistää tekoälytyökalusi Stream Deck -sovellukseen. Asenna se avaamalla komentokehote (Terminal macOS:ssa, PowerShell Windowsissa) ja suorittamalla seuraava komento:

npm install -g @elgato/mcp-server

Tämä asentaa ohjelman pysyvästi tietokoneellesi, joten se on käytettävissäsi aina, kun tarvitset sitä.

Jos haluat ensin vain kokeilla ohjelmaa, voit ohittaa tämän vaiheen. Seuraavissa asennusohjeissa käytetään npx-komentoa, joka lataa ja suorittaa Elgato MCP Serverin väliaikaisesti ilman erillistä asennusta. Se toimii samalla tavalla, mutta lataa ohjelman uudelleen joka kerta, kun käynnistät sen.

Lisätietoja ja vaihtoehtoja löydät Elgato MCP Serverin sivulta npm:ssä.

G-Assist tuo ääniohjauksen Stream Deck -laitteeseen. Kun yhteys on muodostettu, voit käynnistää ja yhdistellä MCP Actions -profiilisi toimintoja pelkästään puhumalla.

Käynnistä Elgato MCP Server

1) Avaa tietokoneellasi komentokehote (Windowsissa PowerShell).

2) Suorita seuraava komento:

npx -y @elgato/mcp-server@latest --http

3) Jätä tämä ikkuna auki. Näytölle pitäisi ilmestyä viesti, jossa ilmoitetaan, että HTTP-palvelin kuuntelee porttia 9090 ja että Stream Deck -sovellus on yhteydessä.

Palvelimen on oltava käynnissä taustalla, kun käytät G-Assistia. Jos suljet pääteikkunan, yhteys katkeaa.

Asenna G-Assist-laajennus

G-Assist käyttää laajennusta kommunikoidakseen Elgato MCP Serverin kanssa. Siirrä Stream Deck -laajennuskansio G-Assistin laajennushakemistoon:

%PROGRAMDATA%\NVIDIA Corporation\nvtopps\rise\plugins

Käynnistä sitten G-Assist uudelleen tai lataa laajennukset uudelleen. Ensimmäisellä latauskerralla laajennus tunnistaa käytettävissä olevat Stream Deck -toiminnot automaattisesti.

Varmista yhteys

Voit tarkistaa, onko Elgato MCP Server käynnissä, avaamalla selaimen ja siirtymällä osoitteeseen:

http://localhost:9090/health

Jos palvelin on käynnissä ja yhteydessä Stream Deck -sovellukseen, näet tilavastauksen.

Jos käytät Claude Desktopia tai muuta tekstipohjaista tekoälytyökalua, voit yhdistää sen Stream Deck -laitteeseen MCP:n kautta. Seuraavissa ohjeissa käsitellään nimenomaan Claude Desktopia.

Muokkaa asetustiedostoa

Claude Desktop tallentaa MCP-yhteytensä asetustiedostoon. Sinun on lisättävä Elgato MCP Server tähän tiedostoon, jotta Claude tietää, mistä se löytyy.

1. Avaa Claude Desktop.
2. Siirry kohtaan Asetukset, sitten Kehittäjä ja napsauta Muokkaa asetuksia. Tämä avaa kansion, johon asetustiedosto on tallennettu.
3. Etsi kyseisestä kansiosta tiedosto claude_desktop_config.json. Napsauta sitä hiiren kakkospainikkeella ja avaa se tekstieditorilla (Windowsissa Muistiossa, macOS:ssa TextEditissä).
4. Tiedostossa on jo jonkin verran sisältöä. Sinun on lisättävä mcpServers-merkintä olemassa olevan rakenteen sisälle, ei erillisenä lohkona sen alle.

Etsi viimeinen }, joka sulkee olemassa olevan osion. Lisää sen perään pilkku ja lisää sitten mcpServers-osio ennen viimeistä sulkevaa }-merkkiä.

Tässä on esimerkki siitä, miltä tyypillinen tiedosto näyttää muokkauksen jälkeen:

Kaiken on oltava yhden ulomman aaltosulkeen `{ }` sisällä, ja osioiden välissä on oltava pilkku. Jos `mcpServers`-lohko liitetään erillisenä objektina olemassa olevan sisällön alle, Claude Desktop näyttää virheilmoituksen käynnistyessään.

Jos tiedosto on tyhjä tai sisältää vain `{}`, voit korvata kaiken seuraavalla:

5. Tallenna tiedosto ja sulje Claude Desktop kokonaan (älä vain sulje ikkunaa). MacOS-käyttöjärjestelmässä napsauta Dock-kuvaketta hiiren kakkospainikkeella ja valitse Lopeta.

Varmista yhteys

Varmistaaksesi, että kaikki toimii, siirry kohtaan Asetukset ja sitten Kehittäjä. Kohdassa Paikalliset MCP-palvelimet pitäisi näkyä Elgato, jonka vieressä on vihreä Käynnissä -merkki.

Jos sovellus ei näy tai se ei näy käynnissä olevana, tarkista vielä, että Stream Deck -sovellus on auki ja MCP Actions -toiminto on käytössä, sekä että asetustiedosto on tallennettu oikein. Sulje sitten Claude Desktop kokonaan ja avaa se uudelleen.

Jos sovellus ei näy tai se ei näy käynnissä olevana, tarkista vielä, että Stream Deck -sovellus on auki ja MCP Actions -toiminto on käytössä, sekä että asetustiedosto on tallennettu oikein. Sulje sitten Claude Desktop kokonaan ja avaa se uudelleen.

NVIDIA G-Assist ja Claude Desktop ovat kaksi ensimmäistä sovellusta, jotka on liitetty järjestelmään, mutta koska MCP on avoin standardi, mikä tahansa yhteensopiva työkalu voidaan liittää samalla tavalla. Jokainen sovellus hyödyntää Stream Deckin koko integrointien, laajennusten ja työnkulkujen ekosysteemiä.

Tarkemmat asennusohjeet, muut liitäntätavat ja lisäasetukset löydät npm:n Elgato MCP Server -sivulta.

Ääniohjaus G-Assist-toiminnolla

Kun G-Assist on kytketty, äänesi toimii syöttötapana. Todellinen hyöty syntyy siitä, että voit suorittaa toimintoja kädet vapaana samalla, kun keskityt johonkin muuhun.

Sano ”valmistele striimini” kesken pelin, niin G-Assist hoitaa kaikki tarvittavat toimet: OBS käynnistyy, kohtaus valitaan, valot syttyvät ja musiikkisovellus käynnistyy. Näin koko valmistelurutiini hoituu äänikomennoilla, kun kädet pysyvät näppäimistöllä ja hiiressä.

Tapahtumapohjaiset työnkulut Aitumilla

Aitum vie tämän vielä pidemmälle poistamalla sinut kokonaan prosessista. Sen sijaan, että antaisit komennon, streamisi tapahtumat yhdistävät toimesi automaattisesti.

Raid-toiminto käynnistyy ja toiminnot laukeavat yhtä aikaa: kohtaukset vaihtuvat, valot himmenevät ja tervetulotoivotus soi. Tilaaja laukaisee erityisen hälytyssekvenssin. Kanavapisteiden lunastaminen aktivoi äänitehosteen. Nämä toimintaketjut tapahtuvat reaaliajassa, ilman että sinun tarvitsee painaa yhtään näppäintä tai sanoa sanaakaan.

Tekstipohjaiset tekoälytyökalut

Jos käytät Claude Desktopia, ChatGPT:tä tai muuta tekstipohjaista työkalua, voit kirjoittaa pyyntöjä samalla tavalla. Aloita keskustelu kysymällä ”Mitkä Stream Deck -toiminnot ovat käytettävissäni?”, jotta voit varmistaa yhteyden, ja kirjoita sen jälkeen tarvitsemasi komennot.

Jos toiminto ei käynnisty, tarkista seuraavat seikat:

1. Stream Deck -sovellus on käynnissä ja Asetukset-kohdassa on valittuna ”Ota MCP-toiminnot käyttöön ”.
2. Toiminto sijaitsee MCP Actions -profiilissa, ei missään muussa profiilissa.
3. Tekoälytyökalusi on yhdistetty Elgato MCP Server -palvelimeen. G-Assist-sovelluksessa tarkista, että palvelinta ajava komentorivi-ikkuna on edelleen auki ja että siinä näkyy yhteys Stream Deck -laitteeseen. Siirry Claude Desktop -sovelluksessa kohtaan Asetukset ja sitten Kehittäjä ja varmista, että elgato näkyy kohdassa Paikalliset MCP-palvelimet vihreällä Käynnissä-merkinnällä.

MCP-tuki Stream Deck 7.4:ssä on ensimmäinen askel kohti laajempaa tekoälyliitettävyyttä. G-Assist ja Aitum ovat ensimmäiset liitettävät sovellukset, mutta koska MCP on avoin standardi, ne eivät tule olemaan viimeisiä. Tekoäly tarjoaa syötteen. Stream Deck tarjoaa toimet. Ja kun yhä useammat työkalut liitetään, mahdollisuudet kasvavat jatkuvasti.

Mitä enemmän toimintoja olet määrittänyt Stream Deckissä, sitä enemmän niihin liitetyt tekoälytyökalut voivat niitä hyödyntää. Tutustu Elgato Marketplacen laajennuksiin ja laajenna mahdollisuuksiasi.