Partajati date IoT si Jurnal in timp real utilizand Azure Data Share si Azure Data Explorer

In lumea digitala de astazi, din ce in ce mai multe date sunt generate de dispozitivele si software-urile implementate acasa si la serviciu. Acestea ar putea fi date colectate de la aplicatii, site-uri web, dispozitive si echipamente IoT. Adesea, aceste date trebuie sa fie partajate si imbogatite cu date terte in timp real pentru a obtine informatii. In mod traditional, datele sunt partajate prin generarea unui flux de date pus la dispozitie prin partajarea de fisiere, FTP etc. Acest proces impune organizatiilor sa investeasca in mentinerea conductelor de date si sa introduca latenta in sistem.

Azure Data Explorer este un serviciu de analiza a datelor complet gestionat pentru analiza in timp real a volumelor mari de date transmise in flux din aplicatii si dispozitive. Puteti utiliza Azure Data Explorer pentru a colecta, stoca si analiza diverse date din mers pentru a identifica rapid modele, anomalii si tendinte. Partajarea datelor Azure permite partajarea usoara si sigura a datelor in cadrul sau intre organizatii. Puteti partaja date fara cod, mentinand in acelasi timp o vizibilitate deplina in relatiile dvs. de partajare a datelor, inclusiv cu ce date sunt partajate si cu cine sunt partajate.

Cu integrarea intre Azure Data Explorer si Azure Data Share, datele pot fi partajate cu usurinta si in siguranta cu partenerii, furnizorii de servicii sau clientii pentru o colaborare aproape in timp real.

Iata un exemplu despre modul in care organizatiile cu fabrici utilizeaza Azure Data Explorer si Azure Data Share pentru analize aproape in timp real. Datele sunt transmise in flux de la IoT Hub in clusterul Azure Data Explorer si stocate in baze de date. Apoi este partajat prin Azure Data Share catre clusterul Azure Data Explorer al furnizorului de servicii pentru analiza si tablou de bord.

Cum functioneaza partajarea datelor

Partajarea datelor Azure permite partajarea bazelor de date in loc din clusterele Azure Data Explorer. Furnizorul de date poate crea o partajare specificand bazele de date cu care doresc sa partajeze, cu cine sa partajeze si conditiile de utilizare. Aceleasi date pot fi partajate cu mai multi consumatori de date. Serviciul Azure Data Share trimite o invitatie prin e-mail catre fiecare consumator de date, care poate apoi accepta invitatia si specifica un cluster Azure Data Explorer tinta in acelasi centru de date Azure pentru a accesa datele.

Dupa stabilirea relatiei de partajare, Azure Data Share creeaza o legatura simbolica intre clusterele Azure Data Explorer ale furnizorului si ale consumatorului. Aceasta permite consumatorului de date sa citeasca si sa interogheze datele, dar sa nu scrie in bazele de date partajate. Accesul la date utilizeaza resurse de calcul din clusterul Azure Data Explorer al consumatorului. De asemenea, consumatorul de date isi poate configura propriile politici de acces si cache in bazele de date partajate, precum si vizualiza jurnalele propriei interogari. Cand politica de memorare in cache este configurata, datele sunt stocate in cache pe clusterul Azure Data Explorer al consumatorului pentru performante de interogare imbunatatite, dar nu sunt copiate in memoria blob care alimenteaza clusterul Azure Data Explorer al consumatorului.

Furnizorul de date poate opri partajarea prin revocarea accesului. Acest lucru va elimina legatura simbolica si va incheia accesul la baza de date partajata.

Furnizorul de date partajeaza datele

Pentru a partaja date, utilizatorul are nevoie de permisiune de scriere si permisiune pentru a adauga atribuirea rolului la clusterul sursa Azure Data Explorer. Aceste permisiuni exista de obicei in rolul de proprietar.

Urmatorii pasi pentru partajarea datelor sunt: 

1. Creati o resursa Azure Data Share
2. In cadrul resursei Azure Data Share, creati o partajare specificand urmatoarele informatii:
   • Nume
   • Tipul de distribuire: in loc
   • Descriere (optional)
   • Conditii de utilizare (optional)
   • Cluster sau baze de date Azure Data Explorer – Cand un cluster este partajat, toate bazele de date din cluster, inclusiv bazele de date viitoare create de furnizorul de date, sunt puse la dispozitia consumatorului de date. Cand baza de date este partajata, numai baza de date individuala este disponibila pentru consumatorul de date.
   • Adresa de e-mail de conectare Azure a destinatarilor

Consumatorul de date primeste date

Pentru a primi date, utilizatorul are nevoie de permisiune de scriere si permisiune pentru a adauga atribuirea rolului la clusterul Azure Data Explorer tinta. Aceste permisiuni exista de obicei in rolul de proprietar.

Urmatorii pasi pentru a primi date: 

1. Primiti invitatia prin e-mail si urmati linkul pentru a va conecta la Azure
2. Acceptati conditiile de utilizare si acceptati invitatia in propria resursa Azure Data Share
3. Specificati un cluster Azure Data Explorer in acelasi centru de date Azure ca sursa pentru accesarea datelor

Consumatorul de date poate merge acum la clusterul Azure Data Explorer pentru a acorda permisiunile utilizatorilor bazelor de date partajate si pentru a accesa datele. Datele ingerate folosind modul batch in sursa Azure Data Explorer cluster vor aparea pe clusterul tinta in cateva secunde pana la cateva minute. 

Resurse aditionale

• Documentatia Azure Data Share 
• Videoclipuri Azure Data Share
• Pagina web a produsului Azure Data Share 
• Documentatia Azure Data Explorer
• Pagina web a produsului Azure Data Explorer