Âûáèðàé : Ïîêóïàé : Èñïîëüçóé
0

Ãðóïïà Arenadata âûïóñòèëà âåðñèþ Arenadata Catalog 1.0.0

Ãðóïïà Arenadata îáúÿâèëà î âûõîäå âåðñèè 1.0.0 Arenadata Catalog (ADC) — ñèñòåìû óïðàâëåíèÿ êîðïîðàòèâíûìè äàííûìè, ïðåäíàçíà÷åííîé...

Ãðóïïà Arenadata îáúÿâèëà î âûõîäå âåðñèè 1.0.0 Arenadata Catalog (ADC) — ñèñòåìû óïðàâëåíèÿ êîðïîðàòèâíûìè äàííûìè, ïðåäíàçíà÷åííîé äëÿ âíåäðåíèÿ ïðàêòèê Data Governance. Îáíîâëåíèå âêëþ÷àåò ïåðåðàáîòàííûé èíòåðôåéñ, ðàñøèðåííûå âîçìîæíîñòè óïðàâëåíèÿ äàííûìè è áîëåå 120 óëó÷øåíèé. Îá ýòîì CNews ñîîáùèëè ïðåäñòàâèòåëè Arenadata.

Arenadata Catalog — ñèñòåìà óïðàâëåíèÿ êîðïîðàòèâíûìè äàííûìè, êîòîðàÿ ïîìîãàåò îðãàíèçàöèÿì âíåäðÿòü ïðîöåññû Data Governance, îáúåäèíÿþùàÿ â åäèíîì èíòåðôåéñå êàòàëîã ìåòàäàííûõ, áèçíåñ-ãëîññàðèé, ïîèñê, ïðîôèëèðîâàíèå è ïðîâåðêó êà÷åñòâà äàííûõ, ïëàòôîðìó ñîòðóäíè÷åñòâà ïîëüçîâàòåëåé, àâòîìàòè÷åñêîå ïîñòðîåíèå Data Lineage è äðóãèå ôóíêöèîíàëüíûå âîçìîæíîñòè. Arenadata Catalog ðàçðàáàòûâàåò, ïîääåðæèâàåò è ðàçâèâàåò ýêîñèñòåìó êîííåêòîðîâ ê èñòî÷íèêàì äàííûõ è áèçíåñ-ïðèëîæåíèÿì äëÿ îáåñïå÷åíèÿ óíèâåðñàëüíîãî ìåõàíèçìà óïðàâëåíèÿ äàííûìè îðãàíèçàöèè.

Êëþ÷åâûì íîâîââåäåíèåì ñòàëà äîìåííàÿ ìîäåëü ñ ïîääåðæêîé äàòà-ïðîäóêòîâ. Äàííûå òåïåðü ìîæíî ñòðóêòóðèðîâàòü ïî áèçíåñ-îáëàñòÿì, çàêðåïëÿòü çà íèìè âëàäåëüöåâ, íàñòðàèâàòü äîñòóï è ðàñøèðÿòü îïèñàíèå ñ ïîìîùüþ êàñòîìíûõ àòðèáóòîâ è ñâÿçåé. Òàêîé ïîäõîä óïðîùàåò íàâèãàöèþ, äåëàåò çîíû îòâåòñòâåííîñòè ïðîçðà÷íûìè è ïîääåðæèâàåò äåöåíòðàëèçîâàííîå óïðàâëåíèå äàííûìè.

 ñèñòåìå ïîÿâèëèñü èíñòðóìåíòû ñåðòèôèêàöèè îáúåêòîâ êàòàëîãà ñ àâòîìàòè÷åñêèì ðàñ÷åòîì ðåéòèíãà è ó÷åòîì ïîëüçîâàòåëüñêèõ îöåíîê. Ýòî ïîçâîëÿåò îïåðàòèâíî êîíòðîëèðîâàòü êà÷åñòâî è àêòóàëüíîñòü äàííûõ.

Îáíîâëåí áëîê Data Lineage. Ïîëüçîâàòåëÿì ñòàëè äîñòóïíû äåòàëüíûé è îáçîðíûé ðåæèìû ïðîñìîòðà, âîçìîæíîñòü àðõèâèðîâàíèÿ ïîòîêîâ, à òàêæå ýêñïîðò S2T-ôàéëîâ ñ ó÷åòîì çàäàííûõ ïàðàìåòðîâ îòîáðàæåíèÿ è ôèëüòðàöèè.

Ðàñøèðåí ôóíêöèîíàë ïîèñêà: òåïåðü îí îõâàòûâàåò íå òîëüêî òàáëèöû, íî è õðàíèìûå ïðîöåäóðû, BI-ìîäåëè, ñõåìû è áàçû äàííûõ.

 ÷àñòè êà÷åñòâà äàííûõ ðåàëèçîâàíà èíòåãðàöèÿ ñ Arenadata Catalog Data Quality Framework (ADC.DQF). Ðåøåíèå ïîääåðæèâàåò óïðàâëåíèå ïðàâèëàìè ïðîâåðîê, ðàñøèðåííûå àëãîðèòìû è äîïîëíèòåëüíûå ôîðìàòû äîçàïðîñîâ, âêëþ÷àÿ XML (SOAP), à òàêæå íîâûå ôóíêöèè îáðàáîòêè ñòðîê è íàñòðîéêè ïðàâèë.

Îòäåëüíîå ðàçâèòèå ïîëó÷èë AI-áëîê. Arenadata Catalog èíòåãðèðîâàí ñ ïëàòôîðìîé ñìûñëîâîãî ïîèñêà ADvanced RAG è ìîäóëåì AI Data Steward, ÷òî ïîçâîëÿåò àâòîìàòèçèðîâàòü îïèñàíèå è êëàññèôèêàöèþ äàííûõ. Ñèñòåìà ôîðìèðóåò ïðåäëîæåíèÿ â âèäå çàÿâîê íà èçìåíåíèÿ, ñíèæàÿ òðóäîçàòðàòû íà âåäåíèå êàòàëîãà è ïîâûøàÿ êà÷åñòâî ìåòàäàííûõ.

«Â íîâîé âåðñèè ìû çíà÷èòåëüíî ðàñøèðèëè âîçìîæíîñòè àâòîìàòèçàöèè ðàáîòû ñ ìåòàäàííûìè. Ïîëüçîâàòåëÿì äîñòóïíà ãåíåðàöèÿ îïèñàíèé òàáëèö è êîëîíîê êàê òî÷å÷íî, òàê è ìàññîâî áåç ïîòåðè êà÷åñòâà. Òàêæå ðåàëèçîâàíà ãåíåðàöèÿ ãèïîòåç ïî êëàññèôèêàöèè äàííûõ. Âñå èçìåíåíèÿ îôîðìëÿþòñÿ â âèäå çàÿâîê, ÷òî ïîçâîëÿåò ñîõðàíÿòü êîíòðîëü è ïðîçðà÷íîñòü ïðîöåññîâ», — îòìåòèë Èãîðü Ìîèñååâ, äèðåêòîð ïî ðàçâèòèþ áèçíåñà DataCatalog (âõîäèò â ãðóïïó Arenadata).

Èíòåðôåéñ Arenadata Catalog áûë ïåðåðàáîòàí. Ïîëüçîâàòåëè ìîãóò íàñòðàèâàòü ïðåäñòàâëåíèÿ, ïîðÿäîê âêëàäîê, ñîñòàâ êîëîíîê è ôèëüòðû, à àäìèíèñòðàòîðû — ñîõðàíÿòü ãëîáàëüíûå êîíôèãóðàöèè.  ñèñòåìå òàêæå ïîÿâèëèñü íîâûå ðàçäåëû äëÿ óïðàâëåíèÿ ïðîöåññàìè è çàãðóçêàìè, âêëþ÷àÿ öåíòðàëèçîâàííóþ ðàáîòó ñ DAG Airflow.

Äîïîëíèòåëüíî îáíîâëåíû ìåõàíèçìû óïðàâëåíèÿ ïîëüçîâàòåëÿìè, ïîëèòèêè äîñòóïà è íàñòðîéêè ñèñòåìû. Ïðîâåäåíà ìàñøòàáíàÿ îïòèìèçàöèÿ ïðîèçâîäèòåëüíîñòè è ñòàáèëüíîñòè, èñïðàâëåíî çíà÷èòåëüíîå êîëè÷åñòâî îøèáîê.

«Îðãàíèçàöèè ïåðåõîäÿò îò ðàçðîçíåííûõ èíèöèàòèâ ê ñèñòåìíîé ðàáîòå ñ äàííûìè êàê ñ ïðîäóêòîì. Ïîýòîìó öåíòðîì ýòîãî ðåëèçà ñòàëè äîìåííàÿ ìîäåëü, äàòà-ïðîäóêòû, êà÷åñòâî äàííûõ è èíòåëëåêòóàëüíûå èíñòðóìåíòû. Ýòè ôóíêöèè êàòàëîãà æèçíåííî íåîáõîäèìû äëÿ êîìàíä, âíåäðÿþùèõ ïîäõîäû Data Mesh. Íàøà çàäà÷à — ñäåëàòü ðàáîòó ñ äàííûìè óïðàâëÿåìîé è ïðè ýòîì óäîáíîé äëÿ âñåõ ó÷àñòíèêîâ ïðîöåññà: îò èíæåíåðîâ äî áèçíåñ-ïîëüçîâàòåëåé», — ñêàçàë Èãîðü Ìîèñååâ.

Êîììåíòàðèè