Prípadová štúdia · Telekomunikácie

DMS

Kontext

Aplikácia DMS je centralizované, webové úložisko pre všetok digitálny obsah; dokumenty, fotografie, wiki stránky a rozhodovacie stromy. Je navrhnutá na horizontálne škálovanie, aby zvládla veľké objemy dát. Súčasťou riešenia je pravidlami riadený nástroj na načítavanie, ktorý sa dokáže pripojiť k rôznym zdrojom dát a migrovať alebo synchronizovať obsah do DMS.

JavaMySQLOpenShift
Organizácia dokumentov a štruktúrované dáta
Organizácia dokumentov a štruktúrované dáta
Predchádzanie duplikácii a nesprávnej kategorizácii
Predchádzanie duplikácii a nesprávnej kategorizácii
Vyhľadávanie
Vyhľadávanie
Definícia problému a cieľ

Súčasťou budovania sieťovej infraštruktúry pre telekomunikačných operátorov je vytváranie množstva rôznych dokumentov, ako sú nájomné zmluvy, CAD výkresy, merania, inštalačné materiály a podobne. Keď je telekomunikačné miesto v prevádzke, vykonávajú sa ďalšie činnosti, ako sú revízie lokality, ktoré generujú ďalšiu dokumentáciu.

Všetky tieto dokumenty boli predtým uložené na jednom zdieľanom disku a s rastúcim objemom dokumentov bolo čoraz ťažšie nájsť tie správne. Na vyriešenie tohto problému začali používatelia vytvárať vlastné hierarchie priečinkov, čo znamenalo duplikovanie niektorých dokumentov. Zdieľaný disk mal aj ďalšie problémy, ako napríklad chýbajúce fulltextové vyhľadávanie, žiadna sledovateľnosť, slabá správa používateľských práv a podobne, ktoré bolo potrebné vyriešiť.

Odvetvie
Telekomunikácie
Kompetencie
Integrácia údajovDátové modelovanieMikroslužbyDistribuované aplikácieSpracovanie veľkého objemu dát
Technológie
JavaMySQLOpenShiftVueVuetifyDockerSpring StackApache SolrKubernetesREST

Výzvy

Tento projekt zahŕňal veľké množstvo neštruktúrovaných dát, ktoré bolo potrebné kategorizovať tak, aby používatelia mohli nájsť to, čo potrebujú, bez ohľadu na ich rolu v organizácii. Dokumenty boli vytvárané a používané internými zamestnancami spoločnosti Orange, ako aj používateľmi z externých spoločností.

  1. Organizácia dokumentov

    Z analýzy dokumentov uložených na zdieľanom disku bolo zrejmé, že používatelia majú rôzne „pohľady“ na kategorizáciu dokumentov. Pre niektorých používateľov bola kategorizácia „orientovaná na lokalitu“, zatiaľ čo iní používatelia kategorizovali na základe „časovo orientovaných“ priorít. To viedlo k rôznym hierarchiám priečinkov a fragmentácii dokumentov.

  2. Štruktúrované a neštruktúrované dáta

    Hoci väčšina dát bola uložená v dokumentoch, niektoré informácie boli uložené v samotných štruktúrach priečinkov. Typ dokumentu, číslo lokality, rok a oveľa viac bolo zakódované v názvoch priečinkov, čo bránilo správnemu využitiu týchto informácií.

  3. Duplikácia a zabezpečenie kvality

    Často sa stávalo, že používatelia prehliadli niektoré povinné priečinky, čo viedlo k nesprávnej kategorizácii dokumentov alebo k nahratiu dokumentu, ktorý už existoval.

  4. Vyhľadávanie

    Primárnym problémom systému ukladania dokumentov na zdieľanom disku bola zlá použiteľnosť pri vyhľadávaní dokumentov. Nebolo možné použiť fulltextové vyhľadávanie a bolo ťažké navigovať cez hierarchie priečinkov a riešiť duplikáty.

  5. Bezpečnosť a sledovateľnosť

    Ak používatelia presunuli dokumenty na iné miesto alebo omylom vymazali dokumenty, nebolo možné zistiť, ktorý používateľ to bol. Taktiež nebolo jednoduché chrániť dokumenty pred neoprávneným prístupom.

  6. Import dát

    Na zdieľanom disku už bola uložená veľká množina dokumentov, ktorá musela byť načítaná do DMS bez straty informácií o jej kategorizácii.

  7. Dáta na informácie

    Používatelia nemali jednoduchú možnosť získať odpoveď na jednoduchú otázku: Koľko existuje lokalít, ktoré nemajú elektrickú revíziu za rok 2020.

Riešenia

V spoločnosti Koderia (predtým Objectify) sme vytvorili webový systém DMS, ktorý nebol organizovaný okolo priečinkov, ale namiesto toho umožňoval definovať vlastné polia na dokumentoch, ktoré sa dali použiť na ukladanie rôznych metadát, ako aj na vyhľadávanie.

Organizácia dokumentov a štruktúrované dáta

Používanie priečinkov na kategorizáciu dokumentov má niekoľko zásadných nevýhod; používatelia sa musia dohodnúť na jedinej hierarchii priečinkov a podľa toho priradiť dokumenty. Okrem toho priečinky neposkytujú žiadne informácie o dátach, ktoré obsahujú. Preto sme sa rozhodli nepoužívať priečinky vôbec. V DMS sú všetky štruktúrované informácie (Projekt, Dátum vytvorenia, Typ dokumentu, čokoľvek chcete) uložené v špecifickom atribúte dokumentu, ktorý umožňuje pokročilé filtrovanie, reportovanie o dokumentoch, validácie, pravidlá povolení na základe hodnôt atribútov a ďalšie.

Organizácia dokumentov a štruktúrované dáta

Predchádzanie duplikácii a nesprávnej kategorizácii

Používatelia môžu definovať typy dokumentov a ich atribúty. Môžu si tiež prispôsobiť, ktoré polia sú povinné. Aby sme zabránili duplikovaniu obsahu používateľmi, implementovali sme vyhľadávanie na identifikáciu podobností v obsahu a upozornenie používateľa na nájdené výsledky. Okrem toho môžu používatelia definovať „Stromy nahrávania“ na jednoduché nahrávanie rôznych typov dokumentov pre daný scenár. Používatelia môžu tiež konfigurovať pravidlá na zahrnutie štruktúrovaných informácií z nahrávaných priečinkov.

Predchádzanie duplikácii a nesprávnej kategorizácii

Vyhľadávanie

Používame Apache Solr na indexovanie dokumentov a fulltextové vyhľadávanie so zvýrazňovaním výskytu slov, funkciami automatického dopĺňania alebo opravami pravopisu. Ďalej sme implementovali fasetové vyhľadávanie, aby používatelia mohli jednoducho zúžiť výsledky fulltextového vyhľadávania. Fasetové vyhľadávanie tiež umožňuje poradie vyhľadávania nezávislé od hierarchie; používatelia „orientovaní na lokalitu“ môžu začať filtrovaním podľa lokality a používatelia „časovo orientovaní“ filtrujú podľa časového rozsahu.

Vyhľadávanie

Bezpečnosť a sledovateľnosť

Implementovali sme bezpečnostný mechanizmus do DMS, ktorý sa dá jemne doladiť až na úroveň jednotlivých dokumentov. Používatelia môžu určiť prístupové práva individuálne pre každý dokument alebo konfigurovať pravidlá na základe hodnôt polí dokumentu. Okrem toho vedieme podrobný protokol o aktivite na každom dokumente, takže sa nestratí žiadna akcia používateľa.

Import dát

Aby sme mohli migrovať dáta do DMS, implementovali sme samostatný migračný nástroj s konfigurovateľným pravidlovým enginom, ktorý nielen migruje dokumenty, ale dokáže synchronizovať dokumenty z rôznych zdrojov dát (zdieľaný disk, SharePoint, databáza, …). Týmto spôsobom sa dá DMS použiť nielen ako úložisko dokumentov, ale aj ako vyhľadávač pre iné aplikácie.

Informácie z dát

Uloženie všetkých štruktúrovaných dát do vyhradených polí nám umožnilo vytvoriť reportovací engine, v ktorom môžu používatelia vytvárať tabuľkové reporty na sledovanie priebehu inštalácií, štatistiky dokumentov a oveľa viac.

Základné funkcie

  • Integrácia údajov
  • Dátové modelovanie
  • Spracovanie veľkého objemu dát
  • Mikroslužby
  • Distribuované aplikácie
Je to pre vás?

Vašich dokumentov každý deň pribúda. Nájsť ich by nemalo byť ťažšie.

DMS sme postavili, aby nahradil zdieľaný disk plný dokumentov k lokalitám z výstavby telekomunikačnej siete. Rovnaký problém vzniká všade, kde projekty produkujú zmluvy, výkresy, merania a fotky vo veľkých objemoch.

  • Telekomunikácie a výstavba sietí
  • Stavebníctvo a reality
  • Energetika a distribúcia
  • Projektovo riadené organizácie
Poznáte to?

0 z 5 poznáte

Ako by sme začali

  1. Namodelovať typy dokumentovAtribúty namiesto priečinkov: projekt, lokalita, typ dokumentu, dátum, čokoľvek potrebujete.
  2. Migrovať podľa pravidielKonfigurovateľný migračný nástroj načíta a synchronizuje obsah z vašich existujúcich zdrojov.
  3. Urobiť ich nájditeľnými a bezpečnýmiFulltextové vyhľadávanie, kontrola duplicít, práva až na úroveň jedného dokumentu a záznam aktivity.
Dokumenty stratené v priečinkoch?

Povedzte nám
o svojom projekte

Opíšte, čo chcete vybudovať. Do 24 hodín sa vám ozveme s návrhom ďalších krokov.

Potrebujete viac informácií?

Obráťte sa priamo na našich projektových manažérov, radi vám povedia viac.

Romana Kovalová