UBC DATA BRIDGE
Құжаттама
Практикалық нұсқаулықтар: алғашқы ағын, деректерді дайындау және тасымалдау, API, Agent, коннекторлар, орындау, қолжетімділік және мысалдар.
Алғашқы ағыныңыз
Қосу → Түрлендіру → Тексеру → Іске қосу.
02API баптау
Кіріс сұраулар, шығыс шақырулар, деректерді жариялау және қолжетімділік.
03Agent баптау
Windows, macOS, Linux, ресурстар және диагностика.
04Ағын редакторының мүмкіндіктері
Әр сипатталған блоктың параметрлері мен ережелері.
05Басқа қолданбадан іске қосу
Батырма, шебер, параметрлер және орындау күйлері.
Жұмысты бастау
UBC Data Bridge 2.1.1: деректер алмасу, API, жабық желі ресурстары және басқарылатын жұмыс процестері.
↗UBC Data Bridge мүмкіндіктеріБір көрнекі ағында дереккөзден тексерілген нәтижеге дейін.
↗Алғашқы ағынҚадам бойынша: кестені жүктеу, жолдарды таңдау және файл алу.
↗Негізгі ұғымдарДереккөз, қосылым, блок, ағын, жоба нұсқасы және іске қосу — жүйенің бөлек нысандары.
↗Архитектура
Іске асыру тілдеріне тәуелсіз жүйе құрамдастары және олардың міндеттері.
↗Орындау механизмі және өнімділікЖүйе графты қалай орындайды, ресурстарды басқарады және жазуды дайындайды.
↗Орналастыру нұсқаларыДербес өнім немесе UBC Analytics құрамындағы интеграция; онлайн және офлайн дистрибутивтер.
↗Метадеректер және файлдарды сақтауДерекқорда не сақталады, файл түрінде не сақталады және оқшаулау қалай жұмыс істейді.
↗Ағындар және орындау
Ағындарды, қосылымдарды және дереккөздерді табу; қалталармен және өңдеу құлыптарымен жұмыс істеу.
↗Ағын конструкторыКенеп, блоктар, порттар, қасиеттер және аралық нәтижелерді талдау.
↗Жоба нұсқалары және ProductionӨңдеу, автоматты сақтау, симуляция және жұмыс нұсқасын жариялау.
↗Іске қосу, тексеру және нәтижелерКүйлерді түсіну және ақаудан кейін қайталанымдарды болдырмау.
↗Басқа сайттағы іске қосу түймесіКорпоративтік порталдан ағынды іске қосу: мақсаты, URL арқылы ендіру, күйлер және интерактивті шебер.
↗Кестелер және автоматты тапсырмаларУақыт, аралық немесе дереккөз өзгерісі бойынша бастау.
↗Деректер көздері және коннекторлар
Файлды ағынға арналған тұрақты кестеге айналдыру.
↗Файл менеджеріБасқарылатын файлдар, нұсқалар, қалталар және сақтау баптаулары.
↗Қашықтағы файл қоймаларыGoogle Drive, OneDrive, S3, FTP/FTPS және желілік дискіні баптау.
↗Қосылымдармен жұмысҚызметке қатынауды жасау, тексеру және пайдаланудың ортақ рәсімі.
↗Дерекқорларды оқу және жазуКестелер, сұраулар, кілттер және қосу/жаңарту режимдері.
↗REST API және ODataРесурстар, пішімдер, жауап беттері және жолдарды жеткізу.
↗Microsoft Dynamics 365Қосылым баптаулары, міндетті өрістер және пайдалану ережелері.
↗1C:Enterprise 8 (жергілікті сервер)Қосылым баптаулары, міндетті өрістер және пайдалану ережелері.
↗Microsoft SQL ServerҚосылым баптаулары, міндетті өрістер және пайдалану ережелері.
↗Azure SQL DatabaseҚосылым баптаулары, міндетті өрістер және пайдалану ережелері.
↗Oracle DatabaseҚосылым баптаулары, міндетті өрістер және пайдалану ережелері.
↗IBM Db2Қосылым баптаулары, міндетті өрістер және пайдалану ережелері.
↗PostgreSQLҚосылым баптаулары, міндетті өрістер және пайдалану ережелері.
↗MySQL / MariaDBҚосылым баптаулары, міндетті өрістер және пайдалану ережелері.
↗ClickHouseҚосылым баптаулары, міндетті өрістер және пайдалану ережелері.
↗RedisҚосылым баптаулары, міндетті өрістер және пайдалану ережелері.
↗ODBC дереккөзіҚосылым баптаулары, міндетті өрістер және пайдалану ережелері.
↗REST API (кез келген HTTP қызметі)Қосылым баптаулары, міндетті өрістер және пайдалану ережелері.
↗Электрондық пошта (SMTP)Қосылым баптаулары, міндетті өрістер және пайдалану ережелері.
↗Telegram ботыҚосылым баптаулары, міндетті өрістер және пайдалану ережелері.
↗API баптау
API бағытын таңдау, қатынауды дайындау, ағынды жариялау және толық алмасу циклін тексеру.
↗API арқылы деректер мен файлдарды қабылдауКіріс түпкі нүктесін, өрістерді тексеруді, Production ағынын, қайталауды қауіпсіз өңдеуді және жеткізілім бақылауын баптау.
↗Сыртқы API-ден оқу және оған жіберуREST қосылымын баптау: аутентификация, жауапты талдау, беттеу, топтамалық жазу және қайталауды басқару.
↗API арқылы ағын деректерін жариялауСүзгілермен, беттеумен, өзектілік тексеруімен немесе сұрау бойынша орындаумен деректер жиынын жариялау.
↗API клиенттері, кілттер және сұрауға қол қоюСыртқы жүйеге басқарылатын ағын қатынауын беріп, кілтін, HMAC қолтаңбасын және құқықтарын тексеру.
↗API техникалық анықтамасы және тексеруТүпкі нүктенің ағымдағы анықтамасын баптауларынан жасау, интеграторларға қатынау беру және алмасу келісімін тексеру.
↗Agent баптау
UBC Data Bridge жүйесін жабық желі ресурстарына қосу, агентті тіркеу және оның бүкіл жұмыс кезеңінде қатынауын басқару.
↗Windows жүйесіндегі агент: орнату және баптауWindows қызметін орнату, қауіпсіз тіркеу, қалтаға қатынау беру, байланысты тексеру және агентке қызмет көрсету.
↗macOS жүйесіндегі агент: орнату және баптауMac компьютеріне агент орнату, тіркеу, қызмет құқықтары мен желілік томдарды баптау және жаңартуларды басқару.
↗Linux жүйесіндегі агент: орнату және баптауLinux ортасын дайындау, агентті Data Bridge жүйесіне қосу, қалтаға қатынау беру және қызмет жұмысын тексеру.
↗Агент: ресурстар, құқықтар және желіРұқсат етілген қалталарды, дерекқорларды және API қызметтерін, прокси аутентификациясын, сенімді сертификаттарды және Data Bridge бағытын баптау.
↗Агент: диагностика және ақауларды жоюАгент ақауларының себебін табу, желі мен құқықтарды тексеру, файл амалдарын қауіпсіз қайталау және пайдалы қолдау есебін дайындау.
↗Блоктар және түрлендірулер
Өңдеу, өзара әрекеттесу, ағындарды шақыру, API және нәтиже жеткізу блоктары.
↗ФайлТіркелген файлдық дереккөзді оқиды немесе оның ауқымына жазады.
↗ҚосылымБизнес-жүйелерге, дерекқорларға, файл қоймаларына және сыртқы API қызметтеріне арналған ортақ блок.
↗Өрістердің реті мен көрінуіҚажетті өрістерді қалдырып, олардың реті мен атауларын өзгертеді.
↗Бағандарды жолдарға айналдыруКезеңдері бағандарда орналасқан кең кестені «кезең — мән» жолдарына айналдырады.
↗Бағандарды сәйкестендіруТаңдалған бағандар мен тұрақты мәндерден жаңа кесте құрады.
↗СүзгіКөрсетілген шарттарға сай жолдарды қалдырады.
↗ТоптауЖолдарды кілттер бойынша топтап, қорытынды көрсеткіштерді есептейді.
↗Іске қосу параметрлеріОрындауды басқаратын пайдаланушы пішіні және тұрақты мәндер.
↗Union — жолдарды біріктіруБірнеше кесте жолдарын бір деректер жиынына біріктіреді.
↗Join — кілт бойынша біріктіруОртақ кілттер арқылы басқа кестелердің өрістерін қосады.
↗Қайталанымдарды жоюӘр кілттің қажетті данасын немесе тек бір рет кездесетін кілттерді қалдырады.
↗БағыттауЖолдарды шартты тармақтар арасында, соның ішінде анықтамалық мәндер бойынша бөледі.
↗ТармақтағышБүкіл кестені бір уақытта бірнеше тармаққа береді.
↗Есептелетін өрістерСандар, мәтін, күндер және шарттар үшін есептеулер қосады.
↗Орындау кезінде файл таңдауОсы қадамда файл жүктейтін сақталған ағындармен үйлесімділік.
↗Деректерді алдын ала қарауОрындау кезінде тексеруге арналған кесте және тармақты жазусыз аяқтау тәсілі.
↗Деректер экспортыExcel, CSV, TXT, JSON, XML немесе SQLite файлын жасайды.
↗Мәтінді түрлендіруМәтіндік өрістерді ретімен тазалау және біріздендіру.
↗Бірегей идентификаторGUID, Snowflake ID немесе реттік нөмір қосады.
↗Сандар мен күндер пішімдеріСандар мен күнтізбелік мәндерді тану, қалыпқа келтіру және пішімдеу.
↗Деректерді тазалау және сапаны бақылауАлмастыру, жолды қабылдамау және сапа қатесінде тоқтату ережелері.
↗Бір жолдық кестемен толықтыруБір қосымша жолдың көрсеткіштерін негізгі кестенің әр жолына қосады.
↗Жолдар мен бағандарды ауыстыруКестенің жолдары мен бағандарын орын алмастырады.
↗ХабарПайдаланушы бастаған орындауда хабарлама немесе диалог көрсетеді.
↗Нұсқаны таңдауБір тармақты белсенді ететін пайдаланушының қолмен шешімі.
↗Тармақтарды біріктіруОрындалған балама тармақтардың бірін жалғастырады.
↗Өріс мәндерін орнатуШарт бойынша бар өрістерді өзгертіп, жаңаларын қосады.
↗Электрондық поштаБапталған пошта қосылымы арқылы хаттар жібереді.
↗Telegram хабарыБот арқылы хабарлар мен тіркемелер жібереді.
↗Рөл және пайдаланушыUBC Analytics ағымдағы рөлі мен пайдаланушысының мәндерін қосады.
↗Формула функцияларының анықтамасыҚұжатталған нұсқаның барлық функциялары: шақыру пішімі, мақсаты және мысалдары.
↗Файл тасымалдауФайл менеджері мен қосылған қоймалар арасында файлдар мен қалталарды көшіру және жылжыту.
↗Іске қосу тәсілі бойынша бағыттауҚолмен іске қосу, кіріс API және Workspace түймесі үшін бөлек тармақтар.
↗Ағындарды шақыруБір немесе бірнеше басқа ағынның Production нұсқасын параметрлермен және деректермен бастау.
↗Ағыннан деректер қабылдауБасқа ағыннан кесте қабылдайтын ішкі ағынның немесе процестің кірісі.
↗Ағынды шақыру (ішкі ағын)Ағынды функция ретінде қайта пайдалану: кіріс кестесі және түрлендірілген шығыс кестесі.
↗Деректерді ағынға қайтаруШақырушы ішкі ағын блогына қайтарылатын анықталған шығыс.
↗API кіріс деректеріСыртқы сұрау деректері мен файлдарына арналған дереккөз блогы: пішімдер, өрістер, кілттер, тексеру және симуляция.
↗API деректерін жариялауАғын нәтижесін параметрлермен, сүзгілермен және орындау режимімен жариялайтын, тармақты аяқтайтын блок.
↗IBM Planning Analytics
UBC Data Bridge TM1 жүйесімен қалай жұмыс істейді, қандай нысандар қолжетімді және интеграция сценарийін қалай таңдау керек.
↗TM1 қосылымын жасау және тексеруREST мекенжайы, желілік қатынау, сертификаттар және бес аутентификация тәсілі.
↗CAM, SSO және пайдаланушының өз сессиясыUBC Data Bridge жүйесіне кіру, Cognos және жеке құқықтармен TM1 қатынауы қалай бірге жұмыс істейді.
↗Корпоративтік кіру және фондық іске қосуларАвтоматты ағындарға сақталған тіркелгі, Cognos шлюзі және кіру шектеулері.
↗Кубтар мен ашық көріністерді оқуIBM дереккөз баптаулары, шығыс бағандары, біріктірулер және көлем шектері.
↗Өлшемдер, иерархиялар және атрибуттарҚұрылым, салмақ және қайталанатын элемент кездесулері бар IBM анықтамалығын қалай шығару керек.
↗Ішкі жиындар және IBM элемент параметрлеріІске қосу пішінінде өлшем элементін таңдау және мәнін қабылдаушыларда пайдалану.
↗Жолдарды TM1 ұяшықтарына сәйкестендіруӨлшемдер, тұрақтылар, сәйкестендіру кестелері, бүркеншік атаулар және қайталанатын координаттарды өңдеу.
↗Кубқа жазу: тексеру, топтамалар және нәтижелерЖазудан бұрын не тексеріледі және расталған не анықталмаған нәтижелерді қалай өңдеу керек.
↗Кубты тазалау және транзакциялық үстемеҚосу, алмастыру, басқарылатын тазалау және пішінді сақтау оқиғасынан куб жаңарту.
↗TurboIntegrator процестері және автоматтандыруTI процесін таңдау, параметрлер, симуляция, IBM күйі және Chores айырмасы.
↗IBM Planning Analytics Workspace ішіндегі іске қосу түймесіКітапқа URL арқылы қосу: Data Bridge және PAW баптауы, стиль мысалдары, күйлер және есеп жаңарту шебері.
↗Әкімшілендіру
Жергілікті кіру, OIDC, IBM CAM және UBC Analytics үшін ортақ қатынау үлгісі.
↗UBC Analytics интеграциясыОрталар, жұмыс кеңістіктері, пішіндер, кубтар және іске қосу түймелері.
↗Импорт, экспорт және көшіруАғындарды, дереккөздерді және қосылымдарды орталар арасында қалай көшіру керек.
↗Диагностика және жиі қателерҚате хабарынан нақты блокты тексеруге дейін.
↗Лицензиялау және орнатудың жұмыс күйіБелсендіру, жарамдылық мерзімі және жүйе жұмысын тексеру.
↗Осы құжаттама туралыUBC Data Bridge 2.1.1 құжаттамасын, мысалдарын және суреттерін пайдалану.
↗Ағын мысалдары
Қарапайым CSV импортынан IBM Planning Analytics жүйесіне жазуға дейінгі практикалық жол.
↗01. CSV-ді JSON-ға айналдыруНүктелі үтірмен бөлінген сатылым файлын оқып, баған атауларын сақтап, келесі интеграцияға JSON дайындау.
↗02. Excel: айларды бағандардан жолдарға айналдыруКең Excel бюджет үлгісін кезең өлшемі бар модельге жүктеуге дайындау.
↗03. JSON: ішкі жазбалар массивін алуJSON ішінен data.items массивін алып, бірізді баған ретімен жазық CSV жасау.
↗04. XML: өнім каталогын Excel-ге шығаруҚайталанатын XML элементтерін таңдап, id атрибутын код ретінде қолданып, каталогты Excel-ге жазу.
↗05. Кодтарды қалыпқа келтіру және қайталанымдарды жоюӨнім кодтарын бір жазылымға келтіріп, әр кодтың соңғы жазбасын сақтау.
↗06. Ретті сапа ережелеріЖоқ мәндер мен теріс сандарды түзету, Excel қателерін алмастыру және жарамсыз мәтіні бар жолдарды қабылдамау.
↗07. Түсім және өңірлік қорытындыларӘр сатылым түсімін есептеп, өңір бойынша қорытынды кесте дайындау.
↗08. Join: сатылымдарды баға анықтамалығымен біріктіруСандық кілтпен сатылымдарға баға қосып, бағасы жоқ жолдарды сақтау.
↗09. Union: филиал деректерін біріктіруБаған реті өзгеше болса да, екі сатылым жиынын атаулар бойынша бір кестеге біріктіру.
↗10. Ірі тапсырыстарды бағыттауТапсырыстарды сома бойынша басым және қалыптыға бөліп, әр тармаққа жеке файл жасау.
↗11. Лимит анықтамалығы бойынша бағыттауӨтінім сомасын барлығына бір тұрақтымен емес, бөлімнің жеке лимитімен салыстыру.
↗12. Іске қосу параметрімен сүзуАғынды өңдемей, пайдаланушыға өңір мен ең төменгі соманы таңдауға мүмкіндік беру.
↗13. SQL: ашық тапсырыстарды таңдауБір SELECT сұрауымен шектеулі SQL жазбаларын оқып, тексеру CSV файлын жасау.
↗14. SQL: өнім анықтамалығын қосу/жаңартуsku кілті бойынша бар өнімді жаңартып, жоқ өнімді оқу SQL кестесіне қосу.
↗15. REST API: JSON жауабынан тапсырыстарAPI ресурсын оқып, data.items массивін алу, ашық тапсырыстарды қалдыру және Excel жасау.
↗16. IBM Planning Analytics: ашық көріністі экспорттауIBM Planning Analytics кубының ашық көрінісін оқып, кестелік есепке беру.
↗17. IBM Planning Analytics: Excel бюджетін кубқа жүктеуБюджет кітабындағы айларды жолдарға айналдырып, әр өлшемі нақты сәйкестендірілген оқу кубына төрт мән жазу.
↗18. IBM Planning Analytics: TurboIntegrator іске қосуТұрақты жылмен және орындау шеберінде таңдалған сценариймен бір оқу TI процесін бастау.
↗19. Сценарийді қолмен таңдау және тармақтарды біріктіруОператорға өтінімдер жиынын мақұлдауға не қабылдамауға және таңдалған әрекеттен кейін ортақ экспортқа оралуға мүмкіндік беру.
↗20. Email және Telegram арқылы ауытқу хабарларыТеріс сомалы тапсырыстарды тауып, бақылау тобына екі арна арқылы қысқа есеп жіберу.
↗