НЦЦ- небанкарска кредитна организација која обавља функције клириншке организације и централне
Извештавање је лакше са великим подацима
Банка Русије захтева све финансијске учеснике— банке, финансијске организације, укључујући НЦЦ, извештавају о својим активностима. Они саопштавају колико новца има на салду, како се преноси на индивидуалне рачуне и колико је трансакција извршено. Све ово треба редовно припремати и достављати Централној банци. Да бисмо поједноставили задатак, имплементирали смо аутоматски систем заснован на решењима компаније Неофлек. Ова компанија је дуго специјализована за изградњу система финансијског извештавања за регулаторне органе.
Када сам радио у Бинбанк-у, имали смо и тоНеофлек решења, али на старијим технологијама. То је била Орацле база података, и сва обрада и извештавање је урађено на њој. НЦЦ је имплементирао решење засновано на Хадооп технологији, коју користимо као главни систем за складиштење података и обраду информација.
Орацле датабасес- једна од најпопуларнијих база података на свету,користе лидери ИТ тржишта - Фејсбук, Твитер, Јутјуб. На пример, МиСКЛ базе података засноване на Орацле решењима често су уграђена база података по избору коју дистрибуирају хиљаде добављача софтвера и произвођача хардвера.
Орацле Датабасе или Орацле РДБМС— систем управљања објектно-релационим базама податакаОрацле подаци. Више од 40 година Орацле помаже компанијама, владама и другим организацијама широм света да прикупљају, организују и користе податке.
Хадоопје пројекат отвореног кода који се налазикојим управља Апацхе Софтваре Фоундатион. Хадооп се користи за поуздано, скалабилно и дистрибуирано рачунарство, а такође се користи и као складиште датотека опште намене које може да прими петабајте података.
Парадигме Хадоопа и Орацлеа су потпуно различите. Свакако можете рећи да је ово даљи развој. Али, у ствари, ово иде по страни, јер се суштина великих података разликује од обичних база података. Хадооп не подразумева трансакционизам, већ као складиште и систем обраде информација - ово је најуспешније решење. Трошкови лиценце су смањени. Веома добра скалабилност, а самим тим и високе перформансе.
Сидебар
Различите банке користе различите облике извјештавања,али постоје основна својства за све. На пример, НЦЦ подноси око 200 образаца за извештавање. Од њих, тренутно смо имплементирали око 20 образаца креираних помоћу Хадооп-а. Постоје два система извора података. Из њих се узимају детаљни подаци за извештавање. Ово је аутоматски банкарски систем. Други је централна страна. Ово није за банке, него за нас. Након тога, подаци се агрегирају у Хадооп. Прво, оне се пуне у свом оригиналном облику, затим обрађују, чисте, припремају, агрегирају - и преносе у посебан слој. Он креира комплетан портфолио података за сваког клијента и за сваку продавницу. А на основу Орацле-а је већ "омот", преко којег добијамо информације које већ постоје у самом систему. На основу ових података градимо комплетне извјештаје који су погодни за подношење регулаторним властима.
Дата Лаке- централизовано складиштење, омогућавачувају све податке и структуре. Подаци се могу складиштити како јесу, уз различите врсте аналитике – од контролне табле и визуелизације до обраде великих података, аналитике у реалном времену и машинског учења за боље доношење одлука.
"Ми одвајамо руке аналитичара"
Један од разлога зашто смо изабрали Хадооп јепостојао је пројекат имплементације Дата Лаке у Московској берзи групи. Производ је још увек млад и стално се развија. Не само да ће финансијска одељења тамо чувати податке – рачуноводство, на пример, већ и техничка одељења која ће своје податке обрађивати користећи Хадооп објекте – исте дневнике из финансијских система. Московска берза генерише веома велику количину података. Да би се ово обрађивало, стандардне централне базе података (централне базе података - Хи-Тецх) више нису прикладне. Они једноставно не могу да се носе са овим током.
Рјешење Дата Лаке поједностављује овај задатак.и повећати продуктивност. Сада имамо извјештаје Централне банке, пореско извјештавање, Росфинмониторинг ће бити додан овдје. То значи чување друге врсте података. То може једноставно бити скенирање докумената који се траже за порез. Складиштење бинарних датотека у бази података је веома скупо и неразумно. Стога је решење изабрано са тачке гледишта великих података.
У будућности, ово решење може имати великобудућности. Имамо групу компанија, свака има своје задатке за обраду својих података. Можда ће се у будућности све спојити у један кластер, у којем ће се обрадити сви задаци унутар групе.
Сидебар
Други правац је смањење трошкова зачување архивских података. Чување на Екадата-у је прилично скупо. Када се подаци мигрирају на Хадооп моћ, постаће јефтинији, лакши за анализу и пружаће боље перформансе за аналитичаре. Тренутно су ограничени чињеницом да је ресурс додељен за њихове задатке прилично узак - због превеликог оптерећења главног система.
Како наслеђени софтвер може довести до банкрота
У било којој банци, пејзаж софтвера који се користисофтвер је веома разноврстан. Почевши од неких наших развоја и завршавајући са индустријским решењима која остају као застарели софтвер којих се више не може отарасити. Он је првобитно изабран. Прелазак са њега на друге системе је веома скуп. Због тога га морате стално вући и подржавати. Наше решење вам омогућава да се решите неких системских проблема коришћењем нових технологија.
На пример, припремали смо извештаје на основуаутоматизовани банкарски систем. Али имао је ограничења – перформансе и искључиво коришћење ресурса приликом израчунавања једног извештаја. Сходно томе, учинак у смислу израчунавања једног облика током времена био је изузетно низак. Понекад нам је за један облик требало и до шест сати или више.
Сидебар
Не можете једноставно отићи од оваквих тренутака:Замена аутоматизованог система у банци је као катастрофа. Овде постоји много нијанси које треба узети у обзир. Једноставно је немогуће прећи са једног софтвера на други у једном дану. У мојој пракси је био случај када је банка прешла са два или три аутоматизована банкарска система лоцирана у регионима на један, који се, пак, налазио у централи. Овај процес је трајао неколико месеци.
Такође у НЦЦ-у - при реализацији овог пројектабило је много људи који су били укључени. То су аналитичари и финансијски службеници који су извршили анализу одређеног приступа. Поред тога, био је укључен велики број техничког особља - потребно је припремити инфраструктуру, имплементирати и креирати прописе о одржавању.
Банке које послују већ дуже време дефинитивно имају застарели софтвер.Радио сам у четири банке, све су имале такав софтвер. Почевши од софтвера писаног под ДОС-ом па до великог софтвера који више није могуће одбити, јер је веома снажно интегрисан у пословне процесе. Ако останете на старим системима, продуктивност и конкурентност финансијске организације се смањују, а ризици се повећавају – ако не због неиспуњења обавеза, онда одузимања лиценце.
За банке и компаније које су тек започеле својразвоја, има више простора за избор технологија. Укључујући и НЦЦ, пошто смо релативно млада компанија. Софтвер који се користи скоро свуда је модеран.