рдореБрдЦреНрдп рд╕рд╛рдордЧреНрд░реА рдкрд░ рдЬрд╛рдПрдБ

рдирд┐рдГрд╢реБрд▓реНрдХ рдХреЛрд░реНрд╕

Understanding Modern Data Architecture

рдордзреНрдпрд╡рд░реНрддреА2 рдШрдВрдЯреЗ

рдЖрдзреБрдирд┐рдХ рдбреЗрдЯрд╛ рдЖрд░реНрдХрд┐рдЯреЗрдХреНрдЪрд░ рдХреЗ рдкреНрд░рдореБрдЦ рдШрдЯрдХ рдЬрд╛рдиреЗрдВ, ingestion рдФрд░ serving рд╕реЗ рд▓реЗрдХрд░ governance рдФрд░ orchestration рддрдХ.

R2 рдШрдВрдЯреЗрдЙрдкрд▓рдмреНрдзрд┐ рдХрд╛ рдкреНрд░рдорд╛рдгрдкрддреНрд░

рдЕрдкрдирд╛ рдирд┐рдГрд╢реБрд▓реНрдХ рдЦрд╛рддрд╛ рдмрдирд╛рдПрдБ

Google рдХреЗ рд╕рд╛рде рдЬрд╛рд░реА рд░рдЦреЗрдВ
рдпрд╛
рдЬрд╛рд░реА рд░рдЦрдХрд░, рдЖрдк рд╣рдорд╛рд░реА рдЙрдкрдпреЛрдЧ рдХреА рд╢рд░реНрддреЗрдВ, рд╣рдорд╛рд░реА рдЧреЛрдкрдиреАрдпрддрд╛ рдиреАрддрд┐ рдХреЛ рд╕реНрд╡реАрдХрд╛рд░ рдХрд░рддреЗ рд╣реИрдВ рдФрд░ рдпрд╣ рднреА рдХрд┐ рдЖрдкрдХрд╛ рдбреЗрдЯрд╛ USA рдореЗрдВ рд╕рдВрдЧреНрд░рд╣реАрдд рд╣реИред

рд╣рдЬрд╝рд╛рд░реЛрдВ рдХрдВрдкрдирд┐рдпреЛрдВ рдХреЗ рд╢рд┐рдХреНрд╖рд╛рд░реНрдерд┐рдпреЛрдВ рджреНрд╡рд╛рд░рд╛ рдкрд╕рдВрдж рдХрд┐рдпрд╛ рдЧрдпрд╛

рдХрд┐рд╕реА рдЯреАрдо рдХреЛ рдкреНрд░рд╢рд┐рдХреНрд╖рд┐рдд рдХрд░ рд░рд╣реЗ рд╣реИрдВ?

рд╡реНрдпрд╡рд╕рд╛рдпреЛрдВ рдХреЗ рд▓рд┐рдП рдЖрдЬрд╝рдорд╛рдПрдБ тЖТ

рдХреЛрд░реНрд╕ рд╡рд┐рд╡рд░рдг

рдЖрдзреБрдирд┐рдХ рдбреЗрдЯрд╛ рдЖрд░реНрдХрд┐рдЯреЗрдХреНрдЪрд░ рдХрд╛ рдкрд░рд┐рдЪрдп


рдбреЗрдЯрд╛ рдХреА рдмрджреМрд▓рдд рджреБрдирд┐рдпрд╛ рд▓рдЧрд╛рддрд╛рд░ рдмрджрд▓ рд░рд╣реА рд╣реИ, рдФрд░ рд╣рд░ рджрд┐рди рд╕рдВрд╕рд╛рдзрд┐рдд рдХрд┐рдП рдЬрд╛рдиреЗ рд╡рд╛рд▓реЗ рдбреЗрдЯрд╛ рдХреА рдорд╛рддреНрд░рд╛ рдФрд░ рднреА рдЕрдзрд┐рдХ рд╣реЛрддреА рдЬрд╛ рд░рд╣реА рд╣реИред рдЗрд╕ рдкреНрд░рдХрд╛рд░, рдпрд╣ рдкрд╛рдареНрдпрдХреНрд░рдо рдЖрдкрдХреЛ рдЖрдзреБрдирд┐рдХ рдбреЗрдЯрд╛ рдЖрд░реНрдХрд┐рдЯреЗрдХреНрдЪрд░ рдХрд╛ рдПрдХ рдЕрд╡рд▓реЛрдХрди рдкреНрд░рджрд╛рди рдХрд░рддрд╛ рд╣реИ, рдФрд░ рдЖрдкрдХреЛ рдбреЗрдЯрд╛ рд╕рдорд╛рдзрд╛рдиреЛрдВ рдХреЗ рдореВрд▓рднреВрдд рдШрдЯрдХреЛрдВ рдХреЗ рдорд╛рдзреНрдпрдо рд╕реЗ рдорд╛рд░реНрдЧрджрд░реНрд╢рди рдХрд░рддрд╛ рд╣реИред

рдЖрдзреБрдирд┐рдХ рдбреЗрдЯрд╛ рдЖрд░реНрдХрд┐рдЯреЗрдХреНрдЪрд░ рдХреЗ рдШрдЯрдХ


рдпрд╣ рдЖрдзреБрдирд┐рдХ рдбреЗрдЯрд╛ рд╕рдорд╛рдзрд╛рдиреЛрдВ рдкрд░ рдПрдХ рдкрд░рд┐рдЪрдпрд╛рддреНрдордХ рдкрд╛рдареНрдпрдХреНрд░рдо рд╣реИред рдЗрд╕ рдкрд╛рдареНрдпрдХреНрд░рдо рдХреЗ рдкрд╣рд▓реЗ рдЖрдзреЗ рднрд╛рдЧ рдореЗрдВ рдЖрдк рдЬрд╛рдиреЗрдВрдЧреЗ рдХрд┐ рдЖрдзреБрдирд┐рдХ рдбреЗрдЯрд╛ рдЖрд░реНрдХрд┐рдЯреЗрдХреНрдЪрд░ рдХреНрдпрд╛ рд╣реЛрддреЗ рд╣реИрдВ, Data Mesh рдФрд░ Data Fabric рдЬреИрд╕реЗ рдХреБрдЫ рд▓реЛрдХрдкреНрд░рд┐рдп рд╕рдорд╛рдзрд╛рдиреЛрдВ рдХреА рд╕рдореАрдХреНрд╖рд╛ рдХрд░реЗрдВрдЧреЗ, рдФрд░ рдбреЗрдЯрд╛ рдЖрд░реНрдХрд┐рдЯреЗрдХреНрдЪрд░ рдХреЗ рд╡рд┐рднрд┐рдиреНрди рддрддреНрд╡реЛрдВ рдХрд╛ рдЕрдиреНрд╡реЗрд╖рдг рдХрд░реЗрдВрдЧреЗ, рдЬреИрд╕реЗ рд╕реНрдЯреЛрд░реЗрдЬ, рдбреЗрдЯрд╛ рдЗрдирдЬреЗрд╢рди рд╡рд┐рдзрд┐рдпрд╛рдБ, рдкреНрд░реЛрд╕реЗрд╕рд┐рдВрдЧ рд╡рд┐рдХрд▓реНрдк, рдФрд░ рд╕рд░реНрд╡рд┐рдВрдЧ рддрдХрдиреАрдХреЗрдВред

рдЖрдзреБрдирд┐рдХ рдбреЗрдЯрд╛ рдЖрд░реНрдХрд┐рдЯреЗрдХреНрдЪрд░ рдХреЗ рдЯреНрд░рд╛рдВрд╕рд╡рд░реНрд╕рд▓ рдШрдЯрдХ


рджреВрд╕рд░реЗ рднрд╛рдЧ рдореЗрдВ, рдкрд╛рдареНрдпрдХреНрд░рдо рдЙрди рдЯреНрд░рд╛рдВрд╕рд╡рд░реНрд╕рд▓ рдШрдЯрдХреЛрдВ рдХреЛ рдкреНрд░рд╕реНрддреБрдд рдХрд░рддрд╛ рд╣реИ рдЬреЛ рдбреЗрдЯрд╛ рдЖрд░реНрдХрд┐рдЯреЗрдХреНрдЪрд░ рдХреА рдПрдХрд░реВрдкрддрд╛ рд╕реБрдирд┐рд╢реНрдЪрд┐рдд рдХрд░рддреЗ рд╣реИрдВ рдФрд░ рдЙрдирдХреЗ рдкреНрд░рдмрдВрдзрди рдХреЛ рд╕рдХреНрд╖рдо рдмрдирд╛рддреЗ рд╣реИрдВ; рдЗрд╕рдореЗрдВ рдбреЗрдЯрд╛ рдЧрд╡рд░реНрдиреЗрдВрд╕, рдСрд░реНрдХреЗрд╕реНрдЯреНрд░реЗрд╢рди, рдСрдмреНрдЬрд╝рд░реНрд╡реЗрдмрд┐рд▓рд┐рдЯреА, рдФрд░ рдпрд╣рд╛рдБ рддрдХ рдХрд┐ рдХреНрд▓рд╛рдЙрдб рдкреНрд░рджрд╛рддрд╛рдУрдВ рдХреЗ рднреАрддрд░ рд▓рд╛рдЧрдд рдЕрдиреБрдХреВрд▓рди рдЬреИрд╕реА рдЕрд╡рдзрд╛рд░рдгрд╛рдУрдВ рдХреА рд╡реНрдпрд╛рдЦреНрдпрд╛ рдХреА рдЧрдИ рд╣реИред рдЗрди рд╕рднреА рддрддреНрд╡реЛрдВ рдХреЗ рд╕рд╛рде, рдЖрдк рдРрд╕реЗ рдбреЗрдЯрд╛ рд╕рдорд╛рдзрд╛рди рдбрд┐рдЬрд╝рд╛рдЗрди рдХрд░рдиреЗ рдореЗрдВ рд╕рдХреНрд╖рдо рд╣реЛрдВрдЧреЗ рдЬреЛ рдЖрдкрдХреА рд╕рдВрд╕реНрдерд╛ рдХреА рдЖрд╡рд╢реНрдпрдХрддрд╛рдУрдВ рдХреЗ рд╕рд╛рде рдЕрддреНрдпрдзрд┐рдХ рдореЗрд▓ рдЦрд╛рддреЗ рд╣реИрдВред

рдЖрдзреБрдирд┐рдХ рдбреЗрдЯрд╛ рдЖрд░реНрдХрд┐рдЯреЗрдХреНрдЪрд░ рдХрд╛ рдбрд┐рдЬрд╝рд╛рдЗрди рдФрд░ рдореВрд▓реНрдпрд╛рдВрдХрди


рдкрд╛рдареНрдпрдХреНрд░рдо рдХрд╛ рдЕрдВрддрд┐рдо рднрд╛рдЧ рдЖрдкрдХреЗ рджреНрд╡рд╛рд░рд╛ рдЕрд░реНрдЬрд┐рдд рдЬреНрдЮрд╛рди рдХреЛ рдПрдХреАрдХреГрдд рдХрд░рддрд╛ рд╣реИ, рдПрдХ рд╡реНрдпрд╛рд╡рд╕рд╛рдпрд┐рдХ рдХреЗрд╕ рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд░рдХреЗ рдПрдХ рдбреЗрдЯрд╛ рд╕рдорд╛рдзрд╛рди рддреИрдпрд╛рд░ рдХрд░рддрд╛ рд╣реИ рдЬреЛ рд╡реНрдпрд╡рд╕рд╛рдп рдХреА рдЖрд╡рд╢реНрдпрдХрддрд╛рдУрдВ рдХреЛ рдкреВрд░рд╛ рдХрд░рддрд╛ рд╣реИред

рдкреВрд░реНрд╡рд╛рдкреЗрдХреНрд╖рд╛рдПрдБ

рдкрд╛рдареНрдпрдХреНрд░рдо

рдХреЛрд░реНрд╕ рд░реВрдкрд░реЗрдЦрд╛

1

Modern Data Architecture рдХрд╛ рдкрд░рд┐рдЪрдп

рдЗрд╕ рдЕрдзреНрдпрд╛рдп рдХреЗ рдмрд╛рдж, рдЖрдк рд╕рдордЭрд╛ рдкрд╛рдПрдБрдЧреЗ рдХрд┐ Modern Data Architecture рдХреНрдпрд╛ рд╣реИ, рдФрд░ рдЗрд╕рдХреЗ рдореБрдЦреНрдп рдЖрд╡рд╢реНрдпрдХрддрд╛рдПрдБ рдФрд░ рдШрдЯрдХ рдХреМрди рд╕реЗ рд╣реИрдВред рдЖрдк Lambda рд╕реЗ рд▓реЗрдХрд░ Data Mesh рддрдХ, рдЕрд▓рдЧ-рдЕрд▓рдЧ рдкреНрд░рдХрд╛рд░ рдХреА рдореМрдЬреВрджрд╛ рдбреЗрдЯрд╛ рдЖрд░реНрдХрд┐рдЯреЗрдХреНрдЪрд░ рдХреА рднреА рд╕рдореАрдХреНрд╖рд╛ рдХрд░реЗрдВрдЧреЗред
рдЕрдзреНрдпрд╛рдп рд╢реБрд░реВ рдХрд░реЗрдВ
2

Modern Data Architecture рдХреЗ рдШрдЯрдХ

Modern Data Architectures рдХреЗ рдЕрд▓рдЧ-рдЕрд▓рдЧ рдШрдЯрдХ рдФрд░ рд▓реЗрдпрд░реНрд╕ рдЬрд╛рдирд┐рдП тАФ рдбреЗрдЯрд╛ рдЗрдиреНрдЧреЗрд╢рди рд╕реЗ рд▓реЗрдХрд░ рд╕рд░реНрд╡рд┐рдВрдЧ рддрдХред рд╣рд░ рд▓реЗрдпрд░ рдореЗрдВ рдЙрдкрдпреЛрдЧ рд╣реЛрдиреЗ рд╡рд╛рд▓реЗ рдкреИрд░реЗрдбрд╛рдЗрдореНрд╕ рдФрд░ рдЕрдкреНрд░реЛрдЪ рд╕реЗ рдкрд░рд┐рдЪрд┐рдд рд╣реЛрдВ, рдФрд░ рдлреАрд▓реНрдб рдЕрдиреБрднрд╡ рдХреЗ рд▓рд┐рдП рдЙрди рдХреНрд▓рд╛рдЙрдб рд╕реЗрд╡рд╛рдУрдВ рдХреЗ рдмрд╛рд░реЗ рдореЗрдВ рд╕реАрдЦреЗрдВ рдЬрд┐рдирдХрд╛ рдЙрдкрдпреЛрдЧ рдЖрдзреБрдирд┐рдХ рдбреЗрдЯрд╛ рд╕рдорд╛рдзрд╛рди рд▓рд╛рдЧреВ рдХрд░рдиреЗ рдореЗрдВ рдХрд┐рдпрд╛ рдЬрд╛рддрд╛ рд╣реИред
рдЕрдзреНрдпрд╛рдп рд╢реБрд░реВ рдХрд░реЗрдВ
3

Data Architectures рдХреЗ Transversal рдШрдЯрдХ

рдЖрдзреБрдирд┐рдХ рдбреЗрдЯрд╛ рдЖрд░реНрдХрд┐рдЯреЗрдХреНрдЪрд░ рдХреЗ transversal рдШрдЯрдХреЛрдВ рдореЗрдВ рдЧрд╣рд░рд╛рдИ рд╕реЗ рдЬрд╛рдПрдБ, рдЬрд┐рдирдореЗрдВ рдбреЗрдЯрд╛ рдЧрд╡рд░реНрдиреЗрдВрд╕, рдореЗрдЯрд╛рдбреЗрдЯрд╛, рдбреЗрдЯрд╛ рд╕рд┐рдХреНрдпреЛрд░рд┐рдЯреА, рдФрд░ рдСрдмреНрдЬрд╝рд░реНрд╡реЗрдмрд┐рд▓рд┐рдЯреА рдЬреИрд╕реЗ рдкреНрд░рдореБрдЦ рдкрд╣рд▓реВ рд╢рд╛рдорд┐рд▓ рд╣реИрдВред рдЗрди рдорд╣рддреНрд╡рдкреВрд░реНрдг рддрддреНрд╡реЛрдВ рдХреЛ рд╕рдордЭрдХрд░, рдЖрдк рдЙрдЪреНрдЪ-рдЧреБрдгрд╡рддреНрддрд╛ рд╡рд╛рд▓реЗ рдбреЗрдЯрд╛ рдФрд░ рд╕реЗрд╡рд╛ рдорд╛рдирдХреЛрдВ рдХреЛ рдмрдирд╛рдП рд░рдЦрддреЗ рд╣реБрдП рдордЬрд╝рдмреВрдд, рд╕реБрд░рдХреНрд╖рд┐рдд, рдФрд░ рдХреБрд╢рд▓ рдбреЗрдЯрд╛ рдкреНрд▓реЗрдЯрдлрд╝реЙрд░реНрдо рдбрд┐рдЬрд╛рдЗрди рдХрд░рдиреЗ рдХреЗ рд▓рд┐рдП рддреИрдпрд╛рд░ рд╣реЛрдВрдЧреЗред
рдЕрдзреНрдпрд╛рдп рд╢реБрд░реВ рдХрд░реЗрдВ
4

рд╕рднреА рдХреЛ рдПрдХ рд╕рд╛рде рдЬреЛрдбрд╝рдирд╛

рд╡рд░реНрдХрдлрд╝реНрд▓реЛ рдХреИрд╕реЗ рдореИрдиреЗрдЬ рдХрд░реЗрдВ, рдХреНрд▓рд╛рдЙрдб рд╕реЗрд╡рд╛рдУрдВ рдХреА рд▓рд╛рдЧрдд рд╕рдордЭреЗрдВ, рдФрд░ рдЖрдзреБрдирд┐рдХ рдбреЗрдЯрд╛ рдбрд┐рдЬрд╝рд╛рдЗрди рдмрдирд╛рдПрдБ тАФ рдпрд╣ рд╕реАрдЦреЗрдВред рдпрд╣ рдЕрдзреНрдпрд╛рдп рдЖрдкрдХреЛ Apache Airflow рдЬреИрд╕реЗ рдЯреВрд▓реНрд╕ рдХреЗ рд╕рд╛рде рдХрд╛рдо рдХрд░рдирд╛ рд╕рд┐рдЦрд╛рддрд╛ рд╣реИ рдФрд░ рдХреНрд▓рд╛рдЙрдб рдЙрдкрдпреЛрдЧ рдкрд░ рдкреИрд╕реЗ рдмрдЪрд╛рдиреЗ рдХреЗ рддрд░реАрдХреЗ рдмрддрд╛рддрд╛ рд╣реИред рдЕрдВрдд рддрдХ, рдЖрдк рд╡реНрдпрд╡рд╕рд╛рдпреЛрдВ рдХреЗ рд▓рд┐рдП рдордЬрд╝рдмреВрдд рдбреЗрдЯрд╛ рд╕рд┐рд╕реНрдЯрдо рдмрдирд╛рдирд╛ рдФрд░ рдЙрдирдХрд╛ рдореВрд▓реНрдпрд╛рдВрдХрди рдХрд░рдирд╛ рдЬрд╛рдиреЗрдВрдЧреЗред
рдЕрдзреНрдпрд╛рдп рд╢реБрд░реВ рдХрд░реЗрдВ
R

Understanding Modern Data Architecture

рдХреЛрд░реНрд╕
рдкреВрд░реНрдг

рдЙрдкрд▓рдмреНрдзрд┐ рдХрд╛ рдкреНрд░рдорд╛рдг рдкрддреНрд░ рдЕрд░реНрдЬрд┐рдд рдХрд░реЗрдВ

рдЕрднреА рдирд╛рдорд╛рдВрдХрди рдХрд░реЗрдВ

DataCamp for Mobile рдХреЗ рд╕рд╛рде рдЕрдкрдиреЗ рдбреЗрдЯрд╛ рдХреМрд╢рд▓ рдмрдврд╝рд╛рдПрдБ

рд╣рдорд╛рд░реЗ рдореЛрдмрд╛рдЗрд▓ рдХреЛрд░реНрд╕ рдФрд░ рд░реЛрдЬрд╝рд╛рдирд╛ 5-рдорд┐рдирдЯ рдХреА рдХреЛрдбрд┐рдВрдЧ рдЪреБрдиреМрддрд┐рдпреЛрдВ рдХреЗ рд╕рд╛рде рдЪрд▓рддреЗ-рдлрд┐рд░рддреЗ рдкреНрд░рдЧрддрд┐ рдХрд░реЗрдВред