IDC ?????????????? �????????? V� ??? worth c ????? ?????? ???????? ????????????? ???????????????? ????????? ??????????????? ??????? ? ??????????????? ????????, ??? ???????? ????? ? ? ??????????? ??????? ?????? ?? IDC[28]. ?? ???? ??????? ? ???? ????????? ??????????????, ??? ???????????? ??????????????? ??? ??????? ?????? ???????? ?? ?????? ?? ?????????? ?????, ?? ?????? ?????????, ???????????? ??? ????????????? ? ????????? ?????? ????????? ? ??????? ??????. ?????? ? ?????? ????? ?????????? ??? ????? ???????? � ??? ? ?????????????????, ??? ? ? ??????????????????? ????. ?????????? ? ????? ????????? � ????????, ??????? ?? ???????????? ??? ??????? ?????????? ?????? ?? ?????.
?? ?????? ?????? ? ??????? ?????????? ??????????? ??????? ??? ?????????? ?????????? ?????. ????????? ????????????? ???????? ???????? ? ??????????? ???????? ???????????, ??????????? ???????? ? ????? ?? ???????????. ???????????? ?? ???????? ???????? ????????? ??? ?? ?????? ????????? ??????. ???????? ??????, ??? ?????????? ? ????????? ??????, ? ???????? ???????? ??????? ??? ???????? ???????. ?????? ?????????? RTB ???????????? ?????? ????????? ????????? ????????????-???????? ?????????? ??????? (DMP) ? ???? ?????? (data exchange).
??????? ??????? ?? ???????, ?? ? ????????????? ???????? ?????????? ??????? ??? ??????????? ????????? ????????? ???????????. ??? Sushi Good ????????? ????? ?? ????
??????????? ??? ????????? ??????? ??????
????? ????? ??????? ? ???? ??? ?????, ?? ???????? ????? ??????? ? ???? ???????? ?????? ?????????????????? ????? ? ?????????. ??????????????? ????????? (diagnostic analytics) � ?????????? ??????, ????? ???????????????? ??????? ?????????????. ??? ???????? ???????? ???????? ? ????????? ????? ????? ????????? ? ??????????. ?????????? ??????? DAS � ?????? ???????? ??????, ???????? ?????????????? ? ????? � ? ???????? ????????????? ????? ????????? ? SN-??????????? ????? ?????? ??????? ? ??????????? ??????? ??????. ?????? ? ?????????? ????????? ??????? ?????? ????????? ??????? ???????? ? DAS-???????? ? ?????? 2010-? ?????, ????? ?????????? ?? ? 2000-? ???? ???????? ????????? ??????? NAS ? SAN[38].
?? ?????? ????? ???? ???????? ? ????????????? ????????, ????????? ???????? ??????, ???????????? ??????????????, ????????? ????????, ??? ?????????? ??????? ??? ???????? ?????????? ???????. ? �???????� ???? ???????? ?????????? ?????? ?? ?????????, ??????? ??? ?????????? ?? ?????? ??? ?????? ? ????, ?? ? ??? ???????? ????????????? ?????????, ????? ???????? ??????????? ??? IPTV-?????????. �??????� ?????????????? ???? ? ???????? ???????? ?? ???????? ????????? ? ???????, ??????????? ??? ???????? HDFS ? Apache Spark, ? ??? ????????? ?????? � Rapidminer ? Python. ???? ????????????? ??????? ?????? ? ?????? ?????? ?????? ? ????, ??? ???????????? ????? ??????????? ? ???????? ??????? ??????? ??????. ???????? �MADE� ?? �Mail.ru Group� ? �HeadHunter� ??????? ? ???????? 2020 ???? ????????????, ???????? ?????? ???????? ??????????? ?? ??????? ?????? ????????? ? ???????? ?????????????? ?? ????? ????? ? ??????.
?????? ? ?????, ?? ??? ??? ????? ???? ?????? ???? ??? ? ????????? ? ??????? ??? ???????????. ??? ??? ???????? ???????? ?????? ? ???? ??????, ????????? ??????? ? ????????? ????????. Predictive analytics ?????????, ????? ?? ?????? ????????? ?????????? ??????? ??????? ???????????? ???????? ?????????? ???????? ???????? ????????. ????? ????????? ??????? ???????, ??? ???????? ??????? ????????? ?? ??????? ? ??????????? ??????? ???????. ????? ?????? ???? ??????????? ?????????? ????? ???????? ????????? ????? ??? ????????? ???, ??????? ??????????? ??????????? ??????????? ??? ??????? ???????.
?? � ??? ?????????? ?????? ??????????, ??????? ????? ??????? ? ???????????????? ?????? ?????????????????? ????????. ???, ? 2020 ???? ??????????, ??? ???? ??? ?? ????? ????????????? ???????? ??????? ????? ??????? ????? ? ????? ?????? ? 2024 ???? ?????????? ? forty five ?? 65 ?????????? ??????. ???? ???????? ????? ???????????? ?????????, ?? ?????????? ???????? ?? 230 ?????????? ??????. ? ??????????? ???? ?????????? ?????????? ?????????? ??? ??????, ??????? ?????????? ??????????? ? ??????????????? ??????????? ?????????.
????? Huge Data ? ??????
?? ???? ????????? ???????? ??????????? ???????? ???????? � ???????????????? ???????, ??????????????? ???????? ?????????????. ??? ?????? ? ???????? ??????? ????????? Data Cleaning � ?????????, ?????????? big data ??????? ? ??????????? ??????, ????????????? ?????????? ? ?????????????? ??????. ??????? ????????? ??????? ????????? ??????????, ???????????, ??????????? ???????? ? ??????????.
![https://deveducation.com/](https://deveducation.com/wp-content/uploads/2022/11/b0aa4fe6-9449-410d-a885-bbfc7a57ee95.webp)
????? ????, ???????? ??????? ?????? ?????? ???? ?????????? ????????????, ????????? ? ????? ?????, ???? ?? ??? ?????? ?????? ?????? ?? ????????? ?????????? ?????????? ?? ?????? ??????? ????? ??????? ? ???????? ????????????? ?????? ???????. ??? ?????? ? ????? ??????????? ?????? ????????? ????? ???????????. ? 2019 ???? ???????? ? ??????? ??????? ?????? ????? ?????? ? 9,6 ????, ??? ? 2015 ????. ??? ??????? ???? ????? ???????? ????? ???????????? ??????? ???????????????? ? ????????, ???????? Python ? SQL, ? ??????????? ??.
? ?????? ????????? ??????? ?????? ?????? ??????????? ? ??? ?????, ? ??????? ????? ????????????, ?? ?? ???????? ??? ?????? ?? ?????? ???. ????????, ???????? ????? ?????????, ????? ??????? ???????????? ??????????????? ? ??????. ????? ? ????? ?????????? ??????? ?????????, ? ?? ????????????? ???????? ?????? ? ????????? ?????????????. ????? ????? ???????? ????????? ??????, ????????? ?????????? ?? ?????? ?????? ? ?????? ???? ? ???????? ? ??? ????????.
???? ??????? ??????? ??????
???? ????????? ??? ?????????? ????????, ????????????? ?????????, ?????????? ?????? ?????????????? ???????. ?? ?????? ???????? ?????? ???????? ???, ???????? ????? ?????? ????????????, ????? ?????? ??????? ?? ????????? ???????????????. ???? ?? ???? ??????????????? ? ????? ?????????????? ?????????? ? ??????? ??????? ?????? ??????? ???? ? ??????, ? ??? ?????? ????????? ???????. ??? ????? ??????, ??? ??????? ?????? � ??? ?????, ????????, ?????, ????????? ? ????? ???????, ?????????? ? ???? ??????????????????? ???????. ?? ???? ????? ??????? ????? ????????????, ??-?? ???? ????????? ?????????????, ??? ???????????? ??????? ??? ??? ????????? ????? ???? ??????.
??? ??????? ? ?????? ?????? ?????????? ????????? ????????? ???????????? � ????? ??????????? ??????? ?? ????? ?????, ????? ? ?????? ????????????. ???? ???? ?????????? ?????, ?? ??? ????? ?????? ????????? � ??? ?? Big Data. ??????????? ? ??????? ? �?????????�, ????????? ????????????? ??????? ????????????????? ? ????? ????????? ???????. ? ??? ?????? ? ???????? ?? ????? ??? ???????, ??????????? ? ??????????, ?? ????? ?????? ?????????. ? ?????? ????????? ? ??????????????? ? ?????????????, ??????? ????????? ? ???????? ??????? ??????, ???????? ?????????? ? ???????????? ?????? ? Big Data, ??????? ???? Selectel.
??????? ?????? � ??? ????????? ???????????? ??????????, ??????? ???? ??????? ?? ????????, ?????????? ? ????????? ?? �???????????? ????�. ????????, ???????? ?? ???????????? ??????? ??? ???????? ????? ????????????? ???????? ????? ????? ?????, ????? ????????? ??? ??? ????? ????????? ???????. ?????? ??????? ?????? ????????? ????????? ??? ???????, ????????? ???????? ?? ???????. ???? ???????? ??????, Big Data ???????????? ??? ?????????? ???????-?????????, ?????????????? ??????????? ???????????? ????, ????????. ???? ?? �??� ? ???????????? ?????????? ?????, ?? ??????? ??? ?????, ??? ?? ?????? ???????? ? ???????????? ??????. ??? ????? ???????, ? ??????? ??????? ???????? ?????? ?? ????? ????? ? ????????? ???????????? ????????.
Big Data: ??? ????? ??????? ?????? ? ??? ??? ???????????
�, ??????????? ??????, ??????????? ? ???????? ???????, ? ???????????? ??????. ??????? ???? � ???????? ??????? ? ?????????????? ??????? ??? ?????? ? ??? ??? ???? ?????, ????? ???????????? ??? ?????? ??? ???????? ??????????? ???????. ??? ???????????? ????????? ?????????? ??????? ?????????????? ???????.
- ????? ?????? � ????? ?????? ??? ??????? ?????????? ? ?????? ??????? ???????????? �?????????�.
- ???????????? ??????????? ??????? ?????? ???? ??? ???, ?? ???? ????? ??? Big Data ????????????? ?????? ??????????????????? ? ??????????? ??????, ??????????? ????????????? ???????????? ??????????? (?????????????????) ???? ?????? ?? ??????.
- ??? ???? ??????? ?????? ????????? ??? ????? ? ?????? ??????????? ?????????, ??????? ????????????? ?????????.
- ? ??????????? ???? Big information � ?????????-????????????? ???????, ??????? ?????? ? ???, ??? ????????? ????? ??????????????? ??????????? ??? ??????? ????????? ?????????? ??????.
- ?? ???? ????????? ???????? ??????????? ???????? ???????? � ???????????????? ???????, ??????????????? ???????? ?????????????.
- ??????, ? ???????? ?????? ? ?????????? ????? ????????????? ???????? ???????????? 200 ???.
?????????? ??? ????????????? ????????? (predictive analytics) � ???????? ??????????????? ???????? ????????? ???????? ??????? ?? ?????? ????????? ??????. ??? ????? ?????????? ??????? ??????? ?? ?????? ?????-???? ???????? ??? ??????? ? ??????????? ??????? ?????????????. ? ??????? ????????????? (??? ????????????, ??????????) ????????? ?????, ????????, ?????????? ????? ??? ????????? ??? ?? ???????? ?????.
??? ?????????????? ?????????? ??????-?????????? ?????, ????? ?????? ?????????? ???? ???????? ???????. ????????? ? ????????? 10 ??? ????????? ??????? ??????? ???????? ? ???????? ???????, ????? ?????????? ???????????????????? � ??????? ????? ??????? ????? ? ??????? ????????? ?????? ?????????? ? ????????, ?????????, ??????? ? ??? ?????. ? ??????-???????????? ?????? ????????? ????????? Big Data, ??????? ??????????? ??????????? ???????????????.
??????? ??????
? ???? ????? ??????? ? ???????? ?????????? ??????? ?????? ?? ????? ???? ??????? ?? 100 percent. ??? ?????? ???????? ????????????, ?????????? ???, ????????, ???????? ??????????. ?????? ??????? ????? ??????? ?????? ?????? ? ????????? ??? ??? ??????????? ???????????? ? ??????????. ?????? Big Data ????????? ?????? ????????????? ??????, ????????? ????????, ????? ?? ?????? ? ??????.
�?? ????? ???? ???????? ?????? ????? ? ????? ????????, ??? ???? ??????, � ?????? ????? ???????. � ???????? ???? ??????? ? ??????? ?? ???? ??-???????? ?????, ????? ????????????? ??????, ????????, ??? ????? ??????? ????? ?????, ??????????? ?????????�. ??? ?????? � �?????????�, ?? ????? ??????? ? ????????? ???????, ???? ? ???.
?????????? ???????[??????? ??????? ???]
??? ?????? ???????? ???????????? Big Data ????????? ????????????? ?????? ? ???????? ????? ?? ??????????, ?????????????? ???????? ? ???????? ???????????? ? ?????????. ???????? ??????? ???????? ??????? ??????, ????????? ??????? ? ???????. Apache Spark � open-source ?????????, ???????? ? ?????????? Hadoop. ????? ????????? Apache Spark ????????? ?????????? ? ??????????? ??????, ??? ??????? ???????? ??????? ?????? ?????, ? ???????? ??? ????????? ????????. ????????? ???? ????? ????? ????????? ? ????????? ?????? ???????? ?????????.