Инд. авторы: Бычков И.В., Владимиров Д.Я., Опарин В.Н., Потапов В.П., Шокин Ю.И.
Заглавие: Горная информатика и проблема “больших данных” в построении комплексных мониторинговых систем безопасности недропользования
Библ. ссылка: Бычков И.В., Владимиров Д.Я., Опарин В.Н., Потапов В.П., Шокин Ю.И. Горная информатика и проблема “больших данных” в построении комплексных мониторинговых систем безопасности недропользования // Физико-технические проблемы разработки полезных ископаемых. - 2016. - № 6. - С.163-179. - ISSN 0015-3273.
Внешние системы: РИНЦ: 27519078; WoS: 000410106300020;
Реферат: rus: Обсуждается актуальная проблема и перспективные пути ее решения в горной информатике, связанные с “большими данными” - потоками разнородной информации, сопровождающей процесс горного производства. Описывается технология BIG DATA и общая схема ее реализации на мини-кластерах с использованием программных средств Hadoop и MapReduce, иллюстрируемая конкретными примерами.
eng: The discussed challenge and its prospects in mining geoinformation science are connected with Big Data concept-flows of large sets of various data on mining. The authors describe Big Data technology and its general implementation on mini-clusters using Hadoop and MapReduce with case studies presented.
Ключевые слова: distributed computing; cloud computing; geomechanical and geodynamic data flow computing; raw data sets; computational and mini-clusters; intelligent analysis; Big Data; безопасное недропользование; распределенные вычисления; облачные технологии; потоковая обработка геомеханических и геодинамических данных; неструктурированные массивы информации; вычислительные и мини-кластеры; интеллектуальный анализ; "большие данные"; safe subsoil management;
Издано: 2016
Физ. характеристика: с.163-179
Цитирование: 1. 1. Мировой опыт автоматизации горных работ на подземных рудниках / В. Н. Опарин, Е. П. Русин, А. П. Тапсиев, А. М. Фрейдин, Б. П. Бадтиев; отв. ред. Н. Н. Мельников. - Новосибирск: Изд-во СО РАН, 2007. - 99 с. 2. 2. Трубецкой К. Н., Кулешов А. А., Клебанов А. Ф., Владимиров Д. Я. Современные системы управления горно-транспортными комплексами / под ред. акад. РАН К. Н. Трубецкого. - СПб.: Наука. - 2007. - 344 с. 3. 3. Адушкин В. В., Опарин В. Н. От явления знакопеременной реакции горных пород на динамические воздействия - к волнам маятникового типа в напряженных геосредах // ФТПРПИ. - Ч. I, 2012. - № 2. - С. 3 - 27; Ч. II, 2013. - № 2. - С. 3 - 46; Ч. III, 2014. - № 4. - С. 10 - 38; Ч. IV, 2016. - № 1. - С. 3 - 49. 4. 4. Бычков И. В., Опарин В. Н., Потапов В. П. Облачные технологии в решении задач горной информатики // ФТПРПИ. - 2014. - № 1. - С. 138 - 152. 5. 5. Потапов В. П. Математическое и информационное моделирование геосистем угольных предприятий. - Новосибирск: Изд-во СО РАН, 1999. - 156 c. 6. 6. Опарин В. Н., Потапов В. П., Юшкин В. Ф. и др. К вопросу формирования информационной геомеханической модели строения Кузнецкого угольного бассейна // ФТПРПИ. - 2006. - № 3. - С. 27 - 49. 7. 7. Опарин В. Н., Потапов В. П., Попов С. Е., Замараев Р. Ю., Харлампенков И. Е. Разработка распределенных ГИС-средств мониторинга миграций сейсмических проявлений // ФТПРПИ. - 2010. - № 6. - С. 88 - 95. 8. 8. Потапов В. П., Опарин В. Н., Логов А. Б., Замараев Р. Ю., Попов С. Е. Геоинформационная система регионального контроля геомеханических ситуаций на основе энтропийного анализа сейсмических событий (на примере Кузбасса) // ФТПРПИ. - 2013. - № 3. - С. 148 - 156. 9. 9. Логов А. Б., Опарин В. Н., Потапов В. П., Счастливцев Е. Л., Юкина Н. И. Энтропийный метод анализа состава техногенных вод горнодобывающего региона // ФТПРПИ. - 2015. - № 1. - С. 168 - 179. 10. 10. Опарин В. Н., Потапов В. П., Гиниятуллина О. Л., Харлампенков И. Е. Фрактальный анализ траекторий миграций геодинамических событий в Кузбассе // ФТПРПИ. - 2012. - № 3. - С. 75 - 81. 11. 11. Потапов В. П., Опарин В. Н., Гиниятуллина О. Л., Харлампенков И. Е. Разработка сервиса облачных вычислений и обработки данных о сейсмособытиях в геомеханико-геодинамически активных угледобывающих районах Кузбасса // ФТПРПИ. - 2015. - № 3. - С. 162 - 168. 12. 12. Потапов В. П., Опарин В. Н., Гиниятуллина О. Л., Харлампенков И. Е. Облачный сервис обработки сейсмособытий на основе диаграмм Вороного с использованием технологии GOOGLE APP ENGINE // ФТПРПИ. - 2015. - № 5. - С. 169 - 178. 13. 13. Опарин В. Н., Потапов В. П., Гиниятуллина О. Л., Счастливцев Е. Л. Исследование процесса зарастания отвалов предприятий горного производства по данным дистанционного зондирования // ФТПРПИ. - 2013. - № 6. - С. 133 - 141. 14. 14. Опарин В. Н., Потапов В. П., Гиниятуллина О. Л., Андреева Н. В. Мониторинг загрязнений бассейна районов активной угледобычи с использованием данных дистанционного зондирования // ФТПРПИ. - 2012. - № 5. - С. 181 - 188. 15. 15. Опарин В. Н., Потапов В. П., Гиниятуллина О. Л. О комплексной оценке состояния окружающей среды по данным дистанционного зондирования Земли в регионах с высокой техногенной нагрузкой // ФТПРПИ. - 2014. - № 6. - С. 199 - 209. 16. 16. Опарин В. Н., Потапов В. П., Гиниятуллина О. Л., Андреева Н. В., Счастливцев Е. Л., Быков А. А. Оценка пылевого загрязнения атмосферы угледобывающих районов Кузбасса в зимний период по данным дистанционного зондирования Земли // ФТПРПИ. - 2014. - № 3. - С. 126 - 137. 17. 17. Потапов В. П., Опарин В. Н., Счастливцев Е. Л., Гиниятуллина О. Л., Харлампенков И. Е., Сидоренко П. В. Об одном подходе к построению многослойной геоинформационной системы экологической оценки горнопромышленных регионов на примере их биоразнообразия // ФТПРПИ. - 2016. - № 4. - С. 186 - 195. 18. 18. Опарин В. Н., Потапов В. П., Логов А. Б., Счастливцев Е. Л., Юкина Н. И. Выделение кластеров загрязняющих ингредиентов в промышленных водных объектах Кузбасса // ФТПРПИ. - 2016. - № 5. - С. 181 - 190. 19. 19. Опарин В. Н., Тапсиев А. П., Востриков В. И., Усольцева О. М и др. О возможных причинах увеличения сейсмической активности шахтных полей рудников “Октябрьский” и “Таймырский” Норильского месторождения в 2003 г. // ФТПРПИ. - Ч. I: Сейсмический режим, 2004. - № 4. - С. 3 - 22; Ч. II: Рудник “Октябрьский”, 2004. - № 5. - С. 3 - 25; Ч. III: Рудник “Таймырский”, 2004. - № 6. - С. 5 - 22; Ч. IV: Влияние площадей подработки налегающих породных массивов, 2005. - № 1. - С. 3 - 8. 20. 20. Опарин В. Н., Еманов А. Ф., Востриков В. И., Цибизов Л. В. О кинетических особенностях развития сейсмоэмиссионных процессов при отработке угольных месторождений Кузбасса // ФТПРПИ. - 2013. - № 4. - С. 3 - 22. 21. 21. Современная геодинамика массива горных пород верхней части литосферы: истоки, параметры, воздействие на объекты недропользования / В. Н. Опарин, А. Д. Сашурин, Г. И. Кулаков, А. В. Леонтьев, Л. А. Назаров и др. - Новосибирск: Изд-во СО РАН, 2008. - 449 с. 22. 22. Методы и системы сейсмодеформационного мониторинга техногенных землетрясений и горных ударов / В. Н. Опарин, С. Н. Багаев, А. А. Маловичко и др. - Новосибирск: Изд-во СО РАН. - Т. 1. - 2009. - 304 с; Т. 2. - 2010. - 261 с. 23. 23. Методы и измерительные приборы для моделирования и натурных исследований нелинейных деформационно-волновых процессов в блочных массивах горных пород / В. Н. Опарин, Б. Д. Аннин, Ю. В. Чугуй и др. - Новосибирск: Изд-во СО РАН, 2007. - 320 с. 24. 24. Деструкция земной коры и процессы самоорганизации в областях сильного техногенного воздействия / В. Н. Опарин, А. Д. Сашурин, А. В. Леонтьев и др. - Новосибирск: Изд-во СО РАН, 2012. - 632 с. 25. 25. Опарин В. Н., Юшкин В. Ф., Акинин А. А., Балмашнова Е. Г. О новой шкале структурно-иерархических представлений как паспортной характеристики объектов геосреды // ФТПРПИ. - 1998. - № 5. - С. 26. 26. Опарин В. Н., Танайно А. С. Каноническая шкала иерархических представлений в горном породоведении. - Новосибирск: Наука, 2011. - 259 с. 27. 27. Опарин В. Н., Потапов В. П., Танайно А. С. К проблеме информационного обеспечения мониторинга геодинамических процессов в условиях интенсивного недропользования в Кузнецком бассейне // ФТПРПИ. - 2006. - № 5. - С. 40 - 66. 28. 28. Hrushikesha Mohanty Prachet, Bhuyan Deepak Chenthati. Editors, Big Data, A Primer, Springer, New Delhi, Heidelberg, New York, Dordrecht, London © Springer India, 2015. - 184 p. 29. 29. Warden P. Big Data Glossary, Published by O’Reilly Media, Inc., 1005 Gravenstein Highway North, Sebastopol, 2011. - 42 p. 30. 30. Schutt R., O'Neil C. Doing DataScience. Published by O’Reilly Media, Inc., 1005 Gravenstein Highway North, Sebastopol, 2014. - 375 p. 31. 31. Andersen C. Creating a Data-Driven organization, Published by O’Reilly Media, Inc., 1005 Gravenstein Highway North, Sebastopol, CA 95472, 2015. - 285 p. 32. 32. White T. Hadoop: the definition guide, Published by O’Reilly Media, Inc., 1005 Gravenstein Highway North, Sebastopol, 2009. - 497 p. 33. 33. Gunarthne Th. Hadoop MapReduce v 2 Cookbook. Second edition, Packt Publishing, Birmingham UK, 2015. - 215 p. 34. 34. Warden P. Big Data Glossary, Published by O’Reilly Media, Inc., 1005, Gravenstein Highway North, Sebastopol, 2011. - 42 p. 35. 35. Kampes B. M. Radar Interferometry. Persistent Scaterrer Technique, Published by Springer, 2005. - 212 p. 36. 36. Lublinsky B., Smith K. T., and Jakubovich A. Professional Hadoop Solutions, John Wiley&Sons Inc. Indianapolis, Indiana, 2013. - 477 p. 37. 37. Zaki M. J., Vagner M. Jr. Data Mining and analysis. Fundamental Concepts and Algorithm, Cambridge University Press, New York, 2014. - 607 p. 38. 38. Text mining and visualization: case studies using open-source tools, Edited M. Hoffman and A. Chisholm, CRC Press, Taylor&Francis Group. Boca Raton, London, New York, 2016. - 295 p. 39. 39. Witten I. H., Frank E. Data mining: practical machine learning and techniques, second edition. Morgan Kaufman Publishers is an imprint of Elsiver, Amsterdam, Boston, Heidelberg, London, New York, Paris, San Diego, Sydney, Tokio, 2005. - 525 p. 40. 40. Orange software. https://en.wikipedia.org/wiki/Orange_(software). 41. 41. McCormick K., Abbot D., Brown M. S., Khabaza T., and Mutchler S. R. IBM SPSS Modeler Cookbook. Packt Publishing. Birmingham Mumbai, 2013. - 360 p. 42. 42. Опарин В. Н., Киряева Т. А., Гаврилов В. Ю., Шутилов Р. А., Ковчавцев А. П., Танайно А. С., Ефимов В. П., Астраханцев И. Е., Гренев И. В. О некоторых особенностях взаимодействия между геомеханическими и физико-химическими процессами в угольных пластах Кузбасса // ФТПРПИ. - 2014. - № 2. - С. 3 - 30. 43. 43. Опарин В. Н., Киряева Т. А., Гаврилов В. Ю., Танашев Ю. Ю., Болотов В. А. К проблеме возникновения очаговых зон подземных пожаров // ФТПРПИ. - 2016. - № 3. - С. 155 - 175. 44. 44. Бобин В. А. Сорбционные процессы в природном угле и его структура. - М.: ИПКОН АН СССР, 1987. - 135 с. 45. 45. Эттингер И. Л., Шульман Н. В. Распределение метана в порах ископаемых углей. - М.: Наука, 1975. - 111 с. 46. 46. Ходот В. В., Яновская М. Ф., Премыслер Ю. С. и др. Физикохимия газодинамических явлений в шахтах. - М.: Наука, 1973. - 139 с.