一种现代农业科技服务云平台制造技术

本发明专利技术提供一种现代农业科技服务云平台。所述现代农业科技服务云平台包括技术架构、IT架构、安全架构、应用功能架构。所述技术架构包括：数据采集模块、数据集成模块、数据储存模块、数据计算模块、数据管理模块、应用模块。所述的安全架构包括防火墙系统、入侵检测系统、漏洞扫描工具、病毒防护系统、身份认证与权限管理系统、访问控制系统和安全审计系统。所述的应用功能架构：某农业科学数据共享平台应用模块、某智慧农业监控平台应用模块、某基层农技推广信息化服务平台应用模块。本发明专利技术提供的现代农业科技服务云平台能够有效整合各类农业科研信息资源，并提供相应服务支撑。

【技术实现步骤摘要】
一种现代农业科技服务云平台
本专利技术涉及农业网络
，尤其涉及一种现代农业科技服务云平台。
技术介绍
我国正处于传统农业向现代农业转型的关键时期，信息化是农业现代化的制高点。发展数字经济，加快推动数字产业化，依靠信息技术创新驱动，不断催生新产业新业态模式，用新动能推动新发展。要推动互联网、大数据、人工智能和实体经济深度融合，加快制造业、农业、服务业数字化、网络化、智能化，有利于推进“互联网+现代农业”，有利于加快构建现代农业产业体系、生产体系、经营体系，不断提高农业创新力、竞争力和全要素生产率，加快实现由农业大国向农业强国转变。大数据是信息化发展的新阶段，是建设农业农村现代化、实施乡村振兴战略的有力抓手。大数据发展日新月异，农业数据资源最为丰富，工业时代的“铁公机”带来的是“乘数效应”，而大数据带来的将是“幂数效应”。充分挖掘和应用农业数据资源，构建和完善数据体系，完善数据资源的共享开放和开发利用机制，深度融合大数据与现代农业发展、农村社会治理，有利于挖掘优化配置资源要素、推进农业供给侧结构性改革潜力。大数据已成为国家重要的基础性战略资源，是新的基础设施，构建农业数字资源体系，加大科技创新和成果转化应用力度，强化政务信息资源整合落地，提升网络安全保障能力，这已成为推进农业大数据发展应用的重点任务。目前农业信息化面临科学数据、农政数据、产业数据与日俱增，呈现数据资源分散、数据质量参差不齐、重复投资建设、管理水平低等问题，如何有效采集、整合现有的科技项目数据、科学实验数据、科技服务数据、农情数据、科技文献资源、物联网监测数据等多源异构数据，扩展未来科学大数据、农政大数据、产业大数据创新应用，提升科研创造力，提高政府治理水平和产业运营效率，这成为当前急需解决的问题。因此，有必要提供一种新的现代农业科技服务云平台解决上述技术问题。
技术实现思路
本专利技术解决的技术问题是提供一种以大数据和云计算为支持，有效整合各类农业科研信息资源并提供相应服务的现代农业科技服务云平台。为解决上述技术问题，本专利技术提供的现代农业科技服务云平台包括：技术架构，所述技术架构包括：数据采集模块，所述数据采集模块用于采集相关数据；数据集成模块，所述数据集成模块用于把所述书记采集模块采集的不同来源、格式、特点性质的数据进行有机地集中；数据储存模块，所述数据储存模块用于将不同数据采用合适的数据存储方案进行存储；数据计算模块，所述数据计算模块用于对数据进行分析计算处理；数据管理模块，所述数据管理模块用于系统的部署与运维；应用模块，所述应用模块用于提供数据分析挖掘、数据可视化、数据报表、智能报告生成和报告协同功能；IT架构，所述IT构架包括：基础设施虚拟化层、虚拟化管理平台和本地共享存储系统。优选的，所述数据采集模块采集的数据来源包括农科院数据中心和官方网站数据和国家大数据中心。优选的，所述数据采集模块包括数据清洗模块，所述数据清洗模块用于检测并且消除数据集中的错误或不一致情况，从而提高数据的质量，通过采编、征集、统计等途径聚集数据，然后经过清洗、加工、导入处理，最终汇入数据仓库。优选的，所述数据集成模块将结构化的数据通过传统的kettle或者etl工具转换进入数据仓库，流式实时数据采用kafka与storm框架实时采集计算，其他平台的数据交换与对接采用oai开放数据访问接口进行交互，数据转换与清洗流程由enhydra系统进行可视化数据处理流程设计。优选的，所述数据储存模块将结构化很强的数据采用mycat加mysql集群分布存储；列变化较大的数据采用列数据库hbase存储，文本型结构化数据采用hive存储，非结构化全文索引采用全文数据库kbase系统存储，碎小的文件碎片文件采用HFS分布式文件存储系统存储，大块非结构化文本数据采用hadoop的hdfs系统存储。优选的，所述数据计算模块采用主流的大数据平台框架hadoop为基础，基于mapreduce和spark进行批量计算，storm进行流式计算，支持秒级的实时交互式查询分析OLAP。优选的，所述数据管理模块采用docker实现快速弹性部署，结合Ambari和Open-falcon技术，根据计算规模动态调整计算资源部署。优选的，所述应用模块包括大数据知识服务平台，大数据分析平台和大数据智能报告与协同平台，提供数据分析挖掘，数据可视化、数据报表、智能报告生成和报告协同功能。优选的，所述本地共享储存系统采用FCSAN，服务器通过连接光纤交换机实现数据的存储。安全架构，所述安全架构包括：防火墙系统、入侵检测系统、漏洞扫描工具、病毒防护系统、身份认证与权限管理系统、访问控制系统和安全审计系统。所述防火墙系统的主要作用是对流经它的网络通信进行扫描，对外来的恶意攻击、病毒以及未授权访问进行过滤，防止它们进入系统；所述入侵检测系统的作用是对外来的访问进行分析和跟踪，检查这些访问对系统资源和服务的使用情况，一旦发现不良访问，及时报警；所述漏洞扫描工具是按照设定的任务计划，定期扫描系统中开放的各服务端口和使用情况，以发现系统中可能存在的漏洞；所述病毒防护系统的作用是对软件病毒进行防范，防止病毒进入系统；通过身份认证和权限管理实现对用户资格的认证，资源服务的授权，以及网络数据的加密和解密等功能；所述访问控制系统的作用是根据用户的身份认证和资源的授权情况，对用户的请求和访问进行审核，确保所有访问都在限定范围内；所述安全审计的作用是根据使用日志和网络数据流，对系统的使用情况进行安全审计，发现不良访问和系统中的安全漏洞。应用功能架构，所述应用功能架构包括：某农业科学数据共享平台应用模块、某智慧农业监控平台应用模块、某基层农技推广信息化服务平台应用模块。所述某农业科学数据共享平台应用模块通过对国内外数百个重要涉农网站数据、信息进行自动抓取与清洗，依据实际需求，提供某农情可视化分析、农业自然资源及农业产业结构协同性分析、某科技特派团服务情况统计以及提供要闻动态、政策解读、数据服务、产业动态以及全产业链技术服务等功能。所述的某智慧农业监控平台应用模块主要是对某市基地管理中心、某市水稻育种中心等两大农业云基地进行独立本地监控、网络直播、农产品种植生产溯源。所述某基层农技推广信息化服务平台应用模块具备终端农技云App的数据交互、信息推送以及对基层农技推广的认证、管理等功能。与相关技术相比较，本专利技术提供的现代农业科技服务云平台具有如下有益效果：本专利技术提供一种现代农业科技服务云平台，平台以大数据和云计算为支持，有效整合各类农业科研信息资源，以大数据为基础，搭建农业科研、农业情报、智慧农业、农技服务等功能为一体的农业科技创新数据共享服务平台，为今后逐步发展成智慧农的业战略性、基础性的数据支撑平台打下坚实基础。具体实施方式下面结合实施方式对本专利技术作进一步说明。一种现代本文档来自技高网...

【技术保护点】
1.一种现代农业科技服务云平台，其特征在于，包括：/n技术架构，所述技术架构包括：/n数据采集模块，所述数据采集模块用于采集相关数据；/n数据集成模块，所述数据集成模块用于把所述数据采集模块采集的不同来源、格式、特点性质的数据进行有机地集中；/n数据储存模块，所述数据储存模块用于将不同数据采用合适的数据存储方案进行存储；/n数据计算模块，所述数据计算模块用于对数据进行分析计算处理；/n数据管理模块，所述数据管理模块用于系统的部署与运维；/n应用模块，所述应用模块用于提供数据分析挖掘、数据可视化、数据报表、智能报告生成和报告协同功能；/nIT架构，所述IT构架包括：基础设施虚拟化层、虚拟化管理平台和本地共享存储系统。/n安全架构，所述的安全架构包括：防火墙系统、入侵检测系统、漏洞扫描工具、病毒防护系统、身份认证与权限管理系统、访问控制系统和安全审计系统。/n应用功能架构，所述应用功能架构包括：某农业科学数据共享平台应用模块、某智慧农业监控平台应用模块、某基层农技推广信息化服务平台应用模块。/n

【技术特征摘要】
1.一种现代农业科技服务云平台，其特征在于，包括：
技术架构，所述技术架构包括：
数据采集模块，所述数据采集模块用于采集相关数据；
数据集成模块，所述数据集成模块用于把所述数据采集模块采集的不同来源、格式、特点性质的数据进行有机地集中；
数据储存模块，所述数据储存模块用于将不同数据采用合适的数据存储方案进行存储；
数据计算模块，所述数据计算模块用于对数据进行分析计算处理；
数据管理模块，所述数据管理模块用于系统的部署与运维；
应用模块，所述应用模块用于提供数据分析挖掘、数据可视化、数据报表、智能报告生成和报告协同功能；
IT架构，所述IT构架包括：基础设施虚拟化层、虚拟化管理平台和本地共享存储系统。
安全架构，所述的安全架构包括：防火墙系统、入侵检测系统、漏洞扫描工具、病毒防护系统、身份认证与权限管理系统、访问控制系统和安全审计系统。
应用功能架构，所述应用功能架构包括：某农业科学数据共享平台应用模块、某智慧农业监控平台应用模块、某基层农技推广信息化服务平台应用模块。


2.根据权利要求1所述的现代农业科技服务云平台，其特征在于，所述数据采集模块采集的数据来源包括数据中心。


3.根据权利要求1所述的现代农业科技服务云平台，其特征在于，所述数据采集模块包括数据清洗模块，所述数据清洗模块用于检测并且消除数据集中的错误或不一致情况，从而提高数据的质量，通过采编、征集、统计等途径聚集数据，然后经过清洗、加工、导入处理，最终汇入数据仓库。


4.根据权利要求1所述的现代农业科技服务云平台，其特征在于，所述数据集成模块将结构化的数据通过传统的kettle或者etl工具转换进入数据仓库，流式实时数据采用kafka与storm框架实时采集计算，其他平台的数据交换与对接采用oai开放数据访问接口进行交互，数据转换与清洗流程由enhydra系统进行可视化数据处理流程设计。


5.根据权利要求1所述的现代农业科技服务云平台，其特征在于，所述数据储存模块将结构化很强的数据采用mycat加mysql集群分布存储；列变化较大的数据采用列数据库hbase存储，文本型结构化数据采用hive存储，非结构化全文索引采用全文数据库kb...

【专利技术属性】
技术研发人员：王长松，苏小波，彭柳林，严志雁，余艳锋，彭永樟，余永琦，周海波，
申请(专利权)人：江西省农业科学院农业经济与信息研究所，
类型：发明
国别省市：江西;36