仪器信息网APP
选仪器、听讲座、看资讯
立即体验
APP内打开
回版面
2
收藏
点赞
拍砖
举报
取消
发布
当前位置:
仪器社区
>
环境监测
>
水质检测
>
帖子详情
在水文监测系统中海量数据存储方案的典型应用
qujian1120
2011/11/12
私聊
水质检测
在水文监测系统中海量数据存储方案的典型应用
应用背景
随着我国经济社会的发展,对水文信息不断提出新要求,水文观测项目和内容不断增加。在水文监测系统中,常常需要对众多的水位点进行监测,大部分监测数据需要实时存储,后端服务器进行处理。由于监测点分散,分布范围广,而且大多设置在环境较恶劣的地区。通过
便携式
RS232/485
数据存储系统进行数据存储
,成为水文部门选择的通信手段之一。污染源监测设备可将采集到的污染数据实时存储在
SD/TF
卡中,方便随时提取送到水文监测部门,实现对排污单位或个人的及时管理,可以大大提高水文部门的工作效率。
方案介绍
系统构成及基本工作原理
随着高性能嵌入式微处理器价格的逐渐降低以及
SD/TF
卡存储容量的不断提高,采用以高性能
32
位
工业级
ARM
微处理器为系统核心结合
CPLD
时序控制,嵌入
FAT32
文件系统,通过大容量存储卡以及
USB
数据拷贝功能
,实现高性能、低功耗、低成本、小体积的海量数据存储及拷贝,具有无可比拟的优势。
图
1
为
便携式
RS232/485
数据存储
系统的基本结构:
在该系统中,高性能
32
位
工业级
ARM
微处理器
和大容量内存卡为系统核心,随着科技技术的不断发展,目前已经很容易在市场上买到几十
G
的
SD/TF
卡,可以实现大容量的存储系统。
为实现系统高可靠性、高效率的工作,必须采用基于
ARM
架构的高性能
32
位嵌入式微处理器作为系统的管理核心,通过与高效的嵌入式操作系统相结合,
采用独特的动态内存分配算法,以此管理文件系统对内存的消耗和释放,提高数据的传输效率,避免数据丢失,
实现实时数据的可靠存储。
SD/TF
卡与
ARM
接口软件设计:
a
首先初始化
SD/TF
卡、检查状态、扇区读写等基本操作。文件系统层按照
PC
文件系统要求设计,如
FAT
表、文件目录表等
兼容
PC
机的文件管理系统,从而能够大大简化后端数据的分析和处理
。文件操作层包括文件的建立、读写、删除等。
b
当检测到有串口数据,系统自动在
SD/TF
卡上创建一个事先定义好的文件夹,目录下生成一个存储数据文件,进行实时数据存储。文件夹名称可通过配置软件自定义命名,例如
2011
年的数据,文件夹名称可以定义为
20111001
;数据存储文件为
.TXT
文件,系统自动创建,自动编号,不重复覆盖,便于文件管理。
c
由于数据采集系统的限制和具体环境的要求,
便携式
RS232/485
数据存储必需
适合
长期无人值守、速度快、通用性好。为了能够长期进行数据存储除了采用更大容量的
SD/TF
卡外,如果几
G
甚至几十
G
的数据同时存储在同一个文件中,这样大量的数据后端分析和处理必定会给我们造成巨大的麻烦,因此要求便携式数据存储
的
FAT32
文件系统的处理更加完善、更加智能化。
这就需要探索一种更好的文件管理方式
,经过多次的实验与尝试,采用定时创建数据存储文件进行存储,有利于对数据进行更有效的管理,更好的分析处理。例如:假定用户通过配置软件设置间隔
24
个小时即一天(根据用户设备具体的存储数据量大小情况决定时间)创建一个数据储存文件,那么
N
天后,文件夹
20111001
下将自动创建有
N
个
TXT
文件分别为
0001.TXT
、
0002.TXT……N.TXT
,各个时段的数据将完整的保存在相对应的文件中,不丢失任何字节。
d
在一些特定应用场合,并不需要对数据进行实时处理和显示,只是记录下原始数据,将其作为一个“黑匣子”,为后端处理做准备。这就需要
SD/TF
卡可以循环使用,当数据量达到已设定的存储卡容量后,自动覆盖原有的存储文件。
f
以往的大容量数据储存系统只具有被动的接收数据进行保存功能,然而随着技术的不断更新,已经远远不能满足现有数据采集设备的需求;更多的用户设备,需要由数据储存系统处于主机状态,主动发送握手信号,用户设备接收到信号后被动反馈信息,然后由数据储存系统存储数据。串行通信接口由用户来控制,用户可以设置
10
多条不同的“轮询”指令,和间隔时间。系统在主程序中初始化,采用串行口工作方式由系统主机向数据设备进行呼叫,定期读取数据或者写入数据,其程序流程图如下:
硬件接口设计:
a
提供
RS232/485
接口,支持
2400~115200
宽范围波特率。
串口全透明数据传输
,
无需传输协议,透明保存用户的数据,100%可靠存储,支持高达14K 字节/秒的数据储存能力。
b
具有USB拷贝数据功能,U盘式管理,高速USB2.0接口; USB自动识别,无需安装驱动.
耐震动设计:
无论是在存储管道在线检测数据,还是无人航载信息黑匣子都需要数据存储设备具有一定强度的耐震动能力,对此硬件设计上采用自锁式卡座,内嵌存储卡,具有防震功能;避免由于意外使存储卡与卡座接触不良,而造成数据无法储存。
蜂鸣器报警功能:
对于重要数据,丢失数据给我们带来的损失是惨痛的,系统软件设计了系统出错报警。系统上电后,首先对
SD/TF
卡进行初始化,初始化成功蜂鸣器响一下,说明系统运行正常;蜂鸣器长响为出错报警。
典型应用
总结:
嵌入式操作系统在系统中具有至关重要的作用,依托高性能嵌入式操作系统的强大功能,该方案实现了各种常用文件系统的支持,便于数据的迁移,同时,嵌入式操作系统还实现了存储介质的自动管理、自动纠错、疲劳算法等,保证了存储数据的高可靠性。百度“广州乐诚电子科技有限公司”或者“
RS232/485
海量数据存储器
”了解更多资料。
土豆:很遗憾,文章不错,但是广告内容我必须删除,请楼主注意。
相关话题
1
201932
2
B2101046氨氮盲样浓度多少
3
户外怎么寻找水源
4
家用的那个检测笔有用吗?
5
聚四氟坩埚温度耐多高
+关注
私聊
水星
第1楼
2011/11/12
我就感觉这个文章好像有所指,不过挺不错的
0
发表回复
+关注
私聊
fipi
第2楼
2012/01/02
谢谢楼主共享
0
发表回复
近期热榜
赛默飞实验室产品焕新计划有奖调研!
【七月征文】不一YOUNG实验“猿”
报名开启:ICS2024第十三届光谱网络会议!
推荐收藏!盘点中药材及饮片检测解决方案
热门活动
甄选国优仪器,助推设备更新
采购咨询618活动:1000元奖励等你拿
猜你喜欢
最新推荐
热门推荐
更多推荐
质控盲样 化学需氧量 200191的标准值是多少?
已应助
2015/09/11
溶解氧怎么考核
求助
2014/10/28
【求助】求助 气相色谱做卤乙酸前处理时甲基叔丁基醚损失???
2011/01/28
农药厂废水BOD5
求助
2011/11/28
【求助】蒸馏过程中出现爆沸如何解决?
2018/07/24
【分享】介绍水务行业的资深专家 刘绪宗
2008/07/23
【求助】流动注射分光光度法测定硫化物
2010/09/30
【求助】水中总铁的测定 急
2010/01/16
【我们不一YOUNG】水环境监测pH值测定新方法的验证与应用
分享
2024/07/06
【我们不一YOUNG】水环境监测石油类测定新方法的验证与应用
分享
2024/07/06
【我们不一YOUNG】纳氏试剂分光光度法与水杨酸分光光度法测定废水中氨氮的方法比对
分享
2024/07/05
【我们不一YOUNG】连续流动分析法测定淡水中亚硝酸盐氮、硝酸盐氮、氨氮、总氮的研究
分享
2024/07/05
【我们不一YOUNG】纳氏试剂分光光度法检测水中氨氮蒸馏条件的优化研究
分享
2024/07/05
【我们不一YOUNG】连续流动-水杨酸法测定水中氨氮的干扰因素研究
分享
2024/07/05
【我们不一YOUNG】水质检测中色度的测量方法
分享
2024/07/05
【我们不一YOUNG】水质检测中的硫化物检测
分享
2024/07/05
检测报告一定要有判定结果吗?
求助
2024/07/01
气相FID重现性不好原因
求助
2024/07/01
求助,非甲烷总烃测定中,除烃空气0.4mg/m3,怎么计算的呢?是按总烃计算公式吗?
已应助
2024/06/29
求助安捷伦GC7890B,EPC无响应解决办法
求助
2024/07/01
HJ1332便携非甲实际应用问题
讨论
2024/07/01
衍射斑点标定求助
已应助
2024/06/30
EI源的灯丝镉厂家通用吗?
求助
2024/07/03
‘有奖问答’对错题’:用抽样方案(30,0)对产品批进行连续验收,当批不合格品率为1%时,方案的接收概率为73.97%,则平均检出质量为( )。
讨论
2024/07/05
waters2695洗针液及清洗柱塞密封垫的溶液至少多久更换一次?
求助
2011/11/12
求助文献1篇,谢谢(请转换悬赏)
已应助
2011/11/12
再跪求工程师一个非常常见的很多客户都想知道的问题
求助
2011/11/12
今天的PE AA800出现了一个莫名其妙的问题,后来排除了,大家猜猜是什么?
分享
2011/11/12
基于仪器仪表中的海量数据储存解决方案
原创
2011/11/12
一次排除顶空进样针堵塞故障的过程及有效避免堵塞的措施的分析
第六届原创
2011/11/12
求一份实验室的客户满意度调查表
求助
2011/11/12
吴老师整整十天没来了。
讨论
2011/11/12
品牌合作伙伴
岛津
日立科学仪器
珀金埃尔默仪器(上海)有限公司(PerkinElmer)
日本电子株式会社
丹纳赫
安捷伦
赛默飞世尔科技
普析通用
欧波同
天美
天瑞仪器
德国耶拿
海能技术
马尔文帕纳科
磐诺科技
上海仪电科仪
梅特勒托利多
聚光科技
莱伯泰科
盛瀚
多宁生物
丹东百特
科哲
卓立汉光
屹尧科技
华谱科仪
宝德仪器
优莱博
HORIBA
布鲁克核磁
举报帖子
执行举报
点赞用户
好友列表
加载中...
正在为您切换请稍后...