工作经验

来源:互联网 发布:中国2016年m2数据 编辑:程序博客网 时间:2024/05/02 06:38

1.导入导出功能:

  • 导入功能应考虑机子宕机,断电而导致数据丢失情况。可以建立一个临时表,这里使用逐条插入数据,而不是用线程插入数据的原因是,线程插入数据是无序的,因此程序宕机后就不清楚导入的数据在哪个位置。可以用队列来应对宕机的情况,如果系统宕机,队列就会从临时表中读出数据插入到数据库中。
  • 导入功能还应考虑错误导入的数据。做唯一性处理。
  • 分布式机子做多线程的时候,两台机子都在跑。可以用缓存处理。让其中一台跑一台不跑。
  • 导出功能存在导出的数据传输慢的问题。
0 0
原创粉丝点击