SPL-介绍(一)

胡安民

已于 2022-06-30 13:35:15 修改

阅读量2.3k

点赞数 2

分类专栏：所有文章文章标签：数据库算法数据结构 SPL

于 2022-06-30 12:20:26 首次发布

本文链接： https://blog.csdn.net/weixin_45203607/article/details/125532021

版权

所有文章专栏收录该内容

618 篇文章 9 订阅

订阅专栏

SPL是一种JAVA开源的结构化数据处理库，旨在解决ORM的不足，提供更高效的业务逻辑开发体验。它支持复杂流程、集合运算、热部署和大数据并行处理，适用于统计数据库数据、跨数据源查询、海量数据计算和结构化文件处理等场景。SPL具备专业数据类型，简化数据库读写，且能实现集群处理，避免繁琐的代码修改和重新部署流程。

摘要由CSDN通过智能技术生成

SPL官网

http://www.scudata.com.cn/

介绍

业务逻辑经常包含较复杂的流程和计算，同时涉及数据库的读写。由于授权麻烦、影响数据库安全、无法迁移、技术要求高、编写困难等原因，很多场景不适合用存储过程实现业务逻辑。因为不擅长复杂的流程处理，SQL也不适合单独实现业务逻辑，必须与JAVA等高级语言配合才行。但SQL和高级语言的语法风格迥然不同，数据结构差异巨大，导致两者难以配合，开发效率始终无法提高。在这种情况下，ORM适时而生。
ORM是一种将结构化数据（表/记录）映射为高级语言的对象的技术，这样就可以用统一的数据结构和语法风格实现业务逻辑，其根本目标还是提高开发效率。常见的ORM技术有mybatis,Hibernate、QueryDSL、JOOQ等。
在数据结构和语法风格的统一方面，ORM表现优秀，已经在大量项目中得到广泛应用。但ORM仍有很多不足，主要表现在：缺乏专业的结构化数据类型，集合运算不够方便，读写数据库时代码繁琐，不支持热部署，库函数不够丰富，复杂计算难以实现。ORM的这些缺点导致业务逻辑的开发效率没有明显提升，有时甚至大幅降低。
作为JAVA下开源的结构化数据处理类库，SPL可以解决ORM期望目标，甚至有更好的表现。

SPL应用场景

SPL技术介绍

个人总结

很多时候你想统计数据库某些数据,但是如果写sql需要写一大堆,那么使用SPL几行搞定
在写代码的时候需要从多个不同的数据源之间查询数据和计算非常麻烦,那么使用SPL是不错的选择
在写代码时候计算非常复杂的海量数据,使用代码来完成的话效率低而且容易出错,那么使用SPL直接帮你把算法,多线程,并行,等都实现完毕了直接使用就行
在代码里处理结构化数据文件(csv,excel,等),需要先解析然后在处理并且处理的过程也是非常繁琐,在SPL中所见及所得,而且处理和计算yyds
大数据支持,集群并行处理(这个就牛逼了), 在很多时候一台机器的性能是有限的,那么将数据分布到不同的机器上同时处理然后在汇总,这个如果要自己研发的话,呵呵懂得都懂,这里面设计到很多算法和多线程,不是一般人能玩的来的,而且工作量也是吓人的, 但是不用担心SPL都给解决了
在代码中逻辑修改后,那么就要重新打包然后上线,这个过程在大公司中是非常麻烦的(走各种流程审批),使用SPL热切换就能避免这个过程,只需要在前端写一个上传SPL脚本文件的入口就行,上传后把原来的脚本替换掉
能用的地方太多了,这里就不一一叙述了,自己研究发现