database.go 17 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380381382383384385386387388389390391392393394395396397398399400401402403404405406407408409410411412413414415416417418419420421422423424425426427428429430431432433434435436437438439440441442443444445446447448449450451452453454455456457458459460461462463464465466467468469470471472473474475476477478479480481482483484485486487488489490491492493494495496497498499500501502503504505506507508509510511512513514515516517518519520521522523524525526527528529530531532533534535536537538539540541542543544545546547548549550551552553554555556557558559560561562563564565566567568569570571572573574575576577578579580581582583584585586587588589590591592593594595596597598599600601602603604605606607608609610611612613614615616617618619620621622623624625626627628629630631632633634635636637638639640641642643644645646647648649650651652653654655656657658659660661662663664665666667668669670671672673674675676677678679680681682683684685686687688689690691692693694695696697698699700701702703704705706707708709710711712713714715716717718719720721722723724725726
  1. package database
  2. import (
  3. "git.sxidc.com/go-framework/baize/framework/core/infrastructure/database/operations"
  4. "git.sxidc.com/go-framework/baize/framework/core/infrastructure/database/sql"
  5. "git.sxidc.com/go-framework/baize/framework/core/tag/sql/sql_mapping"
  6. "git.sxidc.com/go-tools/utils/reflectutils"
  7. "git.sxidc.com/go-tools/utils/strutils"
  8. "github.com/pkg/errors"
  9. "reflect"
  10. "strings"
  11. "time"
  12. )
  13. // Executor 数据库基础设施接口
  14. type Executor interface {
  15. // ExecuteRawSql SQL执行接口
  16. // 参数:
  17. // - sql: SQL语句,可以使用预编译,需要填充的值用?占位
  18. // - values: 预编译填充值
  19. // 返回值:
  20. // - SQL执行结果
  21. // - 错误
  22. ExecuteRawSql(sql string, args ...any) ([]sql.Result, error)
  23. // ExecuteRawSqlTemplate SQL模板执行接口
  24. // 参数:
  25. // - sql: SQL语句模板,可以使用预编译,需要填充的值用?占位,可以使用Go模板构造SQL语句
  26. // - template: 渲染SQL语句模板的模板参数
  27. // - values: 预编译填充值
  28. // 返回值:
  29. // - SQL执行结果
  30. // - 错误
  31. ExecuteRawSqlTemplate(sql string, template map[string]any, args ...any) ([]sql.Result, error)
  32. }
  33. const (
  34. createdTimeFieldName = "CreatedTime"
  35. lastUpdatedTimeFieldName = "LastUpdatedTime"
  36. )
  37. // Transaction 执行事务
  38. // 参数:
  39. // - executor: 数据库基础设施接口
  40. // - txFunc: 事务函数
  41. // 返回值:
  42. // - 错误
  43. func Transaction(executor Executor, txFunc func(tx Executor) error) error {
  44. if executor == nil {
  45. return nil
  46. }
  47. if txFunc == nil {
  48. return nil
  49. }
  50. switch e := executor.(type) {
  51. case *operations.Operations:
  52. tx := e.BeginTransaction()
  53. err := txFunc(tx)
  54. if err != nil {
  55. tx.RollbackTransaction()
  56. return err
  57. }
  58. tx.CommitTransaction()
  59. default:
  60. return nil
  61. }
  62. return nil
  63. }
  64. // InsertEntity 通过结构插入数据
  65. // 参数:
  66. // - executor: 数据库基础设施接口
  67. // - tableName: 表名
  68. // - es: 结构或结构slice(批量插入),结构字段需要使用sqlmapping标注
  69. // 返回值:
  70. // - 错误
  71. func InsertEntity(executor Executor, tableName string, es any) error {
  72. if executor == nil {
  73. return errors.New("没有传递执行器")
  74. }
  75. if strutils.IsStringEmpty(tableName) {
  76. return errors.New("没有传递表名")
  77. }
  78. if es == nil {
  79. return nil
  80. }
  81. entityType := reflect.TypeOf(es)
  82. entityElemType := reflectutils.PointerTypeElem(entityType)
  83. if entityElemType.Kind() == reflect.Struct {
  84. return insertEntitySingle(executor, tableName, es)
  85. } else if entityElemType.Kind() == reflect.Slice {
  86. return insertEntityBatch(executor, tableName, es)
  87. } else {
  88. return errors.New("实体可以是结构,结构指针,结构Slice,结构指针的Slice或Slice的指针")
  89. }
  90. }
  91. func insertEntitySingle(executor Executor, tableName string, e any) error {
  92. fields, err := sql_mapping.DefaultUsage(e)
  93. if err != nil {
  94. return err
  95. }
  96. executeParams := sql.InsertExecuteParams{
  97. TableName: tableName,
  98. TableRow: formInsertTableRow(fields, time.Now().Local()),
  99. }
  100. executeParamsMap, err := executeParams.Map()
  101. if err != nil {
  102. return err
  103. }
  104. _, err = executor.ExecuteRawSqlTemplate(sql.InsertTpl, executeParamsMap, executeParams.TableRow.Values()...)
  105. if err != nil {
  106. if strings.Contains(err.Error(), "SQLSTATE 23505") {
  107. return ErrDBRecordHasExist
  108. }
  109. return err
  110. }
  111. return nil
  112. }
  113. func insertEntityBatch(executor Executor, tableName string, es any) error {
  114. now := time.Now().Local()
  115. tableRowBatch := make([]sql.TableRow, 0)
  116. entitiesValue := reflectutils.PointerValueElem(reflect.ValueOf(es))
  117. for i := 0; i < entitiesValue.Len(); i++ {
  118. entityValue := entitiesValue.Index(i)
  119. if !entityValue.IsValid() || entityValue.IsZero() {
  120. continue
  121. }
  122. e := entityValue.Interface()
  123. entityType := reflect.TypeOf(e)
  124. if !reflectutils.IsTypeStructOrStructPointer(entityType) {
  125. return errors.New("实体参数不是结构或结构指针")
  126. }
  127. fields, err := sql_mapping.DefaultUsage(e)
  128. if err != nil {
  129. return err
  130. }
  131. tableRowBatch = append(tableRowBatch, *formInsertTableRow(fields, now))
  132. }
  133. executeParams := sql.InsertBatchExecuteParams{
  134. TableName: tableName,
  135. TableRowBatch: tableRowBatch,
  136. }
  137. executeParamsMap, err := executeParams.Map()
  138. if err != nil {
  139. return err
  140. }
  141. values := make([]any, 0)
  142. for _, tableRow := range executeParams.TableRowBatch {
  143. values = append(values, tableRow.Values()...)
  144. }
  145. _, err = executor.ExecuteRawSqlTemplate(sql.InsertTpl, executeParamsMap, values...)
  146. if err != nil {
  147. if strings.Contains(err.Error(), "SQLSTATE 23505") {
  148. return ErrDBRecordHasExist
  149. }
  150. return err
  151. }
  152. return nil
  153. }
  154. func formInsertTableRow(fields []sql_mapping.Field, createTime time.Time) *sql.TableRow {
  155. tableRow := sql.NewTableRow()
  156. for _, field := range fields {
  157. fieldValue := reflect.ValueOf(field.Value)
  158. if (field.FieldName == createdTimeFieldName || field.FieldName == lastUpdatedTimeFieldName) &&
  159. reflectutils.IsValueTime(fieldValue) && fieldValue.IsZero() {
  160. field.Value = createTime
  161. }
  162. if field.FieldName != createdTimeFieldName && field.FieldName != lastUpdatedTimeFieldName &&
  163. reflectutils.IsValueTime(fieldValue) && fieldValue.IsZero() {
  164. field.Value = nil
  165. }
  166. tableRow.Add(field.ColumnName, field.Value)
  167. }
  168. return tableRow
  169. }
  170. // DeleteEntity 通过结构删除数据
  171. // 参数:
  172. // - executor: 数据库基础设施接口
  173. // - tableName: 表名
  174. // - e: 结构,结构字段需要使用sqlmapping标注
  175. // 返回值:
  176. // - 错误
  177. func DeleteEntity(executor Executor, tableName string, e any) error {
  178. if executor == nil {
  179. return errors.New("没有传递执行器")
  180. }
  181. if strutils.IsStringEmpty(tableName) {
  182. return errors.New("没有传递表名")
  183. }
  184. if e == nil {
  185. return nil
  186. }
  187. entityType := reflect.TypeOf(e)
  188. if !reflectutils.IsTypeStructOrStructPointer(entityType) {
  189. return errors.New("实体参数不是结构或结构指针")
  190. }
  191. fields, err := sql_mapping.DefaultUsage(e)
  192. if err != nil {
  193. return err
  194. }
  195. conditions := sql.NewConditions()
  196. for _, field := range fields {
  197. // 不是键,字段跳过
  198. if !field.IsKey {
  199. continue
  200. }
  201. conditions.Equal(field.ColumnName, field.Value)
  202. }
  203. executeParams := sql.DeleteExecuteParams{
  204. TableName: tableName,
  205. Conditions: conditions,
  206. }
  207. executeParamsMap, err := executeParams.Map()
  208. if err != nil {
  209. return err
  210. }
  211. _, err = executor.ExecuteRawSqlTemplate(sql.DeleteTpl, executeParamsMap, executeParams.Conditions.Args()...)
  212. if err != nil {
  213. return err
  214. }
  215. return nil
  216. }
  217. // UpdateEntity 通过结构更新数据
  218. // 参数:
  219. // - executor: 数据库基础设施接口
  220. // - tableName: 表名
  221. // - e: 结构,结构字段需要使用sqlmapping标注
  222. // 返回值:
  223. // - 错误
  224. func UpdateEntity(executor Executor, tableName string, e any) error {
  225. if executor == nil {
  226. return errors.New("没有传递执行器")
  227. }
  228. if strutils.IsStringEmpty(tableName) {
  229. return errors.New("没有传递表名")
  230. }
  231. if e == nil {
  232. return nil
  233. }
  234. entityType := reflect.TypeOf(e)
  235. if !reflectutils.IsTypeStructOrStructPointer(entityType) {
  236. return errors.New("实体参数不是结构或结构指针")
  237. }
  238. fields, err := sql_mapping.DefaultUsage(e)
  239. if err != nil {
  240. return err
  241. }
  242. now := time.Now().Local()
  243. tableRow := sql.NewTableRow()
  244. conditions := sql.NewConditions()
  245. for _, field := range fields {
  246. // 不是键字段
  247. // 不是更新时间字段
  248. // 不更新的字段或者字段为零值且不能清空,跳过
  249. if !field.IsKey && field.FieldName != lastUpdatedTimeFieldName &&
  250. (!field.CanUpdate || (reflect.ValueOf(field.Value).IsZero() && !field.CanUpdateClear)) {
  251. continue
  252. }
  253. fieldValue := reflect.ValueOf(field.Value)
  254. if field.FieldName == lastUpdatedTimeFieldName &&
  255. reflectutils.IsValueTime(fieldValue) && fieldValue.IsZero() {
  256. field.Value = now
  257. }
  258. if field.FieldName != lastUpdatedTimeFieldName &&
  259. reflectutils.IsValueTime(fieldValue) && fieldValue.IsZero() {
  260. field.Value = nil
  261. }
  262. if field.IsKey {
  263. conditions.Equal(field.ColumnName, field.Value)
  264. } else {
  265. if (field.Value == nil || reflect.ValueOf(field.Value).IsZero()) && !field.CanUpdateClear {
  266. continue
  267. }
  268. tableRow.Add(field.ColumnName, field.Value)
  269. }
  270. }
  271. executeParams := sql.UpdateExecuteParams{
  272. TableName: tableName,
  273. TableRow: tableRow,
  274. Conditions: conditions,
  275. }
  276. executeParamsMap, err := executeParams.Map()
  277. if err != nil {
  278. return err
  279. }
  280. args := make([]any, 0)
  281. args = append(args, executeParams.TableRow.Values()...)
  282. args = append(args, executeParams.Conditions.Args()...)
  283. _, err = executor.ExecuteRawSqlTemplate(sql.UpdateTpl, executeParamsMap, args...)
  284. if err != nil {
  285. return err
  286. }
  287. return nil
  288. }
  289. // Insert 插入数据
  290. // 参数:
  291. // - executor: 数据库基础设施接口
  292. // - executeParams: 插入数据参数
  293. // 返回值:
  294. // - 错误
  295. func Insert(executor Executor, executeParams *sql.InsertExecuteParams) error {
  296. if executor == nil {
  297. return errors.New("没有传递执行器")
  298. }
  299. if executeParams == nil {
  300. return errors.New("没有传递执行参数")
  301. }
  302. executeParamsMap, err := executeParams.Map()
  303. if err != nil {
  304. return err
  305. }
  306. _, err = executor.ExecuteRawSqlTemplate(sql.InsertTpl, executeParamsMap, executeParams.TableRow.Values()...)
  307. if err != nil {
  308. return err
  309. }
  310. return nil
  311. }
  312. // InsertBatch 批量插入数据
  313. // 参数:
  314. // - executor: 数据库基础设施接口
  315. // - executeParams: 批量插入数据参数
  316. // 返回值:
  317. // - 错误
  318. func InsertBatch(executor Executor, executeParams *sql.InsertBatchExecuteParams) error {
  319. if executor == nil {
  320. return errors.New("没有传递执行器")
  321. }
  322. if executeParams == nil {
  323. return errors.New("没有传递执行参数")
  324. }
  325. executeParamsMap, err := executeParams.Map()
  326. if err != nil {
  327. return err
  328. }
  329. values := make([]any, 0)
  330. for _, tableRow := range executeParams.TableRowBatch {
  331. values = append(values, tableRow.Values()...)
  332. }
  333. _, err = executor.ExecuteRawSqlTemplate(sql.InsertTpl, executeParamsMap, values...)
  334. if err != nil {
  335. return err
  336. }
  337. return nil
  338. }
  339. // Delete 删除数据
  340. // 参数:
  341. // - executor: 数据库基础设施接口
  342. // - executeParams: 删除数据参数
  343. // 返回值:
  344. // - 错误
  345. func Delete(executor Executor, executeParams *sql.DeleteExecuteParams) error {
  346. if executor == nil {
  347. return errors.New("没有传递执行器")
  348. }
  349. if executeParams == nil {
  350. return errors.New("没有传递执行参数")
  351. }
  352. executeParamsMap, err := executeParams.Map()
  353. if err != nil {
  354. return err
  355. }
  356. _, err = executor.ExecuteRawSqlTemplate(sql.DeleteTpl, executeParamsMap, executeParams.Conditions.Args()...)
  357. if err != nil {
  358. return err
  359. }
  360. return nil
  361. }
  362. // Update 更新数据
  363. // 参数:
  364. // - executor: 数据库基础设施接口
  365. // - executeParams: 更新数据参数
  366. // 返回值:
  367. // - 错误
  368. func Update(executor Executor, executeParams *sql.UpdateExecuteParams) error {
  369. if executor == nil {
  370. return errors.New("没有传递执行器")
  371. }
  372. if executeParams == nil {
  373. return errors.New("没有传递执行参数")
  374. }
  375. if executeParams.Conditions == nil {
  376. executeParams.Conditions = sql.NewConditions()
  377. }
  378. executeParamsMap, err := executeParams.Map()
  379. if err != nil {
  380. return err
  381. }
  382. args := make([]any, 0)
  383. args = append(args, executeParams.TableRow.Values()...)
  384. args = append(args, executeParams.Conditions.Args()...)
  385. _, err = executor.ExecuteRawSqlTemplate(sql.UpdateTpl, executeParamsMap, args...)
  386. if err != nil {
  387. return err
  388. }
  389. return nil
  390. }
  391. // Query 查询数据
  392. // 参数:
  393. // - executor: 数据库基础设施接口
  394. // - executeParams: 查询数据参数
  395. // 返回值:
  396. // - 查询结果
  397. // - 总数
  398. // - 错误
  399. func Query(executor Executor, executeParams *sql.QueryExecuteParams) ([]sql.Result, int64, error) {
  400. if executor == nil {
  401. return nil, 0, errors.New("没有传递执行器")
  402. }
  403. if executeParams == nil {
  404. return nil, 0, errors.New("没有传递执行参数")
  405. }
  406. if executeParams.Conditions == nil {
  407. executeParams.Conditions = sql.NewConditions()
  408. }
  409. queryExecuteParamsMap, err := executeParams.Map()
  410. if err != nil {
  411. return nil, 0, err
  412. }
  413. countExecuteParams := sql.CountExecuteParams{
  414. TableName: executeParams.TableName,
  415. Conditions: executeParams.Conditions,
  416. }
  417. countExecuteParamsMap, err := countExecuteParams.Map()
  418. if err != nil {
  419. return nil, 0, err
  420. }
  421. tableRows, err := executor.ExecuteRawSqlTemplate(sql.QueryTpl, queryExecuteParamsMap, executeParams.Conditions.Args()...)
  422. if err != nil {
  423. return nil, 0, err
  424. }
  425. countTableRow, err := executor.ExecuteRawSqlTemplate(sql.CountTpl, countExecuteParamsMap, countExecuteParams.Conditions.Args()...)
  426. if err != nil {
  427. return nil, 0, err
  428. }
  429. results := make([]sql.Result, len(tableRows))
  430. for i, row := range tableRows {
  431. results[i] = row
  432. }
  433. totalCount, err := reflectutils.ToInt64(countTableRow[0]["count"])
  434. if err != nil {
  435. return nil, 0, err
  436. }
  437. return results, totalCount, nil
  438. }
  439. // QueryOne 查询单条数据
  440. // 参数:
  441. // - executor: 数据库基础设施接口
  442. // - executeParams: 查询单条数据参数
  443. // 返回值:
  444. // - 查询结果
  445. // - 错误
  446. func QueryOne(executor Executor, executeParams *sql.QueryOneExecuteParams) (sql.Result, error) {
  447. if executor == nil {
  448. return nil, errors.New("没有传递执行器")
  449. }
  450. if executeParams == nil {
  451. return nil, errors.New("没有传递执行参数")
  452. }
  453. if executeParams.Conditions == nil {
  454. executeParams.Conditions = sql.NewConditions()
  455. }
  456. executeParamsMap, err := executeParams.Map()
  457. if err != nil {
  458. return nil, err
  459. }
  460. tableRows, err := executor.ExecuteRawSqlTemplate(sql.QueryTpl, executeParamsMap, executeParams.Conditions.Args()...)
  461. if err != nil {
  462. return nil, err
  463. }
  464. if tableRows == nil || len(tableRows) == 0 {
  465. return nil, ErrDBRecordNotExist
  466. }
  467. return tableRows[0], nil
  468. }
  469. // Count 数据计数
  470. // 参数:
  471. // - executor: 数据库基础设施接口
  472. // - executeParams: 数据计数参数
  473. // 返回值:
  474. // - 数量
  475. // - 错误
  476. func Count(executor Executor, executeParams *sql.CountExecuteParams) (int64, error) {
  477. if executor == nil {
  478. return 0, errors.New("没有传递执行器")
  479. }
  480. if executeParams == nil {
  481. return 0, errors.New("没有传递执行参数")
  482. }
  483. if executeParams.Conditions == nil {
  484. executeParams.Conditions = sql.NewConditions()
  485. }
  486. executeParamsMap, err := executeParams.Map()
  487. if err != nil {
  488. return 0, err
  489. }
  490. tableRows, err := executor.ExecuteRawSqlTemplate(sql.CountTpl, executeParamsMap, executeParams.Conditions.Args()...)
  491. if err != nil {
  492. return 0, err
  493. }
  494. count, err := reflectutils.ToInt64(tableRows[0]["count"])
  495. if err != nil {
  496. return 0, err
  497. }
  498. return count, nil
  499. }
  500. // CheckExist 数据存在性检查
  501. // 参数:
  502. // - executor: 数据库基础设施接口
  503. // - executeParams: 数据存在性检查参数
  504. // 返回值:
  505. // - 是否存在
  506. // - 错误
  507. func CheckExist(executor Executor, executeParams *sql.CheckExistExecuteParams) (bool, error) {
  508. if executor == nil {
  509. return false, errors.New("没有传递执行器")
  510. }
  511. if executeParams == nil {
  512. return false, errors.New("没有传递执行参数")
  513. }
  514. if executeParams.Conditions == nil {
  515. executeParams.Conditions = sql.NewConditions()
  516. }
  517. executeParamsMap, err := executeParams.Map()
  518. if err != nil {
  519. return false, err
  520. }
  521. tableRows, err := executor.ExecuteRawSqlTemplate(sql.CountTpl, executeParamsMap, executeParams.Conditions.Args()...)
  522. if err != nil {
  523. return false, err
  524. }
  525. count, err := reflectutils.ToInt64(tableRows[0]["count"])
  526. if err != nil {
  527. return false, err
  528. }
  529. return count > 0, nil
  530. }
  531. // CheckHasOnlyOne 数据唯一性检查
  532. // 参数:
  533. // - executor: 数据库基础设施接口
  534. // - executeParams: 数据唯一性检查参数
  535. // 返回值:
  536. // - 是否唯一
  537. // - 错误
  538. func CheckHasOnlyOne(executor Executor, executeParams *sql.CheckHasOnlyOneExecuteParams) (bool, error) {
  539. if executor == nil {
  540. return false, errors.New("没有传递执行器")
  541. }
  542. if executeParams == nil {
  543. return false, errors.New("没有传递执行参数")
  544. }
  545. if executeParams.Conditions == nil {
  546. executeParams.Conditions = sql.NewConditions()
  547. }
  548. executeParamsMap, err := executeParams.Map()
  549. if err != nil {
  550. return false, err
  551. }
  552. tableRows, err := executor.ExecuteRawSqlTemplate(sql.CountTpl, executeParamsMap, executeParams.Conditions.Args()...)
  553. if err != nil {
  554. return false, err
  555. }
  556. count, err := reflectutils.ToInt64(tableRows[0]["count"])
  557. if err != nil {
  558. return false, err
  559. }
  560. return count == 1, nil
  561. }
  562. // ExecuteRawSql SQL执行接口
  563. // 参数:
  564. // - executor: 数据库基础设施接口
  565. // - sql: SQL语句,可以使用预编译,需要填充的值用?占位
  566. // - args: 预编译填充值
  567. // 返回值:
  568. // - SQL执行结果
  569. // - 错误
  570. func ExecuteRawSql(executor Executor, sql string, args ...any) ([]sql.Result, error) {
  571. return ExecuteRawSqlTemplate(executor, sql, nil, args...)
  572. }
  573. // ExecuteRawSqlTemplate SQL模板执行接口
  574. // 参数:
  575. // - executor: 数据库基础设施接口
  576. // - sql: SQL语句模板,可以使用预编译,需要填充的值用?占位,可以使用Go模板构造SQL语句
  577. // - template: 渲染SQL语句模板的模板参数
  578. // - args: 预编译填充值
  579. // 返回值:
  580. // - SQL执行结果
  581. // - 错误
  582. func ExecuteRawSqlTemplate(executor Executor, sql string, executeParams map[string]any, args ...any) ([]sql.Result, error) {
  583. if executor == nil {
  584. return nil, errors.New("没有传递执行器")
  585. }
  586. if strutils.IsStringEmpty(sql) {
  587. return nil, errors.New("没有sql")
  588. }
  589. tableRows, err := executor.ExecuteRawSqlTemplate(sql, executeParams, args...)
  590. if err != nil {
  591. return nil, err
  592. }
  593. return tableRows, nil
  594. }