回答

收藏

高效地将一对多对多数据库映射到Golang中的struct

技术问答 技术问答 765 人阅读 | 0 人回复 | 2023-09-14

问题在Golang一对多或多对多的中处理SQL在关系中,将线映射到最佳结构(高效,推荐类似Go什么是方式?+ G; p( t2 X( U, z) |6 w
以下示例为例。我试图详细介绍每种方法的优缺点,但我想知道社区的建议是什么。
* R6 S7 }, i& A2 `: x. Y要求适用于PostgreSQL(可以通用,但不包括MySQL / Oracle特定功能)8 C! I' `$ j: d" f! z- W; V' D
效率-每种组合都不会被强迫1 A7 ?( ^5 G/ f' ?# h3 E0 I" D
没有ORM-仅在理想情况下使用database/sql和jmoiron/sqlx
例子为了明确起见,我删除了错误的处理$ \5 R* N/ C' G+ h/ u
楷模5 m4 v6 L0 E2 J" ]/ M, w& A6 D
type Tag struct {  ID int  Name string}type Item struct {  ID int  Tags []Tag}数据库3 c2 H" ^$ I! z4 n' Q
CREATE TABLE item (  id                      INT GENERATED BY DEFAULT AS IDENTITY PRIMARY KEY);CREATE TABLE tag (  id                      INT GENERATED BY DEFAULT AS IDENTITY PRIMARY KEY, name                    VARCHAR(160), item_id                 INT REFERENCES item(id));方法1-选择所有项目,然后为每个项目选择标签7 }$ ?) S+ ?* V: w
var items []Itemsqlxdb.Select(&items,&quot;SELECT * FROM item&quot;)for i,item := range items {  var tags []Tag  sqlxdb.Select(&tags,&quot;SELECT * FROM tag WHERE item_id = $1&quot;,item.ID)  items<i>.Tags = tags}优点: `1 R7 a3 \# N2 v8 x$ O
简单的
& q0 n% i* E( l$ c1 y容易明白
缺点& w2 s0 C8 n! F; i
数据库查询数量与项目数量成正比方法2-构造SQL连接并手动遍历行7 V: K- G6 `8 w" \- G
var itemTags = make(map[int][]Tag)var items = []Item{}rows,_ := sqlxdb.Queryx(&quot;SELECT i.id,t.id,t.name FROM item AS i JOIN tag AS t ON t.item_id = i.id&quot;)for rows.Next() {  var  itemID  int    tagID   int    tagName string  )  rows.Scan(&itemID,&tagID,&tagName)  if tags,ok := itemTags[itemID]; ok    itemTags[itemID] = append(tags,Tag{ID: tagID,Name: tagName,})  } else    itemTags[itemID] = []Tag{Tag{ID: tagID,Name: tagName,}}  }}for itemID,tags := range itemTags {  items = append(Item{    ID: itemID,   Tags: tags, })}优点3 x' ~0 X: p# Q0 r6 |
单个数据库调用和游标可以在不占用太多内存的情况下循环缺点7 E5 a2 I  O' i: ~
复杂且难以开发多个连接和结构的许多属性* o! t* ?( G% Q7 w8 B; T
性能不好;更多的内存使用和处理时间,而不是更多的网络调用
失败的方法3-SQLX结构扫描! t% Y% G& N4 F9 D+ [* ~4 Z  W
虽然失败了,但我还是想包括这个方法,因为我发现它是我目前效率和发展简单性相结合的目标。我的希望是通过db标签设置在每个结构字段上sqlx可以扫描一些高级结构
9 ~7 l* n% g0 D9 g  o, Xvar items []Itemsqlxdb.Select(&items,&quot;SELECT i.id AS item_id,t.id AS tag_id,t.name AS tag_name FROM item AS i JOIN tag AS t ON t.item_id = i.id&quot;)不幸的是,这个错误使得missing destination name tag_id in*[]Item我相信消息StructScan还不够先进,不能递归历行(无可奉告-这是一个复杂的场景)# ~7 i( \/ I7 D+ y0 ~
可能的方法4-PostgreSQL数组聚合器和GROUP BY
8 `: V  i$ C+ \# v$ F, [尽管我相信这将 不会    工作,我已经包含了这个未经测试的选项,看看它是否可以改进 可    工作。3 B- f" s9 l% M: j: ?( `1 p
var items = []Item{}sqlxdb.Select(&items,&quot;SELECT i.id as item_id,array_agg(t.*) as tags FROM item AS i JOIN tag AS t ON t.item_id = i.id GROUP BY i.id&quot;)有时间的时候,我会试着在这里做一些实验。
/ M. B' c3 q1 x5 e9 H                                                                4 L: u2 d7 p) F% f  }% y! ^/ M
    解决方案:                                                               
. d4 w& {, Q% n0 r2 u# c' W                                                                postgres中的sql:
- d& n$ i4 V5 L" p9 U/ K% _3 w) |create schema temp;set search_path = temp;create table item(  id INT generated by default as identity primary key);create table tag(  id      INT generated by default as identity primary key, name    VARCHAR(160), item_id INT references item (id));create view item_tags asselect id, (         select            array_to_json(array_agg(row_to_json(taglist.*))) as array_to_json          from (               select tag.name,tag.id                 from tag                         where item_id = item.id               ) taglist ) as tagsfrom item ;-- golang query this maybe select  row_to_json(row)from (    select * from item_tags) row;然后golang查询这个SQL:+ r, F2 j5 W( M% w- w1 S. t
select  row_to_json(row)from  select * from item_tags) row;并解组结构:/ {3 b# h; ^$ R; Q/ X: S
优点:& X( H/ q% p* O& H* S: a
[ol]postgres管理数据关系sql函数添加/更新数据。5 w# J- g8 q3 G( _; A; ^
golang管理业务模型和逻辑。
+ [- i; Z$ V8 e! ~; }[/ol]这是一个简单的方法。
- {9 q" q8 t% K  n4 M% G
分享到:
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则