回答

收藏

高效地将一对多对多数据库映射到Golang中的struct

技术问答 技术问答 714 人阅读 | 0 人回复 | 2023-09-14

问题在Golang一对多或多对多的中处理SQL在关系中,将线映射到最佳结构(高效,推荐类似Go什么是方式?
5 `3 ~, N- q! A以下示例为例。我试图详细介绍每种方法的优缺点,但我想知道社区的建议是什么。1 J: L/ p3 f/ N/ K8 s( n0 u
要求适用于PostgreSQL(可以通用,但不包括MySQL / Oracle特定功能)
4 a. f$ ?, B4 r0 C9 u7 i- y效率-每种组合都不会被强迫# o9 w( U3 \( F& x& m6 o
没有ORM-仅在理想情况下使用database/sql和jmoiron/sqlx
例子为了明确起见,我删除了错误的处理+ {. }9 I  [. x9 x( H# |
楷模
, X7 M; k1 O; S" r$ xtype Tag struct {  ID int  Name string}type Item struct {  ID int  Tags []Tag}数据库% P2 y& b/ M! C# a  N
CREATE TABLE item (  id                      INT GENERATED BY DEFAULT AS IDENTITY PRIMARY KEY);CREATE TABLE tag (  id                      INT GENERATED BY DEFAULT AS IDENTITY PRIMARY KEY, name                    VARCHAR(160), item_id                 INT REFERENCES item(id));方法1-选择所有项目,然后为每个项目选择标签
' q1 K9 J: J5 G- [7 Gvar items []Itemsqlxdb.Select(&items,&quot;SELECT * FROM item&quot;)for i,item := range items {  var tags []Tag  sqlxdb.Select(&tags,&quot;SELECT * FROM tag WHERE item_id = $1&quot;,item.ID)  items<i>.Tags = tags}优点: v0 p! g) L9 z8 [  A
简单的0 }4 u1 C- K+ M" A, |  q
容易明白
缺点
% a9 d& Z. P" e2 Z, y数据库查询数量与项目数量成正比方法2-构造SQL连接并手动遍历行! d  P" l, S+ Y0 a$ v
var itemTags = make(map[int][]Tag)var items = []Item{}rows,_ := sqlxdb.Queryx(&quot;SELECT i.id,t.id,t.name FROM item AS i JOIN tag AS t ON t.item_id = i.id&quot;)for rows.Next() {  var  itemID  int    tagID   int    tagName string  )  rows.Scan(&itemID,&tagID,&tagName)  if tags,ok := itemTags[itemID]; ok    itemTags[itemID] = append(tags,Tag{ID: tagID,Name: tagName,})  } else    itemTags[itemID] = []Tag{Tag{ID: tagID,Name: tagName,}}  }}for itemID,tags := range itemTags {  items = append(Item{    ID: itemID,   Tags: tags, })}优点
0 D3 |$ W3 C! l0 P" g单个数据库调用和游标可以在不占用太多内存的情况下循环缺点
. ]0 j0 i3 _5 k复杂且难以开发多个连接和结构的许多属性& C, J8 E  z0 p; J2 r+ a! L; F
性能不好;更多的内存使用和处理时间,而不是更多的网络调用
失败的方法3-SQLX结构扫描* n2 i# u0 k/ K' ^4 R% x' ?4 J6 c
虽然失败了,但我还是想包括这个方法,因为我发现它是我目前效率和发展简单性相结合的目标。我的希望是通过db标签设置在每个结构字段上sqlx可以扫描一些高级结构5 D0 {% ^8 F# t
var items []Itemsqlxdb.Select(&items,&quot;SELECT i.id AS item_id,t.id AS tag_id,t.name AS tag_name FROM item AS i JOIN tag AS t ON t.item_id = i.id&quot;)不幸的是,这个错误使得missing destination name tag_id in*[]Item我相信消息StructScan还不够先进,不能递归历行(无可奉告-这是一个复杂的场景)
' {% g9 W" u* A8 Y9 s可能的方法4-PostgreSQL数组聚合器和GROUP BY
' Z) S1 \3 F6 O尽管我相信这将 不会    工作,我已经包含了这个未经测试的选项,看看它是否可以改进 可    工作。
. p# x1 e- u* \* w" Evar items = []Item{}sqlxdb.Select(&items,&quot;SELECT i.id as item_id,array_agg(t.*) as tags FROM item AS i JOIN tag AS t ON t.item_id = i.id GROUP BY i.id&quot;)有时间的时候,我会试着在这里做一些实验。
8 E) j% {1 W: H9 F) x9 G                                                               
: k$ b& j2 k% x5 P. m; Z5 ^    解决方案:                                                               
" X  H$ d( d- S( S1 f9 n2 ~                                                                postgres中的sql:+ V$ k' t. y, @/ _
create schema temp;set search_path = temp;create table item(  id INT generated by default as identity primary key);create table tag(  id      INT generated by default as identity primary key, name    VARCHAR(160), item_id INT references item (id));create view item_tags asselect id, (         select            array_to_json(array_agg(row_to_json(taglist.*))) as array_to_json          from (               select tag.name,tag.id                 from tag                         where item_id = item.id               ) taglist ) as tagsfrom item ;-- golang query this maybe select  row_to_json(row)from (    select * from item_tags) row;然后golang查询这个SQL:
5 J- h" L0 [% A) nselect  row_to_json(row)from  select * from item_tags) row;并解组结构:
+ A0 D4 I+ Q4 A2 k2 a" s7 }4 Z: ?优点:# Z8 r+ \: G0 |5 C/ \
[ol]postgres管理数据关系sql函数添加/更新数据。- G8 w7 C/ Y/ E& P
golang管理业务模型和逻辑。" X( E9 ~9 H( ^2 e8 o8 n
[/ol]这是一个简单的方法。9 m4 a% C. _) W6 x
分享到:
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则