0

我想从数据库中检索记录并将其编组为 json。我有大约 30 个不同的表,所以我想要可以与所有和任何这些表一起使用的通用函数。我使用 xorm 进行数据库访问。

我设法创建了检索数据的 DRY 函数,这主要归功于这个问题和答案

这有效,可以将所有记录编组为 json:

type user struct {
   Id   int64  `json:"id"`
   Name string `json:"name"`
}
// type post
// etc.

type tableRecord struct {
    PrimaryKey string
    Data       interface{}
}

var ListOfTables = map[string]tableRecord{
    "users":{"id", &[]user{}},  // type user is struct for xorm with json annotation
    //"posts":{"post_id", &[]post{}},
    // etc.. 
}

for tableName, rec := range ListOfTables {
    err := xorm.Find(rec.Data)
    if err != nil {
        log.Print(err)
    }

    out, err := json.Marshal(rec.Data)
    if err != nil {
        log.Print(err)
    }
    log.Print(string(out)) // this yields json array
}

但是,我很难将单个记录编组为 json。我四处寻找迭代包含切片的界面{}的方法,找到了这个和类似的主题。试过:

switch reflect.TypeOf(reflect.ValueOf(rec.Data).Elem().Interface()).Kind() {
case reflect.Slice:
    s := reflect.ValueOf(reflect.ValueOf(rec.Data).Elem().Interface())
    for i := 0; i < s.Len(); i++ {
        entry := s.Index(i)
        log.Printf("%v\n", entry) // prints {1 John Doe}
        // log.Print(reflect.ValueOf(entry))
        data, err := json.MarshalIndent(entry, " ", "  ")
        if err != nil {
            log.Print(err)
        }
        log.Println(string(data)) // prints {} empty
    }
}  

当然,如果我指定rec.Data*[]user可以工作,但是我将不得不为每个表重写这样的代码,这不是我想要的。

switch t := rec.Data.(type) {
case *[]user:
    for _, entry := range *t {
        // log.Printf("loop %v", entry)
        data, err := json.MarshalIndent(entry, " ", "  ")
        if err != nil {
            log.Print(err)
        }
        log.Println(string(data)) // yields needed json for single record
    }
}

或者也许有一种完全不同的、更好的方法来解决这个问题——任何数据库记录到 json。

更新 现在的问题是,Xorm 需要结构吗?我将不得不阅读 xorm 的可能性和限制。

slice := record.Slice()
log.Print(reflect.TypeOf(slice))

err = env.hxo.In(record.PrimaryKey(), insertIds).Find(slice) // or &slice
if err != nil {
    log.Print(err) // Table not found
}

// this works
var slice2 []*user
err = env.hxo.In(record.PrimaryKey(), insertIds).Find(&slice2)
if err != nil {
    log.Print(err) // 
}
4

1 回答 1

1

因此,正如我在评论中提到的,如果您希望能够从tableRecord.Data字段中获取单个元素,最简单的方法是将字段类型更改为实际的类型:

type tableRecord struct {
    PrimaryKey string
    Data       []interface{} // slice of whatever
}

这样,你可以写一些非常通用的东西:

for tbl, record := range records {
    fmt.Printf("First record from table %s\n", tbl)
    b, _ := json.MarshalIndent(record[0], " ", "  ")
    fmt.Println(string(b))
    fmt.Prinln("other records...")
    b, _ = json.MarshalIndend(record[1:], " ", "  ")
    fmt.Println(string(b))
}

不过,如果我是你,我会考虑在我的 DB 类型中实现一个接口。类似于以下内容:

type DBType interface {
    PrimaryKey() string
    TableName() string // xorm can use this to get the table name
    Slice() []DBType // can return []user or whatever
}

因此,您不再需要该tableRecord类型,只需使用这样的 var:

listOfTables := []DBType{user{}, ...}
for _, tbl := range listOfTables {
    data := tbl.Slice()
    // find data here
    fmt.Printf("First record from table %s\n", tbl.TableName())
    b, _ := json.MarshalIndent(data[0], " ", "  ")
    fmt.Println(string(b))
    fmt.Prinln("other records...")
    b, _ = json.MarshalIndend(data[1:], " ", "  ")
    fmt.Println(string(b))
}

所以 TL;DR 我的回答/评论中缺少的内容:

  • 从 type []user{}(or []DBTable) to 的转换[]interface{}不起作用,因为您不能在单个表达式中转换切片中的所有元素。您必须创建第二个类型切片[]interface{}并复制这些值,如下所示:

    slice := userVar.Slice() data := make([]interface{}, len(slice)) for i := range slice { data[i] = slice[i] // 复制类型到 interface{} slice } 返回 tableRecord{userVar.PrimaryKey(), 数据}

我创建了一个小的工作示例,说明如何使用上述接口。

演示

为避免过于混乱,您可以更改Slicefunc 以立即返回 a []interface{}

func(v T) Slice() []interface{
    return []interface{
        &T{},
    }
}

你的实现有什么问题Slice是你有这样的事情:

func (u *user) Slice() []DBTable {
    u = &user{} // you're re-assigning the receiver, losing all state!
    return []DBTable{u}
}

接收器是指针类型,因此您所做的任何重新分配都会影响调用 func 的变量。这不是一个好主意。只需使用值接收器,或者,如果您想确保接口仅在指针变量上实现(一个常见的技巧,例如 gRPC 使用的),就是这样实现函数:

func(*user) Slice() []DBTable{
    return []DBTable{&user{}}
}

pb.go当使用协议缓冲区时,可以在生成的文件中找到这个技巧的一个很好的例子。消息类型将具有如下功能:

func(*MsgType) ProtoMessage() {}
于 2018-12-14T11:58:32.260 回答