mirror of
https://github.com/datarhei/core.git
synced 2025-09-27 04:16:25 +08:00
Add test for v1 import
This commit is contained in:
@@ -1,6 +1,7 @@
|
|||||||
package main
|
package main
|
||||||
|
|
||||||
import (
|
import (
|
||||||
|
"fmt"
|
||||||
"os"
|
"os"
|
||||||
|
|
||||||
"github.com/datarhei/core/v16/config"
|
"github.com/datarhei/core/v16/config"
|
||||||
@@ -11,23 +12,28 @@ import (
|
|||||||
)
|
)
|
||||||
|
|
||||||
func main() {
|
func main() {
|
||||||
if ok := doImport(); !ok {
|
|
||||||
os.Exit(1)
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
func doImport() bool {
|
|
||||||
logger := log.New("Import").WithOutput(log.NewConsoleWriter(os.Stderr, log.Linfo, true)).WithField("version", "v1")
|
logger := log.New("Import").WithOutput(log.NewConsoleWriter(os.Stderr, log.Linfo, true)).WithField("version", "v1")
|
||||||
|
|
||||||
logger.Info().Log("Database import")
|
|
||||||
|
|
||||||
configstore, err := config.NewJSONStore(os.Getenv("CORE_CONFIGFILE"), nil)
|
configstore, err := config.NewJSONStore(os.Getenv("CORE_CONFIGFILE"), nil)
|
||||||
if err != nil {
|
if err != nil {
|
||||||
logger.Error().WithError(err).Log("Loading configuration failed")
|
logger.Error().WithError(err).Log("Loading configuration failed")
|
||||||
return false
|
os.Exit(1)
|
||||||
}
|
}
|
||||||
|
|
||||||
|
if err := doImport(logger, configstore); err != nil {
|
||||||
|
os.Exit(1)
|
||||||
|
}
|
||||||
|
}
|
||||||
|
|
||||||
|
func doImport(logger log.Logger, configstore config.Store) error {
|
||||||
|
if logger == nil {
|
||||||
|
logger = log.New("")
|
||||||
|
}
|
||||||
|
|
||||||
|
logger.Info().Log("Database import")
|
||||||
|
|
||||||
cfg := configstore.Get()
|
cfg := configstore.Get()
|
||||||
|
cfg.Migrate()
|
||||||
|
|
||||||
// Merging the persisted config with the environment variables
|
// Merging the persisted config with the environment variables
|
||||||
cfg.Merge()
|
cfg.Merge()
|
||||||
@@ -35,6 +41,7 @@ func doImport() bool {
|
|||||||
cfg.Validate(false)
|
cfg.Validate(false)
|
||||||
if cfg.HasErrors() {
|
if cfg.HasErrors() {
|
||||||
logger.Error().Log("The configuration contains errors")
|
logger.Error().Log("The configuration contains errors")
|
||||||
|
messages := []string{}
|
||||||
cfg.Messages(func(level string, v config.Variable, message string) {
|
cfg.Messages(func(level string, v config.Variable, message string) {
|
||||||
if level == "error" {
|
if level == "error" {
|
||||||
logger.Error().WithFields(log.Fields{
|
logger.Error().WithFields(log.Fields{
|
||||||
@@ -43,10 +50,12 @@ func doImport() bool {
|
|||||||
"env": v.EnvName,
|
"env": v.EnvName,
|
||||||
"description": v.Description,
|
"description": v.Description,
|
||||||
}).Log(message)
|
}).Log(message)
|
||||||
|
|
||||||
|
messages = append(messages, v.Name+": "+message)
|
||||||
}
|
}
|
||||||
})
|
})
|
||||||
|
|
||||||
return false
|
return fmt.Errorf("the configuration contains errors: %v", messages)
|
||||||
}
|
}
|
||||||
|
|
||||||
logger.Info().Log("Checking for database ...")
|
logger.Info().Log("Checking for database ...")
|
||||||
@@ -59,12 +68,12 @@ func doImport() bool {
|
|||||||
if _, err := os.Stat(v1filename); err != nil {
|
if _, err := os.Stat(v1filename); err != nil {
|
||||||
if os.IsNotExist(err) {
|
if os.IsNotExist(err) {
|
||||||
logger.Info().Log("Database doesn't exist and nothing will be imported")
|
logger.Info().Log("Database doesn't exist and nothing will be imported")
|
||||||
return true
|
return nil
|
||||||
}
|
}
|
||||||
|
|
||||||
logger.Error().WithError(err).Log("Checking for v1 database")
|
logger.Error().WithError(err).Log("Checking for v1 database")
|
||||||
|
|
||||||
return false
|
return fmt.Errorf("checking for v1 database: %w", err)
|
||||||
}
|
}
|
||||||
|
|
||||||
logger.Info().Log("Found database")
|
logger.Info().Log("Found database")
|
||||||
@@ -77,14 +86,14 @@ func doImport() bool {
|
|||||||
data, err := datastore.Load()
|
data, err := datastore.Load()
|
||||||
if err != nil {
|
if err != nil {
|
||||||
logger.Error().WithError(err).Log("Loading new database failed")
|
logger.Error().WithError(err).Log("Loading new database failed")
|
||||||
return false
|
return fmt.Errorf("loading new database failed: %w", err)
|
||||||
}
|
}
|
||||||
|
|
||||||
// Check if the existing DB has already some data in it.
|
// Check if the existing DB has already some data in it.
|
||||||
// If it's not empty, we will not import any v1 DB.
|
// If it's not empty, we will not import any v1 DB.
|
||||||
if !data.IsEmpty() {
|
if !data.IsEmpty() {
|
||||||
logger.Info().Log("There's already information stored in the new database and the v1 database will not be imported")
|
logger.Info().Log("There's already information stored in the new database and the v1 database will not be imported")
|
||||||
return true
|
return nil
|
||||||
}
|
}
|
||||||
|
|
||||||
logger.Info().Log("Importing database ...")
|
logger.Info().Log("Importing database ...")
|
||||||
@@ -97,17 +106,18 @@ func doImport() bool {
|
|||||||
r, err := importV1(v1filename, importConfig)
|
r, err := importV1(v1filename, importConfig)
|
||||||
if err != nil {
|
if err != nil {
|
||||||
logger.Error().WithError(err).Log("Importing database failed")
|
logger.Error().WithError(err).Log("Importing database failed")
|
||||||
return false
|
return fmt.Errorf("importing database failed: %w", err)
|
||||||
}
|
}
|
||||||
|
|
||||||
// Persist the imported DB
|
// Persist the imported DB
|
||||||
if err := datastore.Store(r); err != nil {
|
if err := datastore.Store(r); err != nil {
|
||||||
logger.Error().WithError(err).Log("Storing imported data to new database failed")
|
logger.Error().WithError(err).Log("Storing imported data to new database failed")
|
||||||
return false
|
return fmt.Errorf("storing imported data to new database failed: %w", err)
|
||||||
}
|
}
|
||||||
|
|
||||||
// Get the unmerged config for persisting
|
// Get the unmerged config for persisting
|
||||||
cfg = configstore.Get()
|
cfg = configstore.Get()
|
||||||
|
cfg.Migrate()
|
||||||
|
|
||||||
// Add static routes to mimic the old URLs
|
// Add static routes to mimic the old URLs
|
||||||
cfg.Router.Routes["/hls/live.stream.m3u8"] = "/memfs/" + importConfig.id + ".m3u8"
|
cfg.Router.Routes["/hls/live.stream.m3u8"] = "/memfs/" + importConfig.id + ".m3u8"
|
||||||
@@ -117,10 +127,10 @@ func doImport() bool {
|
|||||||
// Persist the modified config
|
// Persist the modified config
|
||||||
if err := configstore.Set(cfg); err != nil {
|
if err := configstore.Set(cfg); err != nil {
|
||||||
logger.Error().WithError(err).Log("Storing adjusted config failed")
|
logger.Error().WithError(err).Log("Storing adjusted config failed")
|
||||||
return false
|
return fmt.Errorf("storing adjusted config failed: %w", err)
|
||||||
}
|
}
|
||||||
|
|
||||||
logger.Info().Log("Successfully imported data")
|
logger.Info().Log("Successfully imported data")
|
||||||
|
|
||||||
return true
|
return nil
|
||||||
}
|
}
|
||||||
|
22
app/import/main_test.go
Normal file
22
app/import/main_test.go
Normal file
@@ -0,0 +1,22 @@
|
|||||||
|
package main
|
||||||
|
|
||||||
|
import (
|
||||||
|
"testing"
|
||||||
|
|
||||||
|
"github.com/datarhei/core/v16/config"
|
||||||
|
"github.com/stretchr/testify/require"
|
||||||
|
)
|
||||||
|
|
||||||
|
func TestImport(t *testing.T) {
|
||||||
|
configstore := config.NewDummyStore()
|
||||||
|
|
||||||
|
cfg := configstore.Get()
|
||||||
|
cfg.Version = 1
|
||||||
|
cfg.Migrate()
|
||||||
|
|
||||||
|
err := configstore.Set(cfg)
|
||||||
|
require.NoError(t, err)
|
||||||
|
|
||||||
|
err = doImport(nil, configstore)
|
||||||
|
require.NoError(t, err)
|
||||||
|
}
|
@@ -2,18 +2,43 @@ package config
|
|||||||
|
|
||||||
import "fmt"
|
import "fmt"
|
||||||
|
|
||||||
type dummyStore struct{}
|
type dummyStore struct {
|
||||||
|
current *Config
|
||||||
|
active *Config
|
||||||
|
}
|
||||||
|
|
||||||
// NewDummyStore returns a store that returns the default config
|
// NewDummyStore returns a store that returns the default config
|
||||||
func NewDummyStore() Store {
|
func NewDummyStore() Store {
|
||||||
return &dummyStore{}
|
s := &dummyStore{}
|
||||||
|
|
||||||
|
cfg := New()
|
||||||
|
|
||||||
|
cfg.DB.Dir = "."
|
||||||
|
cfg.FFmpeg.Binary = "true"
|
||||||
|
cfg.Storage.Disk.Dir = "."
|
||||||
|
cfg.Storage.MimeTypes = ""
|
||||||
|
|
||||||
|
s.current = cfg
|
||||||
|
|
||||||
|
cfg = New()
|
||||||
|
|
||||||
|
cfg.DB.Dir = "."
|
||||||
|
cfg.FFmpeg.Binary = "true"
|
||||||
|
cfg.Storage.Disk.Dir = "."
|
||||||
|
cfg.Storage.MimeTypes = ""
|
||||||
|
|
||||||
|
s.active = cfg
|
||||||
|
|
||||||
|
return s
|
||||||
}
|
}
|
||||||
|
|
||||||
func (c *dummyStore) Get() *Config {
|
func (c *dummyStore) Get() *Config {
|
||||||
cfg := New()
|
cfg := New()
|
||||||
|
|
||||||
cfg.DB.Dir = "."
|
cfg.DB.Dir = "."
|
||||||
|
cfg.FFmpeg.Binary = "true"
|
||||||
cfg.Storage.Disk.Dir = "."
|
cfg.Storage.Disk.Dir = "."
|
||||||
|
cfg.Storage.MimeTypes = ""
|
||||||
|
|
||||||
return cfg
|
return cfg
|
||||||
}
|
}
|
||||||
@@ -25,6 +50,8 @@ func (c *dummyStore) Set(d *Config) error {
|
|||||||
return fmt.Errorf("configuration data has errors after validation")
|
return fmt.Errorf("configuration data has errors after validation")
|
||||||
}
|
}
|
||||||
|
|
||||||
|
c.current = NewConfigFrom(d)
|
||||||
|
|
||||||
return nil
|
return nil
|
||||||
}
|
}
|
||||||
|
|
||||||
@@ -32,7 +59,9 @@ func (c *dummyStore) GetActive() *Config {
|
|||||||
cfg := New()
|
cfg := New()
|
||||||
|
|
||||||
cfg.DB.Dir = "."
|
cfg.DB.Dir = "."
|
||||||
|
cfg.FFmpeg.Binary = "true"
|
||||||
cfg.Storage.Disk.Dir = "."
|
cfg.Storage.Disk.Dir = "."
|
||||||
|
cfg.Storage.MimeTypes = ""
|
||||||
|
|
||||||
return cfg
|
return cfg
|
||||||
}
|
}
|
||||||
@@ -44,6 +73,8 @@ func (c *dummyStore) SetActive(d *Config) error {
|
|||||||
return fmt.Errorf("configuration data has errors after validation")
|
return fmt.Errorf("configuration data has errors after validation")
|
||||||
}
|
}
|
||||||
|
|
||||||
|
c.active = NewConfigFrom(d)
|
||||||
|
|
||||||
return nil
|
return nil
|
||||||
}
|
}
|
||||||
|
|
||||||
|
Reference in New Issue
Block a user