parent
3c9d51a44a
commit
016dea5a2e
@ -1,55 +0,0 @@
|
|||||||
package starmap
|
|
||||||
|
|
||||||
import (
|
|
||||||
"errors"
|
|
||||||
)
|
|
||||||
|
|
||||||
func (kv *RemoteKv) GetMap(key string) (StarMap, error) {
|
|
||||||
kv.kvmu.Lock()
|
|
||||||
defer kv.kvmu.Unlock()
|
|
||||||
defer kv.keepalive()
|
|
||||||
recv, err := kv.client.SendValueWait("GetMap", key, kv.TimeOut)
|
|
||||||
if err != nil {
|
|
||||||
return StarMapSample{}, err
|
|
||||||
}
|
|
||||||
if recv.Key == "error" {
|
|
||||||
return StarMapSample{}, errors.New(recv.Value)
|
|
||||||
}
|
|
||||||
value, err := decodeMap([]byte(recv.Value))
|
|
||||||
if err != nil {
|
|
||||||
return StarMapSample{}, err
|
|
||||||
}
|
|
||||||
return value, nil
|
|
||||||
}
|
|
||||||
|
|
||||||
func (kv *RemoteKv) StoreMap(value StarMap) error {
|
|
||||||
kv.kvmu.Lock()
|
|
||||||
defer kv.kvmu.Unlock()
|
|
||||||
defer kv.keepalive()
|
|
||||||
encodeData, err := encodeMap(value)
|
|
||||||
if err != nil {
|
|
||||||
return err
|
|
||||||
}
|
|
||||||
recv, err := kv.client.SendValueWait("StoreMap", string(encodeData), kv.TimeOut)
|
|
||||||
if err != nil {
|
|
||||||
return err
|
|
||||||
}
|
|
||||||
if recv.Key == "error" {
|
|
||||||
return errors.New(recv.Value)
|
|
||||||
}
|
|
||||||
return nil
|
|
||||||
}
|
|
||||||
|
|
||||||
func (kv *RemoteKv) DeleteMap(value StarMap) error {
|
|
||||||
kv.kvmu.Lock()
|
|
||||||
defer kv.kvmu.Unlock()
|
|
||||||
defer kv.keepalive()
|
|
||||||
recv, err := kv.client.SendValueWait("DeleteMap", value.GetName(), kv.TimeOut)
|
|
||||||
if err != nil {
|
|
||||||
return err
|
|
||||||
}
|
|
||||||
if recv.Key == "error" {
|
|
||||||
return errors.New(recv.Value)
|
|
||||||
}
|
|
||||||
return nil
|
|
||||||
}
|
|
@ -1,48 +0,0 @@
|
|||||||
package starmap
|
|
||||||
|
|
||||||
import (
|
|
||||||
"errors"
|
|
||||||
)
|
|
||||||
|
|
||||||
type StarMap interface {
|
|
||||||
GetName() string
|
|
||||||
}
|
|
||||||
|
|
||||||
type StarMapSample struct{}
|
|
||||||
|
|
||||||
func (sample StarMapSample) GetName() string {
|
|
||||||
return "starsample"
|
|
||||||
}
|
|
||||||
|
|
||||||
func GetMap(value StarMap) error {
|
|
||||||
return globalMap.GetMap(value)
|
|
||||||
}
|
|
||||||
func (m *StarMapKV) GetMap(value StarMap) error {
|
|
||||||
m.kvmuPro.RLock()
|
|
||||||
defer m.kvmuPro.RUnlock()
|
|
||||||
value, ok := m.kvMapPro[value.GetName()]
|
|
||||||
if !ok {
|
|
||||||
return errors.New("key not exists")
|
|
||||||
}
|
|
||||||
return nil
|
|
||||||
}
|
|
||||||
|
|
||||||
func StoreMap(value StarMap) error {
|
|
||||||
return globalMap.StoreMap(value)
|
|
||||||
}
|
|
||||||
func (m *StarMapKV) StoreMap(value StarMap) error {
|
|
||||||
m.kvmuPro.Lock()
|
|
||||||
defer m.kvmuPro.Unlock()
|
|
||||||
m.kvMapPro[value.GetName()] = value
|
|
||||||
return nil
|
|
||||||
}
|
|
||||||
|
|
||||||
func DeleteMap(value StarMap) error {
|
|
||||||
return globalMap.DeleteMap(value)
|
|
||||||
}
|
|
||||||
func (m *StarMapKV) DeleteMap(value StarMap) error {
|
|
||||||
m.kvmuPro.RLock()
|
|
||||||
defer m.kvmuPro.RUnlock()
|
|
||||||
delete(m.kvMapPro, value.GetName())
|
|
||||||
return nil
|
|
||||||
}
|
|
@ -1,63 +1,39 @@
|
|||||||
package starmap
|
package starmap
|
||||||
|
|
||||||
import "b612.me/notify"
|
import (
|
||||||
|
"b612.me/notify"
|
||||||
|
)
|
||||||
|
|
||||||
type basicReply struct {
|
func (r *RemoteKv) dispatch(msg *notify.Message) {
|
||||||
Key string
|
switch msg.Key {
|
||||||
Value []byte
|
case "get":
|
||||||
}
|
data, err := r.kvmap.Get(msg.Value.MustToInterface())
|
||||||
|
msg.ReplyObj(kvMsg{
|
||||||
func (kv *RemoteKv) get(data notify.SMsg) string {
|
Key: msg.Value.MustToInterface(),
|
||||||
key := data.Value
|
Value: data,
|
||||||
value, err := kv.kvmap.Get(key)
|
Err: newStarMapErr(err),
|
||||||
if err != nil {
|
})
|
||||||
sendData, err := encode(basicReply{"error", []byte("key not exists")})
|
case "delete":
|
||||||
if err != nil {
|
err := r.kvmap.Delete(msg.Value.MustToInterface())
|
||||||
kv.ErrMsg += err.Error()
|
msg.ReplyObj(kvMsg{
|
||||||
return ""
|
Key: msg.Value.MustToInterface(),
|
||||||
}
|
Value: nil,
|
||||||
data.Reply(string(sendData))
|
Err: newStarMapErr(err),
|
||||||
} else {
|
})
|
||||||
prepareData, err := encode(value)
|
case "exists":
|
||||||
if err != nil {
|
ext := r.kvmap.Exists(msg.Value.MustToInterface())
|
||||||
kv.ErrMsg += err.Error()
|
msg.ReplyObj(kvMsg{
|
||||||
sendData, _ := encode(basicReply{"error", []byte(err.Error())})
|
Key: msg.Value.MustToInterface(),
|
||||||
data.Reply(string(sendData))
|
Value: ext,
|
||||||
return ""
|
Err: newStarMapErr(nil),
|
||||||
}
|
})
|
||||||
sendData, err := encode(basicReply{"ok", prepareData})
|
case "store":
|
||||||
if err != nil {
|
ext := msg.Value.MustToInterface().(kvMsg)
|
||||||
kv.ErrMsg += err.Error()
|
err := r.kvmap.Store(ext.Key, ext.Value)
|
||||||
sendData, _ := encode(basicReply{"error", []byte(err.Error())})
|
msg.ReplyObj(kvMsg{
|
||||||
data.Reply(string(sendData))
|
Key: msg.Value.MustToInterface(),
|
||||||
return ""
|
Value: nil,
|
||||||
}
|
Err: newStarMapErr(err),
|
||||||
data.Reply(string(sendData))
|
})
|
||||||
}
|
|
||||||
return ""
|
|
||||||
}
|
|
||||||
|
|
||||||
func (kv *RemoteKv) store(data notify.SMsg) string {
|
|
||||||
decodeData, err := decode([]byte(data.Value))
|
|
||||||
if err != nil {
|
|
||||||
return err.Error()
|
|
||||||
}
|
|
||||||
inf := decodeData.(*basicReply)
|
|
||||||
customStruct, err := decode(inf.Value)
|
|
||||||
if err != nil {
|
|
||||||
return err.Error()
|
|
||||||
}
|
|
||||||
err = kv.kvmap.Store(inf.Key, customStruct)
|
|
||||||
if err != nil {
|
|
||||||
return err.Error()
|
|
||||||
}
|
|
||||||
return "ok"
|
|
||||||
}
|
|
||||||
|
|
||||||
func (kv *RemoteKv) delete(data notify.SMsg) string {
|
|
||||||
err := kv.kvmap.Delete(data.Value)
|
|
||||||
if err != nil {
|
|
||||||
return err.Error()
|
|
||||||
}
|
}
|
||||||
return "ok"
|
|
||||||
}
|
}
|
||||||
|
@ -1,48 +0,0 @@
|
|||||||
package starmap
|
|
||||||
|
|
||||||
import (
|
|
||||||
"b612.me/notify"
|
|
||||||
)
|
|
||||||
|
|
||||||
func (kv *RemoteKv) getMap(data notify.SMsg) string {
|
|
||||||
kv.kvmu.Lock()
|
|
||||||
defer kv.kvmu.Unlock()
|
|
||||||
val, ok := kv.kvmap.kvMapPro[data.Value]
|
|
||||||
if !ok {
|
|
||||||
data.Key = "error"
|
|
||||||
data.Reply("key not exists")
|
|
||||||
return ""
|
|
||||||
}
|
|
||||||
encodeData, err := encodeMap(val)
|
|
||||||
if err != nil {
|
|
||||||
data.Key = "error"
|
|
||||||
data.Reply(err.Error())
|
|
||||||
return ""
|
|
||||||
}
|
|
||||||
return string(encodeData)
|
|
||||||
}
|
|
||||||
|
|
||||||
func (kv *RemoteKv) storeMap(data notify.SMsg) string {
|
|
||||||
kv.kvmu.Lock()
|
|
||||||
defer kv.kvmu.Unlock()
|
|
||||||
recvData, err := decodeMap([]byte(data.Value))
|
|
||||||
if err != nil {
|
|
||||||
data.Key = "error"
|
|
||||||
data.Reply(err.Error())
|
|
||||||
return ""
|
|
||||||
}
|
|
||||||
err = kv.kvmap.StoreMap(recvData)
|
|
||||||
if err != nil {
|
|
||||||
data.Key = "error"
|
|
||||||
data.Reply(err.Error())
|
|
||||||
return ""
|
|
||||||
}
|
|
||||||
return "ok"
|
|
||||||
}
|
|
||||||
|
|
||||||
func (kv *RemoteKv) deleteMap(data notify.SMsg) string {
|
|
||||||
kv.kvmu.Lock()
|
|
||||||
defer kv.kvmu.Unlock()
|
|
||||||
delete(kv.kvmap.kvMapPro, data.Value)
|
|
||||||
return "ok"
|
|
||||||
}
|
|
@ -0,0 +1,199 @@
|
|||||||
|
package starmap
|
||||||
|
|
||||||
|
import (
|
||||||
|
"errors"
|
||||||
|
"fmt"
|
||||||
|
"io"
|
||||||
|
"os"
|
||||||
|
"runtime"
|
||||||
|
"sync"
|
||||||
|
"sync/atomic"
|
||||||
|
"time"
|
||||||
|
)
|
||||||
|
|
||||||
|
type StarStack struct {
|
||||||
|
datas []interface{}
|
||||||
|
pStart uint64
|
||||||
|
pEnd uint64
|
||||||
|
cap uint64
|
||||||
|
isClose atomic.Value
|
||||||
|
rmu sync.Mutex
|
||||||
|
wmu sync.Mutex
|
||||||
|
}
|
||||||
|
|
||||||
|
func NewStarStack(cap uint64) *StarStack {
|
||||||
|
rtnBuffer := new(StarStack)
|
||||||
|
rtnBuffer.cap = cap
|
||||||
|
rtnBuffer.datas = make([]interface{}, cap)
|
||||||
|
rtnBuffer.isClose.Store(false)
|
||||||
|
return rtnBuffer
|
||||||
|
}
|
||||||
|
|
||||||
|
func (star *StarStack) init() {
|
||||||
|
star.cap = 1024
|
||||||
|
star.datas = make([]interface{}, star.cap)
|
||||||
|
star.isClose.Store(false)
|
||||||
|
}
|
||||||
|
|
||||||
|
func (star *StarStack) Free() uint64 {
|
||||||
|
return star.cap - star.Len()
|
||||||
|
}
|
||||||
|
|
||||||
|
func (star *StarStack) Cap() uint64 {
|
||||||
|
return star.cap
|
||||||
|
}
|
||||||
|
|
||||||
|
func (star *StarStack) Len() uint64 {
|
||||||
|
if star.pEnd >= star.pStart {
|
||||||
|
return star.pEnd - star.pStart
|
||||||
|
}
|
||||||
|
return star.pEnd - star.pStart + star.cap
|
||||||
|
}
|
||||||
|
|
||||||
|
func (star *StarStack) PopNoWait() (interface{}, error) {
|
||||||
|
if star.isClose.Load() == nil {
|
||||||
|
star.init()
|
||||||
|
}
|
||||||
|
if star.isClose.Load().(bool) {
|
||||||
|
return 0, io.EOF
|
||||||
|
}
|
||||||
|
if star.Len() == 0 {
|
||||||
|
return 0, os.ErrNotExist
|
||||||
|
}
|
||||||
|
nowPtr := star.pStart
|
||||||
|
nextPtr := star.pStart + 1
|
||||||
|
if nextPtr >= star.cap {
|
||||||
|
nextPtr = 0
|
||||||
|
}
|
||||||
|
data := star.datas[nowPtr]
|
||||||
|
ok := atomic.CompareAndSwapUint64(&star.pStart, nowPtr, nextPtr)
|
||||||
|
if !ok {
|
||||||
|
return 0, os.ErrInvalid
|
||||||
|
}
|
||||||
|
return data, nil
|
||||||
|
}
|
||||||
|
|
||||||
|
func (star *StarStack) MustPop() interface{} {
|
||||||
|
if star.isClose.Load() == nil {
|
||||||
|
star.init()
|
||||||
|
}
|
||||||
|
data, err := star.Pop()
|
||||||
|
if err != nil {
|
||||||
|
return nil
|
||||||
|
}
|
||||||
|
return data
|
||||||
|
}
|
||||||
|
|
||||||
|
func (star *StarStack) Pop() (interface{}, error) {
|
||||||
|
if star.isClose.Load() == nil {
|
||||||
|
star.init()
|
||||||
|
}
|
||||||
|
for {
|
||||||
|
if star.isClose.Load().(bool) {
|
||||||
|
return 0, io.EOF
|
||||||
|
}
|
||||||
|
if star.Len() == 0 {
|
||||||
|
return 0, os.ErrNotExist
|
||||||
|
}
|
||||||
|
nowPtr := star.pStart
|
||||||
|
nextPtr := star.pStart + 1
|
||||||
|
if nextPtr >= star.cap {
|
||||||
|
nextPtr = 0
|
||||||
|
}
|
||||||
|
data := star.datas[nowPtr]
|
||||||
|
ok := atomic.CompareAndSwapUint64(&star.pStart, nowPtr, nextPtr)
|
||||||
|
if !ok {
|
||||||
|
time.Sleep(time.Microsecond)
|
||||||
|
runtime.Gosched()
|
||||||
|
continue
|
||||||
|
}
|
||||||
|
return data, nil
|
||||||
|
}
|
||||||
|
}
|
||||||
|
|
||||||
|
func (star *StarStack) Push(data interface{}) error {
|
||||||
|
if star.isClose.Load() == nil {
|
||||||
|
star.init()
|
||||||
|
}
|
||||||
|
if star.isClose.Load().(bool) {
|
||||||
|
return io.EOF
|
||||||
|
}
|
||||||
|
nowPtr := star.pEnd
|
||||||
|
kariEnd := nowPtr + 1
|
||||||
|
if kariEnd == star.cap {
|
||||||
|
kariEnd = 0
|
||||||
|
}
|
||||||
|
if kariEnd == atomic.LoadUint64(&star.pStart) {
|
||||||
|
for {
|
||||||
|
time.Sleep(time.Microsecond)
|
||||||
|
runtime.Gosched()
|
||||||
|
if kariEnd != atomic.LoadUint64(&star.pStart) {
|
||||||
|
break
|
||||||
|
}
|
||||||
|
}
|
||||||
|
}
|
||||||
|
star.datas[nowPtr] = data
|
||||||
|
if ok := atomic.CompareAndSwapUint64(&star.pEnd, nowPtr, kariEnd); !ok {
|
||||||
|
return os.ErrInvalid
|
||||||
|
}
|
||||||
|
return nil
|
||||||
|
}
|
||||||
|
|
||||||
|
func (star *StarStack) Close() error {
|
||||||
|
if star.isClose.Load() == nil {
|
||||||
|
star.init()
|
||||||
|
}
|
||||||
|
star.isClose.Store(true)
|
||||||
|
return nil
|
||||||
|
}
|
||||||
|
func (star *StarStack) Read(buf []interface{}) (int, error) {
|
||||||
|
if star.isClose.Load() == nil {
|
||||||
|
star.init()
|
||||||
|
}
|
||||||
|
if star.isClose.Load().(bool) {
|
||||||
|
return 0, io.EOF
|
||||||
|
}
|
||||||
|
if buf == nil {
|
||||||
|
return 0, errors.New("buffer is nil")
|
||||||
|
}
|
||||||
|
star.rmu.Lock()
|
||||||
|
defer star.rmu.Unlock()
|
||||||
|
var sum int = 0
|
||||||
|
for i := 0; i < len(buf); i++ {
|
||||||
|
data, err := star.PopNoWait()
|
||||||
|
if err != nil {
|
||||||
|
if err == io.EOF {
|
||||||
|
return sum, err
|
||||||
|
}
|
||||||
|
if err == os.ErrNotExist {
|
||||||
|
i--
|
||||||
|
continue
|
||||||
|
}
|
||||||
|
return sum, nil
|
||||||
|
}
|
||||||
|
buf[i] = data
|
||||||
|
sum++
|
||||||
|
}
|
||||||
|
return sum, nil
|
||||||
|
}
|
||||||
|
|
||||||
|
func (star *StarStack) Write(bts []byte) (int, error) {
|
||||||
|
if star.isClose.Load() == nil {
|
||||||
|
star.init()
|
||||||
|
}
|
||||||
|
if bts == nil || star.isClose.Load().(bool) {
|
||||||
|
return 0, io.EOF
|
||||||
|
}
|
||||||
|
star.wmu.Lock()
|
||||||
|
defer star.wmu.Unlock()
|
||||||
|
var sum = 0
|
||||||
|
for i := 0; i < len(bts); i++ {
|
||||||
|
err := star.Push(bts[i])
|
||||||
|
if err != nil {
|
||||||
|
fmt.Println("Write bts err:", err)
|
||||||
|
return sum, err
|
||||||
|
}
|
||||||
|
sum++
|
||||||
|
}
|
||||||
|
return sum, nil
|
||||||
|
}
|
@ -0,0 +1,33 @@
|
|||||||
|
package starmap
|
||||||
|
|
||||||
|
import (
|
||||||
|
"fmt"
|
||||||
|
"sync/atomic"
|
||||||
|
"testing"
|
||||||
|
"time"
|
||||||
|
)
|
||||||
|
|
||||||
|
func Test_Circle_Speed(t *testing.T) {
|
||||||
|
buf := StarStack{}
|
||||||
|
count := uint64(0)
|
||||||
|
for i := 1; i <= 10; i++ {
|
||||||
|
go func() {
|
||||||
|
for {
|
||||||
|
buf.Push('a')
|
||||||
|
|
||||||
|
}
|
||||||
|
}()
|
||||||
|
}
|
||||||
|
for i := 1; i <= 10; i++ {
|
||||||
|
go func() {
|
||||||
|
for {
|
||||||
|
_, err := buf.Pop()
|
||||||
|
if err == nil {
|
||||||
|
atomic.AddUint64(&count, 1)
|
||||||
|
}
|
||||||
|
}
|
||||||
|
}()
|
||||||
|
}
|
||||||
|
time.Sleep(time.Second * 10)
|
||||||
|
fmt.Println(count)
|
||||||
|
}
|
@ -1,38 +0,0 @@
|
|||||||
package starmap
|
|
||||||
|
|
||||||
import (
|
|
||||||
"bytes"
|
|
||||||
"encoding/gob"
|
|
||||||
)
|
|
||||||
|
|
||||||
func init() {
|
|
||||||
gob.Register(&basicReply{})
|
|
||||||
}
|
|
||||||
|
|
||||||
func encode(src interface{}) ([]byte, error) {
|
|
||||||
var buf bytes.Buffer
|
|
||||||
enc := gob.NewEncoder(&buf)
|
|
||||||
err := enc.Encode(&src)
|
|
||||||
return buf.Bytes(), err
|
|
||||||
}
|
|
||||||
|
|
||||||
func decode(src []byte) (interface{}, error) {
|
|
||||||
dec := gob.NewDecoder(bytes.NewReader(src))
|
|
||||||
var dst interface{}
|
|
||||||
err := dec.Decode(&dst)
|
|
||||||
return dst, err
|
|
||||||
}
|
|
||||||
|
|
||||||
func encodeMap(src StarMap) ([]byte, error) {
|
|
||||||
var buf bytes.Buffer
|
|
||||||
enc := gob.NewEncoder(&buf)
|
|
||||||
err := enc.Encode(&src)
|
|
||||||
return buf.Bytes(), err
|
|
||||||
}
|
|
||||||
|
|
||||||
func decodeMap(src []byte) (StarMap, error) {
|
|
||||||
dec := gob.NewDecoder(bytes.NewReader(src))
|
|
||||||
var dst StarMap
|
|
||||||
err := dec.Decode(&dst)
|
|
||||||
return dst, err
|
|
||||||
}
|
|
Loading…
Reference in New Issue