parent
3c9d51a44a
commit
016dea5a2e
@ -1,55 +0,0 @@
|
||||
package starmap
|
||||
|
||||
import (
|
||||
"errors"
|
||||
)
|
||||
|
||||
func (kv *RemoteKv) GetMap(key string) (StarMap, error) {
|
||||
kv.kvmu.Lock()
|
||||
defer kv.kvmu.Unlock()
|
||||
defer kv.keepalive()
|
||||
recv, err := kv.client.SendValueWait("GetMap", key, kv.TimeOut)
|
||||
if err != nil {
|
||||
return StarMapSample{}, err
|
||||
}
|
||||
if recv.Key == "error" {
|
||||
return StarMapSample{}, errors.New(recv.Value)
|
||||
}
|
||||
value, err := decodeMap([]byte(recv.Value))
|
||||
if err != nil {
|
||||
return StarMapSample{}, err
|
||||
}
|
||||
return value, nil
|
||||
}
|
||||
|
||||
func (kv *RemoteKv) StoreMap(value StarMap) error {
|
||||
kv.kvmu.Lock()
|
||||
defer kv.kvmu.Unlock()
|
||||
defer kv.keepalive()
|
||||
encodeData, err := encodeMap(value)
|
||||
if err != nil {
|
||||
return err
|
||||
}
|
||||
recv, err := kv.client.SendValueWait("StoreMap", string(encodeData), kv.TimeOut)
|
||||
if err != nil {
|
||||
return err
|
||||
}
|
||||
if recv.Key == "error" {
|
||||
return errors.New(recv.Value)
|
||||
}
|
||||
return nil
|
||||
}
|
||||
|
||||
func (kv *RemoteKv) DeleteMap(value StarMap) error {
|
||||
kv.kvmu.Lock()
|
||||
defer kv.kvmu.Unlock()
|
||||
defer kv.keepalive()
|
||||
recv, err := kv.client.SendValueWait("DeleteMap", value.GetName(), kv.TimeOut)
|
||||
if err != nil {
|
||||
return err
|
||||
}
|
||||
if recv.Key == "error" {
|
||||
return errors.New(recv.Value)
|
||||
}
|
||||
return nil
|
||||
}
|
@ -1,48 +0,0 @@
|
||||
package starmap
|
||||
|
||||
import (
|
||||
"errors"
|
||||
)
|
||||
|
||||
type StarMap interface {
|
||||
GetName() string
|
||||
}
|
||||
|
||||
type StarMapSample struct{}
|
||||
|
||||
func (sample StarMapSample) GetName() string {
|
||||
return "starsample"
|
||||
}
|
||||
|
||||
func GetMap(value StarMap) error {
|
||||
return globalMap.GetMap(value)
|
||||
}
|
||||
func (m *StarMapKV) GetMap(value StarMap) error {
|
||||
m.kvmuPro.RLock()
|
||||
defer m.kvmuPro.RUnlock()
|
||||
value, ok := m.kvMapPro[value.GetName()]
|
||||
if !ok {
|
||||
return errors.New("key not exists")
|
||||
}
|
||||
return nil
|
||||
}
|
||||
|
||||
func StoreMap(value StarMap) error {
|
||||
return globalMap.StoreMap(value)
|
||||
}
|
||||
func (m *StarMapKV) StoreMap(value StarMap) error {
|
||||
m.kvmuPro.Lock()
|
||||
defer m.kvmuPro.Unlock()
|
||||
m.kvMapPro[value.GetName()] = value
|
||||
return nil
|
||||
}
|
||||
|
||||
func DeleteMap(value StarMap) error {
|
||||
return globalMap.DeleteMap(value)
|
||||
}
|
||||
func (m *StarMapKV) DeleteMap(value StarMap) error {
|
||||
m.kvmuPro.RLock()
|
||||
defer m.kvmuPro.RUnlock()
|
||||
delete(m.kvMapPro, value.GetName())
|
||||
return nil
|
||||
}
|
@ -1,63 +1,39 @@
|
||||
package starmap
|
||||
|
||||
import "b612.me/notify"
|
||||
import (
|
||||
"b612.me/notify"
|
||||
)
|
||||
|
||||
type basicReply struct {
|
||||
Key string
|
||||
Value []byte
|
||||
func (r *RemoteKv) dispatch(msg *notify.Message) {
|
||||
switch msg.Key {
|
||||
case "get":
|
||||
data, err := r.kvmap.Get(msg.Value.MustToInterface())
|
||||
msg.ReplyObj(kvMsg{
|
||||
Key: msg.Value.MustToInterface(),
|
||||
Value: data,
|
||||
Err: newStarMapErr(err),
|
||||
})
|
||||
case "delete":
|
||||
err := r.kvmap.Delete(msg.Value.MustToInterface())
|
||||
msg.ReplyObj(kvMsg{
|
||||
Key: msg.Value.MustToInterface(),
|
||||
Value: nil,
|
||||
Err: newStarMapErr(err),
|
||||
})
|
||||
case "exists":
|
||||
ext := r.kvmap.Exists(msg.Value.MustToInterface())
|
||||
msg.ReplyObj(kvMsg{
|
||||
Key: msg.Value.MustToInterface(),
|
||||
Value: ext,
|
||||
Err: newStarMapErr(nil),
|
||||
})
|
||||
case "store":
|
||||
ext := msg.Value.MustToInterface().(kvMsg)
|
||||
err := r.kvmap.Store(ext.Key, ext.Value)
|
||||
msg.ReplyObj(kvMsg{
|
||||
Key: msg.Value.MustToInterface(),
|
||||
Value: nil,
|
||||
Err: newStarMapErr(err),
|
||||
})
|
||||
}
|
||||
|
||||
func (kv *RemoteKv) get(data notify.SMsg) string {
|
||||
key := data.Value
|
||||
value, err := kv.kvmap.Get(key)
|
||||
if err != nil {
|
||||
sendData, err := encode(basicReply{"error", []byte("key not exists")})
|
||||
if err != nil {
|
||||
kv.ErrMsg += err.Error()
|
||||
return ""
|
||||
}
|
||||
data.Reply(string(sendData))
|
||||
} else {
|
||||
prepareData, err := encode(value)
|
||||
if err != nil {
|
||||
kv.ErrMsg += err.Error()
|
||||
sendData, _ := encode(basicReply{"error", []byte(err.Error())})
|
||||
data.Reply(string(sendData))
|
||||
return ""
|
||||
}
|
||||
sendData, err := encode(basicReply{"ok", prepareData})
|
||||
if err != nil {
|
||||
kv.ErrMsg += err.Error()
|
||||
sendData, _ := encode(basicReply{"error", []byte(err.Error())})
|
||||
data.Reply(string(sendData))
|
||||
return ""
|
||||
}
|
||||
data.Reply(string(sendData))
|
||||
}
|
||||
return ""
|
||||
}
|
||||
|
||||
func (kv *RemoteKv) store(data notify.SMsg) string {
|
||||
decodeData, err := decode([]byte(data.Value))
|
||||
if err != nil {
|
||||
return err.Error()
|
||||
}
|
||||
inf := decodeData.(*basicReply)
|
||||
customStruct, err := decode(inf.Value)
|
||||
if err != nil {
|
||||
return err.Error()
|
||||
}
|
||||
err = kv.kvmap.Store(inf.Key, customStruct)
|
||||
if err != nil {
|
||||
return err.Error()
|
||||
}
|
||||
return "ok"
|
||||
}
|
||||
|
||||
func (kv *RemoteKv) delete(data notify.SMsg) string {
|
||||
err := kv.kvmap.Delete(data.Value)
|
||||
if err != nil {
|
||||
return err.Error()
|
||||
}
|
||||
return "ok"
|
||||
}
|
||||
|
@ -1,48 +0,0 @@
|
||||
package starmap
|
||||
|
||||
import (
|
||||
"b612.me/notify"
|
||||
)
|
||||
|
||||
func (kv *RemoteKv) getMap(data notify.SMsg) string {
|
||||
kv.kvmu.Lock()
|
||||
defer kv.kvmu.Unlock()
|
||||
val, ok := kv.kvmap.kvMapPro[data.Value]
|
||||
if !ok {
|
||||
data.Key = "error"
|
||||
data.Reply("key not exists")
|
||||
return ""
|
||||
}
|
||||
encodeData, err := encodeMap(val)
|
||||
if err != nil {
|
||||
data.Key = "error"
|
||||
data.Reply(err.Error())
|
||||
return ""
|
||||
}
|
||||
return string(encodeData)
|
||||
}
|
||||
|
||||
func (kv *RemoteKv) storeMap(data notify.SMsg) string {
|
||||
kv.kvmu.Lock()
|
||||
defer kv.kvmu.Unlock()
|
||||
recvData, err := decodeMap([]byte(data.Value))
|
||||
if err != nil {
|
||||
data.Key = "error"
|
||||
data.Reply(err.Error())
|
||||
return ""
|
||||
}
|
||||
err = kv.kvmap.StoreMap(recvData)
|
||||
if err != nil {
|
||||
data.Key = "error"
|
||||
data.Reply(err.Error())
|
||||
return ""
|
||||
}
|
||||
return "ok"
|
||||
}
|
||||
|
||||
func (kv *RemoteKv) deleteMap(data notify.SMsg) string {
|
||||
kv.kvmu.Lock()
|
||||
defer kv.kvmu.Unlock()
|
||||
delete(kv.kvmap.kvMapPro, data.Value)
|
||||
return "ok"
|
||||
}
|
@ -0,0 +1,199 @@
|
||||
package starmap
|
||||
|
||||
import (
|
||||
"errors"
|
||||
"fmt"
|
||||
"io"
|
||||
"os"
|
||||
"runtime"
|
||||
"sync"
|
||||
"sync/atomic"
|
||||
"time"
|
||||
)
|
||||
|
||||
type StarStack struct {
|
||||
datas []interface{}
|
||||
pStart uint64
|
||||
pEnd uint64
|
||||
cap uint64
|
||||
isClose atomic.Value
|
||||
rmu sync.Mutex
|
||||
wmu sync.Mutex
|
||||
}
|
||||
|
||||
func NewStarStack(cap uint64) *StarStack {
|
||||
rtnBuffer := new(StarStack)
|
||||
rtnBuffer.cap = cap
|
||||
rtnBuffer.datas = make([]interface{}, cap)
|
||||
rtnBuffer.isClose.Store(false)
|
||||
return rtnBuffer
|
||||
}
|
||||
|
||||
func (star *StarStack) init() {
|
||||
star.cap = 1024
|
||||
star.datas = make([]interface{}, star.cap)
|
||||
star.isClose.Store(false)
|
||||
}
|
||||
|
||||
func (star *StarStack) Free() uint64 {
|
||||
return star.cap - star.Len()
|
||||
}
|
||||
|
||||
func (star *StarStack) Cap() uint64 {
|
||||
return star.cap
|
||||
}
|
||||
|
||||
func (star *StarStack) Len() uint64 {
|
||||
if star.pEnd >= star.pStart {
|
||||
return star.pEnd - star.pStart
|
||||
}
|
||||
return star.pEnd - star.pStart + star.cap
|
||||
}
|
||||
|
||||
func (star *StarStack) PopNoWait() (interface{}, error) {
|
||||
if star.isClose.Load() == nil {
|
||||
star.init()
|
||||
}
|
||||
if star.isClose.Load().(bool) {
|
||||
return 0, io.EOF
|
||||
}
|
||||
if star.Len() == 0 {
|
||||
return 0, os.ErrNotExist
|
||||
}
|
||||
nowPtr := star.pStart
|
||||
nextPtr := star.pStart + 1
|
||||
if nextPtr >= star.cap {
|
||||
nextPtr = 0
|
||||
}
|
||||
data := star.datas[nowPtr]
|
||||
ok := atomic.CompareAndSwapUint64(&star.pStart, nowPtr, nextPtr)
|
||||
if !ok {
|
||||
return 0, os.ErrInvalid
|
||||
}
|
||||
return data, nil
|
||||
}
|
||||
|
||||
func (star *StarStack) MustPop() interface{} {
|
||||
if star.isClose.Load() == nil {
|
||||
star.init()
|
||||
}
|
||||
data, err := star.Pop()
|
||||
if err != nil {
|
||||
return nil
|
||||
}
|
||||
return data
|
||||
}
|
||||
|
||||
func (star *StarStack) Pop() (interface{}, error) {
|
||||
if star.isClose.Load() == nil {
|
||||
star.init()
|
||||
}
|
||||
for {
|
||||
if star.isClose.Load().(bool) {
|
||||
return 0, io.EOF
|
||||
}
|
||||
if star.Len() == 0 {
|
||||
return 0, os.ErrNotExist
|
||||
}
|
||||
nowPtr := star.pStart
|
||||
nextPtr := star.pStart + 1
|
||||
if nextPtr >= star.cap {
|
||||
nextPtr = 0
|
||||
}
|
||||
data := star.datas[nowPtr]
|
||||
ok := atomic.CompareAndSwapUint64(&star.pStart, nowPtr, nextPtr)
|
||||
if !ok {
|
||||
time.Sleep(time.Microsecond)
|
||||
runtime.Gosched()
|
||||
continue
|
||||
}
|
||||
return data, nil
|
||||
}
|
||||
}
|
||||
|
||||
func (star *StarStack) Push(data interface{}) error {
|
||||
if star.isClose.Load() == nil {
|
||||
star.init()
|
||||
}
|
||||
if star.isClose.Load().(bool) {
|
||||
return io.EOF
|
||||
}
|
||||
nowPtr := star.pEnd
|
||||
kariEnd := nowPtr + 1
|
||||
if kariEnd == star.cap {
|
||||
kariEnd = 0
|
||||
}
|
||||
if kariEnd == atomic.LoadUint64(&star.pStart) {
|
||||
for {
|
||||
time.Sleep(time.Microsecond)
|
||||
runtime.Gosched()
|
||||
if kariEnd != atomic.LoadUint64(&star.pStart) {
|
||||
break
|
||||
}
|
||||
}
|
||||
}
|
||||
star.datas[nowPtr] = data
|
||||
if ok := atomic.CompareAndSwapUint64(&star.pEnd, nowPtr, kariEnd); !ok {
|
||||
return os.ErrInvalid
|
||||
}
|
||||
return nil
|
||||
}
|
||||
|
||||
func (star *StarStack) Close() error {
|
||||
if star.isClose.Load() == nil {
|
||||
star.init()
|
||||
}
|
||||
star.isClose.Store(true)
|
||||
return nil
|
||||
}
|
||||
func (star *StarStack) Read(buf []interface{}) (int, error) {
|
||||
if star.isClose.Load() == nil {
|
||||
star.init()
|
||||
}
|
||||
if star.isClose.Load().(bool) {
|
||||
return 0, io.EOF
|
||||
}
|
||||
if buf == nil {
|
||||
return 0, errors.New("buffer is nil")
|
||||
}
|
||||
star.rmu.Lock()
|
||||
defer star.rmu.Unlock()
|
||||
var sum int = 0
|
||||
for i := 0; i < len(buf); i++ {
|
||||
data, err := star.PopNoWait()
|
||||
if err != nil {
|
||||
if err == io.EOF {
|
||||
return sum, err
|
||||
}
|
||||
if err == os.ErrNotExist {
|
||||
i--
|
||||
continue
|
||||
}
|
||||
return sum, nil
|
||||
}
|
||||
buf[i] = data
|
||||
sum++
|
||||
}
|
||||
return sum, nil
|
||||
}
|
||||
|
||||
func (star *StarStack) Write(bts []byte) (int, error) {
|
||||
if star.isClose.Load() == nil {
|
||||
star.init()
|
||||
}
|
||||
if bts == nil || star.isClose.Load().(bool) {
|
||||
return 0, io.EOF
|
||||
}
|
||||
star.wmu.Lock()
|
||||
defer star.wmu.Unlock()
|
||||
var sum = 0
|
||||
for i := 0; i < len(bts); i++ {
|
||||
err := star.Push(bts[i])
|
||||
if err != nil {
|
||||
fmt.Println("Write bts err:", err)
|
||||
return sum, err
|
||||
}
|
||||
sum++
|
||||
}
|
||||
return sum, nil
|
||||
}
|
@ -0,0 +1,33 @@
|
||||
package starmap
|
||||
|
||||
import (
|
||||
"fmt"
|
||||
"sync/atomic"
|
||||
"testing"
|
||||
"time"
|
||||
)
|
||||
|
||||
func Test_Circle_Speed(t *testing.T) {
|
||||
buf := StarStack{}
|
||||
count := uint64(0)
|
||||
for i := 1; i <= 10; i++ {
|
||||
go func() {
|
||||
for {
|
||||
buf.Push('a')
|
||||
|
||||
}
|
||||
}()
|
||||
}
|
||||
for i := 1; i <= 10; i++ {
|
||||
go func() {
|
||||
for {
|
||||
_, err := buf.Pop()
|
||||
if err == nil {
|
||||
atomic.AddUint64(&count, 1)
|
||||
}
|
||||
}
|
||||
}()
|
||||
}
|
||||
time.Sleep(time.Second * 10)
|
||||
fmt.Println(count)
|
||||
}
|
@ -1,38 +0,0 @@
|
||||
package starmap
|
||||
|
||||
import (
|
||||
"bytes"
|
||||
"encoding/gob"
|
||||
)
|
||||
|
||||
func init() {
|
||||
gob.Register(&basicReply{})
|
||||
}
|
||||
|
||||
func encode(src interface{}) ([]byte, error) {
|
||||
var buf bytes.Buffer
|
||||
enc := gob.NewEncoder(&buf)
|
||||
err := enc.Encode(&src)
|
||||
return buf.Bytes(), err
|
||||
}
|
||||
|
||||
func decode(src []byte) (interface{}, error) {
|
||||
dec := gob.NewDecoder(bytes.NewReader(src))
|
||||
var dst interface{}
|
||||
err := dec.Decode(&dst)
|
||||
return dst, err
|
||||
}
|
||||
|
||||
func encodeMap(src StarMap) ([]byte, error) {
|
||||
var buf bytes.Buffer
|
||||
enc := gob.NewEncoder(&buf)
|
||||
err := enc.Encode(&src)
|
||||
return buf.Bytes(), err
|
||||
}
|
||||
|
||||
func decodeMap(src []byte) (StarMap, error) {
|
||||
dec := gob.NewDecoder(bytes.NewReader(src))
|
||||
var dst StarMap
|
||||
err := dec.Decode(&dst)
|
||||
return dst, err
|
||||
}
|
Loading…
Reference in New Issue