/[LeafOK_CVS]/lbbs/src/section_list.c
ViewVC logotype

Diff of /lbbs/src/section_list.c

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

Revision 1.9 by sysadm, Thu May 22 14:12:33 2025 UTC Revision 1.19 by sysadm, Sun May 25 06:56:48 2025 UTC
# Line 14  Line 14 
14   *                                                                         *   *                                                                         *
15   ***************************************************************************/   ***************************************************************************/
16    
17    #define _GNU_SOURCE
18    
19  #include "section_list.h"  #include "section_list.h"
20  #include "log.h"  #include "log.h"
21  #include "trie_dict.h"  #include "trie_dict.h"
# Line 24  Line 26 
26  #include <stdlib.h>  #include <stdlib.h>
27  #include <errno.h>  #include <errno.h>
28  #include <sys/param.h>  #include <sys/param.h>
29    #include <sys/sem.h>
30  #include <sys/shm.h>  #include <sys/shm.h>
31  #include <sys/ipc.h>  #include <sys/ipc.h>
32    
33    #ifdef _SEM_SEMUN_UNDEFINED
34    union semun
35    {
36            int val;                           /* Value for SETVAL */
37            struct semid_ds *buf;  /* Buffer for IPC_STAT, IPC_SET */
38            unsigned short *array; /* Array for GETALL, SETALL */
39            struct seminfo *__buf; /* Buffer for IPC_INFO
40                                                              (Linux-specific) */
41    };
42    #endif // #ifdef _SEM_SEMUN_UNDEFINED
43    
44  #define ARTICLE_BLOCK_PER_SHM 400                 // sizeof(ARTICLE_BLOCK) * ARTICLE_BLOCK_PER_SHM is the size of each shm segment to allocate  #define ARTICLE_BLOCK_PER_SHM 400                 // sizeof(ARTICLE_BLOCK) * ARTICLE_BLOCK_PER_SHM is the size of each shm segment to allocate
45  #define ARTICLE_BLOCK_SHM_COUNT_LIMIT 256 // limited by length (8-bit) of proj_id in ftok(path, proj_id)  #define ARTICLE_BLOCK_SHM_COUNT_LIMIT 200 // limited by length (8-bit) of proj_id in ftok(path, proj_id)
46  #define ARTICLE_BLOCK_PER_POOL (ARTICLE_BLOCK_PER_SHM * ARTICLE_BLOCK_SHM_COUNT_LIMIT)  #define ARTICLE_BLOCK_PER_POOL (ARTICLE_BLOCK_PER_SHM * ARTICLE_BLOCK_SHM_COUNT_LIMIT)
47    
48    #define CALCULATE_PAGE_THRESHOLD 100 // Adjust to tune performance of move topic
49    
50    #define SID_STR_LEN 5 // 32-bit + NULL
51    
52  struct article_block_t  struct article_block_t
53  {  {
54          ARTICLE articles[ARTICLE_PER_BLOCK];          ARTICLE articles[ARTICLE_PER_BLOCK];
# Line 56  struct article_block_pool_t Line 74  struct article_block_pool_t
74  };  };
75  typedef struct article_block_pool_t ARTICLE_BLOCK_POOL;  typedef struct article_block_pool_t ARTICLE_BLOCK_POOL;
76    
77    static int article_block_pool_shmid;
78  static ARTICLE_BLOCK_POOL *p_article_block_pool = NULL;  static ARTICLE_BLOCK_POOL *p_article_block_pool = NULL;
79    
80    static int section_list_pool_semid;
81    static int section_list_pool_shmid;
82  static SECTION_LIST *p_section_list_pool = NULL;  static SECTION_LIST *p_section_list_pool = NULL;
83    
84  static int section_list_count = 0;  static int section_list_count = 0;
85  static TRIE_NODE *p_trie_dict_section_list = NULL;  static TRIE_NODE *p_trie_dict_section_by_name = NULL;
86    static TRIE_NODE *p_trie_dict_section_by_sid = NULL;
87    
88  int article_block_init(const char *filename, int block_count)  int article_block_init(const char *filename, int block_count)
89  {  {
# Line 86  int article_block_init(const char *filen Line 109  int article_block_init(const char *filen
109                  return -2;                  return -2;
110          }          }
111    
112          p_article_block_pool = calloc(1, sizeof(ARTICLE_BLOCK_POOL));          // Allocate shared memory
113          if (p_article_block_pool == NULL)          proj_id = ARTICLE_BLOCK_SHM_COUNT_LIMIT; // keep different from proj_id used to create block shm
114            key = ftok(filename, proj_id);
115            if (key == -1)
116          {          {
117                  log_error("calloc(ARTICLE_BLOCK_POOL) OOM\n");                  log_error("ftok(%s, %d) error (%d)\n", filename, proj_id, errno);
118                  return -2;                  return -3;
119          }          }
120    
121          // Allocate shared memory          size = sizeof(ARTICLE_BLOCK_POOL);
122            shmid = shmget(key, size, IPC_CREAT | IPC_EXCL | 0600);
123            if (shmid == -1)
124            {
125                    log_error("shmget(article_block_pool_shm, size = %d) error (%d)\n", size, errno);
126                    return -3;
127            }
128            p_shm = shmat(shmid, NULL, 0);
129            if (p_shm == (void *)-1)
130            {
131                    log_error("shmat(shmid = %d) error (%d)\n", shmid, errno);
132                    return -3;
133            }
134    
135            article_block_pool_shmid = shmid;
136            p_article_block_pool = p_shm;
137    
138          p_article_block_pool->shm_count = 0;          p_article_block_pool->shm_count = 0;
139          pp_block_next = &(p_article_block_pool->p_block_free_list);          pp_block_next = &(p_article_block_pool->p_block_free_list);
140    
# Line 102  int article_block_init(const char *filen Line 143  int article_block_init(const char *filen
143                  block_count_in_shm = MIN(block_count, ARTICLE_BLOCK_PER_SHM);                  block_count_in_shm = MIN(block_count, ARTICLE_BLOCK_PER_SHM);
144                  block_count -= block_count_in_shm;                  block_count -= block_count_in_shm;
145    
146                  proj_id = getpid() + p_article_block_pool->shm_count;                  proj_id = p_article_block_pool->shm_count;
147                  key = ftok(filename, proj_id);                  key = ftok(filename, proj_id);
148                  if (key == -1)                  if (key == -1)
149                  {                  {
# Line 111  int article_block_init(const char *filen Line 152  int article_block_init(const char *filen
152                          return -3;                          return -3;
153                  }                  }
154    
155                  size = sizeof(shmid) + sizeof(ARTICLE_BLOCK) * (size_t)block_count_in_shm;                  size = sizeof(ARTICLE_BLOCK) * (size_t)block_count_in_shm;
156                  shmid = shmget(key, size, IPC_CREAT | IPC_EXCL | 0600);                  shmid = shmget(key, size, IPC_CREAT | IPC_EXCL | 0600);
157                  if (shmid == -1)                  if (shmid == -1)
158                  {                  {
# Line 155  int article_block_init(const char *filen Line 196  int article_block_init(const char *filen
196    
197  void article_block_cleanup(void)  void article_block_cleanup(void)
198  {  {
199          if (p_article_block_pool != NULL)          if (p_article_block_pool == NULL)
200            {
201                    return;
202            }
203    
204            for (int i = 0; i < p_article_block_pool->shm_count; i++)
205          {          {
206                  for (int i = 0; i < p_article_block_pool->shm_count; i++)                  if (shmdt((p_article_block_pool->shm_pool + i)->p_shm) == -1)
207                  {                  {
208                          if (shmdt((p_article_block_pool->shm_pool + i)->p_shm) == -1)                          log_error("shmdt(shmid = %d) error (%d)\n", (p_article_block_pool->shm_pool + i)->shmid, errno);
209                          {                  }
                                 log_error("shmdt(shmid = %d) error (%d)\n", (p_article_block_pool->shm_pool + i)->shmid, errno);  
                         }  
210    
211                          if (shmctl((p_article_block_pool->shm_pool + i)->shmid, IPC_RMID, NULL) == -1)                  if (shmctl((p_article_block_pool->shm_pool + i)->shmid, IPC_RMID, NULL) == -1)
212                          {                  {
213                                  log_error("shmctl(shmid = %d, IPC_RMID) error (%d)\n", (p_article_block_pool->shm_pool + i)->shmid, errno);                          log_error("shmctl(shmid = %d, IPC_RMID) error (%d)\n", (p_article_block_pool->shm_pool + i)->shmid, errno);
                         }  
214                  }                  }
215            }
216    
217                  free(p_article_block_pool);          if (shmdt(p_article_block_pool) == -1)
218                  p_article_block_pool = NULL;          {
219                    log_error("shmdt(shmid = %d) error (%d)\n", article_block_pool_shmid, errno);
220          }          }
221    
222            if (shmctl(article_block_pool_shmid, IPC_RMID, NULL) == -1)
223            {
224                    log_error("shmctl(shmid = %d, IPC_RMID) error (%d)\n", article_block_pool_shmid, errno);
225            }
226    
227            p_article_block_pool = NULL;
228  }  }
229    
230  inline static ARTICLE_BLOCK *pop_free_article_block(void)  inline static ARTICLE_BLOCK *pop_free_article_block(void)
# Line 294  ARTICLE *article_block_find_by_index(int Line 346  ARTICLE *article_block_find_by_index(int
346    
347          if (index < 0 || index / ARTICLE_PER_BLOCK >= p_article_block_pool->block_count)          if (index < 0 || index / ARTICLE_PER_BLOCK >= p_article_block_pool->block_count)
348          {          {
349                  log_error("section_data_find_article_by_index(%d) is out of boundary of block [0, %d)\n", index, p_article_block_pool->block_count);                  log_error("article_block_find_by_index(%d) is out of boundary of block [0, %d)\n", index, p_article_block_pool->block_count);
350                  return NULL;                  return NULL;
351          }          }
352    
# Line 302  ARTICLE *article_block_find_by_index(int Line 354  ARTICLE *article_block_find_by_index(int
354    
355          if (index % ARTICLE_PER_BLOCK >= p_block->article_count)          if (index % ARTICLE_PER_BLOCK >= p_block->article_count)
356          {          {
357                  log_error("section_data_find_article_by_index(%d) is out of boundary of article [0, %d)\n", index, p_block->article_count);                  log_error("article_block_find_by_index(%d) is out of boundary of article [0, %d)\n", index, p_block->article_count);
358                  return NULL;                  return NULL;
359          }          }
360    
361          return (p_block->articles + (index % ARTICLE_PER_BLOCK));          return (p_block->articles + (index % ARTICLE_PER_BLOCK));
362  }  }
363    
364  SECTION_LIST *section_list_create(const char *sname, const char *stitle, const char *master_name)  extern int section_list_init(const char *filename)
365  {  {
366          SECTION_LIST *p_section;          int semid;
367            int shmid;
368            int proj_id;
369            key_t key;
370            size_t size;
371            void *p_shm;
372            union semun arg;
373            int i;
374    
375          if (p_section_list_pool == NULL)          if (p_section_list_pool == NULL || p_trie_dict_section_by_name == NULL || p_trie_dict_section_by_sid == NULL)
376          {          {
377                  p_section_list_pool = calloc(BBS_max_section, sizeof(SECTION_LIST));                  section_list_cleanup();
378                  if (p_section_list_pool == NULL)          }
379                  {  
380                          log_error("calloc(%d SECTION_LIST) OOM\n", BBS_max_section);          proj_id = (int)(time(NULL) % getpid());
381                          return NULL;          key = ftok(filename, proj_id);
382                  }          if (key == -1)
383            {
384                    log_error("ftok(%s, %d) error (%d)\n", filename, proj_id, errno);
385                    return -3;
386            }
387    
388                  section_list_count = 0;          size = 2 * (BBS_max_section + 1); // r_sem and w_sem per section, the last pair for all sections
389            semid = semget(key, (int)size, IPC_CREAT | IPC_EXCL | 0600);
390            if (semid == -1)
391            {
392                    log_error("semget(section_list_pool_sem, size = %d) error (%d)\n", size, errno);
393                    return -3;
394          }          }
395    
396          if (p_trie_dict_section_list == NULL)          // Initialize sem value to 0
397            arg.val = 0;
398            for (i = 0; i < size; i++)
399          {          {
400                  p_trie_dict_section_list = trie_dict_create();                  if (semctl(semid, i, SETVAL, arg) == -1)
                 if (p_trie_dict_section_list == NULL)  
401                  {                  {
402                          log_error("trie_dict_create() OOM\n", BBS_max_section);                          log_error("semctl(section_list_pool_sem, SETVAL) error (%d)\n", errno);
403                          return NULL;                          return -3;
404                  }                  }
405          }          }
406    
407            section_list_pool_semid = semid;
408    
409            size = sizeof(SECTION_LIST) * BBS_max_section;
410            shmid = shmget(key, size, IPC_CREAT | IPC_EXCL | 0600);
411            if (shmid == -1)
412            {
413                    log_error("shmget(section_list_pool_shm, size = %d) error (%d)\n", size, errno);
414                    return -3;
415            }
416            p_shm = shmat(shmid, NULL, 0);
417            if (p_shm == (void *)-1)
418            {
419                    log_error("shmat(shmid = %d) error (%d)\n", shmid, errno);
420                    return -3;
421            }
422    
423            section_list_pool_shmid = shmid;
424            p_section_list_pool = p_shm;
425            section_list_count = 0;
426    
427            p_trie_dict_section_by_name = trie_dict_create();
428            if (p_trie_dict_section_by_name == NULL)
429            {
430                    log_error("trie_dict_create() OOM\n", BBS_max_section);
431                    return -2;
432            }
433    
434            p_trie_dict_section_by_sid = trie_dict_create();
435            if (p_trie_dict_section_by_sid == NULL)
436            {
437                    log_error("trie_dict_create() OOM\n", BBS_max_section);
438                    return -2;
439            }
440    
441            return 0;
442    }
443    
444    inline static void sid_to_str(int32_t sid, char *p_sid_str)
445    {
446            uint32_t u_sid;
447            int i;
448    
449            u_sid = (uint32_t)sid;
450            for (i = 0; i < SID_STR_LEN - 1; i++)
451            {
452                    p_sid_str[i] = (char)(u_sid % 255 + 1);
453                    u_sid /= 255;
454            }
455            p_sid_str[i] = '\0';
456    }
457    
458    SECTION_LIST *section_list_create(int32_t sid, const char *sname, const char *stitle, const char *master_name)
459    {
460            SECTION_LIST *p_section;
461            char sid_str[SID_STR_LEN];
462    
463            if (p_section_list_pool == NULL || p_trie_dict_section_by_name == NULL || p_trie_dict_section_by_sid == NULL)
464            {
465                    log_error("session_list_pool not initialized\n");
466                    return NULL;
467            }
468    
469          if (section_list_count >= BBS_max_section)          if (section_list_count >= BBS_max_section)
470          {          {
471                  log_error("section_list_count exceed limit %d\n", BBS_max_section);                  log_error("section_list_count exceed limit %d >= %d\n", section_list_count, BBS_max_section);
472                  return NULL;                  return NULL;
473          }          }
474    
475            sid_to_str(sid, sid_str);
476    
477          p_section = p_section_list_pool + section_list_count;          p_section = p_section_list_pool + section_list_count;
478    
479            p_section->sid = sid;
480    
481          strncpy(p_section->sname, sname, sizeof(p_section->sname - 1));          strncpy(p_section->sname, sname, sizeof(p_section->sname - 1));
482          p_section->sname[sizeof(p_section->sname - 1)] = '\0';          p_section->sname[sizeof(p_section->sname - 1)] = '\0';
483    
# Line 352  SECTION_LIST *section_list_create(const Line 487  SECTION_LIST *section_list_create(const
487          strncpy(p_section->master_name, master_name, sizeof(p_section->master_name - 1));          strncpy(p_section->master_name, master_name, sizeof(p_section->master_name - 1));
488          p_section->master_name[sizeof(p_section->master_name - 1)] = '\0';          p_section->master_name[sizeof(p_section->master_name - 1)] = '\0';
489    
490          if (trie_dict_set(p_trie_dict_section_list, sname, section_list_count) != 1)          if (trie_dict_set(p_trie_dict_section_by_name, sname, section_list_count) != 1)
491            {
492                    log_error("trie_dict_set(section, %s, %d) error\n", sname, section_list_count);
493                    return NULL;
494            }
495    
496            if (trie_dict_set(p_trie_dict_section_by_sid, sid_str, section_list_count) != 1)
497          {          {
498                  log_error("trie_dict_set(section_data, %s, %d) error\n", sname, section_list_count);                  log_error("trie_dict_set(section, %d, %d) error\n", sid, section_list_count);
499                    log_std("Debug %x %x %x %x\n", sid_str[0], sid_str[1], sid_str[2], sid_str[3]);
500                  return NULL;                  return NULL;
501          }          }
502    
# Line 380  void section_list_reset_articles(SECTION Line 522  void section_list_reset_articles(SECTION
522    
523  void section_list_cleanup(void)  void section_list_cleanup(void)
524  {  {
525          if (p_trie_dict_section_list != NULL)          if (p_trie_dict_section_by_name != NULL)
526            {
527                    trie_dict_destroy(p_trie_dict_section_by_name);
528                    p_trie_dict_section_by_name = NULL;
529            }
530    
531            if (p_trie_dict_section_by_sid != NULL)
532          {          {
533                  trie_dict_destroy(p_trie_dict_section_list);                  trie_dict_destroy(p_trie_dict_section_by_sid);
534                  p_trie_dict_section_list = NULL;                  p_trie_dict_section_by_sid = NULL;
535          }          }
536    
537          if (p_section_list_pool != NULL)          if (p_section_list_pool != NULL)
538          {          {
539                  free(p_section_list_pool);                  if (shmdt(p_section_list_pool) == -1)
540                    {
541                            log_error("shmdt(shmid = %d) error (%d)\n", section_list_pool_shmid, errno);
542                    }
543                  p_section_list_pool = NULL;                  p_section_list_pool = NULL;
544    
545                    if (shmctl(section_list_pool_shmid, IPC_RMID, NULL) == -1)
546                    {
547                            log_error("shmctl(shmid = %d, IPC_RMID) error (%d)\n", section_list_pool_shmid, errno);
548                    }
549    
550                    if (semctl(section_list_pool_semid, 0, IPC_RMID) == -1)
551                    {
552                            log_error("semctl(semid = %d, IPC_RMID) error (%d)\n", section_list_pool_semid, errno);
553                    }
554          }          }
555    
556          section_list_count = 0;          section_list_count = 0;
# Line 399  SECTION_LIST *section_list_find_by_name( Line 560  SECTION_LIST *section_list_find_by_name(
560  {  {
561          int64_t index;          int64_t index;
562    
563          if (p_section_list_pool == NULL || p_trie_dict_section_list == NULL)          if (p_section_list_pool == NULL || p_trie_dict_section_by_name == NULL)
564            {
565                    log_error("section_list not initialized\n");
566                    return NULL;
567            }
568    
569            if (trie_dict_get(p_trie_dict_section_by_name, sname, &index) != 1)
570            {
571                    log_error("trie_dict_get(section, %s) error\n", sname);
572                    return NULL;
573            }
574    
575            return (p_section_list_pool + index);
576    }
577    
578    SECTION_LIST *section_list_find_by_sid(int32_t sid)
579    {
580            int64_t index;
581            char sid_str[SID_STR_LEN];
582    
583            if (p_section_list_pool == NULL || p_trie_dict_section_by_sid == NULL)
584          {          {
585                  log_error("section_list not initialized\n");                  log_error("section_list not initialized\n");
586                  return NULL;                  return NULL;
587          }          }
588    
589          if (trie_dict_get(p_trie_dict_section_list, sname, &index) != 1)          sid_to_str(sid, sid_str);
590    
591            if (trie_dict_get(p_trie_dict_section_by_sid, sid_str, &index) != 1)
592          {          {
593                  log_error("trie_dict_get(section_data, %s) error\n", sname);                  log_error("trie_dict_get(section, %d) error\n", sid);
594                  return NULL;                  return NULL;
595          }          }
596    
# Line 434  int section_list_append_article(SECTION_ Line 617  int section_list_append_article(SECTION_
617                  return -1;                  return -1;
618          }          }
619    
620            if (p_section->sid != p_article_src->sid)
621            {
622                    log_error("section_list_append_article() error: section sid %d != article sid %d\n", p_section->sid, p_article_src->sid);
623                    return -2;
624            }
625    
626          if (p_section->article_count >= BBS_article_limit_per_section)          if (p_section->article_count >= BBS_article_limit_per_section)
627          {          {
628                  log_error("section_list_append_article() error: article_count reach limit in section %d\n", p_section->sid);                  log_error("section_list_append_article() error: article_count reach limit in section %d\n", p_section->sid);
# Line 466  int section_list_append_article(SECTION_ Line 655  int section_list_append_article(SECTION_
655          // AID of articles should be strictly ascending          // AID of articles should be strictly ascending
656          if (p_article_src->aid <= last_aid)          if (p_article_src->aid <= last_aid)
657          {          {
658                  log_error("section_data_append_article(aid=%d) error: last_aid=%d\n", p_article_src->aid, last_aid);                  log_error("section_list_append_article(aid=%d) error: last_aid=%d\n", p_article_src->aid, last_aid);
659                  return -3;                  return -3;
660          }          }
661    
# Line 530  int section_list_append_article(SECTION_ Line 719  int section_list_append_article(SECTION_
719          p_section->p_article_tail = p_article;          p_section->p_article_tail = p_article;
720    
721          // Update page          // Update page
722          if (p_article->visible && p_section->last_page_visible_article_count % BBS_article_limit_per_page == 0)          if ((p_article->visible && p_section->last_page_visible_article_count % BBS_article_limit_per_page == 0) ||
723                    p_section->article_count == 1)
724          {          {
725                  p_section->p_page_first_article[p_section->page_count] = p_article;                  p_section->p_page_first_article[p_section->page_count] = p_article;
726                  p_section->page_count++;                  p_section->page_count++;
# Line 563  int section_list_set_article_visible(SEC Line 753  int section_list_set_article_visible(SEC
753                  return -1; // Not found                  return -1; // Not found
754          }          }
755    
756            if (p_section->sid != p_article->sid)
757            {
758                    log_error("section_list_set_article_visible() error: section sid %d != article sid %d\n", p_section->sid, p_article->sid);
759                    return -2;
760            }
761    
762          if (p_article->visible == visible)          if (p_article->visible == visible)
763          {          {
764                  return 0; // Already set                  return 0; // Already set
# Line 610  int section_list_set_article_visible(SEC Line 806  int section_list_set_article_visible(SEC
806          return affected_count;          return affected_count;
807  }  }
808    
809  ARTICLE *section_list_find_article_with_offset(SECTION_LIST *p_section, int32_t aid, int32_t *p_page, int32_t *p_offset)  ARTICLE *section_list_find_article_with_offset(SECTION_LIST *p_section, int32_t aid, int32_t *p_page, int32_t *p_offset, ARTICLE **pp_next)
810  {  {
811          ARTICLE *p_article;          ARTICLE *p_article;
812          int left;          int left;
# Line 619  ARTICLE *section_list_find_article_with_ Line 815  ARTICLE *section_list_find_article_with_
815    
816          *p_page = -1;          *p_page = -1;
817          *p_offset = -1;          *p_offset = -1;
818            *pp_next = NULL;
819    
820          if (p_section == NULL)          if (p_section == NULL)
821          {          {
# Line 663  ARTICLE *section_list_find_article_with_ Line 860  ARTICLE *section_list_find_article_with_
860          p_article = p_section->p_page_first_article[*p_page];          p_article = p_section->p_page_first_article[*p_page];
861    
862          // p_section->p_page_first_article[*p_page]->aid <= aid < p_section->p_page_first_article[*p_page + 1]->aid          // p_section->p_page_first_article[*p_page]->aid <= aid < p_section->p_page_first_article[*p_page + 1]->aid
863          right = (*p_page == p_section->page_count - 1 ? INT32_MAX : p_section->p_page_first_article[*p_page + 1]->aid);          right = (*p_page == MAX(0, p_section->page_count - 1) ? INT32_MAX : p_section->p_page_first_article[*p_page + 1]->aid);
864    
865          // left will be the offset of article found or offset to insert          // left will be the offset of article found or offset to insert
866          left = 0;          left = 0;
867    
868          while (1)          while (aid > p_article->aid)
869          {          {
870                  if (aid == p_article->aid) // found                  p_article = p_article->p_next;
871                  {                  left++;
872                          break;  
873                  }                  if (aid == p_article->aid)
                 else if (aid < p_article->aid) // not exist  
874                  {                  {
875                          p_article = NULL;                          *pp_next = p_article->p_next;
876                          break;                          break;
877                  }                  }
878    
                 // aid > p_article->aid  
                 p_article = p_article->p_next;  
                 left++;  
   
879                  // over last article in the page                  // over last article in the page
880                  if (p_article == p_section->p_article_head || p_article->aid >= right)                  if (p_article == p_section->p_article_head || p_article->aid >= right)
881                  {                  {
882                          p_article = NULL;                          *pp_next = (p_article == p_section->p_article_head ? p_section->p_article_head : p_section->p_page_first_article[*p_page + 1]);
883                          break;                          *p_offset = left;
884                            return NULL; // not found
885                  }                  }
886          }          }
887    
888            if (aid < p_article->aid)
889            {
890                    *pp_next = p_article;
891                    p_article = NULL; // not found
892            }
893            else // aid == p_article->aid
894            {
895                    *pp_next = p_article->p_next;
896            }
897    
898          *p_offset = left;          *p_offset = left;
899    
900          return p_article;          return p_article;
# Line 700  ARTICLE *section_list_find_article_with_ Line 903  ARTICLE *section_list_find_article_with_
903  int section_list_calculate_page(SECTION_LIST *p_section, int32_t start_aid)  int section_list_calculate_page(SECTION_LIST *p_section, int32_t start_aid)
904  {  {
905          ARTICLE *p_article;          ARTICLE *p_article;
906            ARTICLE *p_next;
907          int32_t page;          int32_t page;
908          int32_t offset;          int32_t offset;
909          int visible_article_count;          int visible_article_count;
# Line 711  int section_list_calculate_page(SECTION_ Line 915  int section_list_calculate_page(SECTION_
915                  return -1;                  return -1;
916          }          }
917    
918          p_article = section_list_find_article_with_offset(p_section, start_aid, &page, &offset);          if (p_section->article_count == 0) // empty
919          if (p_article == NULL)          {
920                    p_section->page_count = 0;
921                    p_section->last_page_visible_article_count = 0;
922    
923                    return 0;
924            }
925    
926            if (start_aid > 0)
927          {          {
928                  if (page < 0)                  p_article = article_block_find_by_aid(start_aid);
929                    if (p_article == NULL)
930                  {                  {
931                          return 0;                          return -1; // Not found
932                  }                  }
933    
934                  log_error("section_list_calculate_page() aid = %d not found in section sid = %d\n", start_aid, p_section->sid);                  if (p_section->sid != p_article->sid)
935          }                  {
936                            log_error("section_list_calculate_page() error: section sid %d != start article sid %d\n", p_section->sid, p_article->sid);
937                            return -2;
938                    }
939    
940          if (offset > 0)                  p_article = section_list_find_article_with_offset(p_section, start_aid, &page, &offset, &p_next);
941                    if (p_article == NULL)
942                    {
943                            if (page < 0)
944                            {
945                                    return -1;
946                            }
947                            log_error("section_list_calculate_page() aid = %d not found in section sid = %d\n",
948                                              start_aid, p_section->sid);
949                            return -2;
950                    }
951    
952                    if (offset > 0)
953                    {
954                            p_article = p_section->p_page_first_article[page];
955                    }
956            }
957            else
958          {          {
959                  p_article = p_section->p_page_first_article[page];                  p_article = p_section->p_article_head;
960                    page = 0;
961                    offset = 0;
962          }          }
963    
964          visible_article_count = 0;          visible_article_count = 0;
# Line 770  int section_list_calculate_page(SECTION_ Line 1004  int section_list_calculate_page(SECTION_
1004    
1005          return 0;          return 0;
1006  }  }
1007    
1008    int article_count_of_topic(int32_t aid)
1009    {
1010            ARTICLE *p_article;
1011            int article_count;
1012    
1013            p_article = article_block_find_by_aid(aid);
1014            if (p_article == NULL)
1015            {
1016                    return 0; // Not found
1017            }
1018    
1019            article_count = 0;
1020    
1021            do
1022            {
1023                    if (p_article->tid != 0 && p_article->tid != aid)
1024                    {
1025                            log_error("article_count_of_topic(%d) error: article %d not linked to the topic\n", aid, p_article->aid);
1026                            break;
1027                    }
1028    
1029                    article_count++;
1030                    p_article = p_article->p_topic_next;
1031            } while (p_article->aid != aid);
1032    
1033            return article_count;
1034    }
1035    
1036    int section_list_move_topic(SECTION_LIST *p_section_src, SECTION_LIST *p_section_dest, int32_t aid)
1037    {
1038            ARTICLE *p_article;
1039            ARTICLE *p_next;
1040            int32_t page;
1041            int32_t offset;
1042            int32_t move_article_count;
1043            int32_t dest_article_count_old;
1044            int32_t last_unaffected_aid_src;
1045            int32_t first_inserted_aid_dest;
1046            int move_counter;
1047    
1048            if (p_section_dest == NULL)
1049            {
1050                    log_error("section_list_move_topic() NULL pointer error\n");
1051                    return -1;
1052            }
1053    
1054            if ((p_article = article_block_find_by_aid(aid)) == NULL)
1055            {
1056                    log_error("section_list_move_topic() error: article %d not found in block\n", aid);
1057                    return -2;
1058            }
1059    
1060            if (p_section_src->sid != p_article->sid)
1061            {
1062                    log_error("section_list_move_topic() error: src section sid %d != article %d sid %d\n",
1063                                      p_section_src->sid, p_article->aid, p_article->sid);
1064                    return -2;
1065            }
1066    
1067            if (p_article->tid != 0)
1068            {
1069                    log_error("section_list_move_topic(aid = %d) error: article is not head of topic, tid = %d\n", aid, p_article->tid);
1070                    return -2;
1071            }
1072    
1073            last_unaffected_aid_src = (p_article == p_section_src->p_article_head ? 0 : p_article->p_prior->aid);
1074    
1075            move_article_count = article_count_of_topic(aid);
1076            if (move_article_count <= 0)
1077            {
1078                    log_error("section_list_count_of_topic_articles(aid = %d) <= 0\n", aid);
1079                    return -2;
1080            }
1081    
1082            if (p_section_dest->article_count + move_article_count > BBS_article_limit_per_section)
1083            {
1084                    log_error("section_list_move_topic() error: article_count %d reach limit in section %d\n",
1085                                      p_section_dest->article_count + move_article_count, p_section_dest->sid);
1086                    return -3;
1087            }
1088    
1089            dest_article_count_old = p_section_dest->article_count;
1090            move_counter = 0;
1091            first_inserted_aid_dest = p_article->aid;
1092    
1093            do
1094            {
1095                    if (p_section_src->sid != p_article->sid)
1096                    {
1097                            log_error("section_list_move_topic() error: src section sid %d != article %d sid %d\n",
1098                                              p_section_src->sid, p_article->aid, p_article->sid);
1099                            return -2;
1100                    }
1101    
1102                    // Remove from bi-directional article list of src section
1103                    if (p_section_src->p_article_head == p_article)
1104                    {
1105                            p_section_src->p_article_head = p_article->p_next;
1106                    }
1107                    if (p_section_src->p_article_tail == p_article)
1108                    {
1109                            p_section_src->p_article_tail = p_article->p_prior;
1110                    }
1111                    if (p_section_src->p_article_head == p_article) // || p_section_src->p_article_tail == p_article
1112                    {
1113                            p_section_src->p_article_head = NULL;
1114                            p_section_src->p_article_tail = NULL;
1115                    }
1116    
1117                    p_article->p_prior->p_next = p_article->p_next;
1118                    p_article->p_next->p_prior = p_article->p_prior;
1119    
1120                    // Update sid of article
1121                    p_article->sid = p_section_dest->sid;
1122    
1123                    if (section_list_find_article_with_offset(p_section_dest, p_article->aid, &page, &offset, &p_next) != NULL)
1124                    {
1125                            log_error("section_list_move_topic() error: article %d already in section %d\n", p_article->aid, p_section_dest->sid);
1126                            return -4;
1127                    }
1128    
1129                    // Insert into bi-directional article list of dest section
1130                    if (p_next == NULL) // empty section
1131                    {
1132                            p_section_dest->p_article_head = p_article;
1133                            p_section_dest->p_article_tail = p_article;
1134                            p_article->p_prior = p_article;
1135                            p_article->p_next = p_article;
1136                    }
1137                    else
1138                    {
1139                            if (p_section_dest->p_article_head == p_next)
1140                            {
1141                                    if (p_article->aid < p_next->aid)
1142                                    {
1143                                            p_section_dest->p_article_head = p_article;
1144                                    }
1145                                    else // p_article->aid > p_next->aid
1146                                    {
1147                                            p_section_dest->p_article_tail = p_article;
1148                                    }
1149                            }
1150    
1151                            p_article->p_prior = p_next->p_prior;
1152                            p_article->p_next = p_next;
1153                            p_next->p_prior->p_next = p_article;
1154                            p_next->p_prior = p_article;
1155                    }
1156    
1157                    // Update article / topic counter of src / desc section
1158                    p_section_src->article_count--;
1159                    p_section_dest->article_count++;
1160                    if (p_article->tid == 0)
1161                    {
1162                            p_section_src->topic_count--;
1163                            p_section_dest->topic_count++;
1164                    }
1165    
1166                    // Update visible article / topic counter of src / desc section
1167                    if (p_article->visible)
1168                    {
1169                            p_section_src->visible_article_count--;
1170                            p_section_dest->visible_article_count++;
1171                            if (p_article->tid == 0)
1172                            {
1173                                    p_section_src->visible_topic_count--;
1174                                    p_section_dest->visible_topic_count++;
1175                            }
1176                    }
1177    
1178                    // Update page for empty dest section
1179                    if (p_section_dest->article_count == 1)
1180                    {
1181                            p_section_dest->p_page_first_article[0] = p_article;
1182                            p_section_dest->page_count = 1;
1183                            p_section_dest->last_page_visible_article_count = (p_article->visible ? 1 : 0);
1184                    }
1185    
1186                    p_article = p_article->p_topic_next;
1187    
1188                    move_counter++;
1189                    if (move_counter % CALCULATE_PAGE_THRESHOLD == 0)
1190                    {
1191                            // Re-calculate pages of desc section
1192                            if (section_list_calculate_page(p_section_dest, first_inserted_aid_dest) < 0)
1193                            {
1194                                    log_error("section_list_calculate_page(dest section = %d, aid = %d) error\n",
1195                                                      p_section_dest->sid, first_inserted_aid_dest);
1196                            }
1197    
1198                            first_inserted_aid_dest = p_article->aid;
1199                    }
1200            } while (p_article->aid != aid);
1201    
1202            if (p_section_dest->article_count - dest_article_count_old != move_article_count)
1203            {
1204                    log_error("section_list_move_topic() error: count of moved articles %d != %d\n",
1205                                      p_section_dest->article_count - dest_article_count_old, move_article_count);
1206            }
1207    
1208            // Re-calculate pages of src section
1209            if (section_list_calculate_page(p_section_src, last_unaffected_aid_src) < 0)
1210            {
1211                    log_error("section_list_calculate_page(src section = %d, aid = %d) error at aid = %d\n",
1212                                      p_section_src->sid, last_unaffected_aid_src, aid);
1213            }
1214    
1215            if (move_counter % CALCULATE_PAGE_THRESHOLD != 0)
1216            {
1217                    // Re-calculate pages of desc section
1218                    if (section_list_calculate_page(p_section_dest, first_inserted_aid_dest) < 0)
1219                    {
1220                            log_error("section_list_calculate_page(dest section = %d, aid = %d) error\n",
1221                                              p_section_dest->sid, first_inserted_aid_dest);
1222                    }
1223            }
1224    
1225            return move_article_count;
1226    }
1227    
1228    int get_section_index(SECTION_LIST *p_section)
1229    {
1230            int index;
1231    
1232            if (p_section_list_pool == NULL)
1233            {
1234                    log_error("get_section_index() error: uninitialized\n");
1235                    return -1;
1236            }
1237    
1238            if (p_section == NULL)
1239            {
1240                    index = BBS_max_section;
1241            }
1242            else
1243            {
1244                    index = (int)(p_section - p_section_list_pool);
1245                    if (index < 0 || index >= BBS_max_section)
1246                    {
1247                            log_error("get_section_index(%d) error: index out of range\n", index);
1248                            return -2;
1249                    }
1250            }
1251    
1252            return index;
1253    }
1254    
1255    int section_list_try_rd_lock(SECTION_LIST *p_section, int wait_sec)
1256    {
1257            int index;
1258            struct sembuf sops[4];
1259            struct timespec timeout;
1260            int ret;
1261    
1262            index = get_section_index(p_section);
1263            if (index < 0)
1264            {
1265                    return -2;
1266            }
1267    
1268            sops[0].sem_num = (unsigned short)(index * 2 + 1); // w_sem of section index
1269            sops[0].sem_op = 0;                                                                // wait until unlocked
1270            sops[0].sem_flg = 0;
1271    
1272            sops[1].sem_num = (unsigned short)(index * 2); // r_sem of section index
1273            sops[1].sem_op = 1;                                                        // lock
1274            sops[1].sem_flg = SEM_UNDO;                                        // undo on terminate
1275    
1276            // Read lock on any specific section will also acquire single read lock on "all section"
1277            // so that write lock on all section only need to acquire single write on on "all section"
1278            // rather than to acquire multiple write locks on all the available sections.
1279            if (index == BBS_max_section)
1280            {
1281                    sops[2].sem_num = BBS_max_section * 2 + 1; // w_sem of all section
1282                    sops[2].sem_op = 0;                                                // wait until unlocked
1283                    sops[2].sem_flg = 0;
1284    
1285                    sops[3].sem_num = BBS_max_section * 2; // r_sem of all section
1286                    sops[3].sem_op = 1;                                        // lock
1287                    sops[3].sem_flg = SEM_UNDO;                        // undo on terminate
1288            }
1289    
1290            timeout.tv_sec = wait_sec;
1291            timeout.tv_nsec = 0;
1292    
1293            ret = semtimedop(section_list_pool_semid, sops, (index == BBS_max_section ? 4 : 2), &timeout);
1294            if (ret == -1 && errno != EAGAIN && errno != EINTR)
1295            {
1296                    log_error("semtimedop(index = %d, lock read) error %d\n", index, errno);
1297            }
1298    
1299            return ret;
1300    }
1301    
1302    int section_list_try_rw_lock(SECTION_LIST *p_section, int wait_sec)
1303    {
1304            int index;
1305            struct sembuf sops[3];
1306            struct timespec timeout;
1307            int ret;
1308    
1309            index = get_section_index(p_section);
1310            if (index < 0)
1311            {
1312                    return -2;
1313            }
1314    
1315            sops[0].sem_num = (unsigned short)(index * 2 + 1); // w_sem of section index
1316            sops[0].sem_op = 0;                                                                // wait until unlocked
1317            sops[0].sem_flg = 0;
1318    
1319            sops[1].sem_num = (unsigned short)(index * 2 + 1); // w_sem of section index
1320            sops[1].sem_op = 1;                                                                // lock
1321            sops[1].sem_flg = SEM_UNDO;                                                // undo on terminate
1322    
1323            sops[2].sem_num = (unsigned short)(index * 2); // r_sem of section index
1324            sops[2].sem_op = 0;                                                        // wait until unlocked
1325            sops[2].sem_flg = 0;
1326    
1327            timeout.tv_sec = wait_sec;
1328            timeout.tv_nsec = 0;
1329    
1330            ret = semtimedop(section_list_pool_semid, sops, 3, &timeout);
1331            if (ret == -1 && errno != EAGAIN && errno != EINTR)
1332            {
1333                    log_error("semtimedop(index = %d, lock write) error %d\n", index, errno);
1334            }
1335    
1336            return ret;
1337    }
1338    
1339    int section_list_rd_unlock(SECTION_LIST *p_section)
1340    {
1341            int index;
1342            struct sembuf sops[2];
1343            int ret;
1344    
1345            index = get_section_index(p_section);
1346            if (index < 0)
1347            {
1348                    return -2;
1349            }
1350    
1351            sops[0].sem_num = (unsigned short)(index * 2); // r_sem of section index
1352            sops[0].sem_op = -1;                                               // unlock
1353            sops[0].sem_flg = IPC_NOWAIT | SEM_UNDO;           // no wait
1354    
1355            // The same reason as section_list_try_rd_lock()
1356            if (index == BBS_max_section)
1357            {
1358                    sops[1].sem_num = BBS_max_section * 2;   // r_sem of all section
1359                    sops[1].sem_op = -1;                                     // unlock
1360                    sops[1].sem_flg = IPC_NOWAIT | SEM_UNDO; // no wait
1361            }
1362    
1363            ret = semop(section_list_pool_semid, sops, (index == BBS_max_section ? 2 : 1));
1364            if (ret == -1 && errno != EAGAIN && errno != EINTR)
1365            {
1366                    log_error("semop(index = %d, unlock read) error %d\n", index, errno);
1367            }
1368    
1369            return ret;
1370    }
1371    
1372    int section_list_rw_unlock(SECTION_LIST *p_section)
1373    {
1374            int index;
1375            struct sembuf sops[1];
1376            int ret;
1377    
1378            index = get_section_index(p_section);
1379            if (index < 0)
1380            {
1381                    return -2;
1382            }
1383    
1384            sops[0].sem_num = (unsigned short)(index * 2 + 1); // w_sem of section index
1385            sops[0].sem_op = -1;                                                       // unlock
1386            sops[0].sem_flg = IPC_NOWAIT | SEM_UNDO;                   // no wait
1387    
1388            ret = semop(section_list_pool_semid, sops, 1);
1389            if (ret == -1 && errno != EAGAIN && errno != EINTR)
1390            {
1391                    log_error("semop(index = %d, unlock write) error %d\n", index, errno);
1392            }
1393    
1394            return ret;
1395    }


Legend:
Removed lines/characters  
Changed lines/characters
  Added lines/characters

webmaster@leafok.com
ViewVC Help
Powered by ViewVC 1.3.0-beta1