/[LeafOK_CVS]/lbbs/src/article_cache.c
ViewVC logotype

Diff of /lbbs/src/article_cache.c

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

Revision 1.3 by sysadm, Sat May 31 01:37:18 2025 UTC Revision 1.17 by sysadm, Mon Jun 16 01:36:56 2025 UTC
# Line 16  Line 16 
16    
17  #include "article_cache.h"  #include "article_cache.h"
18  #include "log.h"  #include "log.h"
19    #include "lml.h"
20  #include <errno.h>  #include <errno.h>
21  #include <stdio.h>  #include <stdio.h>
22  #include <fcntl.h>  #include <fcntl.h>
# Line 28  Line 29 
29  #include <string.h>  #include <string.h>
30    
31  #define ARTICLE_HEADER_MAX_LEN 4096  #define ARTICLE_HEADER_MAX_LEN 4096
32    #define ARTICLE_CONTENT_MAX_LEN 1024 * 1024 * 4 // 4MB
33    #define ARTICLE_FOOTER_MAX_LEN 4096
34    #define SUB_DT_MAX_LEN 50
35    
36    static const char *BBS_article_footer_color[] = {
37            "\033[31m",
38            "\033[32m",
39            "\033[33m",
40            "\033[34m",
41            "\033[35m",
42            "\033[36m",
43            "\033[37m",
44    };
45    static const int BBS_article_footer_color_count = 7;
46    
47  inline static int article_cache_path(char *file_path, size_t buf_len, const char *cache_dir, const ARTICLE *p_article)  inline static int article_cache_path(char *file_path, size_t buf_len, const char *cache_dir, const ARTICLE *p_article)
48  {  {
# Line 42  inline static int article_cache_path(cha Line 57  inline static int article_cache_path(cha
57          return 0;          return 0;
58  }  }
59    
60  int article_cache_generate(const char *cache_dir, const ARTICLE *p_article, const SECTION_LIST *p_section, const char *content, int overwrite)  int article_cache_generate(const char *cache_dir, const ARTICLE *p_article, const SECTION_LIST *p_section,
61                                                       const char *content, const char *sub_ip, int overwrite)
62  {  {
63            static char *content_f; // static buffer in large size
64    
65          char data_file[FILE_PATH_LEN];          char data_file[FILE_PATH_LEN];
66          int fd;          int fd;
67          ARTICLE_CACHE cache;          ARTICLE_CACHE cache;
68          struct tm tm_sub_dt;          struct tm tm_sub_dt;
69          char str_sub_dt[50];          char str_sub_dt[SUB_DT_MAX_LEN + 1];
70          char header[ARTICLE_HEADER_MAX_LEN];          char header[ARTICLE_HEADER_MAX_LEN];
71          size_t header_len;          size_t header_len;
72          long header_line_cnt;          long header_line_cnt;
73            char footer[ARTICLE_FOOTER_MAX_LEN];
74            size_t footer_len;
75            long footer_line_cnt;
76          long i;          long i;
77    
78          if (cache_dir == NULL || p_article == NULL || content == NULL)          if (cache_dir == NULL || p_article == NULL || content == NULL)
# Line 60  int article_cache_generate(const char *c Line 81  int article_cache_generate(const char *c
81                  return -1;                  return -1;
82          }          }
83    
84            if (content_f == NULL && (content_f = malloc(ARTICLE_CONTENT_MAX_LEN)) == NULL)
85            {
86                    log_error("malloc(content_f) error: OOM\n");
87                    return -1;
88            }
89    
90          if (article_cache_path(data_file, sizeof(data_file), cache_dir, p_article) < 0)          if (article_cache_path(data_file, sizeof(data_file), cache_dir, p_article) < 0)
91          {          {
92                  log_error("article_cache_path(dir=%s, cid=%d) error\n", cache_dir, p_article->cid);                  log_error("article_cache_path(dir=%s, cid=%d) error\n", cache_dir, p_article->cid);
# Line 83  int article_cache_generate(const char *c Line 110  int article_cache_generate(const char *c
110    
111          bzero(&cache, sizeof(cache));          bzero(&cache, sizeof(cache));
112    
113          // Generate article header          // Generate article header / footer
114          localtime_r(&(p_article->sub_dt), &tm_sub_dt);          localtime_r(&(p_article->sub_dt), &tm_sub_dt);
115          strftime(str_sub_dt, sizeof(str_sub_dt), "%c", &tm_sub_dt);          strftime(str_sub_dt, sizeof(str_sub_dt), "%c", &tm_sub_dt);
116    
117          snprintf(header, sizeof(header), "发布者: %s (%s), 版块: %s (%s)\n标  题: %s\n发布于: %s (%s)\n\n",          snprintf(header, sizeof(header), "发布者: %s (%s), 版块: %s (%s)\n标  题: %s\n发布于: %s (%s)\n\n",
118                           p_article->username, p_article->nickname, p_section->sname, p_section->stitle, p_article->title, BBS_name, str_sub_dt);                           p_article->username, p_article->nickname, p_section->sname, p_section->stitle, p_article->title, BBS_name, str_sub_dt);
119    
120            snprintf(footer, sizeof(footer),
121                             "\n--\n%s※ 来源: %s http://%s [FROM: %s]\033[m\n\n",
122                             BBS_article_footer_color[p_article->aid % BBS_article_footer_color_count],
123                             BBS_name, BBS_server, sub_ip);
124    
125          header_len = strnlen(header, sizeof(header));          header_len = strnlen(header, sizeof(header));
126          cache.data_len = header_len + strlen(content);          footer_len = strnlen(footer, sizeof(footer));
127    
128            header_line_cnt = split_data_lines(header, SCREEN_COLS, cache.line_offsets, MAX_SPLIT_FILE_LINES, 1);
129    
130            if (header_len != cache.line_offsets[header_line_cnt])
131            {
132                    log_common("Header of article(aid=%d) is truncated from %ld to %ld\n", p_article->aid, header_len, cache.line_offsets[header_line_cnt]);
133                    header_len = (size_t)cache.line_offsets[header_line_cnt];
134            }
135    
136            // Apply LML render to content body
137            cache.data_len = header_len + (size_t)lml_plain(content, content_f, ARTICLE_CONTENT_MAX_LEN);
138    
         header_line_cnt = split_data_lines(header, SCREEN_COLS, cache.line_offsets, MAX_SPLIT_FILE_LINES);  
139          cache.line_total = header_line_cnt +          cache.line_total = header_line_cnt +
140                                             split_data_lines(content, SCREEN_COLS, cache.line_offsets + header_line_cnt, MAX_SPLIT_FILE_LINES - header_line_cnt);                                             split_data_lines(content_f, SCREEN_COLS, cache.line_offsets + header_line_cnt, MAX_SPLIT_FILE_LINES - header_line_cnt, 1);
141    
142          if (cache.line_total >= MAX_SPLIT_FILE_LINES)          if (cache.data_len - header_len != (size_t)cache.line_offsets[cache.line_total])
143          {          {
144                  log_error("split_data_lines(%s) truncated over limit lines %d >= %d\n", data_file, cache.line_total, MAX_SPLIT_FILE_LINES);                  log_common("Body of article(aid=%d) is truncated from %ld to %ld\n",
145                  cache.line_total = MAX_SPLIT_FILE_LINES - 1;                                  p_article->aid, cache.data_len - header_len, cache.line_offsets[cache.line_total]);
146                    cache.data_len = header_len + (size_t)(cache.line_offsets[cache.line_total]);
147          }          }
148    
149          for (i = header_line_cnt; i <= cache.line_total; i++)          for (i = header_line_cnt; i <= cache.line_total; i++)
# Line 108  int article_cache_generate(const char *c Line 151  int article_cache_generate(const char *c
151                  cache.line_offsets[i] += (long)header_len;                  cache.line_offsets[i] += (long)header_len;
152          }          }
153    
154          if (write(fd, &cache, sizeof(cache)) == -1)          footer_line_cnt = split_data_lines(footer, SCREEN_COLS, cache.line_offsets + cache.line_total, MAX_SPLIT_FILE_LINES - cache.line_total, 1);
155    
156            if (footer_len != cache.line_offsets[cache.line_total + footer_line_cnt])
157            {
158                    log_common("Footer of article(aid=%d) is truncated from %ld to %ld\n",
159                                    p_article->aid, footer_len, cache.line_offsets[cache.line_total + footer_line_cnt]);
160                    footer_len = (size_t)(cache.line_offsets[cache.line_total + footer_line_cnt]);
161            }
162    
163            for (i = 0; i <= footer_line_cnt; i++)
164            {
165                    cache.line_offsets[cache.line_total + i] += (long)cache.data_len;
166            }
167    
168            cache.data_len += footer_len;
169            cache.line_total += footer_line_cnt;
170            cache.mmap_len = sizeof(cache) - sizeof(long) * (MAX_SPLIT_FILE_LINES - (size_t)(cache.line_total) - 1) + cache.data_len;
171    
172            if (write(fd, &cache, cache.mmap_len - cache.data_len) == -1)
173          {          {
174                  log_error("write(%s, cache) error (%d)\n", data_file, errno);                  log_error("write(%s, cache) error (%d)\n", data_file, errno);
175                  close(fd);                  close(fd);
# Line 120  int article_cache_generate(const char *c Line 181  int article_cache_generate(const char *c
181                  close(fd);                  close(fd);
182                  return -3;                  return -3;
183          }          }
184          if (write(fd, content, cache.data_len - header_len) == -1)          if (write(fd, content_f, cache.data_len - header_len - footer_len) == -1)
185          {          {
186                  log_error("write(%s, content) error (%d)\n", data_file, errno);                  log_error("write(%s, content) error (%d)\n", data_file, errno);
187                  close(fd);                  close(fd);
188                  return -3;                  return -3;
189          }          }
190            if (write(fd, footer, footer_len) == -1)
191            {
192                    log_error("write(%s, footer) error (%d)\n", data_file, errno);
193                    close(fd);
194                    return -3;
195            }
196    
197          if (close(fd) == -1)          if (close(fd) == -1)
198          {          {
# Line 140  int article_cache_load(ARTICLE_CACHE *p_ Line 207  int article_cache_load(ARTICLE_CACHE *p_
207  {  {
208          char data_file[FILE_PATH_LEN];          char data_file[FILE_PATH_LEN];
209          int fd;          int fd;
210            struct stat sb;
211            void *p_mmap;
212            size_t mmap_len;
213    
214          if (p_cache == NULL || cache_dir == NULL || p_article == NULL)          if (p_cache == NULL || cache_dir == NULL || p_article == NULL)
215          {          {
# Line 159  int article_cache_load(ARTICLE_CACHE *p_ Line 229  int article_cache_load(ARTICLE_CACHE *p_
229                  return -2;                  return -2;
230          }          }
231    
232          if (read(fd, (void *)p_cache, sizeof(ARTICLE_CACHE)) == -1)          if (fstat(fd, &sb) < 0)
233          {          {
234                  log_error("read(%s, cache) error (%d)\n", data_file, errno);                  log_error("fstat(fd) error (%d)\n", errno);
235                  close(fd);                  return -2;
                 return -3;  
236          }          }
237    
238          p_cache->p_data = malloc(p_cache->data_len + 1);          mmap_len = (size_t)sb.st_size;
         if (p_cache->p_data == NULL)  
         {  
                 log_error("malloc(size=%ld) error OOM\n", p_cache->data_len + 1);  
                 close(fd);  
                 return -1;  
         }  
239    
240          if (read(fd, p_cache->p_data, p_cache->data_len) == -1)          p_mmap = mmap(NULL, mmap_len, PROT_READ, MAP_SHARED, fd, 0L);
241            if (p_mmap == MAP_FAILED)
242          {          {
243                  log_error("read(%s, data) error (%d)\n", data_file, errno);                  log_error("mmap(%s) error (%d)\n", data_file, errno);
244                  close(fd);                  return -2;
                 return -3;  
245          }          }
         p_cache->p_data[p_cache->data_len] = '\0';  
246    
247          if (close(fd) == -1)          if (close(fd) == -1)
248          {          {
# Line 188  int article_cache_load(ARTICLE_CACHE *p_ Line 250  int article_cache_load(ARTICLE_CACHE *p_
250                  return -2;                  return -2;
251          }          }
252    
253            if (((ARTICLE_CACHE *)p_mmap)->mmap_len != mmap_len)
254            {
255                    log_error("Inconsistent mmap len of article (cid=%d), %ld != %ld\n", p_article->cid, p_cache->mmap_len, mmap_len);
256                    return -3;
257            }
258    
259            bzero(p_cache, sizeof(*p_cache));
260            memcpy((void *)p_cache, p_mmap, (size_t)(((ARTICLE_CACHE *)p_mmap)->mmap_len - ((ARTICLE_CACHE *)p_mmap)->data_len));
261    
262            p_cache->p_mmap = p_mmap;
263            p_cache->p_data = p_mmap + (p_cache->mmap_len - p_cache->data_len);
264    
265          return 0;          return 0;
266  }  }
267    
268  int article_cache_unload(ARTICLE_CACHE *p_cache)  int article_cache_unload(ARTICLE_CACHE *p_cache)
269  {  {
270          if (p_cache == NULL || p_cache->p_data == NULL)          if (p_cache == NULL || p_cache->p_mmap == NULL)
271          {          {
272                  log_error("article_cache_unload() NULL pointer error\n");                  log_error("article_cache_unload() NULL pointer error\n");
273                  return -1;                  return -1;
274          }          }
275    
276          free(p_cache->p_data);          if (munmap(p_cache->p_mmap, p_cache->mmap_len) < 0)
277            {
278                    log_error("munmap() error (%d)\n", errno);
279                    return -2;
280            }
281    
282            p_cache->p_mmap = NULL;
283          p_cache->p_data = NULL;          p_cache->p_data = NULL;
284    
285          return 0;          return 0;

Legend:
Removed lines/characters  
Changed lines/characters
  Added lines/characters
webmaster@leafok.com
 ViewVC Help
Powered by ViewVC 1.3.0-beta1