finish 8th homework #42
Conversation
otus-16/src/otus_16/homework.clj
Outdated
| (->> log-file | ||
| (line-seq) | ||
| (partition-all 5000) | ||
| (pmap #(map parse-log %)) | ||
| (filter-by-url url) | ||
| (filter-by-referer referrer) | ||
| (sum-partition))) |
There was a problem hiding this comment.
хорошее решение, мне понравилось
пришлось потратить немного времени чтобы понять все трансформации
хорошей практикой считается не сильно изменять тип передаваемого аргумента в цепочке вызовов тред макроса, т.е. если вы начали работать с коллекцией то в том месте где коллекция трансформируется во что-то другое лучше закончить цепочку вызовов (в данном случае когда коллекция из плоской превращается в двухмерную, после вызова pmap)
мне кажется если после pmap сделать вызов flatten и дальше работать как с простой коллекцией код можно сделать немного легче для чтения
There was a problem hiding this comment.
поправил как смог )
flatten делает Array.copyOf, что приводит к
Execution error (OutOfMemoryError) at java.util.Arrays/copyOf (Arrays.java:3537).
Java heap space
| (defn get-logs-paths | ||
| [dir-path] | ||
| (->> (io/as-file dir-path) | ||
| (file-seq) | ||
| (filter #(.isFile %)))) |
| (defn ->url [log] | ||
| {:pre [(contains? log :request)]} | ||
| (let [request (-> log :request)] | ||
| (when request |
There was a problem hiding this comment.
а для чего тут when используется? ведь у функции есть проверка в блоке :pre
| (map #(io/reader %) logs)) | ||
|
|
||
| (defn ->url [log] | ||
| {:pre [(contains? log :request)]} |
There was a problem hiding this comment.
с pre и post условиями есть один нюанс - если (contains? log :request) вернет false будет выброшенно исключение так что везде где эти функции вызываются надо добавлять try/catch
2 participants
No description provided.